Фабрикант и купец первой гильдии с 1839 года, Пётр Васильевич Сергеев был также общественным деятелем и потомственным почётным гражданином. Он был сыном боровского купца Василия Ивановича Сергеева, который в 1793 году вошёл в третью гильдию пензенского купечества. Дядя Петра, Алексей Иванович Сергеев, в 1800 году основал мыловаренный завод и в 1812 году открыл в своём доме лазарет для раненых.

Пётр Васильевич начал своё дело с приобретения у Николая Фёдоровича Кишенского Большой Сурской мельницы. В 1850 году он арендовал 12 озёр в районе Калашного затона, где построил плотины и лесную пристань. В том же году на северо-востоке Пензы он основал писчебумажную фабрику на 33 десятинах земли, оснастив её современным оборудованием.

К 1866 году на фабрике Сергеева трудилось 120 человек, а стоимость продукции превышала 300 тысяч рублей, что делало её крупнейшим предприятием в губернии. Пётр Васильевич был известен как рачительный и предприимчивый человек, заботившийся о своих рабочих, и пользовался уважением горожан. Он трижды избирался городским головой Пензы.

17 мая 1844 года Сергеев основал один из первых в России городских общественных банков, который финансировал развитие городского хозяйства и торговлю. Благодаря кредитам этого банка Сергеев построил свою фабрику, а другие предприниматели, такие как Пётр Григорьевич Белоярцев и Иван Васильевич Брюшков, открыли суконные фабрики. Промышленный подъём Пензы во многом был обязан этому банку и его основателю.

С 1882 года продукция сергеевской фабрики регулярно участвовала во Всемирных и Всероссийских выставках, получая золотые и серебряные медали.