В XVIII веке участок на улице Знаменка между Крестовоздвиженским и Староваганьковским переулками был разделен между владениями Апраксиных и Левашова. Владение Апраксиных сохранило свои границы, в то время как владение Левашова неоднократно делилось. В 1828 году часть владения Левашова, расположенная вдоль красной линии Знаменки, была приобретена купеческой женой М.П. Арбузовой. Она построила ампирный особняк ближе к Староваганьковскому переулку и разбила сад слева от него.

В 1884 году северную часть усадьбы Арбузовой, где находился сад, купила В. Я. Лепешкина, потомственная почетная гражданка. Она поручила архитектору Б.В. Фрейденбергу проект каменного двухэтажного особняка с эклектичным декором. Особняк выделялся боковым эркером-балконом с кариатидами и тамбуром входа, к которому примыкала металлическая ограда. Боковой фасад, более богато украшенный, скрывался в саду.

Варвара Яковлевна была дочерью купца Якова Васильевича Прохорова, владельца мануфактуры на Трех Горах. В 50-е годы она вышла замуж за Василия Семеновича Лепешкина, сына известного московского купца и городского головы. Семья Лепешкиных была известна благотворительностью. После смерти мужа в 39 лет Варвара посвятила себя детям и благотворительности. В 1887 году она открыла женское профессиональное училище в память о дочери. Когда сын женился, она оставила ему семейный дом и построила себе дом на Знаменке. К 1901 году Варвара Яковлевна стала владелицей всего бывшего участка Арбузовой.

После ее смерти в 1901 году особняк унаследовал сын, который в 1910 году продал его Андрею Андреевичу Понизовкину. Семья Понизовкиных, выходцы из Ярославской губернии, была известна своим крупным производством. Андрей Андреевич переехал в Москву, стал председателем правления Промышленно-Торгового Товарищества и купил дом на Знаменке. В 1916 году он с братом основал Московско-Волжско-Бакинское Нефтепромышленное товарищество.

После революции особняк был передан Коммунистической академии, а затем Институту государства и права Академии наук. В 1930-е годы здание было надстроено на два этажа.