Большая Алексеевская улица, ныне известная как улица А. Солженицына, начиналась от торговой Таганской площади и была одной из самых широких улиц старой Москвы. К середине XIX века она была полностью застроена купеческими особняками, принадлежащими известным предпринимателям Морозовым, Алексеевым и Зубовым.

В первой половине XIX века владение № 9 принадлежало купцам Зайцевым. В 1851 году усадьбу с каменным домом приобрел Алексей Михайлович Полежаев, потомственный почетный гражданин. Он перестроил особняк, и в тимпане фронтона до сих пор сохранился его вензель «АП» с двумя ангелочками. Дочь Полежаева, Клавдия Алексеевна, вышла замуж за Василия Павловича Зубова, купца первой гильдии и владельца красильной мануфактуры в Александрове. Зубов был заядлым коллекционером, его собрание редких музыкальных инструментов, включая скрипки Гварнери, Амати и Страдивари, было одним из крупнейших в России. Он также увлекался музыкой и некоторое время был директором московского отделения Русского музыкального общества.

В конце XIX века дом на Большой Алексеевской перешел к их сыну, ученому-термохимику Павлу Васильевичу Зубову. Павел Васильевич унаследовал страсть к коллекционированию и собрал коллекцию мусульманских и сасанидских монет, а также большую библиотеку по востоковедению. Он также любил музыку и играл в любительском оркестре Московского университета, устраивая в своем доме музыкальные вечера, на которых бывали известные скрипачи И. В. Гржимали, А. Р. Мальмберг и Ф. С. Таль.

После революции коллекция музыкальных инструментов была конфискована и стала частью государственного собрания уникальных инструментов, ныне хранящегося во Всероссийском музее музыкальной культуры имени М. И. Глинки. Нумизматическую коллекцию Павел Васильевич завещал Императорскому Российскому Историческому музею в 1900 году. В 1919 году его дом стал отделением Государственного Исторического Музея, а через четыре года собрание переехало в его помещение.

Павел Васильевич Зубов умер в 1921 году и был похоронен на кладбище Спасо-Андроникова монастыря, но некрополь был уничтожен в 1930-х годах. В наши дни на месте его могилы установлен крест с надписью «Павел Васильевич Зубов, 1862-1921».

В советское время часть дома занимал районный «Дом учителя», позже «Дом просвещения». Другая часть оставалась жилой, здесь жил сын Павла Васильевича, Василий Павлович, известный советский философ, историк науки и искусствовед, составивший семейную хронику рода Зубовых и Полежаевых.

В 2004 году особняк приобрела семья Соколовых, которая провела научную реставрацию усадьбы, завершенную в 2011 году. Здесь чтят память дореволюционных владельцев, регулярно проводятся концерты классической музыки, литературно-музыкальные вечера, экскурсии и открыта галерея современной скульптуры.