Die Große Alexejewskaja Straße, heute bekannt als A. Solschenizyn Straße, begann am Handelsplatz Taganskaja und war eine der breitesten Straßen des alten Moskaus. Bis zur Mitte des 19. Jahrhunderts war sie vollständig mit Kaufmannsresidenzen bebaut, die bekannten Unternehmern wie Morozow, Alexejew und Zubow gehörten.

In der ersten Hälfte des 19. Jahrhunderts gehörte das Anwesen Nr. 9 den Kaufleuten Zaitsevs. Im Jahr 1851 erwarb Alexei Michailowitsch Polezhaev das Anwesen mit dem Steinhaus, ein erblich angesehener Bürger. Er baute die Residenz um, und im Tympanon des Giebels ist bis heute sein Monogramm „AP“ mit zwei Engelchen erhalten geblieben. Die Tochter Polezhaevs, Klawdia Alexejewna, heiratete Wassili Pawlowitsch Zubow, einen Kaufmann der ersten Gilde und Besitzer einer Färbereimanufaktur in Alexandrow. Zubow war ein leidenschaftlicher Sammler, seine Sammlung seltener Musikinstrumente, einschließlich Geigen von Guarneri, Amati und Stradivari, war eine der größten in Russland. Er interessierte sich auch für Musik und war eine Zeit lang Direktor der Moskauer Abteilung der Russischen Musikgesellschaft.

Am Ende des 19. Jahrhunderts ging das Haus in der Großen Alexejewskaja an ihren Sohn, den Wissenschaftler für Thermochemie Pawel Wassiljewitsch Zubow, über. Pawel Wassiljewitsch erbte die Leidenschaft für das Sammeln und stellte eine Sammlung muslimischer und sasanidischer Münzen sowie eine große Bibliothek zur Orientalistik zusammen. Er liebte auch die Musik und spielte im Amateurorchester der Moskauer Universität, wo er in seinem Haus musikalische Abende veranstaltete, zu denen berühmte Geiger wie I. W. Grzhimali, A. R. Malmberg und F. S. Tal kamen.

Nach der Revolution wurde die Sammlung der Musikinstrumente beschlagnahmt und Teil der staatlichen Sammlung einzigartiger Instrumente, die heute im Allrussischen Museum für Musikkultur benannt nach M. I. Glinka aufbewahrt wird. Die numismatische Sammlung vermachte Pawel Wassiljewitsch 1900 dem Kaiserlichen Russischen Historischen Museum. Im Jahr 1919 wurde sein Haus zur Abteilung des Staatlichen Historischen Museums, und vier Jahre später zog die Sammlung in seine Räumlichkeiten um.

Pawel Wassiljewitsch Zubow starb 1921 und wurde auf dem Friedhof des Spaso-Andronikow-Klosters beigesetzt, aber das Grabmal wurde in den 1930er Jahren zerstört. Heute steht an der Stelle seines Grabes ein Kreuz mit der Inschrift „Pawel Wassiljewitsch Zubow, 1862-1921“.

In der Sowjetzeit nahm ein Teil des Hauses das Bezirks „Haus des Lehrers“ ein, später „Haus der Aufklärung“. Ein anderer Teil blieb Wohnraum, hier lebte der Sohn von Pawel Wassiljewitsch, Wassili Pawlowitsch, ein bekannter sowjetischer Philosoph, Wissenschafts- und Kunsthistoriker, der die Familienchronik der Zubovs und Polezhaevs verfasste.

Im Jahr 2004 erwarb die Familie Sokolow das Herrenhaus, die eine wissenschaftliche Restaurierung des Anwesens durchführte, die 2011 abgeschlossen wurde. Hier wird das Andenken an die vorrevolutionären Besitzer geehrt, regelmäßig finden Konzerte klassischer Musik, literarisch-musikalische Abende, Führungen statt und eine Galerie zeitgenössischer Skulptur wurde eröffnet.