La grande rue Alexeïevskaïa, aujourd'hui connue sous le nom de rue A. Soljenitsyne, commençait de la place marchande Taganskaïa et était l'une des rues les plus larges de l'ancienne Moscou. À la moitié du XIXe siècle, elle était entièrement construite de demeures marchandes appartenant à des entrepreneurs célèbres tels que Morozov, Alexeïev et Zubov.

Dans la première moitié du XIXe siècle, la propriété n° 9 appartenait aux marchands Zaïtsev. En 1851, le domaine avec une maison en pierre fut acquis par Alexeï Mikhaïlovitch Polejaïev, citoyen d'honneur de descendance. Il a reconstruit le manoir, et dans le tympan du fronton, son monogramme « AP » avec deux angelots est encore visible aujourd'hui. La fille de Polejaïev, Klavdia Alexeïevna, épousa Vassili Pavlovitch Zubov, marchand de première guilde et propriétaire d'une manufacture de teintures à Alexandre. Zubov était un collectionneur passionné, sa collection d'instruments de musique rares, y compris des violons de Guarneri, Amati et Stradivari, était l'une des plus grandes de Russie. Il s'intéressait également à la musique et fut pendant un certain temps directeur de la section moscovite de la Société musicale russe.

À la fin du XIXe siècle, la maison de la grande rue Alexeïevskaïa passa à leur fils, le scientifique en thermochimie Pavel Vassilievitch Zubov. Pavel Vassilievitch hérita de la passion pour la collection et rassembla une collection de pièces musulmanes et sassanides, ainsi qu'une grande bibliothèque sur l'orientalisme. Il aimait aussi la musique et jouait dans l'orchestre amateur de l'Université de Moscou, organisant chez lui des soirées musicales où se produisaient des violonistes célèbres tels que I. V. Grjimaly, A. R. Malmberg et F. S. Tal.

Après la révolution, la collection d'instruments de musique fut confisquée et devint partie de la collection d'État d'instruments uniques, actuellement conservée au Musée de la culture musicale de Russie M. I. Glinka. La collection numismatique fut léguée par Pavel Vassilievitch au Musée historique impérial russe en 1900. En 1919, sa maison devint une section du Musée d'Histoire d'État, et quatre ans plus tard, la collection déménagea dans ses locaux.

Pavel Vassilievitch Zubov mourut en 1921 et fut enterré au cimetière du monastère Spaso-Andronikov, mais le nécropole fut détruit dans les années 1930. De nos jours, un crucifix avec l'inscription « Pavel Vassilievitch Zubov, 1862-1921 » est érigé à l'emplacement de sa tombe.

À l'époque soviétique, une partie de la maison était occupée par la « Maison des enseignants » de quartier, plus tard « Maison de l'éducation ». L'autre partie restait résidentielle, où vivait le fils de Pavel Vassilievitch, Vassili Pavlovitch, célèbre philosophe soviétique, historien des sciences et critique d'art, qui a composé la chronique familiale des Zubov et des Polejaïev.

En 2004, le manoir fut acquis par la famille Sokolyov, qui entreprit une restauration scientifique du domaine, achevée en 2011. Ici, la mémoire des propriétaires d'avant la révolution est honorée, des concerts de musique classique, des soirées littéraires et musicales, des visites guidées sont régulièrement organisés et une galerie de sculpture contemporaine a été ouverte.