À la fin du XVIIe siècle, un grand domaine appartenant au grand-père de Pierre Ier, Kirill Poluektovitch Narychkine, se trouvait à cet endroit. Il est passé à son fils Léon Kirillovitch, puis à ses enfants. Au milieu du XVIIIe siècle, après son mariage avec E.I. Narychkine, Kirill Grigorievitch Razumovski est devenu propriétaire. En 1800, leurs enfants ont divisé le domaine en plusieurs parties. Les plans montrent qu'à cette époque, le domaine se développait : des maisons étaient construites, des serres pour cultiver des légumes et des fruits rares apparaissaient. Après son mariage avec Razumovskaïa, le domaine a été possédé par Sergueï Séménovitch Ouvarev, président de l'Académie des sciences et ministre de l'Éducation nationale.

Dans les années 1860, Alexeï Sergueïevitch Ouvarev, fondateur de la Société archéologique de Moscou et l'un des fondateurs du Musée historique, est devenu propriétaire. En 1874, il a vendu le domaine par morceaux. Une partie des terres a été achetée par les Ivanenko, qui ont divisé le territoire en neuf parcelles et les ont mises en vente. En 1887, l'architecte Roman Ivanovitch Klein a acheté six parcelles, dont trois ont été vendues à l'ancien paysan de la province de Vladimir A.A. Pantelée, entrepreneur en travaux de maçonnerie et de construction. Pour lui, Klein a construit deux maisons de rapport en 1896 et 1897, et a regroupé trois parcelles en une seule propriété. En 1889, Roman Ivanovitch a construit une maison en bois sur un fondement en pierre avec un mezzanine et un sous-sol pour la chaudière de chauffage à eau. En 1896, la maison a été surélevée d'un étage, où se trouvaient l'atelier d'architecture et la bibliothèque. La maison a appartenu à Klein jusqu'en 1918.

En 1900, le long de la ligne rouge de l'impasse Olsoufiévski, R.I. Klein a construit un immeuble de rapport de trois étages et deux bâtiments de service. Une grande partie du territoire était occupée par un jardin donnant sur le manoir du propriétaire. La planification et la construction sont restées inchangées jusqu'aux années 1950, lorsque l'immeuble de rapport a été surélevé d'un étage supplémentaire.

Dans les années 1990, la maison de l'architecte a été restaurée, bien que cela ressemblât davantage à une reconstruction avec adaptation. Les volumes initiaux ont été modifiés : un sous-sol profond a été ajouté sous la maison, la partie de plain-pied avec l'entrée principale est devenue à deux étages, certaines fenêtres ont été murées, et le toit a été surélevé. De plus, la maison a reçu un grenier qu'elle n'avait pas auparavant.

Actuellement, la maison abrite le musée « Notre époque ».