Das dreigeschossige Gebäude im Stil des späten Klassizismus befindet sich an der Ecke von Wosdvizhenka und dem Romanow-Gässchen. Besonders auffällig ist die eckige kuppelartige Rotunde mit Säulen der toskanischen Ordnung, deren Malerisches sich vor dem Hintergrund der zurückhaltenderen Fassaden der Seitenflügel abhebt. Über die frühe Geschichte des Hauses ist wenig bekannt, und die Forscher sind sich über das genaue Baujahr und den Namen des Architekten uneinig. Es ist nur bekannt, dass der Bau in den 1790er Jahren auf Auftrag von A.K. Razumowski, dem Sohn des Grafen K.G. Razumowski, eines bekannten Adligen der Elisabethanischen Epoche, begann. 1799 verkaufte Razumowski das Haus an seinen Schwiegersohn N.P. Sheremetyev.

Nikolai Petrowitsch Sheremetyev, Erbe eines adligen Geschlechts und Besitzer des besten Leibeigenentheaters, ging als Mäzen und Wohltäter in die Geschichte ein. Er wagte es, die Standesgrenzen zu überschreiten, indem er seine Leibeigene, die talentierte Schauspielerin Praskowja Iwanowna Schemtschugowa, heiratete. In das neue Haus zogen die Sheremetyevs 1801 ein, das für sie schicksalhaft wurde: Ihre langjährige Verbindung wurde durch die Ehe legitimiert. Doch das Ehepaar lebte hier nicht lange und zog bald nach Petersburg. 1803 starb Praskowja Iwanowna, und dieses Haus wurde ihre letzte Adresse in Moskau.

Graf Sheremetyev widmete den Rest seines Lebens der Wohltätigkeit und vollendete fast den Bau des Hospizes, das zu Lebzeiten seiner Frau geplant worden war. 1809 starb er, und das Haus an der Wosdvizhenka ging an seinen Sohn Dmitri über, der das Werk seines Vaters fortsetzte. Dmitri erweiterte die Möglichkeiten des Hospizes, das bis 1917 unter der Obhut der Sheremetyevs blieb. Er spendete auch beträchtliche Summen für den Bau von Bildungseinrichtungen, Kirchen und Wohltätigkeitsorganisationen. Der letzte vorrevolutionäre Besitzer des Hauses, Sergei Dmitrijewitsch Sheremetyev, war als öffentliche Persönlichkeit und Autor von Arbeiten zur Geschichte Moskaus und der vorstädtischen Landsitze bekannt. Zu seinen Arbeiten gehört ein Buch über das Familienanwesen an der Wosdvizhenka, in dem das Gebäude, seine Bewohner und der Geist jener Zeit beschrieben werden.

Nach dem Tod von S.D. Sheremetyev im Jahr 1918 wurde das Herrenhaus als kommunale Wohnung genutzt. Ende des 20. Jahrhunderts verlor das Haus die Treppen des Haupteingangs, die glücklicherweise wiederhergestellt wurden. Das Gebäude wurde restauriert und beherbergt jetzt "Moskomstroyinvest" und das Amt für die Entwicklung neuer Territorien Moskaus.