Das Haus in der Tverskaya-Straße, das dem Kaufmann erster Gilde Simonov gehörte, ist seit 1767 bekannt. 1778 wurde für D.I. Naryshkin ein drittes Stockwerk hinzugefügt, wobei die Gestaltung im Stil des frühen Klassizismus erhalten blieb. 1787 erwarb Matvey Vasilievich Dmitriev-Mamonov, Präsident der Erbangelegenheiten, das Gebäude. Sein Sohn Alexander war der Favorit von Katharina II. 1812 gehörte das Haus Graf Matvey Alexandrovich Dmitriev-Mamonov, dem einzigen Sohn des Favoriten.

Matvey Alexandrovich (1790, 1863) nahm am Moskauer Aufgebot und den Kämpfen bei Borodino, Tarutino und Maloyaroslavets teil. Er gründete auf eigene Kosten ein Freiwilligenregiment und wurde 1813 dessen Chef im Rang eines Generalmajors. Während der französischen Besatzung wohnte Prinz Eugen von Beauharnais, der Stiefsohn Napoleons, in seinem Haus.

Der italienische Korps des Prinzen Eugen trat über die Tverskaya-Straße in Moskau ein, und das Haus Mamonov wurde das erste bedeutende Gebäude auf ihrem Weg. Die Italiener ließen sich in der Umgebung nieder und retteten wahrscheinlich mehrere Viertel von einem Brand von der Tverskaya bis zu den Patriarchenteichen. Auch das Haus der Mamonovs blieb vom Feuer verschont.

Nach dem Krieg nahm das Schicksal von Graf Mamonov eine tragische Wendung: Er gründete den vor-dekabristischen Kreis „Orden der russischen Ritter“, weigerte sich, Nikolaus I. zu schwören, und wurde für geisteskrank erklärt. 1830 verkauften seine Vormünder das Anwesen an das staatliche Augenkrankenhaus, das sich bis heute in diesem Gebäude befindet. Die Gasse, die auf das Anwesen führte, behielt den Namen Mamonovskij.

In den 1880er Jahren wurden die Ecken des Hauses bis zur Höhe des zentralen Teils aufgestockt. 1941 wurde das Gebäude um 90 Grad gedreht und in die Gasse auf ein neues Fundament mit einem Untergeschoss versetzt, wodurch der Bogen des Haupteingangs zweigeschossig wurde.