Das Anwesen in der Baumanstraße, früher bekannt als Deutsche Straße, wurde wahrscheinlich Mitte des 18. Jahrhunderts, spätestens in den 1770er Jahren, erbaut. Der Komplex des Anwesens, das entlang der Straße lag, umfasste das Hauptgebäude und zwei symmetrisch angeordnete Flügel, die durch Torbögen mit weißen Säulen verbunden waren. Der linke Flügel ging in den 1960er Jahren verloren, aber einer der Wirtschaftsflügel im hinteren Teil des Grundstücks ist erhalten geblieben.

Es wird vermutet, dass das Projekt des Anwesens vom bekannten russischen Architekten Matwei Fjodorowitsch Kazakow entworfen wurde. Der Entwurf der Fassade des Anwesens wurde in den "Alben der besonderen Bauten Moskaus" aufgenommen, die Kazakow zu Beginn des 19. Jahrhunderts zusammenstellte, in denen er die besten, seiner Meinung nach, privaten Häuser Moskaus sammelte.

Die dekorative Gestaltung der Fassade des Hauptgebäudes stammt aus der Zeit nach dem Brand von 1812, als das Haus bis 1815 wiederhergestellt wurde. Der zentrale halbrunde Risalit des Gebäudes ist mit doppelten korinthischen Pilastern und eleganten Stuckreliefs mit einer figürlichen Komposition geschmückt. Die Fassade beidseitig des Risalits ist ebenfalls mit Stuckreliefs und einem pflanzlichen Fries dekoriert. Im Inneren sind die gewölbten Räume des Untergeschosses und teilweise die Gestaltung der repräsentativen Innenräume der ersten Hälfte des 19. Jahrhunderts erhalten geblieben.

Am Ende des 18. und zu Beginn des 19. Jahrhunderts gehörte das Anwesen der Adelsfamilie Karabanov. Zunächst war es Fjodor Leontjewitsch Karabanov, ein Brigadier, der eine Zeit lang als Vizegouverneur von Twer und als Landeshauptmann der Adelschaft diente. Dann erbte sein Sohn Pawel Fjodorowitsch das Anwesen, bekannt als Kenner und Sammler von Antiquitäten. Er widmete sein Leben dem Sammeln von Kirchengeräten, Medaillen, Münzen, Gemälden und Radierungen. In seiner Sammlung befanden sich über 3000 Porträts historischer Persönlichkeiten und eine reiche Bibliothek antiker Bücher und Manuskripte. Seine Sammlung, bekannt als "Russisches Museum Karabanov", befand sich in seinem Haus in der Petrovka, wohin er aus dem Anwesen in der Deutschen Straße zog und wo er den größten Teil seines Lebens verbrachte.

Pawel Karabanov vermachte seine Sammlung dem Staat. Die Antiquitäten wurden in die Waffenkammer übergeben, die Porträtsammlung in die Eremitage, und der Großteil der Manuskripte und Bücher in die Kaiserliche Öffentliche Bibliothek. Einige seiner Arbeiten wurden nach seinem Tod veröffentlicht: "Historische Erzählungen und Anekdoten, aufgezeichnet aus den Worten namhafter Personen", "Listen bemerkenswerter russischer Persönlichkeiten". Seine historischen Aufzeichnungen und Erzählungen wurden in der Zeitschrift "Russische Altertümer" veröffentlicht, und die von ihm gesammelten genealogischen Informationen wurden bei der Erstellung des Russischen Stammbaums verwendet.

Nach den Karabanovs ging das Anwesen in der Deutschen Straße an die Familie des Uralfabrikanten Iwan Jakowlew-Sobakin über, die das Haus nach dem Brand von 1812 wiederherstellte. Der letzte Besitzer des Anwesens war der Adelige Nikolai Alexandrowitsch Zankowski, Mitglied der Russischen Fotografischen Gesellschaft und Eigentümer der Firma "ENZE", die fotografische Platten herstellte.

In der Sowjetzeit beherbergte das Anwesen verschiedene Institutionen, und heute befindet sich im Hauptgebäude eine Bank.