Depuis le début des années 1680, la propriété près des portes de Yauza, à côté des murs de la ville blanche (dans les années 1760, des boulevards ont été aménagés à l'emplacement des murs démolis), appartenait au stolnik Alexeï Petrovitch Golovine. Des chambres en bois s'y trouvaient. Son fils, le boyard Théodore Alexeïevitch, célèbre amiral général et proche compagnon de Pierre Ier, l'un des premiers en Russie à recevoir le titre de comte, a construit entre 1685 et 1689 dans son domaine urbain une église en brique, consacrée à l'icône de Kazan de la Mère de Dieu, dont les façades étaient réalisées dans le style baroque.

Avec le temps, en 1748, les anciennes chambres des Golovine ont brûlé. Peu après, la propriété a été acquise par le prince S. I. Tcherbatov. À la fin des années 1750, sa veuve, Natalia Stepanovna, a construit ici des palais en pierre à deux étages dans le style baroque élisabéthain et a relié le bâtiment résidentiel à l'église par un passage.

En 1785, le domaine a été vendu au conseiller secret Andreï Dmitrievitch Karpov et à sa femme Natalia Alexeïevna. Après la démolition des murs de la ville blanche, le domaine, auparavant orienté avec sa façade principale à l'ouest, s'est tourné vers les boulevards. À la fin du XVIIIe siècle, la maison a été reconstruite dans le style classique.

Lors de l'incendie de 1812, le manoir n'a pas été endommagé. En 1822, il a été acquis par le général-major à la retraite Nicolas Zakharovitch Khitrovo, en l'honneur de qui la place voisine a été nommée place Khitrova. Nicolas Zakharovitch, un officier de combat, a participé aux guerres de 1805-1811 contre la France et la Turquie, a pris part au siège de Braïlov et a pris sa retraite après avoir été blessé. Il était membre du cercle de M. M. Speranski, pour cela il a été exilé à Viatka, puis dans son domaine près de Tarousa. Grâce à l'intercession de son beau-père, le feld-maréchal M. I. Koutouzov-Smolenski, marié à sa fille Anna, il a été gracié en 1813 et a déménagé à Moscou.

Sous sa direction, l'ancienne maison des Tcherbatov a été reconstruite, et ses façades ont acquis des décorations dans le style Empire. Dans le tympan du fronton est apparu un blason sculpté de la famille Khitrovo, et de chaque côté du portique à six colonnes, des profils masculins en plâtre avec une armure antique. Selon une version, il s'agit d'un portrait sculpté du propriétaire du domaine.

L'église de la maison a également été reconstruite et réconsacrée en l'honneur de l'icône de Tikhvine de la Mère de Dieu, particulièrement vénérée dans la famille Khitrovo.

Après la mort de N. Z. Khitrovo en 1826, le domaine a été vendu par ses héritiers. En 1843, il est passé au colonel de la garde Vladimir Ivanovitch Orlov, et en 1851, à sa veuve Ekaterina Dmitrievna. Le couple n'avait pas d'enfants, et selon le testament de V. I. Orlov, après la mort de sa veuve en 1889, le domaine a été remis au Comité de bienfaisance de Moscou pour les pauvres de la Société impériale de bienfaisance.

Dans l'ancien domaine, a été organisée "l'Hôpital d'Orlov du Comité de bienfaisance de Moscou pour les pauvres, pour les malades nécessiteux venant", sous le patronage du prince Alexandre Petrovitch d'Oldenbourg. L'église de la maison, fermée à l'époque, a été rouverte et réconsacrée en l'honneur de l'icône de Smolensk de la Mère de Dieu. L'hôpital fonctionnait tous les jours de 10h à 14h et avait "un service spécial de 5 lits pour les malades opérés et une pharmacie avec distribution gratuite de médicaments". L'établissement de bienfaisance était destiné aux habitants de Khitrovka, où ils étaient soignés, subissaient de simples opérations et étaient nourris dans la cantine.

Après la révolution, l'hôpital et l'église ont été fermés. L'église de l'icône de Smolensk de la Mère de Dieu a été démolie dans les années 1930 lors de la construction de l'immeuble de l'Académie militaire d'ingénierie V. V. Kouïbyshev.

Dans la maison principale du domaine des Golovine, Tcherbatov, Khitrovo, Orlov, sont entrés en 1922 des cours de secouristes, réorganisés en 1923 en une école de secouristes de trois ans nommée d'après le département de santé de tous les travailleurs médicaux. En 1928, l'école a été transformée en polytechnique médicale Clara Zetkin (depuis 1954, École médicale n° 2 de Moscou nommée d'après Clara Zetkin). Actuellement, il s'agit du collège médical Clara Zetkin.

À la fin du XXe siècle, le bâtiment a été restauré. Sur la façade ouest, où se trouve maintenant l'entrée du collège médical, les restaurateurs ont restauré la décoration baroque du milieu du XVIIIe siècle. Sur la façade opposée, des éléments de décoration datant de l'époque de N. Z. Khitrovo ont été conservés.

Le bâtiment de l'ancien hôpital d'Orlov est sous protection de l'État en tant qu'objet de patrimoine culturel d'importance fédérale.