Die Geschichte des Anwesens beginnt mit Fedor Grigorievich Orlov, der hier zwei große Grundstücke erwarb. Nach seinem Tod gingen sie als Erbe an seine Nichte, die elfjährige Anna Orlova-Tschesmenskaia. Doch der tatsächliche Eigentümer wurde der Bruder von Fedor, der Vater von Anna, Graf Alexei Grigorievich Orlov-Tschesmenski.

In dieser Zeit erlebte das Anwesen grundlegende Veränderungen, die mit der Leidenschaft des Grafen für Pferde verbunden waren. In seiner Pferdezucht wurden zwei Pferderassen, der Traber und das Reitpferd, gezüchtet, die Orlov-Pferde genannt wurden. Bevor sie weltweiten Ruhm auf den Rennbahnen erlangten, zeigten diese Pferde ihre Qualitäten auf der Orlov-Wiese, die sich dort befand, wo heute der Leninskie Prospekt verläuft.

Entlang der nordöstlichen Grenze des Diensthofs wurde ein langes Steingebäude für die Reitbahn und die angrenzenden Ställe errichtet. In der Reitbahn fanden Karussells, Pferdewettkämpfe und Prozessionen statt, an denen die Tochter des Grafen, Anna, teilnahm.

Im Jahr 1844 baute der Architekt E.D. Tyurin die Reitbahn und die Ställe um, um Platz für ein Kavalleriegeschwader zu schaffen. Diese Gebäude wurden bis zur Revolution entsprechend genutzt. Die Orlov-Reitbahn blieb die größte bis zum Bau der Reitbahn an den Mauern des Kremls.

Im Jahr 1918 wurden alle Besitztümer nationalisiert und unter staatlichen Schutz gestellt. Hier wurden verschiedene Museen untergebracht. 1934 zog das Mineralogiemuseum hierher, als beschlossen wurde, die Einrichtungen der Akademie der Wissenschaften von Leningrad nach Moskau zu verlegen. Für den Umzug des Museums wurden 30 Waggons benötigt. Die Sammlung umfasste etwa 60.000 Exponate und 20.000 Dubletten. Trotz der Schwierigkeiten fand der Umzug statt, und seit 1936 befindet sich das Museum in Moskau und empfängt Besucher im Gebäude der ehemaligen Orlov-Reitbahn.