Der Adelsgeschlecht der Sumarokovs stammt von Levis ab, der aus Schweden zu Großfürst Wasilij Dmitrijewitsch kam und unter dem Namen Judas getauft wurde. Die Erwähnung der Sumarokovs findet sich im Testament von 1498 des Fürsten Ivan Jurjewitsch Patrikeev, einem Nachkommen von Gediminas, dem Hauptfeldherrn der Moskauer Fürsten Wasilij II. dem Dunklen und Ivan III.

Das Anwesen in Sivkovo wurde von Peter Pankratjewitsch Sumarokov, einem wirklichen geheimen Rat, eingerichtet. Hinter dem Hauptgebäude des Anwesens wurde ein regelmäßiger Park mit geraden Lindenalleen angelegt und zwei Teiche angelegt. Die Bauern aus Sivcevo, wie auch die Eigentümer des Anwesens, besuchten an den Tagen der orthodoxen Feiertage die Gottesdienste im benachbarten Dorf Wosnesenskoje.

Laut Familienlegende war Peter Pankratjewitsch der Pate von Peter I. Er war ein reicher und einflussreicher Mann; laut den Daten des Senatsarchivs hatte er 1737 in seinen sechs Anwesen 1670 Leibeigene, die ihm angeblich von Peter dem Großen geschenkt wurden.

Vor seinem Tod teilte Peter Pankratjewitsch sein gesamtes Vermögen zwischen seiner Frau Praskowja Iwanowna und seinen Kindern auf. Sivcevo fiel seinem mittleren Sohn Alexander zu. Alexander Petrowitsch war eine herausragende Persönlichkeit: Nach einer erfolgreichen Karriere im Staatsdienst widmete er sich dem Schreiben. Durch ein Dekret der Kaiserin vom 28. August 1762 wurden seine Schulden auf Staatskosten beglichen, und er erhielt das Recht, seine neuen Werke auf Kosten des Kabinetts Ihrer Kaiserlichen Hoheit zu veröffentlichen.

Im Jahr 1769 ließ sich der Schriftsteller im Familienanwesen Sivcevo nieder und kümmerte sich um dessen Bewirtschaftung. Nach seinem Tod im Herbst 1777 ging das Anwesen an seine Tochter Praskowja über, die Graf Anton Petrowitsch Golowin heiratete. Zu Beginn des 19. Jahrhunderts wurde die Enkelin des Dichters, die Tochter der Grafen Golowin, Jelisaweta Antonowna, die Hauptbesitzerin des Anwesens und der benachbarten Dörfer.

Es wird angenommen, dass das steinerne einstöckige Herrenhaus mit Mezzanin, das in einfacher Architektur ausgeführt ist, in den 1830er Jahren erbaut wurde, als das Kaluga-Anwesen von Tatjana Ljwowna Miller, geborene Tolstaja, erworben wurde. Die Familie Miller ließ sich endgültig in Sivcevo nieder, nachdem der Ehemann der Hausherrin, der ehemalige Moskauer Polizeichef, Oberst Fedor Iwanowitsch Miller, in den Ruhestand trat.

Seit den 1890er Jahren gehörte das Anwesen ihrem Enkel, dem Garde-Leutnant a.D. Fedor Wladimirowitsch. Nach der Revolution von 1917 wurden die Nachkommen der Miller aus dem Anwesen vertrieben, und im ehemaligen Herrenhaus wurde ein Heim für Kinder mit psychischen Erkrankungen eröffnet.

Derzeit sind das von den Millers im Stil des späten Klassizismus erbaute Haus und der Park mit dem Teich erhalten geblieben.