Das Haus der Zolotaryovs, gelegen in Kaluga, war eines der luxuriösesten Gebäude in der Provinz und wurde oft als Palast bezeichnet. Es wird angenommen, dass das Anwesen für den Empfang des Kaisers und der Mitglieder der königlichen Familie erbaut wurde. Heute ist es ein Komplex, der das Hauptgebäude, ein Nebengebäude, eine Kutsche und eine überdachte Galerie umfasst.

Früher hieß die Straße, an der sich das Anwesen befindet, Zolotaryevskaya. Die Familie Zolotaryov stammt von dem bekannten kalugischen Meister und Silberschmied Maxim Kuzmich Zolotaryov ab, der auch im Handel tätig war und einen Laden in der Silberreihe hatte. Seine Söhne, Peter und Ivan Maximovich Zolotaryov, wurden bedeutende Industrielle und Händler, die aktiv Geschäfte in Kaluga, Sankt Petersburg und im Ausland, einschließlich Deutschland, tätigten. Peter Maximovich, Kaufmann 1. Gilde und Handelsrat, wurde 1814 Stadtoberhaupt. Trotz seiner Titel und Auszeichnungen trug er lange Haare, die zu einem Zopf geflochten waren, einen großen Bart und einen langen Kaftan, und hatte zudem ein mürrisches Aussehen. Eine Fotokopie seines Porträts, das in Berlin graviert wurde und auf den 20. Februar 1812 datiert ist, ist erhalten geblieben.