Der einzige seiner Art, das Museum eines Gemäldes, hätte möglicherweise nicht entstehen können. In den 1980er Jahren war geplant, das Gebäude abzureißen, doch es wurde gerettet durch die gelungene Einbeziehung in das architektonische Ensemble der Aussichtsplattform bei der Planung des Denkmals für den ersten Siedler.

Georg Mjasnikow, der als zweiter Sekretär des obkoms von Penza tätig war und die Gründung dieser ungewöhnlichen kulturellen Einrichtung initiierte, behauptete in seinen Memoiren, dass das Gebäude das Haus des Postmeisters gewesen sei. Historiker haben jedoch kürzlich herausgefunden, dass er sich geirrt hatte. Die Geschichte klärte sich dank der Biografie von Alexei Petrowitsch Nikolajewski, der dieses Gebäude in den 1860er Jahren erwarb und bis zu seinem Tod darin lebte. Nikolajewski begann seine Karriere als Quartiermeister, was der modernen Position eines Polizeibeamten entspricht. Später wurde er in die erste und dann in die zweite Polizeidienststelle versetzt. Nach 18 Jahren Dienst in den Innenbehörden erreichte er den Rang eines Oberst und wurde 1872 Leiter der Polizei von Penza, also Polizeimeister. Somit war das Gebäude in der Kirova-Straße 11 das Haus des Polizeimeisters und nicht des Postmeisters. Wahrscheinlich wurde Mjasnikow durch andere Dokumente in die Irre geführt, was zur Verbreitung der fehlerhaften Version führte.

Bis Ende der 1960er Jahre blieb das Haus Wohnraum. Den Erzählungen der Einheimischen zufolge gab es hinter dem Museum einst Scheunen und Holzlager.