Se considera que la casa de tres pisos en estilo clasicista fue construida unos años antes del inicio de la revuelta de Pugachov. Según la leyenda, durante la toma del pueblo, en una habitación del último piso, los rebeldes estrangularon a la anciana dueña, que se negó a esconderse en el bosque con sus hijos. Al regresar, los hijos decidieron desmantelar el último piso para deshacerse de los recuerdos de la tragedia.

No hay pruebas documentales de estos eventos, excepto por la lista de nobles ejecutados por los pugachovistas, elaborada por Alexander Pushkin, donde se mencionan a los esposos Dubensky, asesinados en la provincia de Penza. Sin embargo, no se indica el lugar de su muerte.

En realidad, la casa fue iniciada en las décadas de 1820-1830, medio siglo después de los eventos pugachovistas. Se conservan los recuerdos de Nikolai Dubensky, líder de la nobleza de Penza y senador, quien en ese período se quejaba de la falta de una casa adecuada para recibir a huéspedes de alto rango. Probablemente, él comenzó la construcción de la casa y la organización de la finca con un estanque y un parque.

La construcción se retrasó debido a la falta de fondos, ya que los asuntos del senador no iban bien. Más tarde, nuevos propietarios añadieron anexos de ladrillo a la casa, lo que es evidente por la diferencia en los estilos arquitectónicos.

Mientras tanto, la finca caía en decadencia. La mística fama de la casa ahuyentaba a muchos habitantes. Esferas luminosas misteriosas y el movimiento espontáneo de objetos se asociaban con la ejecución de la dueña por los pugachovistas, creyendo que su alma en pena se había convertido en un mal presagio. Los propietarios de la finca cambiaban con frecuencia.

La casa experimentó un breve florecimiento antes de la revolución. La última dueña, Sofía Ladyzhenskaya, que no creía en los presagios, ordenó el parque, los parterres y el camino de pinos, profundizó el estanque y crió truchas en él. Bajo su mando se construyeron una granja de caballos, un molino, una colmena y un invernadero. Un anciano del pueblo de Zagoskino, Viktor Neklyudov, recordaba que su madre trabajaba como camarera para Ladyzhenskaya y quería mucho a la dueña, quien generosamente compartía los excedentes de producción.

Según Viktor Nikolaevich, en la casa había un gran sótano, y en los techos entre los pisos existía un espacio donde podía caber una persona. La finalidad de esta abertura sigue siendo un misterio.

Al limpiar el parque se encontraron numerosas botones antiguos, fragmentos de porcelana, figuritas y monedas, muchas de las cuales databan del siglo XVIII.