El primer propietario documentado del edificio a principios del siglo XIX fue el comerciante Piotr Giriakov, quien figuraba como dueño del terreno en 1804. Más tarde, en 1828, la casa fue alquilada por Mijaíl Semiónovich Shchepkin, un conocido artista del Teatro Pequeño. Sin embargo, pronto se mudó al área de Sreténka. Ya en 1829, el edificio pasó a ser propiedad de la "esposa del comerciante A.S. Rabiushinskaya", y este apellido, que luego se cambió a "Riabushinski", permaneció como propietario de la casa durante mucho tiempo.

La fachada del edificio está adornada con un alto pórtico con cuatro pilastras, situadas sobre la arcada del piso inferior, donde se han conservado las bóvedas. La apariencia de la casa es bastante modesta para su época: carece de estucos, relieves y pinturas, es una simple mansión comercial, ubicada lejos de las grandes calles. Sin embargo, la fama de los nuevos propietarios se extendió rápidamente por toda la Imperio.

La familia Riabushinski se origina de un campesino de la provincia de Kaluga, de la aldea de Rabiushinskaya, Mijaíl Yakovlev, quien llegó a Moscú en 1802 y comerciaba en la fila de lienzos del Mercado de Gostiny. Arruinado debido a la Guerra Patriótica de 1812, se vio obligado a convertirse en un burgués, pero no perdió el ánimo. En 1820, Mijaíl Yakovlevich adoptó el viejo rito, al que pertenecían muchos comerciantes ricos de la época. El apoyo de sus correligionarios le ayudó a regresar a la clase mercantil y reanudar su comercio. En ese momento, adoptó el apellido "Rabiushinski", que luego se cambió a "Riabushinski". Con el tiempo, Mijaíl Yakovlevich fundó varias fábricas de tejido en Moscú y la provincia de Kaluga, y dejó a sus herederos más de 2 millones de rublos. Este capital se convirtió en la base de la prosperidad de la dinastía: su hijo Pavel Mijáilovich aumentó la fortuna familiar diez veces, dejando a sus hijos 20 millones de rublos.

Los Riabushinski alquilaban la mansión en Golutvino, pero la mantuvieron en propiedad hasta la revolución. En la década de 1840, los inquilinos eran los vecinos de los Riabushinski, la dinastía Tretiakov, cuya casa, donde nacieron los hermanos Pavel y Mijaíl, se ha conservado en el callejón vecino cerca de la iglesia de San Nicolás el Milagroso en Golutvino. A finales del siglo XIX, la mansión de los Riabushinski fue remodelada para convertirse en un asilo y comedor, bajo la administración de la Sociedad Imperial de Humanidad. Para ello, el edificio fue ampliado, añadiendo una extensión desde el patio y los servicios. Detrás de la mansión se elevan los edificios de la fábrica de Golutvino, fundada por Mijaíl Yakovlevich Riabushinski y luego vendida a los comerciantes Grigori y Alexéi Istomin.

Después de la revolución, la mansión fue nacionalizada, y durante un tiempo se utilizaron apartamentos en ella, luego oficinas. Hoy en día, la casa permanece cerrada y no se utiliza. Sin embargo, podría convertirse en un lugar ideal para un museo local, donde habría espacio tanto para Shchepkin como para los Riabushinski, los Tretiakov y los Istomin.