La historia de la mansión, ubicada entre la calle Bolshaya Nikitskaya y los callejones Kislovsky, comienza en la década de 1710. En ese entonces, había una casa de madera sobre un cimiento de piedra en la línea roja de la calle. A la derecha se encontraba un ala, y detrás, un edificio de servicio. Durante cien años, la mansión fue propiedad de los nobles Kolýchev, una conocida familia rusa a la que perteneció el metropolitano de Moscú, Filipp. Se opuso a la Oprichnina de Iván el Terrible, fue desterrado y asesinado por Malyuta Skuratov, y más tarde fue canonizado. En 1756, aquí vivía el ober-krihs-komissar Fiódor Grigórievich Kolýchev con su familia.

En 1802, los Kolýchev reconstruyeron completamente la mansión, levantando una casa principal de tres pisos con arcos que la conectaban con las alas. La casa está decorada con un frontón y un pórtico con columnas, y la fachada está adornada con cabezas de mujeres en relieve. La mansión se convirtió en un ejemplo del clasicismo moscovita y se ha mantenido casi sin cambios.

En 1809, la mansión cambió de propietarios. La última de los Kolýchev se casó con el barón Bode. La casa fue propiedad primero de Petr Grigórievich Bordakov y luego del príncipe Andréi Ivanovich Gorchakov, sobrino de Suvorov y talentoso comandante, conocido por su memoria fenomenal.

Tras la muerte de Gorchakov en 1855, la mansión fue vendida a la Oficina Sinodal de Moscú. Aquí se establecieron el coro sinodal y la escuela de canto eclesiástico. El coro, fundado a principios del siglo XVIII, incluyó voces infantiles desde 1767. En la década de 1860 se creó una escuela con cuatro clases, que luego se reformó en una institución de ocho clases.

En el consejo de supervisión de la escuela participaron compositores conocidos, como Chaikovski y Taneyev. La escuela se convirtió en un centro de música eclesiástica, y su programa incluía armonía y ejecución de instrumentos. El director fue Stepán Vasílievich Smolenski, quien invitó a enseñar a Aleksandr Dmitrievich Kastalsky.

En 1886, comenzó la reconstrucción de la mansión, dirigida por el arquitecto Vladímir Dmitrievich Sher. Se construyó un edificio con apartamentos y una sala de conciertos, conocida hoy como la sala Rakhmáninov. A principios de la década de 1890, se reconfiguró la casa principal y las alas.

Los graduados de la escuela se convirtieron en músicos y compositores famosos. En 1918, la escuela se transformó en la Academia Popular de Coros, y en 1923 se unió al Conservatorio de Moscú. El edificio fue transferido a la facultad de derecho de la Universidad Estatal de Moscú.

En 1979, la sala se reabrió para conciertos. En 1983, el Conservatorio estableció aquí aulas y un Centro de Investigación de Música Eclesiástica. Desde mediados de la década de 1980, la sala lleva el nombre de Rakhmáninov, en honor al compositor que colaboró con la escuela sinodal y el coro.