El edificio principal de la finca de Alexei Alexandrovich Yakovlev, quien fue presidente de la colegiatura de justicia y miembro principal de la expedición monetaria de Moscú, así como abuelo del revolucionario y escritor Alexander Ivanovich Herzen, fue construido en la década de 1770. Originalmente era de una sola planta. Más tarde, la casa perteneció al príncipe Nikolai Fyodorovich Lodyzhensky, teniente general y participante en la toma de París, así como a la familia noble de los Stolypins.

A finales del siglo XVIII, la propiedad fue adquirida por Elizaveta Mikhailovna Yermolova, hermana de un conocido noble moscovita, consejero secreto de primera clase príncipe Sergey Mikhailovich Golitsyn, cuya casa estaba cerca. Alrededor de 1790, se casó con el antiguo favorito de Catalina II, Alexander Petrovich Yermolov, quien le trajo un considerable dote. Después de que su esposo se trasladara permanentemente al extranjero alrededor de 1800, Yermolova permaneció viviendo en Moscú. Como resultado del incendio de 1812, la casa se quemó por completo, pero fue restaurada inmediatamente después de la guerra con los franceses. Se le añadió un piso, el pórtico con columnas fue reemplazado por pilastras, y el frontón fue eliminado. Elizaveta Yermolova falleció en Moscú el 16 de agosto de 1833 y fue enterrada en el monasterio de Don.

En 1831, el tesoro estatal adquirió el edificio para las necesidades del Primer Gimnasio Masculino de la ciudad, que ya se encontraba cerca, en Volkhonka, 16. Parece que toda la élite intelectual de Moscú salió de estas paredes. Aquí estudiaron destacados historiadores rusos como Sergey Solovyov y Mikhail Pogodin, el dramaturgo Alexander Ostrovsky, el escritor y teórico del anarquismo Petr Kropotkin, y los profesores N.V. Bugayev y N.A. Umov, así como el médico V.P. Serbskiy.

En las nuevas instalaciones se ubicaron las aulas del gimnasio y la oficina. En 1852, parte de las instalaciones fue transferida a la administración del distrito educativo de la ciudad de Moscú. En 1872, se abrieron en el edificio cursos femeninos del profesor Vladimir Ivanovich Gerye, la primera institución de educación superior de este tipo en la ciudad, donde se formaban futuros físicos, filólogos y médicos.

En 1918, en los edificios de Volkhonka, 18 se estableció el presidium de la Asociación Rusa de Institutos de Investigación en Ciencias Sociales (RANION) y seis instituciones científicas bajo su égida, incluyendo el Instituto de Lengua y Literatura, que fue dirigido por Vladimir Maksimovich Friche. La asociación fue disuelta en 1929, y todos los institutos pasaron a estar bajo la gestión de la Academia Comunista, que existió hasta 1936. Ese mismo año, el edificio fue transferido a la Academia de Ciencias de la URSS. Actualmente, alberga el Instituto de Lengua Rusa V.V. Vinogradov.

A finales de 2018, se completó la primera etapa de trabajos de conservación del objeto, se llevaron a cabo medidas de prevención de accidentes. Los especialistas reforzaron las estructuras de la casa, y ahora el espacio está completamente listo para la etapa principal de restauración.