Au début du XIXe siècle, le manoir appartenait à la comtesse E.P. Rostopchina. Dans les années 1840, cette maison est devenue célèbre dans toute la Moscou littéraire grâce aux "jeudis pavloviens", auxquels assistaient des célébrités telles que N.V. Gogol, E.A. Baratynski, Ya.P. Polonski, A.A. Fet, A.I. Herzen, N.P. Ogarev, T.N. Granovski, P.Ya. Tchaadaev, K.S. Aksakov, les frères Kiréyevsky, A.S. Khomyakov et S.P. Shevyrev. C'est ici qu'en 1840, M.Yu. Lermontov a fait ses adieux aux écrivains moscovites avant de partir pour le Caucase. Yu.F. Samarin se souvenait : "Il est parti triste. La nuit était humide. Nous nous sommes dit au revoir sur le perron.

La maison appartenait à l'écrivain connu Nikolaï Filippovitch Pavlov, c'est pourquoi le salon littéraire était appelé "pavlovien". Cependant, la véritable maîtresse du manoir et du salon était sa femme Karolina Karlovna (née Yanich). Karolina, fille du professeur Karl Ivanovitch Yanich, a reçu une excellente éducation domestique, connaissait plusieurs langues étrangères et était connue à Moscou comme une jeune fille aux talents divers et inhabituels. À dix-huit ans, elle a rencontré le poète polonais Adam Mickiewicz, qui avait été exilé à Moscou pour avoir participé à des cercles patriotiques. Entre eux, l'amour a éclaté, mais la famille de Karolina était contre un mariage avec le poète sans capital ni revenu stable. Bientôt, Mickiewicz a quitté Moscou, laissant Karolina dans la souffrance. Elle a commencé à s'intéresser à la littérature, d'abord avec des traductions approuvées par Goethe, puis avec ses propres poèmes, collaborant avec des revues et des almanachs.

En 1836, Karolina, devenue une riche fiancée grâce à un héritage de son oncle, épousa Pavlov. Nikolaï Filippovitch, étant un joueur invétéré, a dépensé en quinze ans toute la dot de sa femme. En 1852, ils se sont séparés, et peu après, Karolina a quitté la Russie. Après avoir vécu dans différentes villes européennes, elle s'est installée à Dresde, où elle est morte en 1893. La seconde naissance de Karolina Pavlova en tant que poétesse a eu lieu grâce à Valery Bryusov, qui a publié en 1915 un recueil de ses œuvres.

Le manoir sur le boulevard Rojdestvenski a été acquis par E.F. Mattern, puis par ses fils Evgueni, Edouard et Emil. En 1870, le bâtiment a été reconstruit selon le projet de l'architecte A.N. Stratilatov, recevant une riche décoration en stuc dans le style rococo. Le dernier propriétaire avant la révolution de la maison était la Société moscovite de crédit sur gage de biens mobiliers. Actuellement, la maison est protégée par l'État en tant qu'objet du patrimoine culturel d'importance régionale.