En 1870, l'évêché a acquis une maison sur la rue Bogoyavlenskaya pour la résidence d'hiver des archevêques de Kalouga. Cette maison a été construite par la famille Torubaev au milieu du XVIIIe siècle. En 1875, une école de chant avec une église dédiée à l'icône de Kalouga de la Mère de Dieu a été érigée près de la maison épiscopale. L'iconostase de l'église a été réalisée par l'iconographe kalougien N. L. Panov. Depuis 1918, le premier étage de la maison épiscopale abrite le Conseil épiscopal, qui a remplacé la consistance spirituelle abolie.

En 1922, l'évêque Théophane (Toulakov), qui y résidait, a été relogé dans un pavillon où se trouvait auparavant l'école de chant. Dans le bâtiment de la maison épiscopale, un orphelinat n° 4 a été installé. Lors d'une réunion du présidium de l'exécutif provincial de Kalouga, la proposition de l'administration provinciale de l'éducation populaire concernant l'expulsion de l'archevêque et du conseil ecclésiastique du pavillon de l'orphelinat n° 4 a été discutée. Cela était dû au fait que l'église et le pavillon avaient une entrée commune avec l'orphelinat, ce qui créait des désagréments et influençait indésirablement les enfants. En conséquence, il a été décidé d'expulser l'archevêque et le conseil ecclésiastique du pavillon et de fermer l'église domestique. De 1925 à 1955, la maison épiscopale a abrité un hôpital ophtalmologique. Après la guerre, l'école médicale de la région de Kalouga y a également été installée. Le 1er septembre 1944, l'école de chant et l'église ont vu l'ouverture du conservatoire de Kalouga. Les deux établissements occupent toujours ces bâtiments à ce jour. L'église en l'honneur de l'icône de Kalouga de la Mère de Dieu près de la maison épiscopale est également en activité.