Le temple de l'icône de Kazan sur le territoire du monastère a été construit de 1874 à 1885 sous la direction de la supérieure Arsenia. Le projet du temple a été élaboré par le professeur de l'Académie des beaux-arts de Saint-Pétersbourg, l'académicien I.I. Gornostayev. Mère Arsenia était la fille du célèbre général Mikhaïl Vassilievitch Sebriakov, chef de l'Armée du Don, qui a également fait des dons pour la construction du temple. Après l'achèvement de la construction et la consécration du temple, Arsenia avec trois moniales a commencé à creuser des grottes en dessous. Ces labyrinthes, selon le projet de la supérieure, symbolisaient l'histoire des derniers jours du Christ, y compris la Semaine Sainte, la trahison de Judas et la crucifixion de Jésus. Les grottes se divisent en deux chemins : l'un symbolise le chemin du Christ, l'autre, celui de la Mère de Dieu, et les deux mènent au Golgotha. En 1905, Arsenia est décédée à l'âge de 72 ans et a été enterrée dans la crypte de l'église inférieure du monastère.

Avec l'arrivée du pouvoir soviétique, le monastère a été fermé, le temple pillé, et le cercueil avec le corps de la mère supérieure Arsenia a été ouvert. Le corps s'est révélé incorruptible, mais le lendemain matin, le cercueil a disparu et n'a toujours pas été retrouvé. Actuellement, au monastère Spaso-Preobrazhensky d'Ust-Medveditsky se trouvent l'église supérieure de l'icône de Kazan et l'église inférieure du vénérable Arsenia le Grand. L'église souterraine, la grotte de Mère Arsenia, où se trouve la Pierre Sainte, est également en cours de restauration.