L'église historique dans les grottes a été consacrée en 1903 en l'honneur de l'icône, qui est devenue célèbre en 1888 à Saint-Pétersbourg. Lorsque la foudre a frappé la chapelle près de l'usine de verre, l'intérieur du bâtiment a été endommagé par le feu, mais l'image de la Mère de Dieu est restée intacte. Des pièces de monnaie provenant d'une tasse brisée avec des dons se sont collées à l'icône. Bientôt, les gens ont commencé à recevoir des guérisons de maladies. En 1897, l'abbé Mikhaïl, supérieur du monastère de Bouzoulouk, a commandé une copie de cette icône. L'image a été accueillie par une grande foule et est également devenue célèbre pour ses miracles, recevant le nom d'icône de la Mère de Dieu « Réconfort de tous les affligés » avec des pièces de monnaie. L'église en l'honneur de cette icône a été construite dans les grottes, creusées dans les années 1820.

Après l'ouverture du monastère dans les grottes, qui sont des couloirs souterrains et des cellules en terre, des anciens y vivaient. Léon Tolstoï se rendait spécialement de son domaine de Bouzoulouk pour rencontrer l'un d'eux. Cette visite est reflétée dans sa correspondance avec sa femme et les souvenirs de ses enfants. Après la fermeture du monastère, l'église a été détruite, et les grottes ont probablement été explosées, ce qui est confirmé par la nature des destructions. Le renouveau des traditions monastiques de nos jours se fait sur la base de la paroisse de la Transfiguration à Bouzoulouk, où le clergé est composé de moines. Sous la direction du doyen Léonide Antipov, aujourd'hui évêque de l'éparchie de Bouzoulouk, de Son Éminence Alexis et de l'abbé Vitali Klimov, des travaux de nettoyage des grottes ont commencé à la fin des années 1990. En 2001, une nouvelle église a été fondée, dont la construction a été achevée en 2007. La consécration de l'église de l'icône de la Mère de Dieu « Réconfort de tous les affligés » a eu lieu le 5 août 2012. L'église de la Transfiguration a été restaurée près des murs de l'ancien monastère, qui est maintenant une colonie de femmes. Aujourd'hui, des services religieux hebdomadaires ont lieu dans l'église.