Каждый год дважды крестные ходы отправлялись из монастыря к двум святым колодцам, которые, по преданию, были вырыты старцем Зосимой. В начале XX века над одним из этих колодцев возвели каменную часовню, которая стала украшением обители. Восьмигранная кирпичная часовня с шатровой крышей располагалась к западу от монастыря, но была разрушена в середине XX века.