Im Jahr 1899 wurde mit Mitteln der Gemeindemitglieder eine steinerne Kirche mit drei Altären errichtet, die zu Ehren des Heiligen Nikolaus geweiht wurde. In der Kirche gab es auch Kapellen, die der Gottesmutter von Kasan und dem heiligen Johannes von Rila gewidmet waren. An die Kirche grenzte ein steinerner Glockenturm mit einem Eisen-Dach.

An der Kirche war eine kirchliche Schule angeschlossen, und die Gemeinde unterstützte mehrere ländliche Schulen. In den Dörfern Shcherbachevka, Bardakovka und Nizhnaya Parovaya gab es zweiklassige Schulen, und in Krasny Klyn eine einklassige ländliche Schule. Ab 1900 war der Priester Gavriil Alexejewitsch Wischnewski als Religionslehrer in diesen Schulen tätig.

Seit 1937 stellte die Nikolauskirche im Dorf Rzhava ihre Tätigkeit aufgrund des "Verzichts des Klerus auf die Arbeit" ein. Am 2. September 1940 wurde die Gemeinde aufgelöst. Am 1. Januar 1953 war im Dorf Rzhava eine registrierte Religionsgemeinschaft verzeichnet. Die Gottesdienste in der Kirche wurden aufgrund des Fehlens eines Priesters zeitweise eingestellt. 1975 wurde die Kirche erneut geschlossen, aber in den 1990er Jahren wurde die Gemeinde wiederbelebt und besteht bis heute.