La iglesia fue construida aproximadamente en 2004-2005 y consagrada en honor a la Santísima Trinidad Vivificante, ya que la icono con esta imagen está instalada sobre la entrada de la iglesia y en el cementerio.

Baldyzh se menciona por primera vez a principios del siglo XVII como un pueblo existente, perteneciente a los Bezobrazov. En el siglo XVIII, temporalmente tuvo otro nombre, Bogoroditskoye. En el siglo XIX, el pueblo fue propiedad de V. D. Azanchevsky e I. I. Korovkevich.

A principios del siglo XVII, ya había una iglesia parroquial de Flora y Lavra en el pueblo, que se quemó durante los años de la Confusión. En la década de 1690 se construyó una iglesia de piedra, que fue cerrada a principios del siglo XX debido a su deterioro.

En los siglos XVII y XVIII, el pueblo formaba parte del stan Podgorodny del distrito de Bryansk. Desde 1861 hasta 1924, perteneció a la volost de Gosamskaya del distrito de Bryansk (desde 1921, del distrito de Bezhitsk). En 1924 y 1929, el pueblo perteneció a la volost de Ovstugskaya, y desde 1929, al distrito de Bryansk. Desde la década de 1920, formó parte del consejo rural de Glinishchevsky.