В селе Ольховатка когда-то находились два православных храма: один посвящён Рождеству Пресвятой Богородицы, а другой, Богоявлению Господню. В 1930-х годах Рождественский храм был переоборудован властями под школу, а Богоявленский храм был сожжён немцами во время войны. В 2011 году, по благословению архиепископа Германа, началось строительство нового храма. 15 декабря того же года владыка Герман освятил престол и храм-часовню Рождества Пресвятой Богородицы. Этот храм возведён в память о воинах, погибших в годы Великой Отечественной войны 1942-1945 годов.