В 1820 году на северо-востоке слободы Алексеевки началось создание кладбища. В 1845 году граф Д. Н. Шереметев и прихожане приступили к строительству церкви во имя всех Святых, которое было почти завершено к 1860 году. Однако из-за слабого грунта и ошибок в выборе места церковь вскоре разрушилась.

В 1869 году на кладбище выбрали новое место для строительства церкви во имя благоверного князя Александра Невского, и в 1888 году её строительство было завершено. Освящение храма провёл Вениамин, епископ Воронежский и Задонский.

Согласно воспоминаниям старожилов, храм никогда не закрывался. Даже в период оккупации Алексеевки немецкими войсками в нём продолжались богослужения. На входной двери храма остались следы от пуль, а на южной стороне стены виден заделанный пролом от бронебойного снаряда, который пробил стену толщиной 1 метр 10 сантиметров и упал на клирос.

В 2012 году в храме установили винтовую лестницу на колокольню и приобрели новые колокола. Сейчас их одиннадцать, и самый большой весит 450 кг.

Сегодня храм во имя благоверного князя Александра Невского признан памятником архитектуры.