В 1820 году на северо-востоке слободы Алексеевки было положено начало кладбищу. В 1845 г. графом Д. Н. Шереметевым и силами прихожан при кладбище начато, а в 1860 г. почти завершено строительство церкви во имя всех Святых. В 1860 г. церковь саморазрушилась вследствие слабости грунтового основания и просчетов в выборе места.
В 1869 г. было выбрано новое место на территории кладбища и начато строительство церкви во имя блгв. кн. Александра Невского. В 1888 г. строительство церкви было окончено. Ее освятил Вениамин — епископ Воронежский и Задонский.
По воспоминаниям старожилов храм никогда не закрывался. Даже во время оккупации Алексеевки немцами в нём совершались богослужения. На входной двери храма видны следы от пулевых отверстий, а с южной стороны в стене виден заделанный пролом от бронебойного снаряда, который пробив стену, толщиной 1метр 10 сантиметров упал на клирос храма.
В 2012 году в храме была сделана винтовая лестница на колокольню и приобретены новые колокола. В настоящее время их одиннадцать, самый большой из них весит 450кг
Ныне храм во имя блгв. кн. Александра Невского является памятником архитектуры.
