Церковь Николая Чудотворца, расположеная в центре села, на правом берегу р. Ипуть, построена в 1815 г. по заказу помещика майора Ф.Д. Ширая и его жены Прасковьи Петровны. Архитектор, вероятнее всего, Джакомо Кваренги (в последнее время ряд исследователей приписывают авторство Н.А. Львову). Известно, что после смерти одного сына Прасковья Петровна поселилась у церкви и прожила здесь до своей смерти в 1845 г., соблюдая строгий монашеский обет. Кирпич и тес для строительства Никольского храма доставлялся по реке на плотах. Кладка оказалась настолько прочной, что в годы богоборчества смогли разрушить только часть постройки. После закрытия и разграбления здание собора было передано в ведомство районного отдела образования. Позже в нем были устроены школьные мастерские, а потом склад для удобрений. Сегодня церковь в Казаричах относится к приходу храма Рождества Пресвятой Богородицы в п. Гордеевка. По благословению епископа Брянского и Севского Феофилакта в Казаричах возрождается православная община.
