Село Анненково основано в 1704-1706 годах на земле дворян Ивана Ивановича, Афанасия Ивановича и Сафона Анненковых. Все эти Анненковы были детьми алаторского дворянина Ивана Федоровича Анненкова. Первоначальное население села взято как раз из алаторских имений Анненковых. В 1743 году помещиком Иваном Ивановичем Анненковым построена каменная церковь во имя иконы Казанской Пресвятой Богородицы с приделами во имя святых Петра и Павла и Николая Чудотворца. Существует легенда о существовании подземного хода, соединяющего церковь и барский дом семьи Анненковых. Жительница села рассказала, что в молодости она с подругами, прослышав о подземных ходах, решила найти их. На окраине усадьбы девушки нашли спускающиеся вглубь ступеньки и начали спускаться. Чем дальше шли девушки, тем труднее становилось дышать. Дальнейшее продвижение становилось опасным, девушки повернули назад. В настоящее время вход завален. Состояние усадьбы также оставляет желать лучшего.