Архангельская церковь, построенная в 1759 году, имела колокольню и комплект из 5 колоколов, больший из которых весил около 835 кг. По рассказам старожилов, этот колокол было слышно даже в Сызрани. Внутри церкви был красивый шестиярусный иконостас.
После ареста в 1937 году церковно-служителей Архангельская церковь была закрыта. Иконы храма были пущены в качестве прилавков магазина, кованная церковная ограда снята на металлолом. Сам же внешний вид церковки оставался нетронутым до 50-х годов ХХ века, когда у нее была разрушена колокольня, купола и верхний ярус окон, а из самой церкви был сделан дом культуры, клуб. Еще некоторое время после этого перед зданием стояли столбы церковных ворот, на которые в советские праздники вешали транспаранты, но до нашего времени эти столбы не сохранились.
О Троицкой церкви, ее судьбе никаких сведений не имеется, и даже местные старожилы не помнят о ее существовании.
С 2003 года Жемковка снова стала полноценным селом: в ней был открыт храм. Правда, службы проходят не в старом здании, которое в советские годы было переделано под ДК, а в бывшем доме священника. Старое здание храма в настоящее время передано верующим, но богослужений в нем не ведется, так как здание нуждается в капитальном ремонте и перестройке,