На восточной окраине Белозерска находится бывшая Ямская слобода. Отсюда начинался тракт, ведущий к переправе через реку Шексну в Кириллов, а затем на север вокруг Белого озера через Крохинский посад. Эти дороги обслуживали ямщики, жившие в этой слободе. В 20-е годы XVIII века было начато строительство нового каменного храма в честь свчтой мученицы Параскевы Пятницы. Храм является ещё и мемориальным, в память белозёров, павших в Смутное время при защите родной земли.
Церковь святой мученицы Параскевы Пятницы была построена в 1795 году и приписана Троицкой, Иоанно-Предтеченской, церкви. Основной храм с престолом освящён в честь мученицы Параскевы «рекомой Пятницы», а придел во имя Алексея человека Божия. Стены трапезной и придела в советское время были сломаны полностью. Церковь закрыта в 1928 году. В конце 1980-х годах начаты реставрационные работы, остановившиеся в 1991 году.