Свято-Петро-Павловский собор построили в 1809–1819 годах по проекту архитектора Джона Кларка. Инициатором строительства выступил граф Николай Румянцев, старший сын Петра Румянцева-Задунайского (впоследствии он был захоронен в левом приделе собора). Это был одноглавый храм в стиле классицизм. В советское время он закрывался, в нем работал музей, планетарий. Только с 1990 года в церкви возобновились богослужения. В храме находятся мощи преподобной Манефы Гомельской.