Арсеньев в 1797 г. продал усадьбу Я. А. Охотникову. Четыре поколения этого рода владели усадьбой почти век (до 1893 г.) и именно с Охотниковыми связаны её формирование и расцвет. На середину XIX в. Охотниковым принадлежало в Керенском уезде 14000 дес. земли, они входили в тройку самых богатых помещиков уезда и были одними из самых богатых помещиков губернии. Всего же Охотниковым принадлежало в разных губерниях более 127000 дес. земли.
Следующим владельцем замка-дворца, который тоже занимался его украшением, был барон С. Р. Штейнгель (1864-1905), богатый наследник известного промышленного инженера-строителя барона Р. В. Штейнгеля (1841-1892). Видимо, Черкасское приобретено на часть отцовского наследства, после его смерти.
Архитектура замка сыграла здесь не последнюю роль. У отца Сергея Рудольфовича в Киеве имелся дом с парком, который называли «волшебным замком» за его рыцарско-средневековый облик. Опять-таки просвещённый вкус, богатство и привычка к комфорту позволили барону продолжить украшение замка в избранном предшествующим владельцем стиле. Есть свидетельство, что он привозил известного художника (имя его мы не знаем), «весьма оригинально расписавшего» печи в доме.
Барон быстро разорился и в 1900 г. вынужден был продать Черкасское кадомскому купцу В. Ф. Андронову. Во дворце множество прекрасно отделанных комнат, каминный зал. Всё это стоило громадных денег, учитывая, что железная дорога проходила в 30 верстах от Черкасского.
Андроновы вели открытый образ жизни, в доме часто бывали гости, устраивались концерты. В. В. Андронов в первое время постоянно жил в Черкасском. Затем на зимы стал уезжать с женой в Пензу. Он был последним владельцем Черкасского.
Вокруг усадьбы располагались многочисленные постройки: кладовые, амбары, погреба, псарня, жилые дома для дворовых. Вероятно, по стилю они были одинаковыми с ныне сохранившимся зданием волостного правления – на другой стороне широкой улицы, в некотором отдалении от дворца. Внутренние пространства между аллеями засаживались декоративными кустарниками с солитерами (ель, сосна), здесь разводились цветники либо сажались фруктовые деревья. На юго-восточной границе сохранились сиреневые аллеи вдоль берега пруда. С запада парк обсажен елью.