Построен в 1786-1787 годах подрядчиком пензенским купцом Герасимом Шабониным по проекту нижегородского губернского архитектора Якова Ананьевича Ананьина, утвержденному Екатериной II 6 февраля 1786 года. В нем размещались наместническое (губернское) правление и казенная палата – губернский орган Министерства финансов, председателем которой в 1791-1797 годах был поэт, драматург и организатор первого в Пензе театра пензенский вице-губернатор князь Иван Михайлович Долгоруков (Долгорукий), а в 1865-1866 годах – писатель-сатирик Михаил Евграфович Салтыков-Щедрин.
Здесь служили мемуаристы Иван Иванович Мешков (1832), автор одних из самых ранних воспоминаний о Пензенском крае, рассказывающих о действиях пугачевцев в 1774 году, его сын Григорий Иванович Мешков (1825), оставивший интереснейшие «Записки о городе Пензе», Василий Антонович Инсарский (1825), написавший шесть томов своих «Записок», напечатанных в разных журналах. С этим зданием связано имя вице-губернатора Александра Михайловича Жемчужникова, соавтора нескольких произведений Козьмы Пруткова (коллективный псевдоним группы писателей, включающей, кроме него самого, его брата В. М. Жемчужникова и поэта А. К. Толстого).
Здание было перестроено в 1853-1854 годах по проекту пензенского губернского инженера Александра Конрадовича Шторха.
А. И. Дворжанский.