Усадьбу «Хвалевское» непосредственно планировал и строил Николай Александрович Качалов (1818—1891), тайный советник, губернатор Архангельска, руководитель Таможни Российской империи, близкий соратник царя Александра III. Он был женат на Александре Павловне Долговой-Сабуровой, дочери Павла Яковлевича, отставного полковника и местного помещика, передавшего деревни и земли усадьбы Хвалевское в качестве приданого.
К северу от главного дома располагалась оранжерея и большой фруктовый сад (ныне школьный сад и огород); к востоку партер, формальный сад и спуск к Суде; к западу курдонер и парк с подъездом к дому (ныне парк Победы); к югу большой лесопарк.
В первые годы после революции 1917 года здание усадьбы заняли местные органы Советской власти. В 1919 году в усадьбе открылась первая в районе средняя школа — Борисовская средняя школа (старое название — Хвалевская школа). Во время Великой Отечественной войны в усадьбе размещался прифронтовой военный госпиталь.
В 1990-е годы в связи с сокращением количества учеников здание усадьбы перестало эксплуатироваться, и усадьба стала быстро ветшать и разрушаться.
В 2006 году на празднование 380-летия Борисово-Судского (что совпало со 150-летием усадьбы) жителями села были приглашены прямые потомки Качаловых — семьи Тутолминых и Головкиных. В ходе этого визита впервые была оговорена идея восстановления исторической усадьбы. В 2009 году усадьба и прилегающая к ней территория были приобретены прямыми потомками рода Качаловых и Долговых-Сабуровых. В том же году в усадьбе Хвалёвское и близлежащей Покровской церкви на Нижней Чужбойке были начаты восстановительные работы на средства семьи праправнучки Н. А. Качалова (семьи Веры и Юрия Войцеховских-Качаловых) при поддержке и участии местных жителей. Храм был заново освящен на Престольный праздник Покрова в октябре 2010 года.
Основные восстановительные работы усадебного дома были проведены за пять лет в 2009-2014 годах. Торжественное освящение дома и домашней часовни состоялось 7 июля 2013 года, а формальное открытие усадьбы в июне 2014 года, на 160-летний юбилей закладки первого камня.
Теперь усадьба вновь стала родовым гнездом где несколько раз в году собирается вместе большая и дружная семья потомков строителя усадьбы и их друзья. Хвалевское постепенно начинает играть роль культурного центра региона. Здесь регулярно проходят занятия художественной школы, проводятся благотворительные концерты и спектакли, презентации книг, вручения наград, встречи с интересными людьми, семинары и конференции. Вот уже несколько лет на усадьбе проходит летний фестиваль «Народный Травник», на который стекаются ремесленники и народные коллективы со всей округи. Усадьба Хвалевское также стала традиционной заключительной площадкой фестиваля классической музыки «Музыкальная Экспедиция», на который съезжаются ведущие исполнители из России и других стран.
