Основателем особняка Пузанова стал Иван Василевич. Пузанов Иван Васильевич (ум. 1903) — курский купец и меценат, имел особняк на ул. Ртищева (ныне — ул. Советская, дом № 3), гостиницу и магазин на Б. Московской ул. (ныне — ул. Ленина). Известен был в городе как актёр-любитель, успешно выступавший в спектаклях по пьесам А. Н. Островского, в т. ч. совместно с заезжавшими на гастроли в Курск актёрами Малого театра.
В 1903 Пузанов пожертвовал 10 тыс. руб. на строительство церкви во имя преподобного Серафима Саровского, которая была построена уже после его смерти в Дядином переулке г. Курска (ныне — ул. Полевая) и освящена в 11 декабря 1905. Это один из первых в России приходов преподобного Серафима Саровского.
Одноэтажный особняк Пузанова построен в начале ХХ века. Главный фасад этого красивого здания с парадным входом, украшенным полуколоннами, выходит на улицу. Во двор же, используя естественный уклон земли, дом глядит окнами двух этажей. Здание выложено из качественного лицевого кирпича, четко передающего на фасаде обилие мелких архитектурных деталей, а большие полуциркульные окна в обрамлении колонок смутно навевают архитектурный стиль эпохи Возрождения.
После Октябрьской революции особняк был национализирован, и в 20-х годах в нем размещался противотуберкулезный диспансер. В 1946 году после ремонта дом был отдан Курской картинной галерее.
В настоящее время в нем находятся только дирекция галереи и ее фонды, а выставочные залы располагаются в ее филиале (угол улиц Радищева и Гоголя).
