Здание музея — купеческий особняк Петрова Алексея Ивановича. Дата постройки — 1881 год. Под крышей музея в деревянной резьбе вырезаны цифры. Дом построен в 1904 году, а до этого купец жил по улице Садовой, теперь ул. Свердлова.
Дом имеет свою биографию и большую по значимости историю для района. Музей был открыт на общественных началах в 1973 году — стараниями местных энтузиастов и краеведов. В основном коллекция формировалась из подарков горожан. Сегодня их набралось более 12 тысяч на 10 залов. Экспонаты здесь самые разнообразные: средневековые женские украшения, старинные предметы быта казаков и крестьян, первобытные орудия труда, останки мамонта и зубробизона и многое другое.
В 2008 году на территории музейной усадьбы был найден клад купца Петрова А. И., состоящий из 320 медных монет, увидеть его можно в музее.