Экспозиция музея расположена в купеческом особняке, некогда принадлежавшем купцу I гильдии Семену Ивановичу Березину, а затем его сыну Федору. После смерти владельцев усадьба была куплена городом для размещения окружного казначейства, и дом подвергся небольшой перепланировке.