Музей размещается в бывшем барском доме городской усадьбы российского дипломата в отставке В.Н. Чичерина (отца Г.В. Чичерина). Одноэтажный дом с мезонином имитирует в дереве каменную архитектуру 1-й половины XIX века. Фонды музея насчитывают около 3,5 тысяч единиц хранения, из них мемориальных - свыше 400.