Главное здание этого учреждения было построено в конце XVIII века. В XIX веке к нему добавили пристройку из красного кирпича. В прошлом столетии в этой пристройке разместился музей, который открыт для посещения и сегодня. На территории России это единственный музей такого рода.

Музей тщательно воссоздает атмосферу гимназий XIX века, включая обстановку классов и других помещений. В классах представлены карты, диаграммы, глобусы, фотографии города и старинные учебные приборы. Посетители могут сесть за парты, которым более 100 лет, и увидеть учебники того времени. Среди самых интересных экспонатов, кипятильник Франклина, который активируется прикосновением руки, и единственные сохранившиеся солнечные часы торгового дома Боргарда, изготовленные в середине XIX века.

Экскурсия расскажет о методах преподавания и воспитания учеников в XIX веке, истории гимназии, ее известных выпускниках и преподавателях. Здесь учился и знаменитый революционер В. И. Ленин.