Рядом с современным зданием гимназии №4, ранее известным как Реальное училище, находится деревянный дом №3, сохранившийся с конца XIX, начала XX века. Это двухэтажное жилое здание с деревянной обшивкой и каменным цокольным этажом. Окна дома украшены накладными наличниками с трапециевидными перемычками и шипцовым верхом, а фронтон декорирован резьбой. Однако планировка и внутреннее убранство дома не сохранились.

Дом был возведён в 1875 году. Усадьба занимала целый квартал от улицы Лекарской (ныне Володарского) до улицы Московской и включала в себя также двухэтажный кирпичный дом на улице Московской (№10). Владельцем усадьбы был купец Николай Алексеевич Алексеев, после его смерти она перешла сначала к его жене, а затем к детям, которые владели ею до революции.

Этот дом является образцом деревянной жилой архитектуры второй половины XIX века, в его оформлении использованы элементы, характерные для древнерусского зодчества. Это единственный в Пензе деревянный жилой дом с трапециевидными оконными проемами. Он также является памятником истории, связанным с интернациональным движением. Согласно решению облисполкома от 28 сентября 1987 года, здание признано объектом культурного наследия регионального значения как «Дом жилой (деревянный) XIX в.».

В этом доме размещались комитет партийной организации зарубежных интернационалистов, Международная группа РКП(б) (1918-1921), Германский революционный и Австро-венгерский Советы солдатских и народных депутатов (1919), а также клуб имени К. Либкнехта, библиотека и общежитие интернационалистов (1920-1921).