Это здание выделяется как своей архитектурой, так и исторической значимостью. Оно представляет собой образец ампирного особняка в Москве, сохранившийся после пожара. После катастрофы 1812 года дом был построен из дерева. Имя архитектора неизвестно, но владелец, Владимир Иванович Штейнгель, в 1814 году стал руководителем дел гражданской и военной канцелярий, активно участвовал в восстановлении города и имел дружеские отношения с архитектором Осипом Бове и другими членами Комиссии по строительству Москвы. Облик таких особняков выбирали из сборника образцовых фасадов, но фасад дома Штейнгеля там отсутствует. Возможно, проект создал сам Бове или кто-то из архитекторов Комиссии.

Дом, вероятно, строился в 1815-1817 годах. В нем есть парадная анфилада: зал, центральная гостиная, чайная комната и парадная спальня. В 1830 году добавили каминную и потайную комнаты, дверь в которую замаскировали под шкаф. Ее обнаружили при реставрации в 1970-х. Эту комнату часто называют «масонской», так как Штейнгеля считали членом этой тайной организации. Были также сделаны антресоли со стороны двора, высота которых всего 207 см, что мало даже по меркам XIX века.

Дом деревянный, но облицован рельефной штукатуркой, имитирующей руст. Выделяется арочный портик с колоннами тосканского ордера, к которому выходят три центральных окна. Фронтон простой, ступенчатый, а аттик сложной формы. По верху здания проходит карниз. Основное оформление фасада обращено к Гагаринскому переулку, хотя вход с Хрущевского переулка.

Этот адрес известен своими знаменитыми жителями. Барон Владимир Иванович Штейнгель был членом Северного тайного общества и участвовал в подготовке восстания декабристов, за что был осужден и сослан.

Дольше всех, почти 45 лет, усадьбой владела Екатерина Львовна Лопатина, жена коллежского советника и сестра математика П.Л. Чебышева. В «лопатинских средах» участвовали Толстой, Ключевский, Забелин, Фет, Тютчев.

В советское время в доме были квартиры, в одной из которых жил Юрий Борисович Шмаров, знаток русской генеалогии, собравший коллекцию родословных и портретов.

Сейчас дом принадлежит отделению архитектуры Академии Художеств.