Флигель является частью городской усадьбы XVII и XIX веков, которая признана объектом культурного наследия федерального значения.

Усадьба на пересечении Армянского и Сверчкова переулков имеет богатую историю, как в плане владельцев, так и строительства. Палаты XVII века, возможно, принадлежавшие боярину Милославскому, стали основой усадебного дома, который затем неоднократно перестраивался. С 1790 года, когда усадьба перешла к князьям Гагариным, ее преобразованием в духе московского классицизма занялся известный архитектор М.Ф. Казаков. Он создал классическую композицию с главным домом в глубине участка и симметричными флигелями, выдвинутыми на линию Армянского переулка.

Позднее усадьбой владели Тютчевы, и здесь жил поэт Федор Тютчев. В дальнейшем здание использовалось для различных социальных учреждений, от Горихвостовской богадельни до советского "Дома соцобеспечения имени Некрасова" 1920-х годов, который Ильф и Петров описали в романе "12 стульев" как "2-й Дом Старсобеса". Однако общая композиция усадьбы осталась неизменной, и сегодня она выглядит так, как задумал М.Ф. Казаков.

Южный флигель, выходящий на Армянский переулок, отличается от северного тем, что соединен с главным домом усадьбы. За ним находится узкий дворик, изолированный от парадного двора окружающими корпусами. Южный флигель отстоит от границы домовладения, оставляя пространство между ним и соседним зданием.

Со стороны Армянского переулка южный флигель, как и северный, представляет собой одноэтажное здание с пятью оконными осями. Центр фасада, обращенного к переулку, выделен небольшим ризалитом. Характерной чертой архитектуры XVIII века, относящейся к раннему русскому классицизму, являются вертикальные ниши для окон. Они видны как на фасаде, так и на стенах, обращенных к усадебному двору. Аналогично оформлены фасады корпуса, соединяющего южный флигель с главным домом, расположенного перпендикулярно переулку. Различие в количестве оконных осей с "симметричным" северным флигелем (5 и 7 соответственно) может указывать на то, что М.Ф. Казаков в 1790-е годы перестраивал уже существовавшие здания под классический канон.