Массивное здание в классическом стиле, расположенное на Москворецкой набережной, известно как Воспитательный дом. Его парадный фасад украшен куполом со шпилем, который виден как с Москворецкого, так и с Яузского моста.

Инициатором строительства Воспитательного дома в Москве был Иван Иванович Бецкой (1704-1795). Он был внебрачным сыном князя И. Ю. Трубецкого, учился в Копенгагенском кадетском корпусе и путешествовал по Европе, где познакомился с педагогическими идеями энциклопедистов. Вернувшись, он предложил Екатерине II создать в Москве Воспитательный дом для подкидышей и беспризорных детей. Воспитанники получали образование и профессию, часто связанную с искусством: актёра, художника, ремесленника, механика. Бецкой стремился воспитать в России нового человека, свободного от недостатков общества.

Воспитательный дом был учреждён 1 сентября 1763 года, а его закладка состоялась 21 апреля 1764 года, в день рождения Екатерины II, на Васильевском лугу. Дом строили из камня разобранной крепостной стены Белого города. Проект предусматривал два квадрата с внутренними дворами, соединённые центральным корпусом, называемым корделожи. Автор проекта неизвестен, но предполагается, что это мог быть Ю. М. Фельтен из Петербурга. С 1764 по 1767 годы строительством руководил архитектор К. И. Бланк, который построил западный квадрат. Корделожи возводили архитекторы Я. А. Ананьин и крепостной И. Ситников, приглашённые П. А. Демидовым. Джованни (Иван) Жилярди построил часть восточного окружного строения до 1801 года.

В сентябре 1812 года директор Иван Акинфиевич Тутолмин, оставшийся в Москве для охраны здания, договорился с Наполеоном о карауле из 12 солдат с офицером. В здании разместили раненых, а во внутреннем дворе и между зданием и Китайгородской стеной похоронили около 2500 умерших французов.

После 1917 года Воспитательный дом был упразднён. В здании, переименованном в «Дворец труда», разместились профсоюзы, управление соцобеспечения и редакции газет. И. Ильф и Е. Петров описали его в романе «12 стульев» как Дом Народов.

В конце 1930-х годов здание заняла Артиллерийская академия им. Ф. Э. Дзержинского. Для академии в 1930-1940-х годах построили южный корпус восточного квадрата, предусмотренный первоначальным проектом. Полностью восточный квадрат завершили в 1960-е годы по проекту И. И. Ловейко.

В 2021 году завершилась реставрация скульптур, украшающих въезд на территорию Императорского воспитательного дома со стороны улицы Солянки. Это копии аллегорических композиций XIX века «Милосердие» и «Воспитание», выполненные из белого камня и установленные в 1970-х годах.