В середине XVIII века владение на нынешнем Смоленском бульваре, 30, принадлежало Н. М. Желябужскому, при котором был построен главный дом. Этот дом можно увидеть на плане Москвы 1775 года. В конце того века владение сменило владельца, и в 1794 году его приобрела Н. И. Несвицкая. Она перестроила старое здание, изменив декор фасадов с барочного на классицистический стиль. В центре главного фасада появился портик из четырёх пар коринфских колонн с роскошным фронтоном. Проект приписывают Матвею Федоровичу Казакову, так как чертежи «дома Несвицкой» находятся в его известных альбомах.

К началу XIX века владение Несвицкой стало типичной городской усадьбой. Главный дом, обращённый фасадом к Смоленской-Сенной площади, находился на значительном расстоянии от дороги, к которой выходили два деревянных служебных флигеля, замыкавших ограду.

Здание пострадало в пожаре 1812 года, но было восстановлено. Во второй половине XIX века усадьба претерпела значительные изменения. В 1864 году на средства купца Николая Васильевича Рукавишникова здесь открылся первый в Москве приют для малолетних правонарушителей. Через девять лет указом императора Александра II приюту присвоили имя его основателя.

В 1879 году усадьба была существенно перестроена по проекту архитектора Александра Лаврентьевича Обера. К зданию приюта со стороны сада была пристроена домовая церковь в русско-византийском стиле, освящённая во имя Николая Чудотворца. Позже изменилась вся композиция архитектурного ансамбля: со стороны Смоленского бульвара на месте парадного двора появился новый корпус, заслонивший часть главного дома.

В 1920 году приют закрыли, а здание переоборудовали под коммунальные квартиры, при этом на главном фасаде были пробиты дополнительные окна, что исказило его облик. В послевоенные годы здание было отреставрировано.

Сейчас в здании располагаются различные коммерческие организации.