К моменту февральского переворота 1917 года династия Романовых владела множеством дворцов, большинство из которых в последующие годы было разрушено или пришло в упадок. Однако дворец Великой Княгини Ольги Александровны стал приятным исключением: он сохранил не только свой внешний облик, но и великолепные интерьеры. Здание было возведено в 1830-х годах князьями Барятинскими и неоднократно перестраивалось. В 1858 году архитектор Геральд Андреевич Боссе значительно расширил дом, придав ему барочные черты. В 1874 году архитектор Мерц провел вторую крупную реконструкцию, благодаря которой сохранились нынешние пропорции здания.

Последней законной владелицей дворца стала 14-летняя Великая Княгиня Ольга Александровна, получившая его в 1896 году в наследство от отца. После замужества она переехала туда с мужем, принцем Петром Александровичем Ольденбургским. Для новых владельцев дворец был вновь перестроен, но без кардинальных изменений. На фасаде появился герб, соответствующий статусу Великой Княгини, а основное внимание уделили интерьерам, над которыми работали Дубинский и Рубцов. Однако семья прожила в особняке недолго: брак оказался несчастливым и был скорее формальным. С началом войны Великая Княгиня отправилась на фронт в качестве сестры милосердия, а позже Николай II разрешил ей развод. После февральского переворота она уехала на юг, а затем эмигрировала. Особняк был конфискован новой властью, но, в отличие от других архитектурных памятников, уцелел и до сих пор радует глаз прохожих.