Усадьба князей Голицыных на Волхонке за три века своего существования неоднократно меняла облик. Первоначальный проект был создан известным петербургским архитектором Саввой Чевакинским. В 1774 году усадьба была перестроена и стала центральной частью Пречистенского дворца, который Матвей Казаков спроектировал для Екатерины II.

Этот дом видел многих знаменитых людей. На роскошных балах часто появлялся А. С. Пушкин, который даже планировал обвенчаться с Натальей Гончаровой в домовой церкви князя Голицына. Однако венчание состоялось в церкви Вознесения Господня у Никитских ворот. В 1877 году в главном доме поселился Александр Николаевич Островский, где он завершил пьесу «Последняя жертва» и написал «Бесприданницу», «Сердце не камень», «Таланты и поклонники». В 1885 году соседнюю квартиру занял Иван Сергеевич Аксаков, один из лидеров славянофильского движения.

В 1865 году в пяти залах главного дома усадьбы Голицыных открылся бесплатный музей, основанный на семейных коллекциях. Музей состоял из трех разделов: западноевропейская живопись, скульптура и декоративно-прикладное искусство; античные памятники; библиотека. В живописном собрании были работы таких мастеров, как Брейгель, ван Дейк, Веронезе, Каналетто, Караваджо, Перуджино, Пуссен, Рембрандт. Через год, из-за финансовых трудностей, коллекция музея была продана Эрмитажу. После революции, в конце 1920-х годов, главный дом усадьбы стал Коммунистической академией и был надстроен двумя этажами, что привело к утрате фронтона. Единственное, что сохранилось в первоначальном виде, это внушительные ворота с княжеским гербом Голицыных.

После реконструкции в бывшем здании центрального корпуса усадьбы Голицыных откроется Галерея искусства импрессионистов и постимпрессионистов. Здесь будут выставлены произведения выдающихся мастеров второй половины XIX и начала XX века: Мане, Моне, Ренуара, Дега, Писсарро, Сезанна, Гогена, ван Гога, Матисса и фовистов, Пикассо и кубистов. Эти произведения происходят из коллекций знаменитых дореволюционных московских коллекционеров С. И. Щукина и И. А. Морозова.