Владение номер 53, согласно плану 1852 года, находилось на Арбате. Главный дом небольшой усадьбы, расположенный вдоль красной линии, принадлежал семье Хитрово. В нем проживали коллежский асессор Никанор Семенович Хитрово и его сын, прапорщик Н. Хитрово.

В 1874 году владение перешло к купцу Илье Васильевичу Патрикееву, который был старостой Чудова монастыря в Кремле и имел брата Павла Васильевича.

В 1878 году на участке появилось новое строение, вероятно, включавшее более раннюю постройку. Дом Патрикеева был возведен по проекту К. Буссе и имел два этажа. Недавно его отреставрировали, и теперь перед нами предстает небольшой особняк в неоклассическом стиле. Окна второго этажа украшены легкими лепными гирляндами цветов, а над входом восстановлен вензель Ильи Патрикеева с перекрещенными буквами «И» и «П».

При Патрикеевых главный дом усадьбы сдавался в аренду. На первом этаже располагались магазины, а второй этаж занимали квартиры. В 1897 и 1903 годах здесь находились частный женский пансион и училище Софьи Карловны Смирновой.

Дом 53, строение 6, был жилым домом Патрикеевых. После Ильи Васильевича владение на Арбате перешло к его племянникам: Сергею, Павлу и Михаилу Патрикеевым. В разные годы здесь жили либо Сергей и Михаил, либо Михаил и Павел Патрикеевы.

Род купцов Патрикеевых пользовался известностью и уважением в Москве. П.П. Патрикеев был потомственным почетным гражданином, гласным Московского губернского земского собрания и попечителем Александро-Мариинского приюта.

С.П. Патрикеев, как и его брат, был политическим и общественным деятелем, членом Московской государственной думы, совета Петербургского международного банка и почетным членом Московского совета детских приютов. В 1911 году ему было пожаловано дворянство.

К 1915 году главный дом уже не принадлежал Патрикеевым, но адрес Михаила Патрикеева оставался прежним: Арбат, 53, собственный дом.

В советское время особняк Патрикеевых был разделен на коммунальные квартиры.

В настоящее время здание принадлежит Департаменту культуры Москвы и является ценным градоформирующим объектом.