В Москве не так много исторических зданий, связанных с иконописными мастерскими и известными русскими иконописцами, особенно если говорить о периоде XV-XVII веков. Одним из сохранившихся до наших дней зданий являются палаты царского изографа Симона Ушакова.

Палаты как тип каменных сооружений появились в московской архитектуре в XV веке и активно строились в XVI веке. Однако наиболее массовое их строительство пришлось на середину XVII века. Эти здания, сводчатые и каменные, могли быть одно- или двухэтажными, реже трехэтажными, и отличались декором фасадов, сочетающим элементы "русского узорочья" и московского барокко. Такие палаты были возведены в 1650-1670-х годах на участке, который в середине XVII века принадлежал купцу Ивану Чулкову в Ипатьевском переулке.

В 1652 году эти купеческие палаты были переданы ведущему иконописцу московской школы, "царскому изографу" Симону Федоровичу Ушакову. Считается, что его прозвали Симоном, а настоящее имя было Пимен. В этих палатах он организовал свою иконописную мастерскую.

Симон Ушаков стал ключевой фигурой в истории русской иконописи, находясь на стыке эпох. Он способствовал переходу от древнерусской иконы, связанной с именами Феофана Грека, Андрея Рублева и Дионисия, к периоду европеизации искусства и появлению "фряжских" икон, характеризующихся реалистичностью. Его талант заключался в умении соединить эти две эпохи в своем творчестве.

Палаты того времени представляли собой трехэтажное здание, где два верхних этажа были жилыми, а нижний этаж-подклет включал сени, соединявшие четыре сводчатые палаты с белокаменной облицовкой стен. Рядом находился флигель, соединенный с палатами воротами из трех арок, над которыми был переход.

Фасад палат украшали каменные наличники в виде наборных колонок и килевидного завершения, характерные для "русского узорочья". Парадный фасад был обращен во двор, а не на переулок. В этом здании Ушаков провел последние 11 лет своей жизни.

В начале XIX века своды второго и третьего этажей были разрушены, пробиты новые окна и дверные проемы, изменив облик здания до неузнаваемости.

Современный вид палат, заслуга реставраторов. В 1956 году архитектор-реставратор Петр Барановский провел предварительное обследование памятника, а в 1962-1963 годах, более детальное. В 1982 году на основе этих исследований была проведена реставрация. Архитекторы И. Казакевич и Е. Жаворонкова восстановили первоначальный облик здания. По найденным в кладке стен "хвостам" кирпичей был воссоздан декор окон второго этажа. Сегодня здание занимает казначейство и является памятником федерального значения.