В 1738 году на этой территории находились два владения: капитана Семеновского полка А. Обухова и жителя Петербурга В. Полосина. До 1793 года владельцы участков неоднократно менялись, пока оба не приобрел бригадир П. Голохвастов, который был родственником родителей А. Герцена и владел усадьбой на Тверском бульваре.

В 1810 году московский городской голова М. Титов купил участок между Калужской улицей и Москвой-рекой и построил там ситценабивную фабрику. После пожара 1812 года фабрику пришлось восстанавливать. Тогда же был возведен большой дом с 30 комнатами, пилястровым портиком, флигелями и обширным садом. Проект дома разработал архитектор Осип Бове, занимавшийся восстановлением Москвы после пожара.

Остальная часть участка была занята каменными и деревянными фабричными постройками.

В 1840-х годах сын Титова закрыл фабрику и продал участок городской казне. В 1866 году по инициативе московского генерал-губернатора князя А. Щербатова фабричные корпуса были переоборудованы под лечебницу для больных тифом. С 1878 года она стала Второй градской больницей, а в 1902 году получила имя Щербатова. В 1890 году при больнице был открыт домовый храм иконы Божией Матери "Знамение", спроектированный академиком архитектуры И. Залесским. Храм был закрыт в 1920-х годах и восстановлен в наше время.

В главном доме разместилась долговая тюрьма, переведенная сюда от Иверских ворот. Москвичи прозвали ее «Титы», и она была не менее известна, чем долговая «Яма». По преданию, здесь умер художник Саврасов. В 1879 году тюремное заключение как способ взыскания долгов было отменено, но арестный дом оставался до начала 1900-х годов.

Позже здание вошло в состав больничного комплекса. В советское время больница стала базой 2-го Московского медицинского института. С 1922 года главным врачом работал профессор этого института, выдающийся хирург Б. Вейсброд. С 1924 по 1959 год больница носила его имя.

В 1959 году она вошла в состав 1-й Градской больницы имени Пирогова.