От Шведского тупика вдоль четной стороны бульвара стоят несколько невысоких домов, сохранивших облик Москвы XIX и начала XX века. Начинает этот ряд дом под номером 20.

Угол дома, обращенный к Шведскому тупику, был изменен в 1973 году, когда переулок получил выход на Тверской бульвар, и часть здания была снесена. Со стороны двора привлекает внимание полукруглый объем, который принадлежал бывшему главному дому усадьбы. Фасад, выходящий на бульвар, не имеет украшений и завершается трехоконным портиком бывшего флигеля. Во двор можно попасть через арку.

В 1852 году в усадьбе жила княгиня Ольга Ивановна Горчакова. В конце XIX века дом принадлежал Василию Андреевичу Дашкову, меценату, коллекционеру и директору Публичного Румянцевского музея с 1868 года, а также вице-президенту Комиссии по строительству Храма Христа Спасителя в Москве. Дом был записан на его жену, Елизавету Андреевну Дашкову, урожденную Горчакову.

Накануне Октябрьской революции в усадьбе проживала его дочь Ольга Васильевна Кутайсова.

Ни одна из владелиц не изменила классический облик дома. Это по-прежнему старая московская усадьба, хранящая память о Москве времен Гоголя, Тургенева и Бунина.

На здании установлена мемориальная доска в память о погибших при взятии Дома Градоначальника в 1917 году членах Союза рабочей молодежи Жебрунове и Барболине. Доска была установлена в 1958 году.

В настоящее время в здании находится один из офисов Независимого строительного банка.