В глубине двора на Большом Строченовском переулке спрятался двухэтажный деревянный дом. В конце XIX века здесь находилось четыре дома под одним адресом, принадлежащих бывшему крестьянину, а затем московскому купцу Николаю Васильевичу Крылову. Единственный сохранившийся дом был построен в 1891 году архитектором М.В. Медведевым. В нем было четыре квартиры: две на первом этаже (№№ 5 и 6) и две на втором (№№ 7 и 8). Квартиры с другими номерами находились в соседних, ныне утраченных домах.

На переулке также стоял деревянный двухэтажный дом, где располагались мясная и овощная лавка Крылова. Работники жили в квартирах, которые служили своего рода общежитиями для сотрудников лавки.

С конца 1880-х годов в квартире № 6 жил старший приказчик купца Крылова Александр Никитич Есенин. Он родился в Рязанской губернии, но с детства был отдан на обучение к купцу, дослужившись до приказчика. В родные края он наведывался редко, но в восемнадцать лет женился на односельчанке. В 1895 году у него родился старший сын, поэт Сергей Есенин.

Поначалу отец и сын виделись только в селе во время редких визитов Александра Никитича, но в июне 1911 года Сергей впервые приехал в Москву и провел неделю у отца. В следующем году, окончив церковно-учительскую школу, Сергей снова приехал в Москву, поселился у отца и даже устроился работать в контору мясной лавки Крылова. Этот адрес в Большом Строченовском переулке стал единственным официально зарегистрированным местом жительства Сергея Есенина в Москве. Он числился здесь до 1918 года, хотя фактически съехал от отца и ушел из лавки уже летом 1912 года, поселившись в соседнем доме, также принадлежащем Крылову, но став независимым. Здесь он прожил недолго, но всегда навещал отца.

Во время проживания по этому адресу Есенин сменил несколько мест работы, включая типографию товарищества И.Д. Сытина, дважды женился, служил в армии, прослушал курс в народном университете им. А.Л. Шанявского и стал поэтом. В 1914 году его стихи впервые были опубликованы, и гонорар за них он принес отцу.

Александр Никитич Есенин покинул Москву в 1918 году и пережил сына на семь лет. Дом в Большом Строченовском переулке стал мемориальным. В 1992 году его постиг пожар, и здание было настолько повреждено, что было решено снести оставшиеся постройки. В 1994 году на его месте построили кирпичный дом, обшитый потемневшими досками, максимально приближенный к первоначальному облику. В 1995 году, к столетию со дня рождения Сергея Есенина, в нем открылся музей. Его устройство взяли на себя племянница поэта С.П. Есенина, художник А.А. Тавризов и филолог С.Н. Шетракова, ставшая директором музея. В 1996 году музей получил статус государственного, а экспозиция расположилась в двух комнатах на первом этаже.