Этот дом был построен архитектором Петром Никитиным. Строительство началось в 1782 году, за два года до его смерти, в то время как рядом возводились Гостиные ряды. Сегодня это полукруглое трехэтажное здание с восемью колоннами.

Изначально здание было двухэтажным. Колонны с канелюрами, но тосканские капители были урезаны, вероятно, при достройке третьего этажа.

Дом предназначался для купцов Носовых, которые владели им до 1841 года. Скорее всего, они сами там не жили, а использовали его как «доходный дом», сдавая помещения в аренду. На первом этаже располагались торговые лавки, а на втором и третьем, жилые комнаты.

Позже дом перешел к купцам Блистановым, которые также использовали его для получения дохода.

Во время войны 1812 года в доме содержались пленные французы, а в 1857 году здесь была организована главная калужская гауптвахта.

С 1874 года дом арендовался и стал известен как Управление Ряжско-Вяземской железной дороги, а позже, Сызрано-Вяземской.

Известный писатель Глеб Успенский, вернувшись из Европы летом 1875 года, начал работать в управлении Сызрано-Вяземской железной дороги. Он занимал должность делопроизводителя коммерческого отделения в Калуге до января 1876 года и воспитывался в семье деда в середине XIX века.

В 1893 году все учреждения железной дороги переехали в специально построенное здание, и в доме Блистановых осталась только служба сборов железной дороги. Это продолжалось до 1918 года, когда в Калуге установилась Советская власть.

В начале тридцатых годов история дома повторилась: здесь снова открылись магазин и жилые помещения на втором и третьем этажах.

На первом этаже открылся магазин «Комсомольский», где продавцами могли быть только члены ВЛКСМ. В подвале находилось крупнейшее в Калуге хранилище картошки. Старожилы помнят этот магазин как один из лучших в городе, где продавались бакалея, гастрономия и овощи.

30 марта 1972 года магазин преобразился в плодовоовощной магазин самообслуживания «Урожайный», с отделами фруктов и соков, квашений и солений. Фрукты и овощи продавались в полиэтиленовых пакетах, а свекла и капуста, поштучно.

Калужане вспоминают, что жильцы второго и третьего этажей были недовольны запахами из магазина. Вход на лестницу, ведущую на жилые этажи, был с улицы, и многие помнят третий этаж как коммунальную трущобу.

Когда в стране была введена карточная система, многие закупались здесь впрок. Мука, сахар, крупа, мыло и стиральный порошок приобретались на случай ядерной войны.

В девяностых дом нуждался в капитальном ремонте, и его купил депутат областного Законодательного собрания Дмитрий Рыбак. Он расселил жильцов, отреставрировал здание и сдал его в аренду. В то время дом называли домом Рыбака. При реставрации был найден клад с российскими монетами второй половины XVII века.