Время постройки здания на улице Носовской, 5, и его архитектор остаются неизвестными. В 1870-х и начале 1880-х годов дом принадлежал купцу Ивану Александровичу Толмачёву, который упоминался в «Алфавите домовладельцев» Тамбовской городской управы за 1871 год. В 1882 году он получил разрешение на перестройку дома на своей усадьбе.

Согласно документам Тамбовской городской управы, в середине 1880-х и начале 1890-х годов каменные дома, флигели и лавки перешли к сыновьям И.А. Толмачёва, купцам Александру и Николаю Ивановичам Толмачёвым. Дом использовался как доходный, сдавая помещения в аренду. В 1884 году помещения были арендованы дворянином В. Благоновским для театра на год за 2000 рублей. Планировалось использовать большой зал на углу Гимназической и Носовской улиц и прилегающую комнату, вход в которую был с парадной лестницы. Предполагались изменения: разборка стены между комнатами с сохранением железных связей, а также перестройка дымоходов. 27 августа 1884 года Технико-строительное отделение Тамбовского губернского правления утвердило план переделки.

В 1891-1892 годах в доме братьев Толмачёвых располагался мебельный магазин купца В.В. Широкова. После смерти Н.И. Толмачёва в 1894 году, Александр Иванович стал единственным владельцем недвижимости. В 1895 году он обратился в Строительное отделение Тамбовского губернского правления с просьбой разрешить установку электростанции на углу Носовской и Гимназической улиц для освещения своих домов и магазинов других купцов.

В 1910-х годах А.И. Толмачёв владел тремя каменными домами, двумя лавками и флигелем по адресу: ул. Гимназическая, 16/Носовская, 7, а также шестью лавками на базаре и лесными пристанями за железной дорогой.

В 1914 году в доме А.И. Толмачёва на углу улиц Гимназической и Носовской находилась гостиница, принадлежащая Амбарцуму Борисовичу Тер-Георгиянцу.

В 1918 году дома А.И. Толмачёва были муниципализированы. В советское время на первом этаже дома работали различные магазины. В настоящее время на первом и втором этажах также расположены магазины.