Верхняя часть улицы Московской славилась как аристократический район. Этот статус подтверждался всем вокруг: от богатых купеческих домов до престижной гостиницы господина Варенцова на Московской, 1.

Отель был открыт в 1850-х годах и быстро стал самой дорогой гостиницей в городе. Внутри находилась кованая чугунная лестница, а фойе украшала роскошная мебель. Журналисты "Губернских ведомостей" писали: "Номер за 2 рубля включает прихожую, отдельный зал для приёмов и спальню. Здание заслуживает внимания как своим внешним видом, так и великолепным вестибюлем с чугунными лестницами. Это действительно спокойное, чистое и просторное место с элегантной мебелью".

Интересно, что в отеле на Московской, 1 содержались два пленника Крымской войны: полковник Генри Этвилл Лэйк и майор Томпсон. Губернатор Панчулидзев относился к ним как к коронованным особам, обеспечив их всем необходимым. Английские военные оставили свои впечатления о пензенской гостинице: "Обед стоил рубль, а завтрак четвертак, вспоминал полковник Лэйк, но вина были чрезмерно дорогими. Любому путешественнику я бы советовал воздержаться от шампанского и даже пива. Игристое вино обойдётся в 6 рублей или один фунт стерлингов". Кроме того, пленники имели собственных слуг.

В начале следующего века гостиница получила новое развитие. В 1904 году её выкупил купец Михаил Карташов, который начал обустраивать отель по последнему слову европейской моды и инженерии. Номера были обставлены дорогой мебелью, полы застелены коврами, а стены украшены копиями картин русских передвижников. В некоторых комнатах было электричество, что считалось новшеством того времени. Чтобы угодить клиентам, Карташов приобрёл 6-местную карету "Форд", которая доставляла гостей с Пензы-I. Позднее на первом этаже открылось кафе. Теперь клиенты могли не ходить за продуктами, а спуститься вниз и недорого пообедать или поужинать. Завтраки подавались с 11 до 14 часов (два блюда и кофе стоили 50 копеек), обеды, с 14 до 18 часов (четыре блюда стоили 60 копеек, а шесть блюд, 1 рубль). Провизия поступала из Москвы: куропатки, рябчики, фазаны, белуга, севрюга, форель, сёмга, цветная капуста, спаржа и другие деликатесы. Также здесь предлагался широкий выбор сладостей: печенье, пирожные, торты, кнедлики, шоколадные конфеты и многое другое. Продавалась и минеральная вода коменданта Зимнего дворца Владимира Воейкова.