Одним из знаковых мест Симбирска-Ульяновска является Дом-памятник Ивану Александровичу Гончарову, расположенный на Венце. Идея увековечить память известного писателя через создание на его родине культурного учреждения была предложена Симбирской губернской учёной архивной комиссией. Председатель комиссии В. Н. Поливанов дважды, в 1901 и 1909 годах, обращался с просьбой разрешить всероссийскую подписку для сбора средств на строительство учреждения, где планировалось разместить музеи, библиотеку и школу рисования и черчения. Это было связано с приближением 20-летия со дня смерти и 100-летия со дня рождения Гончарова.

Император Николай II дал разрешение на сбор пожертвований 18 июня 1910 года, и вскоре было собрано более 100 тысяч рублей. В январе 1910 года комиссия попросила у городских властей выделить участок под строительство. Городская дума одобрила это только 26 января 1912 года. Участок выходил на Новый Венец и Дворянский переулок. В сентябре 1911 года был объявлен конкурс на проект фасадов и планов Дома Гончарова, в котором участвовали архитекторы из разных городов. Однако все семь представленных проектов были отклонены. Тем не менее, 6 июня 1912 года, в день столетия Гончарова, состоялась закладка краеугольного камня. В этот день в Симбирске также установили беседку-памятник Гончарову и переименовали улицу в его честь.

После неудачного первого конкурса был объявлен второй, программа которого была составлена Ф. О. Ливчаком и согласована в Петербурге. Из девяти представленных проектов ни один не был признан удовлетворительным. В декабре 1912 года Августу Августовичу Шодэ поручили разработать проект здания, который был одобрен в январе 1913 года. Строительство началось в 1913 году под руководством Шодэ и его помощника В. Г. Иванова. К концу 1914 года строительство почти завершилось, но средства закончились. Городская управа выделила оставшиеся 5 тысяч рублей, а меценат Н. Я. Шатров пожертвовал 11 тысяч рублей. В октябре 1915 года первый этаж здания занял военный госпиталь, что задержало завершение внутренней отделки. Карамзинская библиотека переехала на нижний этаж в ноябре.

В июне 1916 года строительство было приостановлено из-за нехватки средств, и проект Шодэ остался нереализованным полностью. В октябре 1918 года начался ремонт здания под руководством П. Л. Мартынова. После завершения работ в здании разместился Народный музей, объединяющий несколько музеев Симбирска. До 1920 года часть помещений занимал Симбирский пролетарский университет.

Сегодня в Доме-памятнике находятся Ульяновский областной краеведческий музей имени И. А. Гончарова на первом этаже и Ульяновский областной художественный музей на втором.