Современный вид дома, принадлежавшего в начале XIX века купеческой семье Гончаровых, приобрел при одном из его владельцев - К. И. Юргенсе. Богатый для того времени дом стоял по диагонали против Спасо-Вознесенского собора и имел обширные хозяйственые постройки. Здесь 18 июня 1812 г. родился будущий писатель И. А. Гончаров. Во флигеле дома проживал крестный отец писателя, отставной моряк и помещик И. Н. Трегубов. Семья Гончаровых владела домом до пожара 1864 года, с 1865 года он переходил к разным владельцам, пока в 1880 году не перешел в собственность купца К. И. Юргенса.
Новый владелец и провел перестройку дома. Вначале со стороны Московской улицы к нему был пристроен склад-магазин, а в 1898 году был перестроен и весь дом. Ученая архивная комиссия было хотела выкупить дом с целью сохранения первоначального мемориального облика, но цена хозяина была слишом высока.
В 1907 году на средства хозяев на доме была установлена мемориальная доска из черного мрамора с барельефом писателя работы скульптора Б. М. Микешина. В 1912 году дом очередной раз поменял владельца и в нем размещалалась гимназия В. В. Кашкадамовой.
В 1974 году над крышей дома по проекту арх. А. С. Титова была сооружена башня с часами, снятыми ранее со Спасо-Вознесенского собора.
После коренной перестройки дома в Симбирске, в котором родился И. А. Гончаров, новые хозяева, братья Юргенсы, заказали для дома мраморную доску из чёрного гранита работы петербургского мастера Ботта с барельефем-бюстом писателя, выполненные скульптором Б. М. Микешиным и отлитым из бронзы в художественной мастерской В. В. Гаврилова (Петербург) .
16 сентября 1907 г. доска была торжественно установлена на углу дома в ознаменование места рождения И. А. Гончарова.
Мемориальная доска на доме, где родился И. А. Гончаров
В 1982 году в на первом этаже дома был открыт единственный в стране музей И. А. Гончарова.
Современный вид дома
