У дома, в котором Н. В. Гоголь прожил последние годы своей жизни, долгая история.
Возведенный до пожара Москвы 1812 года, этот уособняк несколько раз перестраивался и менял своих хозяев.
Домовладение можно проследить с начала XVII века, когда на территории усадьбы располагался загородный двор бояр Салтыковых.
На рубеже XVIII — XIX веков усадьба была собственностью жены камергера и тайного советника, свойственницы отца А. С. Пушкина Марии Федоровны Салтыковой. В 1809 году было закончено и возведение большого двухэтажного корпуса служб, в котором размещались людские.
Пожар 1812 года уничтожил деревянные строения, а главный дом и службы так сильно пострадали, что хозяину пришлось переехать в свое нижегородское имение. В 1816 году хозяином усадьбы стал генерал-майор Измайловского полка Александр Иванович Талызин — он восстановил усадьбу к 1822 году.
После смерти А. И. Талызина в 1847 год2 дом достался его родственнице .
В тот же год здесь снял весь верхний этаж вернувшийся из Европы граф Александр Петрович Толстой. По всей вероятности, жена графа Анна Георгиевна выкупила усадьбу в конце 1847 года.
А в декабре 1848 к Толстым переехал Н. В. Гоголь и прожил в этом доме до 1851 года, до самой смерти.
После октябрьской революции 1917 года дом перешел в муниципальный фонд с использованием его под коммунальное жилье. К 1964 году в нем проживала 31 семья (77 человек). В 1964 году здание было передано постоянному представительству Киргизской ССР при Совете Министров СССР .
В 1971 году здание было передано Городской библиотеке № 2, в 1979 году библиотеке присвоили имя Н. В. Гоголя.
В 2005 году учреждение было преобразовано в Центральную городскую бибилотеку — мемориальный центр «Дом Гоголя».
Сегодня «Дом Гоголя» объединяет научную библиотеку (фонд — более 250 тыс. томов), исследовательский центр, выставочный зал и мемориальный музей.