Здание, в котором находится мемориальный музей-квартира А. Н. Толстого, входит в комплекс городской усадьбы Рябушинских, построенной архитектором О. Ф. Шехтелем в 1901-1903 гг.
По проекту архитектора флигель, замыкающий внутренний двор, предназначался для хозяйственных нужд.
На первом этаже размещалась прачечная и дворницкая, на втором – комнаты для прислуги Рябушинских.
В годы, когда в особняке жил Горький, во флигеле располагались редакции созданных им журналов.
С августа 1941 г. до последних дней своей жизни в этом доме жил писатель Алексей Николаевич Толстой.
Мемориальный музей-квартира А. Н. Толстого был открыт в этом особняке в 1987 г.