Участок дома №20 по набережной Макарова впервые был застроен в последней четверти XVIII века. К 1810-м годам здесь располагался жилой каменный трёхэтажный дом.
Атлас Н. Цылова показывает, что к 1849 году этой территорией распоряжались почётные граждане братья Кондратий и Александр Ивановичи Савины. На берег Малой Невы и Тучков переулок тогда выходили каменные строения в два и три этажа. В 1898-1901 годах корпус со стороны Тучкова переулка был надстроен четвёртым этажом, а в 1930-х годах также повысили и примыкающую к дому №18 часть корпуса на набережной.
В 1860-х годах хозяин дома Александр Иванович Савин держал здесь небольшую парфюмерную фабрику. Её продукция распространялась в магазине "косметики и благовоний", занимавшем одну из секций "Пассажа" на Невском проспекте. В 1880-1890-х годах несколько помещений занимала мебельная фабрика А. Ф. Вунша.
С конца марта по 9 мая 1891 года в квартире №47 (ныне №57) в дворовом флигеле жил Владимир Ильич Ульянов (Ленин). В это время он сдавал экзамены на юридическом факультете Санкт-Петербургского университета. Это был один из первых ленинских адресов в Санкт-Петербурге. Здесь его навещала сестра О. И. Ульянова. После её смерти Владимир Ильич переехал на Лиговский проспект.
В квартире №4 (ныне №25, 31 и 32, 33 и 34) жил художник-баталист Василий Петрович Верещагин. В квартире №5 находилась его мастерская. Жителями дома №20 также были архитектор А. В. Щусев (1903-1905 годы), художники П. А. Брюллов (1907-1913) и Е. Е. Лансере (1905-1917). В 1912 году здесь снял своё первое самостоятельное жильё (комнату в квартире №29) поэт Н. С. Гумилёв. Спустя год у него поселилась А. А. Ахматова. Окна их жилища выходили на Тучков переулок, поэтому они называли свою комнату "тучкой". Здесь родился сын Гумилёва и Ахматовой будущий историк Лев Николаевич Гумилёв. Отсюда Николай Степанович по заданию Музея этнографии отправился в командировку в Абиссинию. Квартира №29 была перепланирована в 1990-х годах.
После 1917 года здесь обитал профессор университета, общественный деятель И. М. Гревс. Его неоднократно навещал ученик, историк Петербурга Н. П. Анциферов.
