Застройка этого участка на углу Среднего проспекта Васильевского острова и набережной Макарова началась в 1770-х годах. Тогда он был отдан тульскому купцу М. В. Грибанову, владевшему чугунолитейным и железоделательным заводами. Изначально эта прибрежная территория была довольно низкой. Её использовали для открытого хранения прибывших в Петербург по воде грузов (рядом находился торговый порт).
В конце XVIII века здесь было выстроено несколько небольших каменных зданий. В начале XIX века от владения Грибановых отделился участок, где теперь располагается дом №3 по Среднему проспекту. На участке дома №1 к 1820-м годам был выстроен двухэтажный дом. В 1845 году по заказу купца Василия Михайловича Калгина здание надстроили до четырёх этажей и расширили по набережной и проспекту до соседских владений.
Одним из жителей дома №1/18 в 1850-х годах был молодой архитектор Х. И. Грейфан. Тогда же здесь жил студент петербургского университета князь И. Г. Чавчавадзе, впоследствии ставший известным грузинским литератором и общественным деятелем. В 1874-1876 здесь останавливался художник Г. Г. Мясоедов, один из основателей Товарищества передвижных художественных выставок. В начале 1890-х годов в этом доме обитал начальник архива Департамента таможенных сборов Н. И. Кайданов. В 1900-1901 годах жителем этого дома был учёный агроном А. В. Советов, во второй половине ХХ века - кинорежиссер студии "Ленфильм" В. И. Трегубович.