К 1768 году этим участком земли по Литейному проспекту владел Михаил Петрович Волконский. Получила участок его жена в наследство тётки графини Дарьи Семёновны Ефимовской. В то время земля эта была достаточно дешёвой, купить её было гораздо легче, нежели продать. Михаил Петрович в течении долгого времени пытался это сделать, но безрезультатно. Поняв тщетность попыток, Волконские решают увеличить доходность усадьбы. К 1790 году они строят двухэтажный каменный дом, а в 1792 году вновь дают объявление о продаже.
В феврале 1798 года половина участка с каменным домом выходящим главным фасадом на Литейный проспект перешла к великому князю Александру Павловичу, будущему Александру I. Волконские имели хорошие связи с императорской семьёй. Жена брата Михаила Петровича приходилась племянницей графу Н. И. Салтыкову, воспитателю великих князей. Сын Михаила Петровича рос вместе с великим князем Александром.
Скоро Александр подарил дом своей бывшей няне Прасковье Ивановне Геслер.
Существующий сегодня облик здание приобрело в 1876-1877 годах, перестроено по проекту Ю. Ю. Дютеля.
