Автор и время постройки двухэтажного особняка на участке дома №6 по Фурштатской улице неизвестны. С 1827 года им владел князь Дмитрий Иванович Лобанов-Ростовский. Сюда он переехал после отставки с поста министра юстиции.
В 1840-х годах участком владела купчиха Мария Игнатьевна Соловьёва. В 1850-х годах - графиня Анна Алексеевна Баранова. В 1860-х годах здесь работал Временный распорядительный комитет Военного министерства по устройству южных поселений. После графини Барановой особняком владели другие люди.
В 1872 году А. И. Вальбергом был изменён фасад дома, сооружён навес перед входом. Последним хозяином особняка стала княгиня Вера Александровна Волконская. С 1917 года здесь устроили коммунальные квартиры, навес перед входом был разобран. В настоящее время здесь работает детский сад.
