На участке дома №10 по Загородному проспекту, к 1849 году был выстроен одноэтажный деревянно-каменный двухэтажный дом. Принадлежал он коллежскому советнику Ивану Ивановичу Нащекину. Здесь жили чиновники, купцы, отставные военные, разночинцы. В разное время доме работали винный погреб, аптека, фруктовая лавка, портновская мастерская.
В 1880-х годах участком владела вдова коллежского асессора Мейера, получившая разрешение на постройку пятиэтажного дома. Однако новое здание здесь появилось только в 1898 году, когда им владел потомственный почётный гражданин Александр Иванович Груздев. Проект четырёхэтажного доходного дома разработал архитектор Сергей Петрович Кондратьев. Первый этаж сразу был приспособлен под магазины. Позже дом №10 был надстроен пятым этажом. Кондратьевым же построены дворовые флигели. Имущество Груздева тогда оценили в 265 000 рублей.
Купец 2-й гильдии Александр Иванович Груздев занимался торговлей посудой, основатель и соучредитель торгового дома "А. Груздев и К". Жил со своей семьёй в собственных домах на Забалканском пр. 53 и Невском пр. 104.
Следующим владельцем дома №10 26 февраля 1901 года стала вдова коллежского асессора дворянка Вера Семёновна Анненкова, купившая его за 260 000 рублей. Спустя ровно три года она скончалась, завещав имущество Антонине и Наталье Фёдоровнам Анненковым. Управляющим имуществом стал Александр Дмитриевич Гагендорф.
В самом начале XX века одну из квартир дома Анненковых арендовало "Общество любителей шахматной игры". В 1901 году здесь прошёл шахматный турнир сильнейших шахматистов города, в котором первые два места поделили Гельбак и Лебедев. Кроме того, тогда здесь работали лакировочная мастерская, склад чулочного товара, галантерейная лавка, меблированные комнаты.
28 июня 1919 года доходный дом приобрёл генерал-майор Павел Николаевич Шабельский, а 8 августа 1916 года - петрозаводский купец 2-й гильдии Павел Лаврович Ясинский. Последний заложил здание Кредитному обществу, однако революционные события 1917 года освободили его от кредитных обязательств.
В 1951-1971 годах здесь жил филолог Виктор Максимович Жирмунский, академик АН СССР, автор многочисленных трудов по истории русской и западноевропейской литератур, языкознанию, фольклору и другим темам. Он исследовал творчество петербургских поэтов, был редактором восьмитомного собрания сочинений С. Я. Маршака. В 2001 году на фасаде дома №10 была установлена посвящённая Виктору Максимовичу мемориальная доска, выполненная архитектором Р. С. Свирским и скульптором Т. Н. Милорадович. Её открытие состоялось в рамках Международной конференции памяти академика.
