Первым владельцем участка дома №54 на Английской набережной в начале XVIII века стал член Военной коллегии Сената генерал М. А. Матюшкин. После его смерти землю наследовала вдова. Далее участок принадлежал майору Петру Александровичу Собакину, который продал его в 1746 году английскому купцу Василию Васильевичу Портеру. Следующим владельцем в 1790 году стала Ольга Александровна Жеребцова (позже владела соседним домом №52), через два года - иностранный купец Генрих Линдеман, ещё через два - нарвский купец Иван Иванович Берг.
Согласно описи 1798 года здесь стояло два дома. В одном из них было 28 жилых помещений (принадлежал И. Бергу), в другом - 21 помещение (числился за капитаном фон Цаутиным). Вскоре оба здания приобрёл коммерц-советник Христофор Чергин, который перестроил их в единое.
В 1822 году домом №54 стала владеть бывшая фрейлина Екатерины II Татьяна Васильевна Юсупова. До 1791 года она с супругом жила в доме №26 на Английской набережной. В 1836 году Юсуповы переехали в купленный и перестроенный ими дворец на Мойке (дом №94). Дом на набережной они продали начальнику Главного Морского штаба князю Александру Сергеевичу Меншикову, правнуку знаменитого Александра Даниловича Меншикова.
Сначала в доме располагались канцелярия Морского министерства и квартира директора канцелярии А. А. Жандра. В середине XIX века особняк указом императора был передан князю в вечное потомственное владение. В это время он перестраивался, автор проекта перестройки неизвестен.
А. С. Меншиков является автором известной среди краеведов фразы о петербургских долгостроях николаевской эпохи: "Достроенный собор (Исаакиевский - А. Ч.) мы не увидим, но увидят наши дети; мост (Благовещенский - А. Ч.) мы увидим, но наши дети не увидят, а железной дороги ни мы, ни наши дети на увидят" [Цит. по: 1, с. 233].
При князе в особняке хранилась одна из лучших петербургских библиотек. После его смерти дом перешёл сыну Владимиру. Для него в 1873 году здание было перестроено архитектором К. К. Рахау. В журнале "Зодчий" осталось описание работы зодчего:
У князя Владимира Александровича Меншикова не было сыновей. Его старшая дочь вышла замуж за А. И. Корейша, которому и перешёл участок, а так же все титулы Меншиковых. Корейши жили в особняке до начала XX века.
В 1910 году дом был приобретён казной для великого князя Михаила Александровича. Через год архитектором Р. Ф. Мельцером здесь была устроена новая лестница. Фасад здания со стороны набережной и парадный двор были переоблицованы в стиле модерн. Во втором дворе Мельцер построил двухэтажный корпус для конторы великого князя. Участок дома №54 - единственный незастроенный со стороны Галерной улицы. На неё выходит высокая ограда с въездной аркой.
В 1918 году по распоряжению Н. К. Крупской дом был передан Всероссийскому обществу глухих, которому он принадлежит до сих пор. Сохранившиеся интерьеры особняка нуждаются в срочной реставрации.
