Дом №26 по улице Якубовича (№8 по улице Труда) расположен на участке, который в первые годы существования Санкт-Петербурга входил в состав Морской слободы. Здесь жили рабочие Адмиралтейства. После пожаров 1736-1737 годов бывшая Морская слобода стала заселяться более богатыми горожанами, тогда как рабочие переселились ближе к городской окраине.
Граничащий с Мойкой и Крюковым каналом участок получил генерал-фельдмаршал граф Пётр Иванович Шувалов. В 1764 году его сын Андрей Петрович продал дом вместе с садом и остатками кирпича и камня голландскому купцу Брумбергу. Купец владел пильными мельницами и канатными заводами, здесь находились его лесные склады.
В 1765 году на пустыре Брумберга на средства Полицмейстерской канцелярии открылся бесплатный "Всенародный" театр. Сюда могли придти все желающие - театр посещали и простолюдины, и представители аристократии. Простые зрители в качестве трибун использовали штабеля леса, купцы и чиновники смотрели спектакли не выходя из колясок. На местных представлениях бывал даже великий князь Павел Петрович. Актёрами здесь работали в основном наборщики академической типографии, получавшие от полиции по 50 копеек за спектакль.
Спустя несколько лет для Брумберга здесь был построен двухэтажный дом с двумя отдельно стоящими флигелями. Между ними был устроен огород с оранжереями. Дом Брумберга в 1768 году упоминали в объявлениях как новый, значит он был возведён примерно в это время. Жильё здесь сдавалось в наём, чем пользовались в основном иностранцы. Постояльцы часто устраивали распродажи, о чём сообщали петербургские газеты:
Дела с финансами у Брумберга вскоре незаладились. Он обанкротился и умер, не погасив свой долг казне. О дальнейшей судьбе участка разные авторы пишут по разному. Авторы книги "Большая Морская улица" сообщают, что в 1770 году участок купил купец И. А. Поше. Он собирался построить здесь каменный театр, однако умер, не успев осуществить свой план. Историк П. Н. Столпянский писал, что покупателя на владение Брумберга долго не находилось. В конце концов он был передан для устройства Генерального штаба. Инициатором этого стал генерал Бауер, который 22 декабря 1773 года обратился к Екатерине II:
После приказа Екатерины о выделении недостающих 27 000 рублей из кабинетских сумм участок был приобретён. Бывший дом Брумберга стали называть Бауерским домом. Несколько позже в нём разместили вожатый корпус.
Оранжереи Брумберга работали и при новых владельцах. В 1790 году появлялось такое объявление:
В конце XVIII века этот участок стал принадлежать по версии П. Н. Столпянского Конному полку, тогда как авторы книги "Большая Морская улица" упоминают новым владельцем лейб-гвардии Конногвардейский полк. Главный корпус Бауерского дома для новых нужд перестроил архитектор Л. Руска, а боковыми флигелями занимался архитектор Ермолаев.
При строительстве Благовещенского моста в 1849 году была создана Благовещенская (ныне Труда) площадь, от которой к Мойке была проложена Благовещенская улица (сейчас именуемая также улицей Труда). Она ограничила участок с восточной стороны. Между новой улицей и Конногвардейским переулком (тогда Провиантским) в 1844-1849 годах по проекту Ивана Денисовича Черника был построен офицерский корпус Конногвардейского полка, главный корпус которого обращён на Мойку. Со стороны Ново-Исаакиевской улицы (ныне улицы Якубовича) и нового проезда появились здания казарм.
