Первое крупное четырёхэтажное здание на участке дома №15 по Большой Конюшенной улице было построено в 1838-1839 годах по проекту И. М. Маевского и К. И. Реймерса для коллежского советника И. А. Кашанского (Кошанского). При этом одновременно были застроены три замкнутых внутренних двора. С 20 сентября 1849 года здесь пять месяцев на квартире своей двоюродной сестры Л. Н. Терсинской жил молодой Н. Г. Чернышевский.
В 1912 году здание перестраивалось под руководством инженера С. Е. Захарина. Над четвёртым этажом был сооружён фриз с декоративной лепкой. Центр фасада отмечен гербом домовладельца - дворянина А. М. Сомова. Скульптурное оформление фасада (лира, палитра, ваза, венок) соответствовало назначению дома. Здесь Сомовым были открыты различные детские учреждения: художественные курсы, школа, детский сад, библиотека, читальня М. Г. Генкель. В доме №15 издавался журнал "Детство".
С 1927 года до своей смерти 29 ноября 1940 года здесь в одной из трёхкомнатных квартир жил архитектор Н. А. Троцкий. Его часто навещали друзья и коллеги - художник А. Н. Самохвалов, архитекторы Л. М. Тверской, Д. П. Бурышкин, Т. Д. Каценеленбоген.
