В 1740-е гг. дом принадлежал белгородскому губернатору П.М. Салтыкову. В 1832-1833-е гг. архитектор Г.Р. Цолликофер надстроил второй этаж. В 1836 г. в доме снимал квартиру крупный банковский служащий С.Н. Даргомыжский. С ним жил его сын, ставший известным композитором. Здесь он работал над оперой «Эсмеральда». В конце XIX в. - начале XX в. в здании располагался в ресторан «Бернар», в котором бывали художники А.И. Куинджи, Н.К. Рерих, А.А. Рылов.