В XVIII в. на участке располагались только деревянные постройки. В первой четверти XIX в. рядом с деревянным особняком был возведен трёхэтажный каменный дом в стиле классицизм.
В 1830-х гг. Общество поощрения художеств арендовало квартиру в этом доме. Она была переоборудована под учебные классы, где располагались два зала с копиями античных статуй.
В 1870-1875 гг. в утраченном дворовом флигеле квартиру снимал известный художник Н.Н. Ге.
В 1830-1850 гг. домом владела семья подполковника Костюрина, затем жена чиновника Ракитина, в 1860-1870 гг. семья капитана 1-го ранга Христофорова, с 1870-х гг. и до революции — барона Фан дер Ховен.