В XIX веке главный дом входил в состав ансамбля городской усадьбы купцов Матвеевых. Наиболее раннее документальное свидетельство, касающееся данного владения, относится к концу XVIII века. По выявленным материалам 1796 года оно представляло собой двор с застройкой в его исторических границах. Согласно архивному плану, датированному 1838 годом, участок принадлежал московскому купцу Степану Матвеевичу Матвееву. Комплекс усадьбы, сосредоточенный в западной части территории, включал каменные и деревянные объемы; к восточной границе участка примыкал сад.