Принадлежал семье Есыревых — известным в городе купцам, занимавшимся торговлей и общественной деятельностью. Дом служил не только жилым помещением, но и местом для приёма гостей и ведения дел. Сегодня Дом Есыревых является объектом культурного наследия.