Усадьба основана дворянской семьей Семёна Ерофеевича Алмазова. В 1800-1819 годах усадебный комплекс принадлежал роду Демидовых. Семья Демидовых создала в Алмазном уникальный комплекс построек, названный усадьбой Алмазово. Главным украшением усадьбы был парк с удивительной красоты прудами, лабиринтом и островами.