Небольшая фабричная больница при Ярославской большой Мануфактуре существовала уже в 1881 году. В 1884 году она переехала в это большое здание. Для своего времени она была образцовым учреждением здравоохранения, а жалование местных врачей было самым большим в Ярославле. Ежедневный прием утром и вечером вели два врача. Два здания больницы были окружены парком. Некоторые старые дубы - свидетели той поры, можно встретить до сих пор. Наряду с собственно лечебными корпусами, в 1880-е годы рядом с больницей строят часовню. Рядом стояли одноэтажные деревянные бараки - в них помещали неизлечимо больных, а также людей, страдающих сифилисом. Кроме того, в бараках устроили своеобразный карантин. Там расположились койки для людей, пострадавших от различных эпидемий. Все здания больницы были оснащены по последнему слову техники. Уже в 1890-е в каждом корпусе был свой телефон, канализация и централизованное отопление. В наши дни, в этих зданиях по прежнему расположена больница им. Семашко.