Здание первого детского приюта было возведено на средства, собранные купцами, дворянами и другими неравнодушными людьми, чтобы помочь сиротам. Внутреннее убранство отличалось изяществом. В приюте проживали 40 мальчиков, которым преподавали грамоту и ремесла. Кроме того, сюда приходили учиться ещё 30 мальчиков из небогатых семей.
В 1875 году здание было расширено по проекту архитектора Ивана Кострюкова, добавлены пристрои и третий этаж. Приют функционировал до 1917 года, после чего здание использовалось для различных нужд, включая размещение биржи труда и поликлиники. К юбилею города фасадам здания вернули исторический облик, что подчеркивает его культурное значение и важность для сохранения исторической памяти.