Двухэтажное здание приюта было построено на средства Крестовоздвиженского братства и добровольные пожертвования многих горожан. Княжна Л.П. Кугушева пожертвовала в качестве места для строительства корпуса приюта собственную усадьбу. Для здания был выбран стиль эклектики с множеством интересных архитектурных деталей. По традиции того времени на втором этаже задания была обустроена домовая церковь. В училище воспитывались дети преимущественно крестьянского сословия со всех уголков Тамбовской губернии. После установления советской власти здание приюта постепенно пришло в упадок, однако в 80-е годы усилиями энтузиастов здание удалось восстановить. Все помещения были полностью отремонтированы и приспособлены для нужд музыкально-педагогического процесса. Помещение бывшей домовой церкви превратилось в концертный зал. Как утверждают специалисты, этот концертный зал обладает уникальными акустическими характеристиками. Сейчас здание приюта занимает Тамбовский колледж искусств.