В начале XX века дети Алексея Михайловича преобразили усадьбу, придав ей черты неоклассики. Фасад украсили лепниной, а также белокаменными полуколоннами ионического ордера, выполненными из дерева и покрытыми штукатуркой. Здание особняка представляет собой двухэтажное каменное здание с бирюзовыми стенами, украшенными белоснежной колоннадой. Усадьбу можно разделить на три зоны: парадную, служебную и жилую.
Первушин Алексей Михайлович был купцом II гильдии, почётным гражданином города.
13 ноября 1989 г. в усадьбе открыт Александровский художественный музей.