На месте сгоревшего усадебного дома в 1912–1914 годах началось строительство нового Большого дворца. Проект создал архитектор С.С. Кричинский, чьим братом И.С. Кричинским управлялось парголовское имение. По воспоминаниям старожилов, будущий дворец Воронцовых-Дашковых планировали подарить царевичу Алексею.
Здание выполнено в неоклассическом стиле с элементами модерна. Двухэтажный дворец увенчан куполом на барабане, украшенным кольцевой колоннадой из дорических колонн. Центральная часть главного фасада акцентирована портиком из шести массивных дорических колонн.
Цоколь, лестницы и террасы выполнили из серого финляндского гранита, внутренние лестницы — из вазалемского известняка и уральского мрамора. Скульптурное оформление (лепные венки, фризы, гранитные львы у подъезда) выполнено по моделям скульптора А.Т. Матвеева.
Интерьеры, за исключением модерновых плафонов под куполами, были завершены лишь в 1926 году, когда здание передали под дом отдыха для работников пищевой промышленности.