Здание дворца выполнено в стиле средневекового замка. Единственное в России дворцовое сооружение в стиле романтического классицизма. Замок со всех сторон был окружён водой: Фонтанкой, Мойкой и двумя специально вырытыми каналами. Соединялся замок с внешним миром посредством цепного моста, который поднимался на ночь. Сейчас в отреставрированных залах замка действуют постоянные экспозиции – «История замка и его обитателей», «Античные сюжеты в русском искусстве» и др.
Потолки в парадных залах были расписаны известными художниками того времени: К. Скотти, А. Виги, Ф. Смуглевичем, И. Меттенлейтером.
Именно здесь снимали сцену знакомства аристократки Алисы и карманника Матвея на катке в «Серебряных коньках» с Юрой Борисовым.
История самого замка достойна экранизации: Павел I лично рисовал эскизы, строил 12 лет, а прожил всего 40 дней — в марте 1801 года императора убили заговорщики прямо в резиденции мечты. Эти события легли в основу фильма Виталия Мельникова «Бедный, бедный Павел».