От Садовой улицы дворец отделяет изящная ограда, выполненная из чугунного литья. Главный трёхэтажный корпус дворца расположен в глубине двора. Вперёд вынесены два симметричных двухэтажных флигеля. В центре расположена большая въездная арка. Позже она была заложена и превращена в крыльцо. Во дворце более 50 парадных залов и помещений. В конце 18 века во дворце была устроена церковь, а со стороны сада пристроена Мальтийская капелла.