В 1838-1840 гг. архитектор А.И. Штакеншнейдер переоборудовал здание бывшей кухни под жилье для великих князей. Николай и Михаил находились здесь с воспитателями — генералом Философовым и бароном Корфом.
Позднее здесь жили сыновья Александра II: великие князья Сергей, Павел и Владимир.