В конце XVIII века обширное владение на склоне Гостиной горы, по верхней бровке которой ныне пролегает улица Воронцово Поле, принадлежало Григорию Потемкину. После смерти князя оно перешло в казну. А позже было пожаловано князю А.Безбородко в возмещение переданного им Павлу I дворца в Немецкой слободе. Александр Андреевич хотел построить здесь усадебный дом с парком и заказал проект дома зодчему Дж.Кваренги, а парка – архитектору Н. Львову. Но если парк разбить успели (его остатки сохранились до сих пор), то дворец так и не был возведен: Безбородко умер. Вскоре огромная усадьба была разбита на небольшие участки и продана с торгов.