Дворец был построен по заказу княгини З.И. Юсуповой под руководством архитекторов Г. Боссэ и Л. Бонштедта. Последний дореволюционный владелец особняка - правнук Зинаиды Ивановны Феликс Юсупов (младший).
В 1908 году здание было отдано в аренду Театральному клубу. Во время Первой мировой войны здесь работал госпиталь, после 1917 года - Польский дом просвещения, с 1934 года - Дом политического просвещения. В 1950 году здание было передано в распоряжение общества «Знание». С 1994 года здесь же находится Институт внешнеэкономических связей, экономики и права.
В 2023 г. здание передали в оперативное управление государственному музею "Исаакиевский собор". В течение двух лет после передачи планируется подготовить проект реставрации и пройти экспертизу, дабы восстановить дворец в его былом великолепии и сделать общедоступным для посетителей.