Основная часть усадьбы относится к первой половине XVIII века. На плане 1753 года здесь уже стоят двухэтажные палаты коллежского советника С. Е. Молчанова. В конце XVIII века участком владеет тайный советник Н. Н. Салтыков, подаривший его дочери, вышедшей замуж за князя Я. И. Лобанова-Ростовского. В начале XIX века усадьба переходит к князю Д. И. Лобанову-Ростовскому, министру внутренних дел.
После пожара 1812 года владение за 95 тысяч приобретает историк, автор "Истории Малой России" и "Словаря достопамятных людей Русской земли" Д. Н. Бантыш-Каменский. Он перестроил дом с большим вкусом: типичный ампирный особняк с выступающими в сторону улицы массивным центральным и двумя плоскими боковыми ризалитами. Принципиально эта структура сохранилась до сих пор. На уровне второго парадного этажа центральный ризалит был украшен портиком с фронтоном.
В 1824 г. усадьбу покупает П. Б. Огарев, отец поэта и революционного деятеля Николая Огарева. В этом доме часто собирался кружок прогрессивно мыслящей молодежи, в который входили А. И. Герцен, В. В. Пассек и другие. В 1834 г. кружок разгромили, а его участники были арестованы и жестоко наказаны.
Источник: Узнай Москву