Дом № 4 по Большому Кисловскому переулку с кариатидами на третьем этаже до 1884 г. был небольшим двухэтажным домом с мезонином и принадлежал купеческой семье Коншиных. На него обратила внимание Зинаида Денисовна Перепелкина, решившая перевести свою Частную женскую классическую гимназию из Немецкой слободы поближе к центру. Ей удалось убедить владельцев надстроить его двумя этажами и устроить на втором этаже большой актовый зал. Слева от дома был большой сад, в котором гуляли гимназистки.