В первые годы строительства Петербурга здесь находился Морской рынок, но через 10 лет он был ликвидирован по требованиям пожарной безопасности. С 1768 года началось возведение четырехэтажного здания Вольного экономического общества. Современникам дом был более известен как дом Перкина. В 1846 году здание было полностью перестроено в формы позднего классицизма и передано Главному штабу.