Здание бумажной фабрики построили в конце XVIII века при владельце усадьбы Иване Лазареве как главный корпус Императорской бумажной фабрики. Проект создал Юрий Фельтен, строительство велось под руководством архитектора Сергея Берникова.
Постройка выполнена в стиле раннего классицизма: трёхэтажный фасад обращён к пруду, композиция строгая и симметричная, с портиками, фронтоном, арками и рустованными выступами. План здания — замкнутый квадрат с внутренним двором; окна различаются по этажам, а высокая коробовая кровля подчёркивает силуэт.
Фабрика стала важным местным предприятием: дала работу жителям окрестных деревень, рядом появилась рабочая слобода. Производство опиралось на энергию воды — систему прудов включили в технологическую схему, построили плотину со шлюзами и водяные сооружения для механизмов.
После революции фабрику национализировали, затем в 1939 году переоборудовали под трикотажное производство. В годы Великой Отечественной войны здание было разрушено, а в 1949–1956 годах восстановлено. С 1952 года здесь разместили научную базу рыбного хозяйства, использующую каскад прудов для разведения и сохранения редких видов рыб.