至1912年夏，为两层西式建筑。红楼位于白楼西侧，原为清政府迎接德国皇太子威廉来杭而建造的国宾馆，建于清光绪三十二年（1906），亦为两层西式建筑，平面为正方形，四周设有回廊，廊柱间以拱形墙饰连接。青白山居又称“杨虎大楼”，建于孤山之巅，原为上海警备司令杨虎的别墅，由胡钊设计，建于1936年5月至次年1月，主楼为三层建筑，墙体、围栏为西式风格，屋顶则采用中式歇山顶，1953年由政府收购并归浙江图书馆使用，1954年3月起用于保存《四库全书》文澜阁本以及善本书，2002年4月《四库全书》文澜阁本又移入曙光路总