家族将其转售给了赵氏；光绪七年（1881年），赵氏家族将其转售给力航海贸易家郭绅，现仍为郭氏后裔私宅。文化大革命时，其大厅中被工厂占用，而且工厂设计并不合理，10余米高的砖墙大约开裂了20余厘米，破坏严重。此后书隐楼西部新建的房屋导致整座建筑地基下沉，封火墙开裂，房屋倾斜，但后方的双层楼房仍然完好无损。20世纪50年代，北京建筑科学院太湖流域居民调查组的工作人员曾参观过书隐楼，他们认为这样精致的民间宅第在太湖流域很罕见。1987年，上海市人民政府将书隐楼列为了市级文物保护单位，1995年，区人民政府对其