夏，张学良招待调查九一八事变的国联调查团时，“德国府”是美国代表住处，调查团团长李顿住三号楼。常住两楼的刘少奇本着为国家节约的精神，一直不同意管理处翻修两楼的建议，管理处只能稍事修补防止漏雨。当时刘少奇的几个子女成家或工作后都不常住中南海家中，刘允斌、刘爱琴还调到外地，所以全家多只能在夏季休养时才在北戴河团圆，两楼可容全家及工作人员住下。二号楼和三号楼和前面的一号楼、六号楼、七号楼都属于中央办公厅北戴河管理处划分的二区。四号楼和五号楼与二号、三号楼邻近。四号楼由朱德及家人居住，原名吴家楼，被誉为“西山第