1954年起，欧本海默每年都在属于美属处女群岛的圣约翰岛上居住数月。1957年，他买下了上面积为的一长条土地，在海滩上建了一座简朴的小屋。他时常都和妻子凯瑟琳和女儿托妮驾帆船。欧本海默对科学发明对人类的潜在威胁感到忐忑不安。他和阿尔伯特·爱因斯坦、伯特兰·罗素、约瑟夫·罗特布拉特等着名学者联手建立了一所学院，于1960年成为。值得一提的是，他在名誉受到打击之后，没有签署任何在1950年代反对核武器的重要公开信，如1955年的罗素-爱因斯坦宣言，也没有参加1957年的第一届帕格沃什科学和世界事务会议。欧