路线斗争，卡尔韦尔由于出身于天主教背景受到党魁H·V·伊瓦特的猜疑，虽然卡尔韦尔最后选择站在党魁一面，与反共派决裂，但一直无法得到党内左派信任。卡尔韦尔虽然留在党内但没有改变对党内共产分子不满的态度。1960年伊瓦特辞职后卡尔韦尔出任党魁，副手为高夫·惠特兰，在1961年大选中以微小票数落败，但在1963年受到公众对工党受工会控制的不满再度落选（当时工党政策由工会主导的联邦大会制定，党魁必须服从大会决议，一张报纸刊出卡尔韦尔与惠特兰在旅馆外等候电话通知两人大选政纲，表现工党领导层听从工会摆布而不是对选民