1972년에 에드워드 히스 총리가 유럽 경제 공동체(EEC)에 가입하자 파월은 크게 반대하면서 히스 내각과 충돌을 빚었다. 이후 1974년 2월 총선 5일 전인 1974년 2월 23일에 보수당을 탈당하였다. 그는 탈당 과정에서 보수당이 EEC에 가입함으로써 큰 사태가 우려된다고 역설하면서 EEC 탈퇴를 조건으로 노동당 지지 선언을 하였다. 이는 국수주의 진영을 대표한다고 여겨졌던 파월의 지지자들에게 충격을 주었다. 선거 결과는 헝 의회였으며, 전 총리였던 해럴드 윌슨이 다시 총리에 취임하게 되었다. 이후 같은해 치러진 10월 총선에서 그는 북아일랜드에서 활동하는 얼스터 연합주의자당에 입당해 사우스 다운 선거구에 출마해 당선된다. 다음해 치뤄진 영국의 EEC 탈퇴를 놓고 전개된 국민투표에서 그는 탈퇴 진영의 대표 주자로 움직였다. 그러나 국민투표는 EEC 잔류로 결정된다.