Etter første verdenskrig møtte man på problemer, i og med at de britiske landene trakk seg fra FIFA av den grunn at man nektet å spille mot sine tidligere fiender. Krigen var nesten årsak til slutten for FIFA, men man klarte å holde organisasjonen levende mye takket være nederlenderen Carl Hirschmann som ledet organisasjonen etter at Woolfall døde. I 1921 ble den meget innflytelsesrike Jules Rimet valgt til ny president etter Woolfall, og en av hans hovedoppgaver ble å få britene med i FIFA igjen. Men først etter 25 års diplomati kom de britiske landene tilbake som medlemmer i 1946.