Music critics reviewing the song noted that "The Only Exception" was a different musical theme for the band.
Kritikus meninjau lagu mencatat bahwa "The Only Exception" adalah tema musik yang berbeda untuk band.