Selv om «Don't Fence Me In» var én av de mest populære sangene i sin tid, hevdet Porter at det var hans minste favoritt blant hans komposisjoner.