Den årliga tillväxten av antalet fysiska personer med F-skatt har varierat under åren .