Mens han var midt i promoteringen og turneene i 1999, begynte Williams også arbeidet med sitt tredje studioalbum. Den første singelen fra dette kommende albumet var "Rock DJ", som var inspirert av Williams' UNICEF-mentor, den avdøde Ian Dury. Musikkvideoen, som ble regissert av Fred & Farid, fremstilte Williams i en oppsiktsvekkende setting hvor han forsøkte å tiltrekke seg oppmerksomhet fra en gruppe kvinner. Videoen inneholdt en kontroversiell scene hvor han først ble avkledd, og deretter ble det revet biter av hud og muskler fra kroppen hans.