I april 2004 forlot Ford Gucci-gruppen etter at han og CEO Domenico de Sole, som blir omtalt som Fords partner i Guccis suksess, ikke klarte å bli enige med sjefen for Pinault Printemps Redoute over kontrollen av Gucci-gruppen.. Han har siden omtalt hendelsen som «knusende» og som en «midtlivskrise» fordi han hadde «lagt alt i det i 15 år». Da Ford forlot selskapet i 2004, var Gucci-gruppen verdsatt til 10 milliarder dollar. Fire personer ble ansatt for å dele på arbeidet som Ford hadde gjort.