De una familia prospera, Villoresi pudo costear la adquisición de un automóvil para participar en rallies locales a la edad de 22 años con un Lancia Lambda y pocos años después adquirió un Fiat Balilla con el que participó junto con su hermano en la carrera Mille Miglia.