Su padre, José Antonio Torroja Cavanillas, II marqués de Torroja, es un prestigioso ingeniero de caminos, al igual que su abuelo Eduardo Torroja Miret, I marqués de Torroja, y quizá el mayor especialista mundial de su tiempo en construcción en hormigón.