Gaspar de Guzmán y Pimentel nació en Roma, donde su progenitor, Enrique de Guzmán, conde de Olivares, era embajador de España.