早年.加斯帕尔于1587年出生于罗马，其父奥利瓦雷斯伯爵来自于西班牙最古老的贵族家庭之一，当时正担任西班牙驻罗马大使。他那名门闺秀的母亲很早就过世了，他就在父亲严厉的要求下被抚养长大。他早年攻读宗教课程，1599年在西班牙进入萨拉曼卡大学，在1601～1604年间陆续获得法律、神学和文学的学位，他成为文笔优美、才气无双的顶级人才。兄长去世以后，他放弃塞维利亚的神职，前往当时西班牙王宫所在地瓦拉多利德与父亲一起生活。1607年加斯帕尔与王后玛格丽特的侍女多娜因斯·德朱尼亚-贝拉斯科