Sus padres eran Edward Gilbert, militar británico, y Eliza Oliver, que tan solo tenía 15 años cuando tuvo a Lola.