Su padre, John Frederick Bridgetower, era probablemente de Barbados) y sirviente del Príncipe Nicolás Esterházy de Hungría (patrono de Joseph Haydn), aunque él declaraba ser un príncipe africano.