Robert Dudley var en yngre sønn av John Dudley, 1. hertug av Northumberland, som i 1553 ble henrettet for høyforræderi etter å ha tatt del i forsøkte på å plassere Jane Grey på Englands trone. Lady Jane var gift med Roberts yngste bror, Guilford Dudley.