Походив з впливової родини Стаффордів, пов'язаної з родинами Невілів, Боунів, Бофорів, Ланкастерів, Йорків. Син графа Гамфрі Стаффорда та Маргарет Бофор. Вже у 1460 році стає герцогом Бекінгемом після загибелі діда Гамфрі Бекінгема у битві при Нортгемптоні. На відміну від останнього пітримав династію Йорків у Війні Червоної та Білої троянд. Для зміцнення свого становища одружується з Кетрін Вудвіл, сестрою Єлизавети Вудвіл, дружини Едварда IV, короля Англії. Надалі бере участь в усіх битвах на боці останнього — при Барнеті та Тьюксбері.