Til tross for et lykkelig ekteskap, hvor han som nevnt fikk tretten barn, var Edvard en beryktet kvinnebedårer. Hans elskerinne Alice Ferrers ble etter Philippas død i 1369 beryktet, og hennes navn ble et slanguttrykk for korrupsjon.