Han har blitt framstilt som noe tilbakestående. Det hviler kun på en samtidig kilde, Edward Hall, som hevdet at Edward ble fengslet så lenge, «uten selskap fra menn og fra dyr, så mye at han ikke var i stand til å skille en gås fra en kapun.» Det kan like gjerne være at han generelt manglet stimulans og utdannelse slik som et hvert barn ville ha blitt som ble holdt avsondret og fengslet.