Det er sannsynlig at det var i dette tårnet Elizabeth I satt som prinsesse under Maria I. Tårnet var i det 18. århundre kjent som Queen Elizabeth's Tower, og standarden var høy nok for en prinsesse som ikke var fengslet for forræderi, men som måtte holdes vekk for at hun ikke skulle konspirere.