La capilla es un edificio asociado en particular con el monarca Enrique VI, ya que después de ser capturado por Eduardo IV en 1471 tras las Guerra de las dos Rosas, fue hecho prisionero en esta torre, y asesinado poco después.