Brick Tower, Flint Tower og øverste etasje av Bowyer Tower ble gjenoppbygget i det 19. århundre. Det skal ha vært i Bowyer Tower at George Plantagenet, 1. hertug av Clarence ble henrettet eller myrdet i 1478.