Efter en stund började han vända tillbaka mot slottet.