Några minuter irrade jag omkring utanför slottet utan att kunna besluta mig för att gå in.