Slottsruinen reser sig fortfarande som det stora frågetecknet midt i staden.