Charles Burton känt för mist Middleham allt sedan deras första bekantflap.