થોડા સમય પછી પાદરીઓ સાથે અથડામણ એટલી ખતરનાક બની કે ખૈમમને મક્કા (પહેલેથી જ મધ્યમ-વૃદ્ધ વર્ષોમાં) માટે મુશ્કેલ અને લાંબી યાત્રા કરવા માટે ફરજ પડી.