ખલીનો જન્મ એક રાજપૂત પરિવારમાં થયો હતો અને તેનું મૂળ વતન હિમાચલ પ્રદેશમાં આવેલું એક નાનકડું શહેર ધીરૈના છે.