પંડિતજીએ અનેક સ્ત્રીઓને પ્રેમ કરેલો, પરંતુ બે સ્ત્રીઓ એમની ખૂબ નજીક પહોંચેલી : પદ્મજા નાયડુ અને લેડી માઉન્ટબેટન.