રામ વિલાસ પાસવાનની પહેલી પત્નીનું નામ રાજકુમારી છે, જેમની બે પૂત્રી છે, જ્યારે બીજી પત્નીનું નામ રીના શર્મા પાસવાન છે, જે પંજાબી બ્રાહ્મણ છે, તેમને એક પુત્ર ચિરાગ પાસવાન અને એક પુત્રી છે.