દરિદ્ર પણ હતો અને વળી બાપની છત્રછાયાથી દૂર હતો. પરંતુ મોટો બનીને એ બંગાળનો જ નહિ, આખા દેશનો મહાપંડિત ગણાયો. કેટલાક લોકો વિદ્વાન હોય છે, કેટલાક વિદ્યાના ભંડાર જેવા હોય છે, આ તો વિદ્યાનો મોટો દરિયો હોય એવો જ્ઞાની હતો. એટલે જ ઈતિહાસમાં એનું નામ ‘વિદ્યાસાગર’ તરીકે જાણીતું બન્યું છે.