उनके स्वयं के कार्यों और उनके संरक्षकों की परस्पर विरोधी जानकारी के कारण उनकी सही जन्म तिथि के बारे में भ्रम है। वह गणपति ठाकुर के पुत्र थे, एक मैथिल ब्राह्मण जिसे शिव का बहुत बड़ा भक्त कहा जाता है। वह तिरहुत के शासक राजा गणेश्वर के दरबार में एक पुरोहित थें। उनके परदादा देवादित्य ठाकुर सहित उनके कई निकट पूर्वज अपने आप में उल्लेखनीय थे, जो हरिसिंह देव के दरबार में युद्ध और शान्ति मंत्री थे।