सन 2004 में मुखिया आनंद मोहन ने अपनी पार्टी का कांग्रेस के साथ विलय कर दिया. इस के बाद ब्रजेश ठाकुर के चुनाव लड़ने के रास्ते बंद हो गए, लेकिन उस की आनंद मोहन से नजदीकी बरकरार रही. साथ ही राजद और जदयू नेताओं के साथ भी उस का उठनाबैठना जारी रहा.