Nach dem Sturz der DP von Adnan Menderes durch den Militärputsch in der Türkei 1960 war Bölükbaşı als Repräsentant der CKMP Mitglied der Verfassunggebenden Versammlung ("Kurucu Meclis"). Bölükbaşı sah den Putsch als gerechtfertigt an. Bei den Wahlen 1961 gewann er diesmal ein Mandat für Ankara, verweigerte aber in seiner typischen Art und Weise eine Koalition mit der CHP. Er verließ 1962 mit 28 Abgeordneten wegen interner Streitigkeiten die CKMP und gründete im Juni 1962 die Millet Partisi wieder. Später wurde Bölükbaşı Koalitionspartner der CHP İsmet İnönüs. 1965 wurde die MP Teil der Regierung von Ministerpräsident Suat Hayri Ürgüplü aus der Gerechtigkeitspartei (AP). Bölükbaşı selbst wurde kein Kabinettsmitglied und kritisierte weiterhin die Regierung. Seine ehemalige Partei CKMP änderte im Februar 1969 ihren Namen in Partei der Nationalistischen Bewegung (MHP) um.