Rinto Harahap

Pada tahun 1972, The Mercy’s memutuskan hijrah ke Jakarta. Bermula dari datangnya dewa penolong dari "tulang" ‘Herman Tobing (adik Ibu dari Erwin & Rinto Harahap). Ia menyurati mereka dan mengajak pindah ke Jakarta, berjanji akan mencarikan tempat wadah bermusiknya. Charles, Rizal, dan Rinto memanfaatkan kesempatan tersebut pertama kali. Erwin bersama Reynold pun bergabung dengan formasi yang telah lebih dulu merintis manggung di Jakarta, karena harus menyelesaikan masalah administrasi di Medan. Pada mulanya di ibukota mereka masih tampil di beberapa kelab malam, membawakan lagu-lagu yang mereka ciptakan sendiri. Kemudian mereka mengisi serangkaian show secara berkala di empat tempat, seperti Tropicana, LCC, Paprica, dan Mini Discotique. Kesempatan baik ini dimanfaatkan betul oleh The mercy’s dengan memperkenalkan lagu ciptaan mereka seperti ‘"Untukmu", "Hidupku sunyi", "Love" dll. Di tempat terakhir inilah, The Mercy's mampu menembus dominasi band asal kota-kota besar, seperti Jakarta dan Bandung. Mereka yang datang dari sebuah band lokal asal Medan menjadi band nasional sejajar dengan The Rollies, Gipsy, dan The Pros. Setelah di Jakarta, pasang surut yang melanda blantika musik Indonesia juga dirasakan oleh The Mercy's hingga periode kesempatan memasuki dunia rekaman. Rizal Arsyad kemudian memilih mengundurkan diri karena hendak meneruskan sekolahnya ke Jerman. Kepemimpinan The Mercy’s pada saat itu pun beralih kepada Erwin Harahap.