Pondok Pesantren Daar El-Qolam

Masa-masa awal pendidikan pondok dilaluinya dengan berbagai kesulitan dan keterbatasan sarana. Namun, dengan keterbatasan itu tidak menghalanginya untuk terus berbuat. Rifai tetap konsisten dengan niatnya. Daar El-Qolam mulai menampakkan perkembangannya, pada tahun 1983. Jalinan silaturahminya dengan K.H. Muhammad Natsir, seorang ulama kharismatik Indonesia, banyak membantu Rifai, sehingga dia membantu Rifa'i untuk mendapatkan bantuan dana dari Arab Saudi.