માર્ચ 1 964 માં, આંતરિક અને બાહ્ય દબાણ ખૂબ જ વધારે બન્યું અને માલ્કમ એક્સએ જાહેરાત કરી કે તે ઇસ્લામના રાષ્ટ્ર છોડીને જઇ રહ્યા છે, જે સંસ્થાએ તે વધવા માટે ખૂબ મહેનત કરી હતી.