Fra april 1934 til han i 1937 ble sparket av Mosley, fungerte Joyce som administrativ leder for BUFs West Sussex avdeling. Joyce fikk her støtte av Norah Elam, , og hennes samboer Dudley Elam som var leder for underavdelingen i Worthing. Under dette regimet ble West Sussex et knutepunkt for fascistisk aktivitet, verter for -sommerleirer, organisere møter og folkemøter, lunsjer osv. Norah Elam delte mange synspunkter med Joyce og jobbet med propagandataler for ham.