લેબર પાર્ટીને ભારતીય, કેરેબિયન અને આફ્રિકન મતદારોના સમર્થનમાં ઘટાડો