Basta acessar os detalhes da comunidade e na seção Participantes, clique em 'Remover' em cima do participante que não deseja mais fazer parte da sua comunidade.