Deras nya grannar kom från andra länder , först som arbetskraft , senare som flyktingar .