我是通过中介进入工厂做小时工的。辞职了,工厂按照17块钱一个小时给我发放工资。但是工资要打到中介卡那里,然后中介给我发。现在中间要把我的工资扣了,只有100多块钱,我该怎么办?