可是今天劳务派遣给我打电话来要我把银行卡跟ATM的交易密码给他,我该怎么办？

你可以进行微信申诉，用短信验证的方法可以从新设置支付密码。最好绑定一张银行卡。
1、登陆微信,查看自己微信余额，不需要绑定银行卡的，选择“我”，如图所示：
2、选择“钱包”-进入钱包界面，点击右上角的竖三点，如图所示：
3、选择 “常见问题”，如图所示：
4、选择 “微信支付”-选择“忘记微信支付密码如何找回”，如图所示：
5、然后进入问题详情 页面，往下拉 你会看见在最后 有“联系客服”，点击它，如图所示：
6、然后 填写相关信息 当初绑定的银行卡 卡号后四位、持卡人姓名、证件号码、预留手机以及问题描述等（注意：粉色标注必须填写正确）。

劳动者要先和用人单位协商，如果协商无法解决，则可以通过以下法律途径来解决：
（1）向当地劳动保障监察机构投诉举报；
（2）向当地劳动争议仲裁委员会申请仲裁，需要注意的是，要在劳动争议发生之日起一年内向劳动争议仲裁委员会提出书面申请；
（3）通过诉讼途径解决。