挂失你的银行卡是可以的,毕竟电话银行挂失只需要身份证号。不过取走你的钱可能性就不大,就算他办理挂失补卡及密码也是需要身份证的,一般正规的银行对于身份证识别都还是有一定保证的,假的极少能蒙混过关的。建议你到营业网点更新完善自己的信息,这样在核对身份时可以有更进一步的保证。