1、带着离婚协议书,身份证到女方户籍所在地派出所直接申请户口迁移。2、如果不成功,带着身份证到女方户籍所在地派出所挂失户口本,然后补领一个新的户口本,在办理户口迁移手续
实践中这种情况确实没有太好的办法,因为申请户口迁移必须户籍本人去。建议你尝试一下去法院起诉申请法院协助强制执行,不过好像成功率不太高。