使用single_gpu训练报错TypeError: __new__() got multiple values for argument data_id

[what-is-perfect]

使用single_gpu训练报错TypeError: __new__() got multiple values for argument data_id

[what-is-perfect]

我想我找到了原因，目前正在做测试：我的训练是在Docker中进行的，由于前期没有设置（共享内存）shm-size，所以我的container中shm-size=64M，当高速读数据时，可能导致上述错误。shm-size可通过df -h查询，其为shm行，我扩大为原size100倍，目前尚未报错。相关修改方式可参考：https://blog.csdn.net/weixin_44966641/article/details/123930747。
如有相同报错，烦请在我表明完成验证后再做修改

[what-is-perfect]

很遗憾不是上面的问题，有知道出发这个问题的原因和解决方法的朋友吗？烦请帮忙解答一下，谢谢！！！

[sserdoubleh]

可以确认下数据格式，是不是\t的数量有异常，数据里面包含\t字符

[what-is-perfect]

我模拟了整个数据读入的过程，数据读取程序没有问题，然后按照**@sserdoubleh的方案，检查了数据文档，原因是原始数据中使用了**医药聊天数据，从其中按列读取的数据仍有部分包含额外的table符号，因此在模型训练时触发上述错误，先基本确认解决问题，感谢@sserdoubleh**