cannot import name 'clean_up_tokenization'

[morizeyao]

cannot import name 'clean_up_tokenization'

[wanpower]

我直接删除掉之后可以训练，你可以试试，怀疑是因为pytorch_transformers.tokenization_utils的版本更新造成的，在我下载的版本里，clean_up_tokenization是一个方法，而只有类才可以import

[Morizeyao]

你们俩都遇到这个问题了吗？那可能确实是pytorch transformers更新导致的，我来想想办法

[wanpower]

你们俩都遇到这个问题了吗？那可能确实是pytorch transformers更新导致的，我来想想办法

是的，我也遇到了

[Morizeyao]

可以先退回1.0版本的pytorch transformers。我到家之后来修bug

[Morizeyao]

直接删掉就行了，我已经更新了代码。

[leemengtw]

@Morizeyao error 消失了，十分感謝！