FinGPT 数据集生成错误：在生成数据集时发生错误

px9o7tmv 于 9个月前发布在其他

关注(0)|答案(1)|浏览(182)

生成训练集分割的代码出现了错误。错误信息如下：

AttributeError: 'ChatGLMTokenizer' object has no attribute 'tokenizer'

这个错误是由于在ChatGLMTokenizer类中没有找到tokenizer属性导致的。为了解决这个问题，你需要检查ChatGLMTokenizer类的定义，并确保其中包含了tokenizer属性。
从生成器创建数据集时出错。

1条答案

在代码开头添加以下内容：

!pip install protobuf transformers==4.30.2 cpm_kernels torch>=2.0 gradio mdtex2html sentencepiece accelerate