NER商品分类

发布时间 2023-10-23 10:16:49作者: byxiaobai

原理:让算法“读”懂二手商品 —— 闲鱼二手属性抽取算法 - 知乎 (zhihu.com)

现成的模型:RaNER命名实体识别-中文-电商领域-细粒度-base · 模型库 (modelscope.cn)

运行的时候,云端可以正常运行,但是本地报错:ModuleNotFoundError: No module named 'transformers.activations'

尝试更改了tensorflow的版本,报错不变。

尝试更改python版本

3.8.16:PythonWindows/3.8.16 at master · adang1345/PythonWindows · GitHub

在notebook的内核中创建一个新环境:

pip3 install ipykernel 

python -m ipykernel install --user --name paddle_env --display-name paddle_env

在格子里运行:

!pip3 install tensorflow==2.13.0,安装tensorflow

!pip3 install torch==2.0.1

!pip3 install transformers==4.34.0

!pip3 install modelscope==1.9.3

此时,在本地运行import  transformers.activations,不再报错

新报错:ModelForTokenClassificationWithCRF: cannot import name 'GenerationMixin' from 'transformers.generation'

测试代码:from transformers.generation import GenerationMixin

重启了一下notebook,发现居然能用了