已有服务器有pytorch以及10的cuda版本
然后打算在服务器上运行transforms的example
文档
基于github库的文档进行配置
上传数据
安装transformers
运行预处理代码
在这个过程里会遇到若干的报错,某些包没有装,补上即可
随后在一阵子光速滚屏后开始下载预训练模型
网速不太理想。。。
成功运行
Item | value |
---|---|
F1 | 0.8567 |
loss | 0.0698 |
precision | 0.8547 |
recall | 0.858853 |
部分问题
直接使用curl指令进行下载的时候会出现connect error的提示
可以使用自己的浏览器开梯子下载。
第一次我在本地直接改了文件名后上传服务器,出现了问题
后来只下载源文件,然后利用
cat Ner-train.tsv | grep -v “^#” | cut -f 2,3 | tr ‘\t’ ‘ ‘ > train.txt.tmp代替原指令解决