已有服务器有pytorch以及10的cuda版本
然后打算在服务器上运行transforms的example

文档

基于github库的文档进行配置
image.png

上传数据

image.png

安装transformers

image.png

运行预处理代码

image.png

在这个过程里会遇到若干的报错，某些包没有装，补上即可
随后在一阵子光速滚屏后开始下载预训练模型
网速不太理想。。。
image.png

成功运行

image.png

image.png

image.png

Item value
F1 0.8567
loss 0.0698
precision 0.8547
recall 0.858853

image.png

部分问题

直接使用curl指令进行下载的时候会出现connect error的提示
可以使用自己的浏览器开梯子下载。
第一次我在本地直接改了文件名后上传服务器，出现了问题
后来只下载源文件，然后利用
cat Ner-train.tsv | grep -v “^#” | cut -f 2,3 | tr ‘\t’ ‘ ‘ > train.txt.tmp代替原指令解决