HuggingFace簡明教程補(bǔ)充篇,加載本地?cái)?shù)據(jù)文件,trainer的使用.


加載數(shù)據(jù)集,huggingface把數(shù)據(jù)加載在谷歌云盤


加載保存

讀寫CSV

不同數(shù)據(jù)集有不同格式

json格式文件




加載模型

定義評(píng)價(jià)函數(shù)

定義訓(xùn)練器并測試

初始正確率

訓(xùn)練

測試

保存模型參數(shù)

使用訓(xùn)練好的模型參數(shù),首先定義測試集


測試

標(biāo)簽: