HuggingFace自然语言处理详解共0篇
HuggingFace自然语言处理详解
中文情感分类-五八三

中文情感分类

本文通过ChnSentiCorp数据集介绍了文本分类任务过程,主要使用预训练语言模型bert-base-chinese直接在测试集上进行测试,也简要介绍了模型训练流程,不过最后没有保存训练好的模型。 一.任务和...
admin的头像-五八三admin2年前
0190
使用训练工具-五八三

使用训练工具

HuggingFace上提供了很多已经训练好的模型库,如果想针对特定数据集优化,那么就需要二次训练模型,并且HuggingFace也提供了训练工具。 一.准备数据集1.加载编码工具 加载hfl/rbt3编码工具如下...
admin的头像-五八三admin2年前
0100
使用编码工具-五八三

使用编码工具

本文主要介绍了对句子编码的过程,以及如何使用PyTorch中自带的编码工具,包括基本编码encode()、增强编码encode_plus()和批量编码batch_encode_plus()。 一.对一个句子编码例子 假设想在要对句...
admin的头像-五八三admin2年前
0170