几个nlp的小项目(文本分类)

几个nlp的小项目(文本分类)

  • 导入加载数据类、评测类
  • 查看数据集
  • 精确展示数据
  • 测评方法
  • 设置参数
  • tokenizer,token化的解释
  • 对数据集进行预处理
  • 加载预训练模型进行训练
  • 设置训练模型的参数
  • 一个根据任务名获取,测评方法的函数
  • 创建预训练模型
  • 开始训练
  • 本项目的工作完成了什么任务?

导入加载数据类、评测类

load_dataset: 加载数据集
load_metric:加载评测类

几个nlp的小项目(文本分类)_第1张图片

查看数据集

几个nlp的小项目(文本分类)_第2张图片

精确

你可能感兴趣的:(人工智能学习,自然语言处理,分类,人工智能)