几个nlp的小任务(抽取式问答)

几个nlp的小任务(抽取式问答)

  • 安装库
  • 抽取式问答介绍、SQuAD数据集
  • 初始化参数
  • 加载、导入数据集
  • 查看数据集示例
  • 加载tokenizer
  • 对长文本处理的演示
  • 对答案的位置进行验证
  • 整合刚才的步骤
  • 对数据集中的数据进行预处理
  • 加载微调模型
  • 设置args 参数
  • 使用数据清洗
  • 设置训练函数,开始训练

安装库

几个nlp的小任务(抽取式问答)_第1张图片

抽取式问答介绍、SQuAD数据集

几个nlp的小任务(抽取式问答)_第2张图片

初始化参数

你可能感兴趣的:(人工智能学习,自然语言处理,人工智能)