LLM 基础-transformers 库快速入门

• 一，Transformers 术语
  • 1.1，token、tokenization 和 tokenizer
  • 1.2，input IDs
  • 1.3，attention mask
  • 1.4，bos_token、eop_token、pad_token、eos_token
  • 1.5，decoder models
  • 1.6，架构与参数
• 二，Transformers 功能
  • API 概述
• 三，快速上手
  • 3.1，transformer 模型类别
  • 3.2，Pipeline
  <