【转载】Simple AI——Huggingface NLP笔记

【转载】Simple AI——Huggingface NLP笔记

基于Pytorch的Huggingface NLP初级教程八篇笔记:

官方教程网址

本期内容对应网址

本系列笔记的GitHub Notebook(可下载直接运行)

笔记1:直接使用pipeline,是个人就能玩NLP

笔记2:一文看清Transformer大家族的三股势力

笔记3:Pipeline端到端的背后发生了什么

笔记4:Models,Tokenizers,以及如何做Subword tokenization

笔记5:attention_mask在处理多个序列时的作用

笔记6:数据集预处理,使用dynamic padding构造batch

笔记7:使用Trainer API来微调模型

笔记8:使用PyTorch来微调模型

你可能感兴趣的:(Coding,NLP,Deep,Learning,pytorch,python)