利用 NLP 超能力：一步步介绍Hugging Face微调教程

导入必要的库

导入必要的库类似于为特定编程和数据分析活动构建工具包。这些库通常是预先编写的代码集合，提供广泛的功能和工具，有助于加快开发速度。开发人员和数据科学家可以通过导入适当的库来访问新功能、提高生产力并使用现有解决方案。

import pandas as pd
import numpy as np
from sklearn.model_selection import train_test_split


import torch

from transformers import T5Tokenizer
from transformers import T5ForConditionalGeneration, AdamW

import pytorch_lightning as pl
from pytorch_lightning.callbacks import ModelCheckpoint

pl.seed_everything(100)

import warnings
warnings.filterwarnings("ignore")