国内HuggingFace,预训练模型镜像使用

 

Hugging Face Transformers 是自然语言处理领域的重要开源项目,提供了基于通用架构(如 BERT,GPT-2,RoBERTa)的数千个预训练模型,并提供了 PyTorch 和 TensorFlow 的良好互操作性。

我们镜像了 Hugging Face Model Hub,为国内用户下载预训练模型数据提供便利。

使用方法

注意:transformers > 3.1.0 的版本支持下面的 mirror 选项。

只需在 from_pretrained 函数调用中添加 mirror 选项,如:

AutoModel.from_pretrained('bert-base-uncased', mirror='tuna')

目前内置的两个来源为 tuna 与 bfsu。此外,也可以显式提供镜像地址,如:

AutoModel.from_pretrained('bert-base-uncased', mirror='https://mirrors.tuna.tsinghua.edu.cn/hugging-face-models')

或者直接去清华镜像上下载:

https://mirrors.tuna.tsinghua.edu.cn/hugging-face-models/hfl/

国内HuggingFace,预训练模型镜像使用_第1张图片

你可能感兴趣的:(自然语言处理,人工智能)