huggingFace 第12页

Stable diffusion 训练lora出现报错

方法如下：去huggingface下载预训练的基础模型到本地，复制模型的地址到红色框内并把黄色框里的文件改为版本相应的。二：报错Conne

仰望星空_5·2023-09-23 17:56

huggingface连接不上的解决方案

本文主要介绍了huggingface连接不上的解决方案，希望能对学习大模型的同学们有所

herosunly·2023-09-23 00:58

正确设置PyTorch训练时使用的GPU资源

背景：最近在使用HuggingFace的transformersapi来进行预训练大模型的微调，机器是8卡的GPU，当我调用trainer.train()之后，发现8个GPU都被使用了，因为这个机器上面还有其他人跑的模型

若石之上·2023-09-22 12:48

Hugging Face第一本中文书出版啦！

Datawhale分享学习生态伙伴：HuggingFace你能想象吗？下面这些精美绝伦的图片竟然都是AI自动生成的！图：书中插图没想到，AI界已经有如此炫酷的技术！

Datawhale·2023-09-22 07:23

《扩散模型从原理到实战》Hugging Face （二）

第二章HuggingFace简介本章无有效内容第三章从零开始搭建扩散模型有时候，只考虑事情最简单的情况反而更有助于理解其工作原理。

HitStuHan·2023-09-22 07:20

第十篇-Tesla P40+FastChat+Vicuna-13B-V1.5

部署环境系统：CentOS-7CPU:14C28T显卡：TeslaP4024G驱动:515CUDA:11.7cuDNN:8.9.2.26下载模型https://huggingface.co/lmsys/

木卫二号Coding·2023-09-21 16:56

第七篇-Tesla P40+ChatGLM2+P-Tuning

ptuning技术方案，使用少量数据测试下微调流程环境系统：CentOS-7CPU:14C28T显卡：TeslaP4024G驱动:515CUDA:11.7cuDNN:8.9.2.26模型文件https://huggingface.co

木卫二号Coding·2023-09-21 15:51

哈工大开源工具PyLTP的使用方法

下面上代码：importtorchfromltpimportLTP#默认huggingface下载，可能需要代理ltp=LTP(r"D:\Python3.8\Lib\site-packages\ltp\

Shy960418·2023-09-21 14:23

The Annotated Diffusion Model（翻译）

TheAnnotatedDiffusionModel（翻译）来源：https://huggingface.co/blog/annotated-diffusioncode:在这篇博文中，我们将更深入地研究去噪扩散概率模型

发呆的比目鱼·2023-09-21 11:01

微调预训练模型huggingface，transformers

首先加载YelpReviews数据集：fromdatasetsimportload_datasetdataset=load_dataset("yelp_review_full")dataset["train"][100]如您现在所知，您需要一个分词器来处理文本，并包括填充和截断策略来处理任何可变序列长度。若要在一个步骤中处理数据集，请使用Datasetsmap方法对整个数据集应用预处理函数：fro

CCCS实验室L&Y·2023-09-20 16:44

transformers Bert微调Trainer

参考：https://huggingface.co/docs/transformers/traininghttps://github.com/huggingface/transformers/blob/

loong_XL·2023-09-20 16:13

tokenizer的group_texts

Huggingface关于文本生成的官方教程里预处理部分我觉得写的不太清楚，推荐看

不当菜鸡的程序媛·2023-09-20 13:18

ChatGLM 如何应用一个BERT

前言接着上一小节，我们对Huggingface开源代码库中的Bert模型进行了深入学习，这一节我们对如何应用BERT进行详细的讲解。

张志翔的博客·2023-09-19 19:57

使用huggingface的accelerate库出现张量不在同一个设备的RuntimeError

报错如下RuntimeError:Expectedalltensorstobeonthesamedevice,butfoundatleasttwodevices,cuda:1andcuda:2!原因分析模型的层数过多时，可能有些层被分到了不同的GPU上解决方案首先打印看看自己的模型有哪些模块，比如WizardCoder-15B有这些主要模块no_split_module_classes=["Dro

CSU迦叶·2023-09-19 17:53

ChatGLM HuggingFace调用Bert词向量

张志翔的博客·2023-09-19 16:37

ChatGLM微调基于P-Tuning/LoRA/Full parameter（上）

1.准备环境首先必须有7个G的显存以上，torch>=1.10需要根据你的cuda版本1.1模型下载$gitlfsinstall$gitclonehttps://huggingface.co/THUDM

张志翔的博客·2023-09-19 16:11

激活函数之ReLU, GeLU, SwiGLU

GeLU：huggingface实现的bert里的标配激活函数。SwiGLU：目前很多大模型里的标配激活函数，如Google的PaLM，Meta的LLaMA等。

#苦行僧·2023-09-19 08:24

[linux]服务器挂代理提升下载权重速度

写在前面这里主要以huggingface下载权重为例，介绍如何在linux中部署代理提升下载速度实际操作第一步：服务器安装clash文件https://github.com/Dreamacro/clash

ultracool·2023-09-19 07:40

ChatGLM HuggingFace大语言模型底座

基础介绍HuggingFace是一家专注于自然语言处理（NLP）、人工智能和分布式系统的创业公司，创立于2016年。

张志翔的博客·2023-09-19 05:03

[AI绘画] 即插即用！SDXL+T2I-Adapters 高效可控的生成图片

LearningAdapterstoDigoutMoreControllableAbilityforText-to-ImageDiffusionModels论文：https://arxiv.org/pdf/2302.08453.pdf博客：https://huggingface.co

flyfor2013·2023-09-18 09:19

git clone报错Failed to connect to github.com port 443 after 21055 ms:

127.0.0.1:10085和gitconfig--globalhttps.proxyhttp://127.0.0.1:10085然后就可以成功gitclonehuggingface的数据集了如果是https://huggingface.co

小草cys·2023-09-18 06:01

qwen微调

#envapt-getupdateapt-getinstallgit-lfsgitinitgitlfsinstallmkdirQwencdQwengitclonehttps://huggingface.co

王多头发·2023-09-17 23:06

Hugging Face使用Stable diffusion Diffusers Transformers Accelerate Pipelines

DiffusersAlibrarythatoffersanimplementationofvariousdiffusionmodels,includingtext-to-imagemodels.提供不同扩散模型的实现的库，代码上最简洁，国内的问题是huggingface

linzhiji·2023-09-16 23:05

Huggingface:免费开源AI人工智能API工具平台

|【产品介绍】•名称Huggingface•成立/上线时间2016年•具体描述HuggingFace是一个开源的自然语言处理AI工具平台，它为NLP的开发者和研究者提供了一个简单、快速、高效、可靠的解决方案

Mr.长安·2023-09-16 21:58

华为开源自研AI框架昇思MindSpore应用案例：消噪的Diffusion扩散模型

Notebook实例二、案例实现构建Diffusion模型位置向量ResNet/ConvNeXT块Attention模块组归一化条件U-Net正向扩散数据准备与处理采样训练过程推理过程（从模型中采样）本文基于HuggingFace

Yeats_Liao·2023-09-16 08:59

stable diffusion的微调和lora微调代码版本

目前业界主流的sd训练基本都是基于diffusers和ldm的，这是huggingface的训练库，后者是stabilityai在compvis等机构的基础上完善的，我目前工作上推理一般采用webui架构

Kun Li·2023-09-16 06:14

淘天集团联合爱橙科技开源大模型训练框架Megatron-LLaMA

测试显示，在32卡训练上，相比HuggingFace上直接获得的代码版本，Megatron-LLaMA能够取得176%的加速；在大规模的训练上，Megatron-LLaMA相比较32卡拥有几乎线性的扩展性

阿里技术·2023-09-15 11:28

【AIGC】服务于人类｜一种新的人工智能技术

AIGC的自我介绍二、AIGC八大领头羊——生成式人工智能八大领头羊1.Character.AI2.OpenAI3.Midjourney4.StabilityAI5.Tome6.Anthropic7.HuggingFace8

山楂山楂丸·2023-09-15 08:26

基于Gradio/Stable Diffusion/Midjourney的AIGC自动图像绘画生成软件 - Fooocus

Focusonpromptingandgenerating作者：LvminZhanglllyasviel另一杰作ContorlNethttps://github.com/lllyasviel/ControlNet模型：https://huggingface.co

Entropy-Go·2023-09-15 08:54

Huggingface repo省心下载脚本

作者：小神弟弟链接：https://zhuanlan.zhihu.com/p/633861381来源：知乎著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。importdatetimeimporttimeimportsubprocessfromhuggingface_hubimporthf_hub_urlfromhuggingface_hub.hf_apiimportHfApif

Takoony·2023-09-15 02:27

Can‘t load the model for ‘stabilityai/sd-vae-ft-mse‘

Can’tloadthemodelfor‘stabilityai/sd-vae-ft-mse’.Ifyouweretryingtoloaditfrom‘https://huggingface.co/models

XD742971636·2023-09-14 23:14

python diffusers StableDiffusionXLPipeline 离线使用

下载sd_xl_base_1.0.safetensorshttps://huggingface.co/runwayml/stable-diffusion-v1-5/tree/main我这下载后放到项目models

linzhiji·2023-09-14 19:35

macbook安装chatglm2-6b

安装分两部分，一是github的源码，二是HuggingFace上的模型代码；安装过程跟着官方的readme文档就能顺利安装。

淡淡的id·2023-09-13 19:24

2.1模型controlnet1.1 更新bug修复

神米米·2023-09-13 14:03

多模态训练如何平衡不同模态

提前对其他模态进行预训练在使用文本预训练模型时，如huggingface的bert预训练模型，其他模态如视

taoqick·2023-09-13 12:32

【Stable Diffusion XL】huggingface diffusers 官方教程解读

01TutorialDeconstructabasicpipelineDeconstructtheStableDiffusionpipelineAutopipelineTrainadiffusionmodel相关链接：GitHub：https://github.com/huggingface

_Summer tree·2023-09-13 08:40

FastChat工作原理解析

在了解FastChat如何完成大模型部署前，先了解下Huggingface提供的Transformer库。

taoli-qiao·2023-09-13 04:09

Generative AI 新世界 | 大模型参数高效微调和量化原理概述

接下来的两期文章，我们将探讨如何利用HuggingFace的参数高效微调(PEFT)库和

亚马逊云开发者·2023-09-13 01:58

huggingface_hub.utils._validators.HFValidationError: Repo id must be in the form ‘repo_name‘ or ‘nam

huggingface_hub.utils.

风吹落叶花飘荡·2023-09-12 22:22

将huggingface数据库图片转为普通文件保存

将huggingface数据库图片转为普通文件保存fromdatasetsimportload_datasetdataset=load_dataset("wtcherr/LAION10K",split=

ReadyShowShow·2023-09-12 20:52

请体验一下falcon 180b 大语言模型的感觉

引言由TechnologyInnovationInstitute(T四训练的开源大模型Falcon180B登陆HuggingFace!Falcon180B为开源大模型树立了全新的标杆。

winfredzhang·2023-09-12 13:52

Stable Diffusion web UI 运行报错 Error while deserializing header: MetadataIncompleteBuffer

==============================================================================Downloading:"https://huggingface.co

码农小钢·2023-09-11 23:21

使用 Hugging Face Transformer 创建 BERT 嵌入

HuggingFace转换器库是创建独特句子代码和引入BERT的关键。学习目标充分掌握BERT和预训练模型。了解它们对于使用人类语言有多么重

TD程序员·2023-09-11 07:27

Huggingface简介及BERT代码浅析

本期的内容是结合Huggingface的Transformers代码，来进一步了解下BERT的pytorch实现，欢迎大家留言讨论交流。Hugg

愚昧之山绝望之谷开悟之坡·2023-09-11 03:38

新技术前沿-2023-基于Hugging Face体验微软NewBing必应GPT4.0

Huggingface超详细介绍HuggingFace官网go-proxy-bing的GitHub官网1HuggingFace简介Huggingface起初是一家总部位于纽约的聊天机器人初创服务商，他们本来打算创业做聊天机器人

皮皮冰燃·2023-09-10 20:12

180B参数的Falcon登顶Hugging Face，vs chatGPT 最好开源大模型使用体验

文章目录使用地址使用体验test1：简单喜好类问题test2：知识性问题test3：开放性问题test4：中文支持test5：问题时效性test6：学术问题使用地址https://huggingface.co

Cachel wood·2023-09-10 13:03

NLP（六十八）使用Optimum进行模型量化

本文将会介绍如何使用HuggingFace的Optimum，来对微调后的BERT模型进行量化（Quantization）。

山阴少年·2023-09-10 08:15

如何把 Gradio 应用上传到 Hugging Face

把Gradio应用上传到HuggingFace概述HuggingFace提供了一个平台,可以让研究人员和开发者上传他们基于Transformer的模型和demo。

friklogff·2023-09-10 06:48

从零开始-与大语言模型对话学技术-gradio篇（4）

包括本地部署版本和Web在线版本，两种打包方式基于半自动化使用.bat手动打包迁移python项目如何把Gradio应用上传到HuggingFace往期回顾：从零开始-与大语言模型对话学技术-gradio

friklogff·2023-09-10 06:15

基于docker快速搭建facechain环境

前言最近facechain比较火，之前在huggingface试过，在SD的落地场景上提供了思路。这两天刚拿到一台RTX3090的服务器，在本地部署也遇到了两个问题，给大家分享一下。

joimson·2023-09-10 01:56

推荐频道

huggingFace