Huggingface

huggingface学习 | 云服务器使用git-lfs下载huggingface上的模型文件

文章目录一、找到需要下载的huggingface文件二、准备工作（一）安装git-lfs（二）配置gitssh三、检查ssh连接huggingface是否成功一、找到需要下载的huggingface文件
丁希希哇·2024-01-17 10:10

关于运行完python程序后c盘空间快速减少的解决方案之一(更新之我的C盘又炸了)

就像这样，但我们python运行结束后还是没有恢复，那么究其原因，终归是由于python运行所使用的类似于模型的文件是以文件的形式存在了c盘的默认缓存文件夹，一般是在C:\Users\用户名\.cache\huggingface
爱折腾的倭瓜·2024-01-17 08:16

Vits——语音模型Vits部署

本地安装环境gitclonehttps://huggingface.co/spaces/zomehwh/vits-uma-genshin-honkaicdvits-uma-genshin-honkai创建
Irving.Gao·2024-01-16 22:42

Whisper——部署fast-whisper中文语音识别模型

main参考文章：WhisperOpenAI开源语音识别模型环境配置pipinstallfaster-whispertransformers准备tiny模型需要其他版本的可以自己下载：https://huggingface.co
Irving.Gao·2024-01-16 22:09

书生·浦语大模型--第二节课作业

书生·浦语大模型--第二节课作业基础部分生成300字小故事huggingface下载功能进阶部分浦语·灵笔的图文理解及创作部署Lagent工具调用Demo创作部署基础部分生成300字小故事huggingface
李日音·2024-01-16 22:16

Transformers 中原生支持的量化方案概述

转载自：https://huggingface.co/blog/zh/overview-quantization-transformers文章目录资源bitsandbytes与auto-gptq之比较bitsandbytes
小然爱看·2024-01-16 15:20

【AIGC】AnimateDiff:无需定制化微调的动画化个性化的文生图模型

AnimateDiff就可以插入到个性化的文生图模型中，与Civitai和Huggingface的文生图模型兼容，也可以与自己微调的大模型兼容。
资料加载中·2024-01-16 11:40

官方教程：Stable Diffusion WebUI 绘画—GpuMall智算云

#GpuMall智算云##huggingface##大模型#配置环境介绍目前平台集成了StableDiffusionWebUI的官方镜像，该镜像中整合如下资源：StableDiffusionWebUI版本
GpuMall·2024-01-16 11:05

大模型训练营Day2 homework

1.使用InternLM-Chat-7B模型生成300字的小故事2.熟悉huggingface下载功能，使用huggingface_hubpython包，下载InternLM-20B的config.json
AIzealot无·2024-01-16 02:32

大模型入门（四）—— 基于peft 微调 LLaMa模型

原文链接https://www.cnblogs.com/jiangxinyang/p/17330352.htmlllama-7b模型大小大约27G，本文在单张/两张16GV100上基于huggingface
baidu_huihui·2024-01-15 15:09

LLM模型的generate和chat函数区别

  在HuggingFace的transformers库中，GPT（GenerativePre-trainedTransformer）类的模型有两个常用的生成文本的方法：generate和chat。
NLP工程化·2024-01-15 11:35

书生·浦语大模型实战营作业（四）

数据集回答结果进阶作业：将训练好的Adapter模型权重上传到OpenXLab、HuggingFace或者MoelScope任一一平台。
三省斋主·2024-01-15 07:16

大模型实战营Day2 作业

基础作业1使用InternLM-Chat-7B模型生成300字的小故事2熟悉huggingface下载功能，使用huggingface_hubpython包，下载InternLM-20B的config.json
流浪德意志·2024-01-15 04:21

【笔记】书生·浦语大模型实战营——第四课（XTuner 大模型单卡低成本微调实战）

】【参考：(4)XTuner大模型单卡低成本微调实战_哔哩哔哩_bilibili-【OpenMMLab】】总结学到了linux系统中tmux的使用了解了XTuner大模型微调框架的使用pth格式参数转HuggingFace
myaijarvis·2024-01-15 03:07

书生·浦语大模型第二课作业

作业一：小故事创作作业要求：使用InternLM-Chat-7B模型生成300字的小故事（需截图）完成情况：作业二：熟悉huggingface下载功能作业要求：熟悉huggingface下载功能，使用huggingface_hubpython
Jankin_Tian·2024-01-14 21:45

从DETR到Mask2former(2): 损失函数loss function

首先，从huggingface的transformers库中拿出detrsegmen
河北一帆·2024-01-14 19:26

如何从huggingface上下载模型和代码

首先一定要安装git,登不登录无所谓现在访问huggingface需要梯子找到模型后，看下面的图就好了（注意，需要安装gitlfs）
ken_coding·2024-01-14 16:26

Git Large File Storage介绍

著名的huggingface就是使用它存储大模型文件。
ken_coding·2024-01-14 16:53

最强开源中英双语大模型发布，340亿参数超越Llama2-70B ！

Aquila2模型全系开源地址：https://github.com/FlagAI-Open/Aquila2https://model.baai.ac.cn/https://huggingface.co
语音之家·2024-01-14 10:16

【InternLM 大模型实战】第四课

简介功能亮点适配多种生态适配多种硬件8GB显卡玩转LLMFlashAttentionDeepSpeedZeRO动手实战环节环境配置微调准备配置文件模型下载数据集下载修改配置文件开始微调将得到的PTH模型转换为HuggingFace
卖小麦←_←·2024-01-13 21:07

[论文笔记] Qwen-7B tokenizer

https://github.com/QwenLM/Qwen/blob/main/tokenization_note_zh.md#%E6%99%AE%E9%80%9Atokenhttps://huggingface.co
心心喵·2024-01-13 20:09

【LangChain学习之旅】—（7） 调用模型：使用OpenAI API还是微调开源Llama2/ChatGLM？

大语言模型发展史预训练+微调的模式用HuggingFace跑开源模型申请使用Meta的Llama2模型通过HuggingFace调用LlamaLangChain和HuggingFace的接口通过HuggingFaceHubReference
之墨_·2024-01-13 19:47

【HuggingFace Transformer库学习笔记】基础组件学习：Trainer

基础组件学习——Trainer导入包fromtransformersimportAutoTokenizer,AutoModelForSequenceClassification,Trainer,TrainingArgumentsfromdatasetsimportload_dataset加载数据集dataset=load_dataset("csv",data_files="./ChnSentiCo
辰阳星宇·2024-01-13 19:14

【HuggingFace Transformer库学习笔记】基础组件学习：Model

gitclone"https://huggingface.c
辰阳星宇·2024-01-13 19:44

【HuggingFace Transformer库学习笔记】基础组件学习：Datasets

基础组件——Datasetsdatasets基本使用导入包fromdatasetsimport*加载数据datasets=load_dataset("madao33/new-title-chinese")datasetsDatasetDict({train:Dataset({features:['title','content'],num_rows:5850})validation:Dataset
辰阳星宇·2024-01-13 19:44

【HuggingFace Transformer库学习笔记】基础组件学习：Evaluate

基础组件学习——EvaluateEvaluate使用指南查看支持的评估函数#include_community：是否添加社区实现的部分#with_details：是否展示更多细节evaluate.list_evaluation_modules(include_community=False,with_details=True)加载评估函数accuracy=evaluate.load("accura
辰阳星宇·2024-01-13 19:39

huggingface 连不上 from_pretrained from_single_file

huggingface的缓存目录~/.cachcd~/.cache#pwd后展示/home/fxbox/.cachepwdpipe:StableDiffusionPipeline=StableDiffusionPipeline.from_pretrained
linzhiji·2024-01-13 14:28

LLM_InterLM-Demo学习

referenceGithub:https://github.com/InternLM/tutorial/blob/main/helloworld/hello_world.md1-环境配置之前都是用科学上网在huggingFace
Scc_hy·2024-01-13 10:21

【第二课课后作业】书生·浦语大模型实战营-轻松玩转书生·浦语大模型趣味Demo

目录轻松玩转书生·浦语大模型趣味Demo课后作业1.基础作业1.1使用InternLM-Chat-7B模型生成300字的小故事：1.2熟悉huggingface下载功能，使用huggingface_hubpython
Kinno酱·2024-01-13 06:21

LLaMA-Factory添加adalora

/tsingcoo/LLaMA-Efficient-Tuning/commit/f3a532f56b4aa7d4200f24d93fade4b2c9042736和https://github.com/huggingface
wozwdaqian·2024-01-13 04:36

无代码DIY图像检索

如下图：HuggingFace账号准备HuggingFist
colorknight·2024-01-13 03:46

神奇网站1

有良心的up会留下地址：1.depix：https://github.com/spipm/Depix2.amphion：https://huggingface.co/spaces/amphion/singing_voice_conversion3
Jarvis000·2024-01-13 02:19

实战案例：chatglm3 基础模型多轮对话微调

base模型https://huggingface.co/THUDM/chatglm3-6b-base由于模型较大，建议离线下载后放在代码目录，以".
机器学习社区·2024-01-13 02:46

从Hugging Face上手动下载并加载预训练模型

0.说明：从HuggingFace上下手动载预训练的蛋白质语言模型（以ProstT5为例），用模型中的encoder部分对蛋白质进行编码，得到embeddingfeatures，用于下游的任务。
@ZyuanZhang·2024-01-12 21:41

大模型学习与实践笔记（五）

一、环境配置1.huggingface镜像下载sentence-transformers开源词向量模型importos#设置环境变量os.environ['HF_ENDPOINT']='https://
AllYoung_362·2024-01-12 20:14

大语言模型下载，huggingface和modelscope加速

huggingface下载模型如果服务器了，不用租机器如果服务器没，可以建议使用下面的方式可以租一台**autodl**不用显卡的机器，一小时只有1毛钱，启动学术加速，然后下载，下载完之后，用scp拷贝到目标机器
随时学丫·2024-01-12 19:15

Huggingface的Trainer类无法将日志写到logging文件中

在训练时想把这个信息也写到logging文件中在training_args中设置参数：training_args=transformers.TrainingArguments(logging_steps=2,eval_steps=2,logging_dir='logs/training.log',logging_strategy='steps',logging_first_step=True)在t
cpopttt·2024-01-12 14:44

hugging face官网打不开，bert-large-uncased-whole-word-masking-finetuned-squad模型无法下载到本地

最近在用bert预训练模型做问答任务时，想要下载bert-large-uncased-whole-word-masking-finetuned-squad模型，但是打不开huggingface官网，下载不了该模型
小白冲鸭·2024-01-12 08:44

2024年1月11日最热CV论文：PIXART-δ: FAST AND CONTROLLABLE IMAGE GENERATION WITH LATENT CONSISTENCY MODELS

清华&HuggingFace联手打造PIXART-δ，图像生成速度提升7倍，开源界的StableDiffusion杀手引言：图像合成的新纪元——PIXART-δ模型的介绍在数字图像处理和合成的领域中，模型的进步不仅推动了技术的发展
夕小瑶·2024-01-12 05:45

大模型学习第二课作业

2，熟悉huggingface下载功能，使用huggingface_hubpython包，下载InternLM-20B的config.json文件到本地（需截图下载过程）。
敲键盘的喵桑·2024-01-11 21:11

2024年AIGC趋势展望：视频生成的“百模大战”

2023年底发布的svd(stabilityai/stable-video-diffusion-img2vid·HuggingFace)、EMU(https://ai.meta.com/blog/emu-text-to-video-generation-image-editing-research
沉迷单车的追风少年·2024-01-11 15:50

在Hugging Face上下载并使用Bert-base-Chinese

huggingface的官方网站：http://ww
little pierce·2024-01-11 14:59

InternLM第2节课作业

基础作业使用InternLM-Chat-7B模型生成300字的小故事熟悉huggingface下载功能，使用huggingface_hubpython包，下载InternLM-20B的config.json
Jamiechoi·2024-01-11 05:35

InternLM第1节课笔记

预训练InternLM-Train高可扩展：8卡-千卡兼容主流：支持HuggingFace微调XTuner：自动优化加速、适配多种开源生态，显存优化增量续训有监督微调部署LMDeploy接口：Python
Jamiechoi·2024-01-11 05:34

conda新建、配置python3.8虚拟环境，torch-cuda1.8，torchtext0.9.0，huggingface安装transformers库

起因是我在用bert的时候，导包报错Python环境缺少importlib.metadata模块。importlib.metadata是Python3.8引入的模块，而我的环境中使用的Python版本为3.7。所以我得重新配置一个python3.8的环境准备工作在开始菜单找到anacondaprompt(anaconda3)，进入查看已有的虚拟环境命令：condaenvlist1.conda创建虚
LinlyZhai·2024-01-10 12:06

【huggingface】【pytorch-image-models】timm框架中使用albumentations库数据增广

文章目录一、前言二、实操2.1声明库2.2定义你的数据增广算子2.3加入其中一、前言问题是这样的，在使用timm框架训练时，发现数据增广不够，想用Albumentations库的数据增广，怎么把后者嵌入到前者的训练中。其实也是比较简单的，这里笔者也是做个笔记以往忘记，需要的童鞋自取。二、实操我们知道训练才需要数据增广，原始的数据增广是在：其实也就是用XXX_tfl来收集数据增广的算子，那么要加入A
Thomas_Cai·2024-01-10 10:30

关于git使用的tips

常见指令常见问题处理1、使用gitclone下载【huggingface.co】资源超时或无法请求问题绝大多数情况是网络问题，首先如果是比较大的资源，你需要按照资源clone里的备注来执行，例如：gitlfsinstall
EelBarb·2024-01-10 08:28

封神榜大模型

文章目录封神榜大模型姜子牙系列模型huggingface:https://huggingface.co/IDEA-CCNLgithub:https://github.com/IDEA-CCNL/Fengshenbang-LM
小田_·2024-01-10 07:02

书生·浦语大模型全链路开源体系 学习笔记 第三课

huggingface-cli:commandnotfound按照该文档解决即可https://github.com/huggingface/huggingface_hub/issues/1079具体如下
JonesZon·2024-01-10 07:22

Hugging Face Datasets文本质量分析，识别低质量内容、垃圾数据、偏见内容、识别毒性内容、检测重复文档、识别测试集污染数据、识别过短的内容

HuggingFace提供了大量的文本数据集，但是如何评估这些数据集的质量呢？这篇文章将介绍如何使用XorbitsDataFrame和Streamlit对HuggingFace上的文本数据集进行
代码讲故事·2024-01-10 07:24
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他