huggingface 第3页

计算huggingface模型占用硬盘空间的实战代码

本文主要介绍了计算huggingface模型占用硬盘空间的实战代码，希望对学习大语言模

herosunly·2024-02-06 15:00

huggingface模型无法下载

使用代理exportHF_ENDPOINT=https://hf-mirror.comhttps://hf-mirror.com/

ASKCOS·2024-02-06 10:31

使用 LoRA 在 viggo 数据集上微调 Microsoft phi-2 小语言模型

它可以根据MIT许可在HuggingFace上使用。它在96个A100GPU上使用1.4T令牌进行了14天的训练。Phi-2是一个27亿个参数的预训练Transformer，不使用RLHF或指示微调。

无水先生·2024-02-05 18:54

MiniCPM：揭示端侧大语言模型的无限潜力

技术博客链接：https://shengdinghu.notion.site/MiniCPM➤Github地址：https://github.com/OpenBMB/MiniCPM➤HuggingFace

智慧医疗探索者·2024-02-05 13:58

Hugging face

Huggingface是一个很好的开源社区，包含nlp,cv中最新、最先进的模型和数据集等。

hzhj·2024-02-05 13:51

【论文+demo】小红书提出个性化真实人像生成方法（2024.01.15发布,声称效果好于PhotoMaker）

[2024/02/01]增加了LCM加速、多个Controlnet控制，更新了深度估计器，可在huggingface上试用[2024/01/31]支持oneDiff加速，详细代码[2024/1/22]发布了模型

曾小蛙·2024-02-05 10:56

“erfinv_vml_cpu“ not implemented for ‘Half‘

在复现qwen-vl的qlora的时候报错，"erfinv_vml_cpu"notimplementedfor'Half'，具体原因是这个文件里的.cache/huggingface/modules/transformers_modules

wkk15903468980·2024-02-04 12:55

优雅的从ＨuggingFace下载模型

1.下载全部文件以下都以下载bloom模型为例gitlfsinstallgitlfsclonehttps://huggingface.co/bigscience/bloom-7b1这种方式下载会显示下载的进度及网速

orangerfun·2024-02-04 02:55

大模型实践笔记（1）——GLM-6B实践

GitLargeFileStorage安装GitLFS：设置GitLFS：使用GitLFS：安装GLM-6B环境依赖ChatGLM2-6B介绍配置GLM下载代码构建环境安装依赖本地部署网页UI很多模型在huggingface

不会写代码！！·2024-02-03 16:55

windows安装ChatGLM3

1.下载ChatGLM3代码https://github.com/THUDM/ChatGLM32.下载ChatGLM3模型web端下载可以进入主页点击下载https://huggingface.co/THUDM

Yu_摆摆·2024-02-02 20:58

chatchat部署在ubuntu上的坑

注意要下载很多东西,流量大https://gitee.com/zhaodezan/chatchat2.不必要的步骤下载模型需要先安装GitLFS，然后运行$gitlfsinstall$gitclonehttps://huggingface.co

andeyeluguo·2024-02-02 02:29

GPT-4级别模型惨遭泄露！引爆AI社区，“欧洲版OpenAI”下场认领

起因是1月28日，一位名为“MiquDev”的用户在HuggingFace上发布了一组文件，这些文件共同组成了一个看似新的开源LLM，名为“miqu-1-70b”。

夕小瑶·2024-02-01 22:23

ChatGLM-6B：自定义数据集和模型微调！

具体代码和权重可以从获取：https://github.com/THUDM/ChatGLM-6B/https://huggingface.co/THUDM/chat

Datawhale·2024-02-01 20:52

从换脸到克隆：IP Adapter FaceID的技术突破与应用

Huggingface模型下载：https://huggingface.co/h94/I

努力犯错·2024-02-01 14:14

Nous Hermes 2：超越Mixtral 8x7B的MOE模型新高度

Huggingface模型下载：https://huggingface

努力犯错·2024-02-01 14:43

基于LLM的文档搜索引擎开发【Ray+LangChain】

它有点像HuggingFace，但专门针对LLM。有用于提示、

新缸中之脑·2024-02-01 07:21

第十五篇-推荐-Huggingface-镜像-2023-10

木卫二号Coding·2024-02-01 03:03

使用Huggingface镜像站hf-mirror.com下载资源

前言在使用Huggingface的过程中，有时我们可能会遇到无法访问官方网站huggingface.co的情况，这可能是由于网络监管或者网络连接问题所致。

TracelessLe·2024-02-01 03:00

多模态语义检索 | 基于 MetaSpore 快速部署 HuggingFace 预训练模型

首先，附上Github链接MetaSpore：https://github.com/meta-soul/MetaSpore，可搜索公众号元灵数智，在底部菜单了解我们-用户交流获取官方技术交流群二维码，进群与业内大佬进行技术交流。随着深度学习技术在计算机视觉、自然语言处理、语音理解等领域不断取得创新性突破，越来越多的非结构化数据被机器进行感知、理解和加工。这些进展主要得益于深度学习的强大表征学习能力

momo_cb59·2024-01-31 22:11

【Transformer 】 Hugging Face手册 (01/10)

一、说明本文是HuggingFace的用户手册。加入HuggingFace社区，在模型、数据集和空间上进行协作，通过加速推理获得更快的示例。

无水先生·2024-01-31 19:42

【转载】Huggingface上传自己的预训练模型，Windows配置代理

一些预训练的权重可以传到Huggingface上1.Huggingface上传自己的模型下面是具体操作教程，转载自Huggingface上传自己的预训练模型（大小权重都可以）1.安装git-lfs$curl-shttps

leSerein_·2024-01-31 15:12

【问题解决】| 对于代码访问transformers库报错，无法正常下载模型及其参数的问题

，直接进行下载把模型提前下好后放到本地但是如果能用第一种方式会好很多，但是实际中可能会遇到如下问题报这个错，原因是未开启科学上网OSError:Wecouldn'tconnectto'https://huggingface.co'toloadthisfile

Qodicat·2024-01-31 13:44

使用 Pegasus-t5 预训练模型遇到问题解决

背景因为大模型之前，中文摘要效果比较好的模型就是t5-pegasus，在huggingface上的预训练模型，down下来使用遇到两个问题。

be_humble·2024-01-31 07:28

huggingface 的trainer训练框架优势

背景HuggingfaceTransformers是基于一个开源基于transformer模型结构提供的预训练语言库，它支持Pytorch，Tensorflow2.0，并且支持两个框架的相互转换。框架支持了最新的各种NLP预训练语言模型，使用者可以很快速的进行模型的调用，并且支持模型furtherpretraining和下游任务fine-tuning。Transformers库写了了一个trans

be_humble·2024-01-31 07:57

【深度学习】sdxl中的 text_encoder text_encoder_2 区别

articleId=135867689代码仓库：https://huggingface.co/stabilityai/stable-diffusion-xl-base-1.0/tree/main截图：为什么有两个

XD742971636·2024-01-31 04:57

anaconda虚拟环境添加第三方的库tensorbordX,torchvision,tqdm,opencv-python,pillow,tensorflow,keras

系列文章目录一、conda新建配置python3.8的虚拟环境，安装torch-cuda1.8，torchtext0.9.0，huggingface的transformers库anaconda虚拟环境添加第三方的库系列文章目录前言一

LinlyZhai·2024-01-29 18:00

bert预训练模型下载

fromtransformersimportBERT_PRETRAINED_MODEL_ARCHIVE_LISTprint(BERT_PRETRAINED_MODEL_ARCHIVE_LIST)运行结果会吧所有支持的模型打印出来，比如bert-base-chinese一般下载模型我们搜索到的都是去https://huggingface.co

木下瞳·2024-01-29 08:13

【深度学习】sdxl中的 tokenizer tokenizer_2 区别

代码仓库：https://huggingface.co/stabilityai/stable-diffusion-xl-base-1.0/tree/main截图：为什么有两个分词器tokenizer和tokenizer

XD742971636·2024-01-28 21:59

使用大模型检索增强 Rerank 模型，检索效果提升太明显了！

本文将介绍使用HuggingFace的TextEmbeddingInherence工具部署Rerank模型，以及演示如何在

深度学习算法与自然语言处理·2024-01-28 19:38

Huggingface上传自己的模型

5.8更新几个比较坑的点首先如果你的模型太大（>5GB），那么需要使用下面的命令声明一下，否则无法push$huggingface-clilfs-enable-largefiles.

Q同学的nlp笔记·2024-01-28 18:07

【Llama2 windows部署详细教程】第三节 Llama2 跑起来

具体的部署如下：一、下载模型目前大模型主要发布在HuggingFace上提供下载，无法在上面下载的小伙伴可以在国内的ModelScope网站上下载，模型文件比较大，下载过程中需要确保网络顺畅，下载方式如下

拥抱AI·2024-01-28 13:39

GPT-2 开源模型本地搭建（一）

python3.6或3.72.安装pip3安装tensorflow4.安装NumPy、regex5.安装其他插件（pipfreeze|greptensorflow）3、GPT-2开源模型本地搭建（基于HuggingFace

天罚神·2024-01-28 11:55

langchain + hugginface入门体验

简介本文记录一次使用langchain调用openai并部署在huggingface上的经历安装环境依赖我的python版本是3.9pipinstalllangchainpipinstallopenai

飞鸟malred·2024-01-28 10:02

Amphion tts(Text to Speech) 语音合成

AutoDL有了机器我们就可以按步骤操作了step1模型下载gitclonehttps://github.com/open-mmlab/Amphion.gitcdAmphionstep2下载训练好的模型文件huggingface

小何才露尖尖角·2024-01-28 06:18

语言大模型的分布式训练与高效微调指南

为满足上述需求，出现了许多出色的开源代码库，以HuggingFace生态

javastart·2024-01-28 05:20

linux远程服务器上下载模型等

记录一下在使用服务器下载时出现的一些问题和解决方法conda环境位置：/home/liuyuanyuan/.conda/envs/huggingface下载的模型保存在【通修改此路径，继续下载】/home

weixin_44040169·2024-01-28 04:57

手写GPT实现小说生成(二)

引言本文开始从零实现GPT1做一个小说续写器，即只需要给出一些文本，让模型帮你续写，主要内容包含：模型编写训练适配小说的中文分词器将小说按固定大小拆分生成数据集拆分训练/测试集训练体验小说续写效果同时结合HuggingFace

愤怒的可乐·2024-01-28 01:25

粒子群算法pos优化transformer 时间序列预测

在这里，我提供了一个简单的示例，使用HuggingFace的transformers库中的BertModel作为目标模型，并使用PSO对其进行参数优化。

mqdlff_python·2024-01-27 16:40

huggingface高速下载模型的实战代码

本文主要介绍了huggingface高速下载模型的实战代码，尤其是无法通过国内源进行下

herosunly·2024-01-27 15:21

BLIP-2: 基于冻结图像编码器和大型语言模型的语言-图像预训练引导

基于冻结图像编码器和大型语言模型的语言-图像预训练引导项目地址BLIP-2的背景与意义BLIP-2的安装与演示BLIP-2模型库图像到文本生成示例特征提取示例图像-文本匹配示例性能评估与训练引用BLIP-2HuggingFace

OverlordDuke·2024-01-27 09:44

对小工蚁关于LLM的技术总结+个人思考

1.blog/trl-peft.mdatmain·huggingface/blog·GitHub2.基于强化学习的微调（这个挺好）微软发布的文本生成增强框架DTG,让LLM主动思考和生成能力提升[2305.1

河南-殷志强·2024-01-27 02:57

RUST笔记：candle使用基础

candle介绍candle是huggingface开源的Rust的极简ML框架。

FakeOccupational·2024-01-26 23:22

Yi-VL模型发布：全球开源顶尖水平，仅次于GPT-4V多模态模型

Huggingface模型下载：https://huggingface.co/01-aiAI快站模型免费加速下载：ht

努力犯错·2024-01-26 18:40

多模态视觉大模型：清华开源CogAgent，重塑GUI Agent领域

Huggingface模型下载：https://huggingface.co/THUDM/cogagent-chat-hfAI快站模型免费加速下载：https: