E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Huggingface
win10 Baichuan2-7B-Chat-4bits 上部署 百川2-7B-对话模型-4bits量化版
搞了两天才搞清楚跑通好难呢,个人电脑win10,6GB显存个人感觉生成速度很慢,数学能力不怎么行没有ChatGLM2-6B强,逻辑还行,要求:我的部署流程1.下载模型,下载所有文件然后放到新建的model目录https://
huggingface
.co
绀目澄清
·
2023-11-15 05:32
pytorch
pytorch
部署百川大语言模型Baichuan2
模型下载基座模型Baichuan2-7B-Basehttps://
huggingface
.co/baichuan-inc/Baichu
培根芝士
·
2023-11-15 05:00
AI
人工智能
Hugging Face实战-系列教程8:GLUE数据集/文本分类上(NLP实战/Transformer实战/预训练模型/分词器/模型微调/模型自动选择/PyTorch版本/代码逐行解析)
HuggingFace
实战系列总目录有任何问题欢迎在下面留言本篇文章的代码运行界面均在JupyterNotebook中进行本篇文章配套的代码资源已经上传下篇内容:
HuggingFace
实战-系列教程9:
机器学习杨卓越
·
2023-11-15 00:52
Hugging
Face实战
自然语言处理
transformer
pytorch
Hugging
Face
深度学习
huggingface
之datasets将数据集下载到本地
下载数据集使用代理会下载快一点.但是我想放在本地,下载一次不用下载了.虽然他自己可以缓存,但是感觉每次还是重新下载,好像有bug似的.参考:[https://blog.csdn.net/PolarisRisingWar/article/details/124042709#:~:text=%E5%9C%A8%E6%9C%AC%E5%9C%B0%E5%8A%A0%E8%BD%BD%E6%95%B0%E
快去写论文
·
2023-11-13 08:29
huggingface
datasets
下载数据集
ChatGLM-6B模型结构代码解析(单机版)
本文介绍ChatGLM-6B的模型结构,代码来自https://
huggingface
.co/THUDM/chatglm-6b/blob/main/modeling_chatglm.py。
u013250861
·
2023-11-13 00:00
#
LLM/经典模型
人工智能
Git 服务器上的 LFS 下载
以llama为例:https://
huggingface
.co/meta-llama/Llama-2-7b-hfGithub#1.安装完成后,首先先初始化;如果有反馈,一般表示初始化成功gitlfsinstall
prinTao
·
2023-11-12 16:34
git
服务器
elasticsearch
【NLP】torch hub工具的使用:torch.hub.load、pytorch预训练模型加载
加载和使用预训练模型学习目标:了解加载和使用预训练模型的工具.掌握加载和使用预训练模型的过程.加载和使用预训练模型的工具:在这里我们使用torch.hub工具进行模型的加载和使用.这些预训练模型由世界先进的NLP研发团队
huggingface
你的橙子
·
2023-11-12 13:58
深度学习
01_stable_diffusion_introduction_CN
pipinstall-Uqgit+https://github.com/
huggingface
/transformersimpor
Mr_yuekitty
·
2023-11-12 12:45
datawhale学习笔记
python
HuggingFace
模型头的自定义
在线工具推荐:Three.jsAI纹理开发包-YOLO合成数据生成器-GLTF/GLB在线编辑-3D模型格式在线转换-可编程3D场景编辑器在本文中我们将介绍如何使
HuggingFace
的模型适应你的任务
新缸中之脑
·
2023-11-12 09:26
huggingface
快速下载ChatGLM系列模型
1.说明与步骤在无法访问
huggingface
的网络环境下(或者是网速不够好时),(目前)还可以使用参考1中清华云盘的链接来下载,在linux下可以直接用如下wget命令来下载最耗时的模型部分。
ybdesire
·
2023-11-12 07:07
大语言模型
运维
人工智能
ChatGPT
机器学习
替代
huggingface
下载大模型的站点
0.引入
huggingface
是个好网站,大模型的下载都得靠他,但是网络问题一直是一言难尽,所以只好找找其他替代品。目前发现的代替网站如下,后续如有新发现,还会再来更新到这里。
ybdesire
·
2023-11-12 07:59
大语言模型
运维
Python
人工智能
ChatGPT
解决
Huggingface
被墙下载模型的问题
参考:如何快速下载
huggingface
模型——全方法总结-padeoe的文章-知乎https://zhuanlan.zhihu.com/p/663712983和:https://hf-mirror.com
QHG7C0
·
2023-11-12 06:30
python
解决 “Repo id must be in the form repo_name or name“ 错误的Python解决方案
解决“Repoidmustbeintheformrepo_nameorname”错误的Python解决方案在使用
HuggingFace
库时,有时候会遇到一个错误消息,其中提到“Repoidmustbeintheformrepo_nameorname
代码飞翔
·
2023-11-11 13:22
python
开发语言
Python
开源DB-GPT实现连接数据库详细步骤
docs.conda.io/en/latest/miniconda.html第二步:安装GitGit-DownloadingPackage第三步:安装embedding模型到model文件https://
huggingface
.co
EaSoNgo111
·
2023-11-11 04:59
数据库
gpt
人工智能
百川大模型微调
模型下载https://
huggingface
.co/baichuan-inc微调框架https://github.com/hiyouga/LLaMA-Factory环境搭建gitclonehttps:
lanmengyiyu
·
2023-11-10 16:37
一点一滴NLP
百川
baichuan
大模型
nlp
微调
在hugging face上发布自己的模型 (ubuntu 19.0)
以ubuntu为例子前言
huggingface
主页:https://
huggingface
.co/用邮箱注册一个账号Installgitlfshuggingface的使用和github类似,但是github
Ensheng Shi
·
2023-11-10 13:18
tools
ubuntu
linux
运维
huggingface
如何优雅的从Hugging Face下载repo中的部分目录下的文件
从
HuggingFace
上下载模型是作为深度学习开发者每天都要面对的问题。但是作为非图形页面的开发者而言,
HuggingFace
对文件的转发策略为我们直接从链接下载所需的文件带来了困难。
Therock_of_lty
·
2023-11-10 13:44
深度学习
Huggingface
--Quick tour
AutoClassAutoTokenizerAutoModelSaveamodel自定义模型构建AutoConfigAutoModelTrainer--Pytorch优化的训练循环微调教程学习教程来自
Huggingface
尧景
·
2023-11-10 12:50
huggingface
python
自然语言处理
ReadTimeoutError: HTTPSConnectionPool(host=‘cdn-lfs.
huggingface
.co‘, port=443)
问题最近遇到需要从
huggingface
下载并导入预训练模型SimCSE,然后进行计算文本相似度,代码如下:fromtransformersimportAutoModel,AutoTokenizerimportosos.environ
肥宅程序员aka不会游泳的鱼
·
2023-11-09 19:43
自然语言处理
深度学习
人工智能
解决 SSLError: HTTPSConnectionPool(host=‘
huggingface
.co‘, port=443)
看我的回答:https://github.com/
huggingface
/transformers/issues/17611#issuecomment-1794486960能问这个问题的都是网络不太好的
XD742971636
·
2023-11-09 19:37
深度学习机器学习
huggingface
SSL
网络
transformer
ChatGLM2-6B本地部署或云端部署配置过程
项目和模型下载从github上下载源代码gitclonehttps://github.com/THUDM/ChatGLM2-6B从HuggingFaceHub上下载模型gitclonehttps://
huggingface
.co
WEIXW99
·
2023-11-08 20:48
笔记
ChatGLM2-6B,部署及微调
conda的虚拟环境4.安装环境依赖5.修改模型配置6.执行web_demo.py二、微调前言代码地址:https://github.com/THUDM/ChatGLM2-6B模型地址:https://
huggingface
.co
rexxa
·
2023-11-08 20:17
人工智能
自然语言处理
HuggingFace
的transfomers库
tokenizer我获取了opt类型的tokenizer,那么enc是什么类型呢?有哪些方法呢?fromtransformersimportAutoTokenizerenc=AutoTokenizer.from_pretrained('facebook/opt-125m')可以通过print(enc)看到,enc是GPT2TokenizerFast类型,搜索类型的定义,在python安装包的tra
zhuikefeng
·
2023-11-08 11:42
Python学习
python
transform
transformers
hugging face下载数据集
开始直接执行这个,下载下来的图片打不开gitclonehttps://
huggingface
.co/datasets/diffusers/dog-example解决办法:安装gitlfs1.curl-shttps
wu_jiacheng
·
2023-11-08 02:13
2023-hugging
face
hugging
face
【Transformers-实践2】——Bert-CRF用于英语平坦实体(Flat NER)识别
本文是学习使用
Huggingface
的Transformers库的简单实践,我们简单的梳理一下模型的结构,以及具体的程序结构。
应有光
·
2023-11-06 22:45
基础深度模型学习
bert
自然语言处理
llava1.5模型安装、预测、训练详细教程
引言本博客介绍LLava1.5多模态大模型的安装教程、训练教程、预测教程,也会涉及到
huggingface
使用与wandb使用。
tangjunjun-owen
·
2023-11-06 22:11
语言模型-多模态大模型
自然语言处理
语言模型
transformer
视觉检测
多模态大模型
llava
在Linux系统下部署Llama2(MetaAI)大模型教程
一、准备工作1、本文选择部署的模型是Llama2-chat-13B-Chinese-50W(模型的下载地址为:https://
huggingface
Haodong丶
·
2023-11-06 22:09
大模型
Llama2
Linux
linux
人工智能
机器学习
transformer
如何获取
HuggingFace
的Access Token;如何获取
HuggingFace
的API Key
AccessToken通过编程方式向
HuggingFace
验证您的身份,允许应用程序执行由授予的权限范围(读取、写入或管理)指定的特定操作。
Haodong丶
·
2023-11-06 22:35
大模型
Llama2
机器学习
人工智能
Transformer:开源机器学习项目,上千种预训练模型 | 开源日报 No.66
huggingface
/transformersStars:113.5kLicense:Apache-2.0这个项目是一个名为Transformers的开源机器学习项目,它提供了数千种预训练模型,用于在文本
开源服务指南
·
2023-11-06 13:39
开源日报
transformer
开源
机器学习
专访
HuggingFace
CTO:开源崛起、创业故事和AI民主化丨智源独家
导读HuggingFaceCTOJulienChaumond认为,在大模型时代,AI民主化至关重要。随着大语言模型和复杂人工智能系统的崛起,持续提升AI技术的可及性有助于确保这些技术的获取和控制不集中在少数强大实体手中。技术民主化促进了机会均等,减少了数字鸿沟,而说起来容易做起来难,事实上滴水穿石,需要长期不懈的努力。开源社区的目标正是为机器学习的可访问性和民主化做出持续的贡献。Julien在巴黎
智源社区
·
2023-11-05 22:19
人工智能
OSError: We couldn‘t connect to ‘https://
huggingface
.co‘ to load this file
OSError:Wecouldn'tconnectto'https://
huggingface
.co'toloadthisfile,couldn'tfinditinthecachedfilesanditlookslikeTHUDM
兰特RR
·
2023-11-05 19:34
python
chatgpt
中文sd:SkyPaint-AI-Diffusion
https://
huggingface
.co/SkyworkAIGC/SkyPainthttps://
huggingface
.co/SkyworkAIGC/SkyPainthttps://github.com
Kun Li
·
2023-11-05 15:23
多模态和生成模型
人工智能
测试Whisper效果
先去官方上面看看,是否有对应的测试结果简单找了一下,没找到对应的测试数据去
huggingface
上面找对应的数据集,发现没有现成的数据找到了几个数据集,但是是收费的101Hours–SceneNoiseDatabyVoiceRecorder1,297Hours-SceneNoiseDatabyVoiceRecorder
大杯无糖
·
2023-11-05 10:58
whisper
Transformers使用教程
模型参数下载数据集查找Transformers中文使用说明
Huggingface
超详细介绍-知乎
HuggingFace
的Transformers库快速入门文档说明Transformers提供文本相关的预训练模型
来路与归途
·
2023-11-05 09:03
python
Transformers
人工智能
深度学习
diffusers-Tasks
https://
huggingface
.co/docs/diffusers/using-diffusers/unconditional_image_generationhttps://
huggingface
.co
Kun Li
·
2023-11-05 08:57
多模态和生成模型
人工智能
深度学习
Chinese-LLaMA-Alpaca本地搭建(三)
Chinese-LLaMA-Alpaca模型搭建(三)1、简单介绍1.1原版LLaMA模型介绍1.2LoRA权重模型1.3完整版权重模型2、模型搭建2.1直接到
huggingface
下载转换后的LLaMAhf
天罚神
·
2023-11-04 17:23
深度学习
llama
【扩散模型】不同组件搭积木,获得新模型
学习地址:https://github.com/
huggingface
/diffusion-models-class/tree/main/unit3VAETheTokenizerandTextEncoderUNetIn-Painting
飞速移动的代码菌
·
2023-11-04 03:58
扩散模型
机器学习
文生图
图生图
NLP学习1 - 使用
Huggingface
Transformers框架从头训练语言模型
摘要由于huaggingface放出了Tokenizers工具,结合之前的transformers,因此预训练模型就变得非常的容易,本文以学习官方example为目的,由于
huggingface
目前给出的
逆旅ROS
·
2023-11-03 22:35
diffusers-Load pipelines,models,and schedulers
https://
huggingface
.co/docs/diffusers/using-diffusers/loadinghttps://
huggingface
.co/docs/diffusers/using-diffusers
Kun Li
·
2023-11-03 03:30
多模态和生成模型
microsoft
diffusers-Load adapters
https://
huggingface
.co/docs/diffusers/main/en/using-diffusers/loading_adaptershttps://
huggingface
.co/
Kun Li
·
2023-11-02 12:43
多模态和生成模型
深度学习
人工智能
【数据集资源】大数据资源-数据集下载方法-汇总
大概包含10个领域数据集:金融交通商业推荐系统医疗健康图像数据视频数据音频数据自然语言处理社会数据处理后的科研和竞赛数据1、
huggingface
的数据下载方式:1.进入官网数据集列:
HuggingFace
–TheAIcommunitybuildingthefuture
子非Yu@Itfuture
·
2023-11-01 20:52
数据分析
大数据
ChatGLM3 模型学习与实战
进行的性能升级4.模型列表三、环境搭建1.下载代码2构建环境3安装依赖4.大模型下载方式4.1安装lfs方便本地下载ChatGLM2-6B大模型4.2Hmodelscop上手动下载模型及其文件【推荐】4.3
Huggingface
QuietNightThought
·
2023-10-31 23:07
学习
docker+
Deepstream6.1+yolov5+Kafka_deepstreamdocker_羽化登仙°的博客-CSDN博客https://soulteary.com/2022/05/20/use-docker-to-run-
huggingface
-models.htmldocker
无名份的浪漫2018
·
2023-10-31 22:58
docker
java
kafka
[linux] megatron转换
huggingface
权重报错return super().find_class(mod_name, name) No module named megatron
参考:项目场景:pytorchtorch.loadModuleNotFoundErrorNomodulenamed‘models‘_returnsuper().find_class(mod_name,name)moduleno_mtl1994的博客-CSDN博客在python脚本中,添加当前目录到path即可:importsyssys.path.insert(0,'/xx/Megatron-LM'
心心喵
·
2023-10-31 03:10
linux
linux
宿华辞任快手董事长;小米澎湃OS开启“人车家全生态”;Hugging Face 被限制访问;朝鲜开发者被指控冒名从事美企远程外包
人工智能公司
HuggingFace
发言人在上周五的一封电子邮件中写道:“中国的人工智能社区非常出色,我们希望他们能更好地访问HF,但目前我们对于政府的法规无能为力。”
疯狂创作者
·
2023-10-29 21:57
汽车
/
芯片
/
医疗
/
信息技术
/
头条要事
量子技术
/
元宇宙
/
人工智能
/
其他
搜索引擎
HuggingGPT Solving AI Tasks with ChatGPT and its Friends in
HuggingFace
---论文阅读总结
1、介绍LLMS(Largelanguagemodels)在语言理解、生成、交互和推理方面产生优越的能力,推动了新的研究主题,例如上下文学习、指令学习以及思维链提示。目前LLM技术仍不完善,主要有:限于文本生成的输入和输出形式,当前LLM缺乏处理视觉和语音等复杂信息的能力。在现实场景中,一些复杂任务通常由多个子任务组成,需要多个模型的调度和协作,超出了语言模型的能力。在零样本或少量样本情况下比一些
星冢
·
2023-10-29 15:10
人工智能
chatgpt
论文阅读
大模型下载使我痛苦
(不涉及国外的朋友们)主要由于
huggingface
必须要科学上网才能访问,而7B规模的模型一般在14G大小左右,13B规模的模型一般在28G左右,这还是模型按照ft16或bf16存贮,如果是float32
zenRRan
·
2023-10-29 12:52
ChatGLM2 6B 本地部署
可是,从
huggingface
下载模型文件好
EricPan2023
·
2023-10-28 08:10
python
AIGC
人工智能
ChatGLM2-6B从本地加载模型报错-解决办法
报错OSError:/chatglm2-6bdoesnotappeartohaveafilenamedconfig.json.Checkout'https://
huggingface
.co/chatglm2
RuiyChen
·
2023-10-28 08:32
笔记
自然语言处理
【扩散模型】如何用最几毛钱生成壁纸
通过学习扩散模型了解到了统计学的美好,然后顺便记录下我之前文生图的基础流程~扩散模型简介这次是在DataWhale的组队学习里学习的,
HuggingFace
开放扩散模型学习地址扩散模型训练时通过对原图增加高斯噪声
飞速移动的代码菌
·
2023-10-28 06:27
SD
AI
文生图
LinkAI
AutoDL
扩散模型
上一页
5
6
7
8
9
10
11
12
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他