LLama

LLM大模型落地-从理论到实践

学习目标熟悉主流LLM（Llama,ChatGLM,Qwen）的技术架构和技术细节；有实际应用RAG、PEFT和SFT的项目经验较强的NLP基础，熟悉BERT、T5、Transformer和GPT的实现和差异
hhaiming_·2024-09-04 01:12

整理了上百个开源中文大语言模型，涵盖模型、应用、数据集、微调、部署、评测_基于大语言模型的网络自动配置平台的设计与开发

尤其是以ChatGLM、LLaMA等平民玩家都能跑起来的较小规模的LLM开源之后，业界涌现了非常多基于LLM的二次微调或应用的案例。
AI大模型-搬运工·2024-09-02 07:20

llama factory微调时出现x86_64-conda-linux-gnu/bin/ld: cannot find -lcurand: No such file or directory解决方案

  大家好，我是爱编程的喵喵。双985硕士毕业，现担任全栈工程师一职，热衷于将数据思维应用到工作与生活中。从事机器学习以及相关的前后端开发工作。曾在阿里云、科大讯飞、CCF等比赛获得多次Top名次。现为CSDN博客专家、人工智能领域优质创作者。喜欢通过博客创作的方式对所学的知识进行总结与归纳，不仅形成深入且独到的理解，而且能够帮助新手快速入门。  本文主要介绍了llamafactory微调时出现x
爱编程的喵喵·2024-09-01 11:18

本地电脑大模型系列之 20 离线 AI：使用 Ollama+llama3+privateGPT+Langchain+GPT4ALL+ChromaDB 与 Pdf、Excel、CSV、PPTX、PPT、

简介Ollama在Mac/Windows/Ubuntu上与llama3一起运行MAC至少需要8GBRAM，Ubuntu和Windows至少需要16GBRAMpython3.10和git系列文章《本地电脑搭建
知识大胖·2024-09-01 10:10

LLM-项目详解（一）：Chinese-LLaMA-Alpaca【transformers/models/llama/modeling_llama.py文件】

site-packages/transformers/models/llama/modeling_llama.py#coding=utf-8#Copyright2022EleutherAIandtheHuggingFaceInc.team.Allrightsreserved
u013250861·2024-08-31 22:57

LLM - 从头实现 LLaMA3 网络与推理流程 (RMS | RoPE | GQA | SwiGLU)

LLaMA3是Meta的最新大语言模型，在整体网络设计进行多项升级，显著提升了模型的性能和效率，重要的改进，如下：词汇量增加至1
CarolineSpike·2024-08-31 22:56

“全面解析！大模型面试宝典（含精选答案与策略）“

大模型（LLMs）进阶面1.llama输入句子长度理论上可以无限长吗？1.什么是LLMs复读机问题？2.为什么会出现LLMs复读机问题？3.如何缓解LLMs复读机问题？
AGI-老冉·2024-08-31 10:07

英伟达如何通过剪枝和蒸馏技术让Llama 3.1模型“瘦身“?

英伟达如何通过剪枝和蒸馏技术让Llama3.1模型"瘦身"?大家好，我是蒜鸭。今天我们来聊聊英伟达最近在大语言模型优化方面的一项有趣研究。
蒜鸭·2024-08-30 19:28

【大模型】大模型 CPU 推理之 llama.cpp

【大模型】大模型CPU推理之llama.cppllama.cpp安装llama.cppMemory/DiskRequirementsQuantization测试推理下载模型测试参考llama.cpp描述
szZack·2024-08-30 02:31

【学习笔记】：Ubuntu 22 使用模型量化工具llama.cpp部署大模型 CPU+GPU

学习笔记：Ubuntu22使用模型量化工具llama.cpp部署大模型CPU+GPU前言1下载并编译llama.cpp1.1git下载llama.cpp仓库源码1.2编译源码（make）1.2.1选择一
淮序_·2024-08-30 02:00

AI-windows下使用llama.cpp部署本地Chinese-LLaMA-Alpaca-2模型

文章目录Llamp.cpp环境配置Chinese-LLaMA-Alpaca-2模型介绍模型下载转换生成量化模型Anaconda环境安装运行Llamp.cpp环境配置[email protected]
mrbone11·2024-08-30 01:00

AI视界周刊第 2 期：Llama 3.1 开源、AI 训 AI，越训越傻、AI 搜索重燃战火

✨热点聚焦里程碑——MetaLlama3.1开源：性能媲美闭源模型，支持多语言Meta公司开源Llama3.1系列开源大语言模型，包含8B、
战场小包·2024-08-28 10:03

编译运行 llama.cpp (vulkan, Intel GPU SYCL)

llama.cpp是一个运行AI(神经网络)语言大模型的推理程序,支持多种后端(backend),也就是不同的具体的运行方式,比如CPU运行,GPU运行等.但是编译运行llama.cpp并不是那么容易的
穷人小水滴·2024-08-28 05:27

大模型推理测速 (llama.cpp, Intel GPU A770)

/llama-b3617-bin-ubuntu-x64/build/bin/llama-cli--versionversion:3617(a07c32ea)builtwithcc(Ubuntu11.4.0
穷人小水滴·2024-08-28 05:57

探索GGUF：利用llama.cpp高效运行大型语言模型

探索GGUF：利用llama.cpp高效运行大型语言模型在人工智能领域，大型语言模型（LLM）的应用越来越广泛，但运行这些模型常常需要大量计算资源和复杂的配置。
Chen_Chance·2024-08-28 05:27

Code Llama: Open Foundation Models for Code论文阅读

都是基于Llama2。
yang_daxia·2024-08-27 18:46

基于华为昇腾910B和LLaMA Factory多卡微调的实战教程

  大家好，我是herosunly。985院校硕士毕业，现担任算法研究员一职，热衷于大模型算法的研究与应用。曾担任百度千帆大模型比赛、BPAA算法大赛评委，编写微软OpenAI考试认证指导手册。曾获得阿里云天池比赛第一名，CCF比赛第二名，科大讯飞比赛第三名。授权多项发明专利。对机器学习和深度学习拥有自己独到的见解。曾经辅导过若干个非计算机专业的学生进入到算法行业就业。希望和大家一起成长进步。  
herosunly·2024-08-27 10:57

Cerebras DocChat发布：基于Llama 3构建，DocChat在几小时内完成GPT-4级别的对话问答训练

Cerebras发布的DocChat标志着基于文档的对话式问答系统的一个重大里程碑。Cerebras以其在机器学习（ML）和大型语言模型（LLMs）方面的深厚专业知识而闻名，推出了DocChat系列的两个新模型：CerebrasLlama3-DocChat和CerebrasDragon-DocChat。这些模型旨在提供高性能的对话式人工智能，特别是针对基于文档的问答任务，并利用Cerebras的尖
科技大本营·2024-08-27 00:00

大模型微调技术（Adapter-Tuning、Prefix-Tuning、Prompt-Tuning(P-Tuning)、P-Tuning v2、LoRA）_adapter微调 p tuning

2022年11月30日，ChatGPT发布至今，国内外不断涌现出了不少大模型，呈现“百模大战”的景象，比如ChatGLM-6B、LLAMA、Alpaca等模型及在此模型基础上进一步开发的特定领域的大模型
Cc不爱吃洋葱·2024-08-26 19:12

什么是LLM？看这一篇就够了！

GPT、LLaMA、M
AI程序猿人·2024-08-26 17:03

AI初识--LLM、ollama、llama都是些个啥？

LLM全称（largelanguagemodel）也就是大语言模型什么是Ollama，它与Llama是什么关系？
才艺のblog·2024-08-25 20:51

用 Unsloth 微调 LLaMA 3 8B

用Unsloth微调LLaMA38B今年4月份，Meta公司发布了功能强大的大型语言模型（LLM）Llama-3，为从事各种NLP任务的开发人员提供了功能强大可以在普通机器上运行的开源LLM。
liugddx·2024-08-25 08:05

使用LangChain和LLaMA2构建自然语言SQL查询助手

使用LangChain和LLaMA2构建自然语言SQL查询助手引言在当今数据驱动的世界中，能够轻松查询和分析数据库中的信息变得越来越重要。然而，并非所有人都精通SQL语言。
qq_37836323·2024-08-24 08:14

离线 AI：使用 Termux 从源代码在 Android 手机/Waydroid 上构建 Ollama

Android手机/WaydroidTermux的终端命令相同推荐文章《在自己笔记本上使用Llama-3生成PowerPoint—幻灯片自动化的第一步》权重1，本地类、ppt类《如何微调NLLB-200
知识大胖·2024-08-23 17:32

小琳AI课堂：Llama——NLP界的多面手

Llama:NLP界的多面手引言：大家好，这里是小琳AI课堂。今天，我们要探索的是自然语言处理（NLP）领域的一位明星——Llama。
小琳ai·2024-08-23 14:43

FastAPI部署大模型Llama 3.1

项目地址：self-llm/models/Llama3_1/01-Llama3_1-8B-InstructFastApi部署调用.mdatmaster·datawhalechina/self-llm(github.com
记得叫Mark周更·2024-08-23 14:12

transformers调用llama的方式

transformers调用llama的使用方式不同版本llama对应的transformers库版本llama2llama3Meta-Llama-3-8B-InstructMeta-Llama-3-8Bllama3.1Meta-Llama
myccver·2024-08-23 13:11

Llama开源代码详细解读（2）

FlashAttentionifis_flash_attn_available():#检查flashattention的可用性fromflash_attnimportflash_attn_func,flash_attn_varlen_funcfromflash_attn.bert_paddingimportindex_first_axis,pad_input,unpad_input#noqaFla
江安的猪猪·2024-08-23 04:45

LLM基础｜模型后量化原理、量化类型及方式、量化实现效果

xdm在尝试运行Llama-Chat-7B推理时的时候，是不是也容易遇到OOM的问题？
Sunny_AI_addict·2024-08-22 16:04

开源免费大语言模型（LLMs）排行榜

目录一、模型介绍1.1LLaMA(LargeLanguageModelMetaAI)1.2Falcon1.3Mistral1.4GPT-NeoX1.5Bloom1.6OPT(OpenPre-trainedTransformer
张3蜂·2024-08-21 22:37

llama.cpp 编译安装@Ubuntu

在Kylin和Ubuntu编译llama.cpp，具体参考：llama模型c语言推理@FreeBSD-CSDN博客现在代码并编译：gitclonehttps://github.com/ggerganov
skywalk8163·2024-03-29 12:47

大模型的学习 LLaMa和ChatGLM，minichatgpt4

LLaMa和ChatGLM，minichatgpt4什么情况用Bert模型，什么情况用LLaMA、ChatGLM类大模型，咋选？
贝猫说python·2024-03-27 07:55

3月18日，每日信息差

据介绍，该平台支持广泛的AI模型，包括目前主流的Baichuan-7B、GeminiNano、Llama2和智谱
信息差Pro·2024-03-25 09:26

VisionLLaMA: A Unified LLaMA Interface for Vision Tasks

VisionLLaMA:AUnifiedLLaMAInterfaceforVisionTasks相关链接：arxivgithub关键字：VisionLLaMA、visiontransformers、imagegeneration、imageclassification、semanticsegmentation摘要大型语言模型(LLMs)通常基于Transformer架构来处理文本输入。例如，LLa
liferecords·2024-03-06 21:47

千卡利用率超98%，详解JuiceFS在权威AI测试中的实现策略

虽然目前不支持大语言模型如GPT、LLaMA，但BERT与大语言模型同为多层transform
·2024-02-28 15:34

大模型量化技术原理-LLM.int8()、GPTQ

基于LLaMA-7B/Bloomz-7B1-mt复现开
吃果冻不吐果冻皮·2024-02-20 21:39

【眼科大模型】Ophtha-LLaMA2：视觉模型提取图像特征 + LLM基于特征生成眼底病变的诊断报告

Ophtha-LLaMA2：视觉模型提取图像特征+LLM基于特征生成眼底病变的诊断报告提出背景设计思路选择大模型基座生成诊断报告论文：https://arxiv.org/pdf/2312.04906.pdf
Debroon·2024-02-20 16:34

GPT在地学、GIS、气象、农业、生态、环境等领域中应用

GPT在地学、GIS、气象、农业、生态、环境等领域中应用一开启大模型1开启大模型1)大模型的发展历程与最新功能2)大模型的强大功能与应用场景3)国内外经典大模型（ChatGPT、LLaMA、Gemini
夏日恋雨·2024-02-20 14:37

如何用GPT进行数据处理？

第一：2024年AI领域最新技术1.OpenAI新模型-GPT-52.谷歌新模型-GeminiUltra3.Meta新模型-LLama34.科大讯飞-星火认知5.百度-文心一言6.MoonshotAI-Kimi7
夏日恋雨·2024-02-20 14:06

GPT在机器学习，深度学习等领域应用

详情点击公众号：技术科研吧链接：GPT在机器学习，深度学习等领域应用第一：2024年AI领域最新技术1.OpenAI新模型-GPT-52.谷歌新模型-GeminiUltra3.Meta新模型-LLama34
夏日恋雨·2024-02-20 14:02

使用go-llama.cpp 运行 yi-01-6b大模型，使用本地CPU运行，速度挺快的

1，视频地址2，关于llama.cpp项目https://github.com/ggerganov/llama.cppLaMA.cpp项目是开发者GeorgiGerganov基于Meta释出的LLaMA
fly-iot·2024-02-20 10:23

【论文笔记 · PFM】Lag-Llama: Towards Foundation Models for Time Series Forecasting

Lag-Llama:TowardsFoundationModelsforTimeSeriesForecasting摘要本文提出Lag-Llama，在大量时间序列数据上训练的通用单变量概率时间序列预测模型
lokol.·2024-02-20 08:49

Lag-Llama:第一个时间序列预测的开源基础模型介绍和性能测试

在原论文《Lag-Llama:TowardsFoundationMo
deephub·2024-02-20 08:16

LLaMA 2 - 你所需要的一切资源

摘录关于LLaMA2的全部资源，如何去测试、训练并部署它。LLaMA2是一个由Meta开发的大型语言模型，是LLaMA1的继任者。
·2024-02-19 21:59

peft库编写逻辑分析

Peft库编写逻辑分析（以LLaMa+prefix为例）Peft库加载finetune模型分析Peft生成代码importtorchfrompeftimportPeftModelfromtransformersimport
瓶子好亮·2024-02-19 15:17

NotImplementedError: Cannot copy out of meta tensor； no data!

这个问题出现在我对llama-2-70b进行量化后，重新加载模型时出现的问题#错误信息new_value=value.to(device)NotImplementedError:Cannotcopyoutofmetatensor
瓶子好亮·2024-02-19 15:16

OpenAI ChatGPT-4开发笔记2024-08：windows本地环境下载Llama 2

Step1:AskforpermissiononMeta’swebsiteTobeabletodownloadthemodel,youfirstneedtoagreetosometermsandconditionsfromMeta.Youcangotothislink,thenpressDownloadthemodel,thenyouwillbetakentoaformwhereyouhaveto
aiXpert·2024-02-19 14:30

Windows11(非WSL)安装Installing llama-cpp-python with GPU Support

直接安装，只支持CPU。想支持GPU，麻烦一些。1.安装CUDAToolkit(NVIDIACUDAToolkit(availableathttps://developer.nvidia.com/cuda-downloads)2.安装如下物件：gitpythoncmakeVisualStudioCommunity(makesureyouinstallthiswiththefollowingsett
aiXpert·2024-02-19 14:30

Quantitative Analysis: PIM Chip Demands for LLAMA-7B inference

1Architecture如果将LLAMA-7B模型参数量化为4bit，则存储模型参数需要3.3GB。那么，至少PIMchip的存储至少要4GB。
简vae·2024-02-19 14:53

Lag-Llama:第一个时间序列预测的开源基础模型介绍和性能测试

在原论文《Lag-Llama:TowardsFoundationMo
·2024-02-15 10:32
上一页 2 3 4 5 6 7 8 9 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他