多模态LLM 第4页

实现基于LLM的VSCode代码补全插件及网络搜索功能

文章目录前言一、代码补全代码实现实现效果:当前问题二、LLM+搜索引擎功能概述实现步骤代码实现结论前言本文将介绍如何利用VSCode插件开发环境结合大模型（LLM）来实现代码补全功能，并且介绍如何集成网络搜索功能以增强代码补全的能力

今天不熬夜！·2024-08-29 16:25

RAG增强检索

1.RAG技术主要解决了什么问题解决通用LLM针对一些小众领域没有涉猎的问题(私域)提升LLM回答的准确性、权威性、时效性提高LLM回答的可控性和可解释性，提高模型的可信度和安全性2.RAG流程-1文档加载

苍墨穹天·2024-08-29 13:34

A Survey on Benchmarks of Multimodal Large Language Models

本文是LLM系列文章，针对《ASurveyonBenchmarksofMultimodalLargeLanguageModels》的翻译。

UnknownBody·2024-08-29 11:20

[论文笔记] LLM数据集——LongData-Corpus

https://huggingface.co/datasets/yuyijiong/LongData-Corpus1、hf的数据在开发机上要设置sshkey，然后cat复制之后在设置在hf上2、中文小说数据在云盘上清华大学云盘下载：#!/bin/bash#BaseURLbase_url="https://cloud.tsinghua.edu.cn/d/0670fcb14d294c97b5cf/fi

心心喵·2024-08-29 10:17

[从0开始AIGC][LLM]：Pre-Norm or Post-Norm？训练效率还是训练效果？

Pre-NormorPost-NormPre-NormorPost-Norm1.什么是Pre-Norm和Post-Norm2.为什么Pre-Norm比Post-Norm易于训练2.1Transformer：Attentionisallyourneed-PostNorm2.2Pre-Norm的提出：TransformerswithoutTears:ImprovingtheNormalizationo

Way_X·2024-08-29 05:42

【论文阅读】LLM4SGG: Large Language Models for Weakly Supervised Scene Graph Generation

【论文阅读】LLM4SGG:LargeLanguageModelsforWeaklySupervisedSceneGraphGenerationabstract由于全监督方法严重依赖昂贵标注，最近弱监督场景图生成

进击的乔洋·2024-08-28 19:03

初识LangChain的快速入门指南

它简化了与大语言模型（LLM）的交互过程，支持数据检索和将不同功能模块串联起来以完成复杂任务。

hai40587·2024-08-28 17:50

ETH：通过文本反馈提高LLM对齐能力

标题：TowardsAligningLanguageModelswithTextualFeedback来源：arXiv,2407.16970️文章简介研究问题：如何通过文本反馈来调整语言模型，使其生成更符合用户期望的行为。主要贡献：论文的提出了ALT，一种将语言模型与文本反馈对齐的方法，通过示例反馈来引导语言模型生成更符合用户偏好的内容。重点思路相关工作对齐：此前的研究已成功利用RLHF来增强LL

大模型任我行·2024-08-28 15:02

SGSH: Stimulate Large Language Models with Skeleton Heuristics for Knowledge Base Question

本文是LLM系列文章，针对《SGSH:StimulateLargeLanguageModelswithSkeletonHeuristicsforKnowledgeBaseQuestionGeneration

UnknownBody·2024-08-28 14:56

探索GGUF：利用llama.cpp高效运行大型语言模型

探索GGUF：利用llama.cpp高效运行大型语言模型在人工智能领域，大型语言模型（LLM）的应用越来越广泛，但运行这些模型常常需要大量计算资源和复杂的配置。

Chen_Chance·2024-08-28 05:27

LLM 代理，文本向量化，高级 SQL，以及我们最新作者的其他必读文章

如果你是《Variable》的常读者，你可能已经注意到，我们每周都会强调——TDS始终欢迎新作者的贡献。我们是认真的！有些人可能看过这个消息并想“太好了，我很想写一篇文章！”但是随后又开始思考什么样的帖子合适，我们的读者对哪些话题感兴趣，以及哪些类型的经验和技能是受欢迎的。本周的《Variable》版本重点介绍了我们最近的一些最佳文章，所以即使你没有成为TDS作者的意愿，也完全没问题！我们仍希望你

AI科技圈.·2024-08-27 22:16

[从0开始AIGC][LLM]：LLM中Encoder-Only or Decoder-Only？为什么主流LLM是Decoder-Only？

LLM中Encoder-OnlyorDecoder-Only&为什么主流LLM是Decoder-Only？

Way_X·2024-08-27 15:03

讲解如何使用RAG（检索增强生成）和LLM（大语言模型）来构建一个法律咨询网站。

一、准备工作1.注册OpenAIAPI首先，注册OpenAI并获取API密钥。2.环境配置安装必要的Python库：pipinstallopenaifaiss-cpusentence-transformersflask二、设计系统架构整个系统将包括以下几个部分：前端：用户输入问题和上传文件的界面。后端：处理用户请求，调用OpenAIAPI，返回答案。向量数据库：存储和检索文档向量。三、实现步骤步骤

winfredzhang·2024-08-27 12:44

用TensorRT-LLM跑通chatGLM3_6B模型

零、参考资料NVIDIA官网THUDM的GithubNVIDIA的Github一、构建TensorRT-LLM的docker镜像gitlfsinstallgitclonehttps://github.com

心瘾こころ·2024-08-27 11:33

ms | modelscope源码方式安装

[email protected]:modelscope/modelscope.gitcdmodelscopegitfetchoriginmastergitcheckoutmaster安装依赖如仅需体验多模态领域模型

Mopes__·2024-08-27 10:28

【大模型从入门到精通42】LLM部署运维（LLM Ops）使用Kubeflow Pipelines掌握LLM工作流4

这里写目录标题在Kubeflow中自动化和编排监督调整管道重用现有管道提高效率准备数据和模型版本控制配置管道定义管道参数执行管道结论理论问题实践问题在Kubeflow中自动化和编排监督调整管道KubeflowPipelines的核心在于其编排复杂工作流的能力。在本例中，我们将探索如何使用KubeflowPipelines自动和编排监督调整管道，针对由Google提供的基础模型PaLM2进行参数高效

水木流年追梦·2024-08-27 09:19

AI大模型日报#0825：10行代码让大模型数学提升20%、文心日均调用超6亿

导读：AI大模型日报，爬虫+LLM自动生成，一文览尽每日AI大模型要点资讯！

常政·2024-08-27 03:17

使用MongoDB构建AI：Jina AI将突破性开源嵌入模型变为现实

JinaAI创立于2020年，总部位于德国柏林，主要从事提示工程和嵌入模型业务，已迅速成长为多模态AI领导者。

MongoDB 数据平台·2024-08-27 02:10

大模型微调技术（Adapter-Tuning、Prefix-Tuning、Prompt-Tuning(P-Tuning)、P-Tuning v2、LoRA）_adapter微调 p tuning

今年3月15日，GPT-4发布后，也出现了一些多模态的大模型，比如百度的文心一言、讯飞星火认知大模型等等。要想训练一个针对特定领域的大模型，如果采用全量参数微调（FullParameterFutu

Cc不爱吃洋葱·2024-08-26 19:12

【附资源】LLM大模型学习，这本书不可或缺：《大语言模型基础与前沿》

哈喽大家好！很久都没有更新大模型这块的书了，今天给大家说一下这本：《大语言模型：基础与前沿》，本书深入阐述了大语言模型的基本概念和算法、研究前沿以及应用，涵盖大语言模型的广泛主题，从基础到前沿，从方法到应用，涉及从方法论到应用场景方方面面的内容。作者简介熊涛，美国明尼苏达大学双城分校电子与计算机工程博士。曾在多家中美知名高科技公司担任高级管理职位和首席科学家，在人工智能的多个领域，包括大语言模型、

AI小白熊·2024-08-26 18:39

什么是LLM？看这一篇就够了！

本文主要介绍大语言模型（LargeLanguageModel，简称LLM）。

AI程序猿人·2024-08-26 17:03

什么是LLM，主要用途有哪些，在应用中有哪些优势和局限性？

LLM（大型语言模型）在实际应用中的优势包括多领域应用、技术突破、创新应用等。其局限性则包括设计挑战、行为问题、科学难题等。

好好学习的不知名程序员·2024-08-26 16:59

国货之光|暴雨机推出面向大模型训练的AI服务器

当前，“百模大战”带来了算力需求的爆发，尤其是以ChatGPT为代表的多模态AI大模型，‌其参数规模和训练数据量均达到了前所未有的规模。‌

BAOYUCompany·2024-08-26 10:44

使用书生万象InternVL大模型进行自定义视频数据集微调时没有petrel_client导致NoneType异常

它是目前已知性能最强的开源多模态大模型(见数值对比表），也是国内首个在MMMU（多学科问答）上突破60的模型。数学基准MathVista的测试中

菜b杨·2024-08-26 06:54

【大模型赋能开发者】海云安入选数世咨询LLM驱动数字安全2024——AI安全系列报告

近日，国内知名数字产业领域第三方调研咨询机构数世咨询发布了LLM驱动数字安全2024——AI安全系列报告。

海云安·2024-08-26 04:39

AI初识--LLM、ollama、llama都是些个啥？

LLM全称（largelanguagemodel）也就是大语言模型什么是Ollama，它与Llama是什么关系？

才艺のblog·2024-08-25 20:51

免费的大模型插件llm.nvim

llm.nvim（https://github.com/StubbornVegeta/llm.nvim）是一款基于cloudflare的免费大模型插件，你可以像使用ChatGPT一样和它进行对话在使用这款插件之前

stubborn vegeta·2024-08-25 16:23

LangChain 与 Elastic 合作为 RAG 添加向量数据库和语义重排序

LangChain已成为使用大型语言模型(LLM)构建应用程序的最受欢迎的库，例如检索增强生成(RAG)系统。该库使原型设计和试验不同的模型和检索系统变得非常容易。

Cc不爱吃洋葱·2024-08-25 15:52

通义千问( 五 ) 图片分析

5.多模态5.1.图片分析5.1.1.介绍通义千问VL(Qwen-VL)是阿里云研发的大规模视觉语言模型（LargeVisionLanguageModel,LVLM），可以以图像、文本、检测框作为输入，

春哥的魔法书·2024-08-25 14:15

3个最流行的开源大模型网络爬虫框架

随着具备视觉功能的大型语言模型（LLM）的出现，我们现在可以创建几乎通用的网络爬虫代理，大大简化和自动化了这一过程。在这篇博客中，我们

liugddx·2024-08-25 08:05

用 Unsloth 微调 LLaMA 3 8B

用Unsloth微调LLaMA38B今年4月份，Meta公司发布了功能强大的大型语言模型（LLM）Llama-3，为从事各种NLP任务的开发人员提供了功能强大可以在普通机器上运行的开源LLM。

liugddx·2024-08-25 08:05

大模型LLM的Token相关问题：模型不同，token计算不同，gpt对token的计算，我们如何选择token及token评估模型

Itfuture03·2024-08-25 07:33

【大模型从入门到精通39】LLM部署运维（LLM Ops）使用Kubeflow Pipelines掌握LLM工作流1

使用KubeflowPipelines掌握LLM工作流在本节中，我们将深入探讨如何使用KubeflowPipelines来编排和自动化机器学习工作流。

水木流年追梦·2024-08-25 03:08

PROMETHEUS 2: An Open Source Language Model Specialized in Evaluating Other Language Models

本文是LLM系列文章，针对《PROMETHEUS2:AnOpenSourceLanguageModelSpecializedinEvaluatingOtherLanguageModels》的翻译。

UnknownBody·2024-08-25 02:59

A Survey of Large Language Models on Generative Graph Analytics: Query, Learning, and Applications

本文是LLM系列文章，针对《ASurveyofLargeLanguageModelsonGenerativeGraphAnalytics:Query,Learning,andApplications》的翻译

UnknownBody·2024-08-25 02:29

[CLIP-VIT-L + Qwen] 多模态大模型源码阅读 - trainer篇

[CLIP-VIT-L+Qwen]多模态大模型源码阅读-trainer篇前情提要源码阅读导包逐行解读compute_loss方法（重构）整体含义逐行解读save_model函数（重构）整体含义逐行解读create_optimizer

FlowerLoveJava·2024-08-24 22:40

CLIP-VIT-L + Qwen 多模态源码阅读 - 语言模型篇（3）

多模态学习笔记-语言模型篇（3）参考repo:WatchTower-Liu/VLM-learning;url:VLLM-BASE吐槽今天接着昨天的源码继续看，黑神话：悟空正好今天发售，希望广大coder

FlowerLoveJava·2024-08-24 22:10

《通义千问AI落地—上》：后端接口

为多模态大模型(MultimodalModels)。通义意为“通情，达义”，具备全副AI能力，致力于成为人们的工作、学习、生活助手。功能包括多轮对话、文案创作、逻辑推理、

写完bug就找女朋友·2024-08-24 22:37

基于强化学习的即时商店自动化管理

介绍如今，提示是与大型语言模型(LLM)交互的主要模式。提示需要根据用户需求进行调整，为LLM提供正确的上下文和指导—以最大限度地提高获得“正确”响应的机会。

拉达曼迪斯II·2024-08-24 11:34

FastAPI部署大模型Llama 3.1

项目地址：self-llm/models/Llama3_1/01-Llama3_1-8B-InstructFastApi部署调用.mdatmaster·datawhalechina/self-llm(github.com

记得叫Mark周更·2024-08-23 14:12

【AIGC半月报】AIGC大模型启元：2024.08（下）

【AIGC半月报】AIGC大模型启元：2024.08（下））(1)Nemotron-4-Minitron（NvidiaLLM）(2)VITA（腾讯优图多模态大模型）(3)mPLUG-Owl3（阿里巴巴多模态大模型

LeeZhao@·2024-08-23 10:19

AIGC：clip-interrogator

文字生成图片是近年来多模态和大模型研究的热门方向，openai提出的CLIP提供了一个方法建立起了图片和文字的联系，但是只能做到给定一张图片选择给定文本语义最相近的那一个，实际项目开发中我们总是需要从一张图片获取描述

微风❤水墨·2024-08-23 10:17

破晓未来视界：neuralsim——3D重构与模拟的神经渲染革命

今天，我们为您揭开一个名为“neuralsim”的开源项目面纱，它基于3D神经渲染技术，旨在通过高效且详尽的方式，重新定义表面重建和多模态传感器仿真。

秋玥多·2024-08-23 09:46

[CLIP-VIT-L + Qwen] 多模态大模型源码阅读 - 语言模型篇（2）

多模态学习笔记-语言模型篇（2）参考repo:WatchTower-Liu/VLM-learning;url:vlm-learning吐槽今天的源码看的欲仙欲死，NTK(neuraltangentkernel

FlowerLoveJava·2024-08-23 09:14

[CLIP-VIT-L + Qwen] 多模态大模型源码阅读 - 语言模型篇（1）

多模态大模型源码阅读-语言模型篇（1）吐槽今日心得MQwen.py吐槽想要做一个以Qwen-7B-Insturct为languagedecoder,以CLIP-VIT-14为visionencoder的