retrieval

从 RAG 到 Self-RAG —— LLM 的知识增强

作者：紫气东来（上海交大工学硕士）一、RAG及其必要性1.1初识RAGRAG（RetrievalAugmentedGeneration,检索增强生成），即LLM在回答问题或生成文本时，先会从大量文档中检索出相关的信息
人工智能与算法学习·2024-01-12 09:10

大模型 LLM RAG在 Text2SQL 上的应用实践

1.前言在上篇文章中「LLMAgent在Text2SQL应用上的实践」介绍了基于AIAgent来优化LLM的Text2SQL转换效果的实践，除此之外我们还可以使用RAG（Retrieval-AugmentedGeneration
机器学习社区·2024-01-12 00:43

RAG：让大语言模型拥有特定的专属知识

作为一个在Chatbot领域摸爬滚打了7年的从业者，笔者可以诚实地说，在大语言模型的推动下，检索增强生成（RetrievalAugmentedGeneration，RAG）技术正在快速崛起。
博文视点·2024-01-11 15:52

记一次Maxwell出现Communications link failure

allowPublicKeyRetrieval=true&connectTimeout=5000&serverTimezone=Asia%2FShanghai&zeroDateTimeBehavior=
玖玖1704·2024-01-11 03:34

大型语言模型与知识图谱的完美结合：从LLMs到RAG，探索知识图谱构建的全新篇章

最近，使用大型语言模型（LLMs）和知识图谱（KG）开发RAG（RetrievalAugmentedGeneration）流程引起了很大的关注。
汀、人工智能·2024-01-10 14:56

论文阅读：Making Large Language Models A Better Foundation For Dense Retrieval

论文链接Abstract密集检索需要学习区分性文本嵌入来表示查询和文档之间的语义关系。考虑到大型语言模型在语义理解方面的强大能力，它可能受益于大型语言模型的使用。然而，LLM是由文本生成任务预先训练的，其工作模式与将文本表示为嵌入完全不同。因此，必须研究如何正确地调整LLM，以便它们能够有效地初始化为密集检索的骨干编码器。在本文中，我们提出了一种新的方法，称为LLaRA（适用于密集检索的LLM），
comli_cn·2024-01-10 09:08

翻译：Building Efficient RAG Systems: A Deep Dive into devv.ai

RAG的全称是：RetrievalAugmentedGeneration（检索增强生成）最初来源于2020年Facebook的一篇论文：Retrieval-AugmentedGenerationforKnowledge-IntensiveNLPTasks
数大招疯·2024-01-10 05:23

系列四十四、jdbc.properties

useSSL=false&allowPublicKeyRetrieval=true&useUnicode=true&characterEncoding=UTF8&serverTimez
YYAugenstern·2024-01-09 10:01

【书生·浦语大模型实战营03】《基于 InternLM 和 LangChain 搭建你的知识库》学习笔记

《基于InternLM和LangChain搭建你的知识库》课程文档：《基于InternLM和LangChain搭建你的知识库·文档》常见术语RAG:RetrievalAugmentedGeneration
songyuc·2024-01-09 05:16

网络安全试题进阶——附答案

A.Cross-SiteRequestForgeryB.Cross-SiteScriptingC.CredentialSniffingandRetrievalForceD.CyberSecurityandRiskFramework
知孤云出岫·2024-01-08 17:09

组合注意：解耦搜索与检索

CompositionalAttention:DisentanglingSearchandRetrieval18Oct2021ICLR2022https://arxiv.org/abs/2110.09419SarthakMittal
Valar_Morghulis·2024-01-08 14:38

MyBatis-基本概念

storedproceduresandadvancedmappings.MyBatiseliminatesalmostalloftheJDBCcodeandmanualsettingofparametersandretrievalo
buzzkiller·2024-01-08 08:29

Retrieval-Augmented Generation for Large Language Models: A Survey

PS:梳理该Survey的整体框架，后续补充相关参考文献的解析整理。本文的会从两个角度来分析总结，因此对于同一种技术可能在不同章节下都会有提及。第一个角度是从整体框架的迭代来看（对应RAG框架章节），第二个是从RAG中不同组成部分来看（对应Retriever，Generator和AugmentationinRAG）。https://arxiv.org/abs/2312.10997Introduct
Anooyman·2024-01-08 07:04

mount.nfs: Stale file handle和umount.nfs4:device is busy的解决方法

root@ai-server:/gui#mount-tnfs192.168.140.2:/data/lai/3d_retrieval_system_pytorch//data/lai/3d_retrieval_system_pytorch
恋上钢琴的虫·2024-01-08 06:37

文本补全中的动态提示（Dynamic Prompting）

目录数据集Zero-ShotFew-ShotDynamicFew-Shot总结数据集TextREtrievalConference(TREC)QuestionClassification数据集包含训练集中的约
之乎者也··2024-01-07 23:26

LLM——检索增强生成RAG

RAG（Retrieval-AugmentedGeneration）定义工作原理应用优势挑战结论定义RAG是一种结合了检索（Retrieval）和生成（Generation）的自然语言处理技术。
bulingg·2024-01-07 12:39

RAG实战案例：如何基于 LangChain 实现智能检索生成系统

微调（Fine-tuning）与检索增强生成（Retrieval-AugmentedGeneration，简称RAG）两种方法各有千秋，且都对此问题有着不可忽视的贡献。
技术狂潮AI·2024-01-07 12:38

评估检索增强生成（RAG）的三步法＜

欢迎关注公众号（NLPResearch）原文标题：A3-StepApproachtoEvaluateaRetrievalAugmentedGeneration(RAG)原文地址：https://medium.com
hj_caas·2024-01-07 12:08

如何让自己的声音唱任何歌曲——Retrieval-based-Voice-Conversion-WebUI

文章目录前言一、环境准备1.1从github下载资源包1.2解压压缩包安装依赖二、启动环境2.1启动程序2.2根据链接跳转到webui界面三.训练模型3.1准备10分钟自己朗读的音频格式为MP33.2准备自己想要克隆声音过去的歌曲格式也是MP33.3训练模型四推理用自己的声音唱歌4.1刷新推理模型并选择4.2预处理要唱的歌曲4.3模型推理总结前言使用开源项目实现克隆自己的声音唱任何歌曲类似AI孙燕
yuyuyu_xxx·2024-01-07 11:41

小红书 X WSDM 2024「对话式多文档问答挑战赛」火热开赛！

在对话过程中，为大模型引入搜索结果，进行检索增强的生成（RetrievalAugmentedGeneration，RAG），能够有效缓解大模型的幻觉问题，提升回答质量。
小红书技术REDtech·2024-01-07 04:26

java.sql.SQLException: Unable to load authentication plugin 'caching_sha2_pa

解决方法在URL中添加allowPublicKeyRetrieval=truespring.datasource.url=jdbc:mysql://localhost:3306/chapter16?
ooooooooooooooxiaosu·2024-01-06 11:58

LLM Agent之再谈RAG的召回多样性优化

1.Query多样性2019QueryExpansionTechniquesforInformationRetrieval:aSurvey传统搜索Query的扩展，有基于用户搜索日志挖掘的相似Query
人工智能小豪·2024-01-06 00:10

A Fast Learning Algorithm for Deep Belief Nets - 论文学习

文章目录摘要介绍互补先验一个带约束权的无限有向模型限制玻尔兹曼机和对比散度学习一种转换表示的贪婪学习算法SomeIdeasBasedonDBNNonlinearDimensionalityReductionLearningSemanticAddressSpace(SAS)forFastDocumentRetrievalLearningNonlinearEmbeddings
Mr，yu·2024-01-05 14:10

python包chromadb安装失败总结

1，背景：最近在学习langchain的课程，里面创建自己的知识库的Retrieval模块中，需要用到向量数据库。所以按照官方的教程（vectorstores），准备使用chroma的向量数据库。
爱分享的胖头鱼·2024-01-05 01:20

Sequential Matching Network: A New Architecture for Multi-turn Response Selection in Retrieval-Based

作者信息摘要：我们研究的是基于内容检索的多轮对话选择模型。目前该领域的研究中，或是连接上下文的句子，或是通过高度抽象化的向量来匹配答案，这毫无疑问会损失句子间的关系信息和上下文信息。我们提出了一种序列匹配网络（SMN）来解决这两个的问题。SMN开始在多个粒度层级上匹配回答，然后通过卷积和池化操作，从每个句子对中提取出表示重要信息的向量。这些向量按照对话时间顺序依次输入RNN，得到匹配分数和RNN的
I_am_John_Rain·2024-01-03 14:41

PDBx/mmCIF 文件格式(一)

PDBx/mmCIFSyntax原文链接：PDBx/mmCIFSyntax(wwpdb.org)mmCIF数据文件和字典中使用的语法来自STAR（Self-definingTextArchiveandRetrieval
WuYankang·2024-01-02 16:36

GROUBI

ModelGenerator:将数据组合成模型，产生计算机模型对象3.ModelInstance:存在于内存的一个完整数学模型4.GurobiOptimizer:Gurobi优化求解5.SolutionRetrieval
WMM_123456·2024-01-02 04:33

【LLM-RAG】知识库问答 | 检索 | embedding

文章目录note一、常见本地知识库问答流程1整体框架2.文本切分3.图解流程二、相关RAG综述/工作一篇RAG综述1、RetrievalSource知识来源源2、Retr
山顶夕景·2024-01-01 16:07

RAG LLM App开发实战

基于检索增强生成（RAG：RetrievalAugmentedGeneration）的LLM应用程序解决了这个确切的问题，并将LLM的实用性扩展到我们的
xiangzhihong8·2024-01-01 16:44

使用python快速开发与PDF文档对话的Gemini聊天机器人

检索增强生成(Retrieval-augmentedgeneration，RAG)使得我们可以让大型语言模型(LLMs)访问外部知识库数据(如pdf,word、text等)，从而让人们可以更加方便的通过
-派神-·2024-01-01 12:08

笔记：什么是媒介的四定律？

（enhancement、obsolescence、retrieval、reversal.首先，新的媒介是一种对我们人体的延伸，然后新旧交替会有过时，但旧的媒介形式会以新的形式出现，就像我们用短信和电子
Feel_the_rain·2023-12-31 12:25

code embedding研究系列一-基于token的embedding

Automatedsoftwarevulnerabilitydetectionwithmachinelearning数据集来源数据集预处理分类方法获取token向量化表示分类模型实验结果build-based部分2.CodeCMR:Cross-ModalRetrievalForFunction-LevelBinarySourceCod
I still …·2023-12-30 21:49

A Survey on Retrieval-Augmented Text Generation翻译

检索增强文本生成研究综述文章目录摘要一、Introduction二、Retrieval-AugmentedParadigm2.1Formulation2.2RetrievalSources2.3RetrievalMetrics2.4Integration3DialogueResponseGeneration4MachineTranslation4.1TranslationMemoryinSMT4
多喝开水少熬夜·2023-12-30 21:18

LLM之RAG理论（三）| 高级RAG技术全面汇总

检索增强生成（Retrieval-AugmentedGeneration，又称RAG）通过检索LLMs之外的数据源来支持其生成答案。
wshzd·2023-12-30 20:49

OpenCV-Python(21)：轮廓层次结构

目标学习轮廓的层次结构，了解轮廓之间的父子关系原理在前面的内容中我们使用函数cv2.findContours()来查找轮廓的时候，我们会传入一个参数:轮廓提取模式（Contour_Retrieval_Mode
图灵追慕者·2023-12-30 20:15

解决 Failed to obtain JDBC Connection； nested exception is java.sql.SQLNonTransientConnectionExceptio

是数据库的连接的问题FailedtoobtainJDBCConnection;nestedexceptionisjava.sql.SQLNonTransientConnectionException:PublicKeyRetrievalisnotallowed
文森特的猫·2023-12-29 17:10

「悦数图数据库」获 2023 年度 IT168 创新解决方案奖标题】

图技术结合大模型技术，未来新方向RAG，即Retrieval-AugmentedGeneration，是一种结合了信息检索与生成模型的技术。
悦数图数据库·2023-12-29 10:04

Public Key Retrieval is not allowed出现原因以及解决方法

昨天一切还正常的服务，今天就出现这个问题一、问题出现的原因当禁用SSL/TLS协议传输之后，客户端会使用服务器的公钥进行传输，默认情况下客户端不会主动去找服务器拿公钥，进而会出现错误出现PublicKeyRetrieval
zhang__1234·2023-12-28 06:26

nlp spacy_使用spacy nlp第4部分命名实体识别器

nlpspacyNamedEntityRecognitionisthemostimportant,orIwouldsay,thestartingstepinInformationRetrieval.InformationRetrievalisthetechniquetoextractimportantandusefulinformationfromunstructuredrawtextdocume
weixin_26721705·2023-12-27 14:26

微服务项目遇到的小问题

com.mysql.jdbc.exceptions.jdbc4.MySQLNonTransientConnectionException:PublicKeyRetrievalisnotMySQL8.0版本导致的问题
kk变色龙13·2023-12-25 12:01

Portswigger sql注入

lab1:SQLinjectionvulnerabilityinWHEREclauseallowingretrievalofhiddendata给出了sql语句SELECT*FROMproductsWHEREcategory
丨Arcueid丨·2023-12-24 00:46

1.倒排索引 && 2.逻辑斯提回归算法

1.倒排索引https://help.aliyun.com/zh/open-search/retrieval-engine-edition/introduction-to-inverted-indexes
Wzideng·2023-12-22 18:40

【论文阅读笔记】Tag-assisted multimodal sentiment analysis under uncertain missing modalities

ZhouJ.Tag-assistedmultimodalsentimentanalysisunderuncertainmissingmodalities[C]//Proceedingsofthe45thInternationalACMSIGIRConferenceonResearchandDevelopmentinInformationRetrieval
cskywit·2023-12-21 20:28

同济&复旦团队的最新综述：大语言模型的检索增强生成

文章目录一、前言二、主要内容三、总结CSDN叶庭云：https://yetingyun.blog.csdn.net/一、前言论文题目：《Retrieval-AugmentedGenerationforLargeLanguageModels
叶庭云·2023-12-21 11:28

mysql Public Key Retrieval is not allowed

问题原因：密码加密使用了sha2插件查询mysql.user插件selecthost,user,pluginfrommysql.user;修改密码插件ALTERUSERroot@localhostIDENTIFIEDWITHmysql_native_passwordBY'123456';ALTERUSER'root'@'%'IDENTIFIEDWITHmysql_native_passwordBY
大大蚊子·2023-12-20 13:11

中文分词系列（一） 双数组Tire树(DART)详解

双数组Tire树是Tire树的升级版，Tire取自英文Retrieval中的一部分，即检索树，又称作字典树或者键树。下面简单介绍一下Tire树。
蚊子_banner·2023-12-20 08:21

RAG（检索增强生成）技术

1.基本概念检索增强LLM(RetrievalAugmentedLLM)，简单来说，就是给LLM提供外部数据库，对于用户问题(Query)，通过一些信息检索(InformationRetrieval,IR
IT斜杆青年·2023-12-19 15:18

Exposing and Mitigating Spurious Correlations for Cross-Modal Retrieval暴露和减轻跨模态检索的虚假相关性

Abstract模式检索方法是在数据库中搜索与查询图像最匹配的文本的首选工具，反之亦然。然而，图像文本检索模型通常学习记住训练数据中的虚假相关性，例如频繁的对象共现，而不是查看图像中预测的实际根本原因。对于图像文本检索，这体现在提及查询图像中不存在的对象的检索句子中。在这项工作中，我们引入了ODmAP@k，一种对象去相关度量，用于衡量模型对训练数据中的虚假相关性的鲁棒性。我们使用自动图像和文本操作
Mars_prime·2023-12-19 08:33

必读论文|信息检索与推荐必读论文10篇

信息检索与推荐Topic必读论文信息检索（InformationRetrieval，IR）是指信息的表示、存储、组织和访问。信息推荐（Informat
学术头条·2023-12-18 17:04

阅读笔记-SVDNet for pedestrian retrieval

image.png来源：ICCV2017，LiangZheng大神这篇文章还是蛮好理解的，就按自己理解思路来介绍吧。Motivation这篇文章是17年的文章，当时的背景：基于深度的reid方法一般还是三部分组成：1）训练集先训练一个分类器；2）从分类器前一层的FC层抽取图像特征；3）通过欧氏距离或者cosine距离进行相似度计算以排序。在这个背景下，由于分类样本本身的不均衡性，作者就发现抽取特征
熙熙江湖·2023-12-17 18:24
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他