Language

RAFT：Adapting Language Model to Domain Specific RAG

论文链接简单来说，就是你SFT微调的时候得考虑RAG的场景。RAG什么场景？你检索top-k回来，里面有相关doc有不相关doc，后者是影响性能的重要原因，LLM需要有强大的识别能力才能分得清哪块和你的query相关。微调就是为了这个。你做领域微调时，根据chunk生成query、answer，然后直接拿这仨微调，这里面没有干扰项，没有“不相关doc”，就扛不住RAG的噪声。RAFT就是针对这个搞
蒸土豆的技术细节·2024-09-07 21:17

RAFT: Adapting Language Model to Domain Specific RAG

本文是LLM系列文章，针对《RAFT:AdaptingLanguageModeltoDomainSpecificRAG》的翻译。
UnknownBody·2024-09-07 21:43

7个 C# 高阶用法详解：从基础到实战

1.LINQ（LanguageIntegratedQuery）进阶用法LINQ提供了强大的查询功能，下面是一些进阶的应用场景。
一个代码猎人·2024-09-07 14:53

Time-LLM 开源项目使用教程

开源项目使用教程Time-LLM[ICLR2024]Officialimplementationof"Time-LLM:TimeSeriesForecastingbyReprogrammingLargeLanguageModels
袁菲李·2024-09-07 04:46

探索未来时间管理新方式：Time-LLM

Time-LLMTime-LLM[ICLR2024]Officialimplementationof"Time-LLM:TimeSeriesForecastingbyReprogrammingLargeLanguageModels
班歆韦Divine·2024-09-07 04:16

【数据存储】——JSON与XML的对比

1.定义介绍(1).XML定义扩展标记语言(ExtensibleMarkupLanguage,XML)，用于标记电子文件使其具有结构性的标记语言，可以用来标记数据、定义数据类型，是一种允许用户对自己的标记语言进行定义的源语言
星星学园·2024-09-06 12:04

C++11新特性综述

SpecificationofthelatestversionofC++(“C++11”)wascompletedin2011,andmanycompilersnowofferawealthoffeaturesfromtherevisedlanguage.Andsuchfeatures
CC-xx·2024-09-06 11:53

自然语言处理（NLP）

百度解释:自然语言处理(NaturalLanguageProcessing,NLP)是计算机科学领域与人工智能领域中的一个重要方向。它研究能实现人与计算机之
(ง •_•)ง up·2024-09-06 08:04

字节&约翰斯·霍普金斯&上交提出iBOT框架，基于MIM进行自监督训练，在ImageNet-1K上达到86.3%的微调精度！...

关注公众号，发现CV技术之美▊写在前面语言Transformer的成功主要归功于maskedlanguagemodeling（MLM）的预训练任务，其中文本首先被标记为语义上有意义的片段。
我爱计算机视觉·2024-09-06 07:00

【cocos creator】platform平台对应代码 2.x / 3.x

cocoscreator获取当前平台信息，2.4版本使用cc.sys.dump()可以打印所有平台信息：cc.sys.dump();打印结果：isMobile:falselanguage:zhbrowserType
老豆8·2024-09-06 07:57

matlab调用python_从 MATLAB 调用 Python

T='MATLAB(R)isahigh-levellanguageandinteractiveenvironm
weixin_39692253·2024-09-06 04:11

QT/QML 简介

QT/QMLQML（QtMetaLanguage或QtModelingLanguage）是一种用于设计用户界面的声明式语言，主要用于Qt框架。
可能只会写BUG·2024-09-06 00:12

Node.js Google Cloud Natural Language API 教程

Node.jsGoogleCloudNaturalLanguageAPI教程nodejs-languageThisrepositoryisdeprecated.Allofitscontentandhistoryhasbeenmovedtogoogleapis
江奎钰·2024-09-06 00:41

【论文阅读】LLM4CP: Adapting Large Language Models for Channel Prediction（2024）

摘要Channelprediction（信道预测）isaneffectiveapproach（有效方法）forreducingthefeedback（减少反馈）orestimationoverhead（估计开销）inmassivemulti-inputmulti-output（大规模多输入输出）(m-MIMO)systems.However,existingchannelpredictionmet
Bosenya12·2024-09-05 23:39

LLM资料大全：文本多模态大模型、垂直领域微调模型、STF数据集、训练微调部署框架、提示词工程等

LLM资料大全：文本多模态大模型、垂直领域微调模型、STF数据集、训练微调部署框架、提示词工程等自ChatGPT为代表的大语言模型（LargeLanguageModel,LLM）出现以后，由于其惊人的类通用人工智能
汀、人工智能·2024-09-05 22:31

【AI学习】简单聊聊后训练（Post-Training）的重要性

在预训练阶段，只是学习到了网络的平均水平，而通过后期的对齐和引导，模型是可以输出高于网上数据的平均水平的结果，进一步的，模型也可以自动的引导这个提升过程，就像《SELF-INSTRUCT:AligningLanguageMode
bylander·2024-09-05 19:39

You Only Cache Once: Decoder-Decoder Architectures for Language Models

这篇论文介绍了一种名为YOCO（YouOnlyCacheOnce）的新型解码器-解码器架构，专为大型语言模型设计，以提高推理效率和性能。以下是其核心内容的总结：YOCO架构关键特点：双重解码器结构：YOCO由自解码器和交叉解码器两部分组成，自解码器生成全局键值（KV）缓存，交叉解码器通过交叉注意力机制重用这些缓存。单次缓存：与标准Transformer相比，YOCO只缓存一次KV对，显著减少了GP
YiHanXii·2024-09-05 19:08

Hive DML（数据操作语言）操作指南

目录DML（DataManipulationLanguage）数据操作Load1）语法2）实操案例Insert将查询结果插入表中1）语法2）案例将给定Values插入表中1）语法2）案例将查询结果写入目标路径
大数据深度洞察·2024-09-05 14:34

大模型--个人学习心得

大模型LLM定义大模型LLM，全称LargeLanguageModel，即大型语言模型LLM是一种基于Transformer架构模型，它通过驯良大量文本数据，学习语言的语法、语义和上下文信息，从而能够对自然语言文本进行建模这种模型在自然语言处理
挚爱清&虚·2024-09-05 12:27

数据库课程设计mysql

1.简介1.1.概述MySQL是一个开源的关系型数据库管理系统（RDBMS），它使用了StructuredQueryLanguage（SQL）来操作和查询数据。
丁爸·2024-09-05 11:18

C# XML 使用教程

使用教程XML是什么介绍组成XML与HTML的区别C#中如何使用XML序列化根元素子元素序列化方法反序列化反序列化方法序列化与反序列化实例XML是什么介绍可扩展标记语言(ExtensibleMarkupLanguage
十⑧·2024-09-05 11:16

YOLOV5入门教程-yolov5s.yaml文件

一、YAML的定义YAML（YAMLAin'tMarkupLanguage）是一种人类友好的数据序列化格式，用于表示数据结构和配置文件。
ustcthebest·2024-09-05 10:13

数据库系统概论——关系数据库标准语言SQL

1、SQL概述SQL(StructuredQueryLanguage）：结构化查询语言，是关系数据库的标准语言。
time_silence·2024-09-04 20:44

简述html文档基本结构,html概述及html文档基本结构

html概述HTML是HyperTextMark-upLanguage的首字母简写，意思是超文本标记语言，超文本指的是超链接，标记指的是标签，是一种用来制作网页的语言，这种语言由一个个的标签组成，用这种语言制作的文件保存的是一个文本文件
weixin_39626181·2024-09-04 12:47

JavaWeb知识点总结

》一：创建Web项目项目说明：1、javaResources：java源文件2、WebContent:网页内容html、css、js、jsp、资源、配置文件等HTML:HyperTextMarkupLanguage
weixin_30294295·2024-09-04 03:20

HannahLin的ScalersTalk第四轮新概念朗读持续力训练Day 143 20190227

1AskeletoninthecupboardWeoftenreadinnovelshowaseeminglyrespectablepersonorfamilyhassometerriblesecretwhichhasbeenconcealedfromstrangersforyears.TheEnglishlanguagepossessesavividsayingtodescri
HannahLin·2024-09-04 02:20

GPT 模型简史：从 GPT-1 到 GPT-4

3到InstructGPTGPT-3.5、Codex和ChatGPTGPT-4GPT-1    2018年年中，就在Transformer架构诞生⼀年后，OpenAI发表了⼀篇题为“ImprovingLanguageUnderstandingbyGenerativePre-Training
三月七꧁ ꧂·2024-09-03 19:04

【大模型】Agent基础知识

目录1.基本框架2.常见推理模式2.1ReAct:SynergizingReasoningandActinginLanguageModels2.2Reflection2.3LATS:LanguageAgentsTreeSearch3
idiotyi·2024-09-03 19:32

hive学习记录

Hive将HQL（HiveQueryLanguage）转化成MapReduce程序或其他分布式计算引擎（如Tez、Spark）的任务进行计算。
2302_80695227·2024-09-03 12:46

[论文笔记] LLM模型剪枝

AttentionIsAllYouNeedButYouDon’tNeedAllOfItForInferenceofLargeLanguageModelsLLaMA2在剪枝时，跳过ffn和跳过fulllayer
心心喵·2024-09-03 08:53

3.9 Browser -- usePreferredLanguages

3.9Browser–usePreferredLanguageshttps://vueuse.org/usePreferredLanguages作用它为web开发人员提供有关用户首选语言的信息。
weixin_mouren·2024-09-03 01:08

使用Python和大模型进行数据分析和文本生成

随着大模型（LargeLanguageModels,LLMs）如GPT-4的崛起，我们能够利用这些模型实现诸多复杂任务，从文本生成到智能对话、数据分析等等。
lizi88888·2024-09-02 22:20

[The RUST Programming Language]Chapter 5. Using Structs to Structure Related Data

UsingStructstoStructureRelatedDataDefiningandInstantiatingStructs定义并实例化结构UsingtheFieldInitShorthandwhenVariablesandFieldsHavetheSameName当变量和字段名字相同时，使用字段速记初始化CreatingInstancesFromOtherInstancesWithStru
「已注销」·2024-09-02 21:11

遥感多模态基础大模型汇总-实时更新

遥感基础大模型TableofContentsModelsRemoteSensingVisionFoundationModels遥感视觉基础模型RemoteSensingVision-LanguageFoundationModels
遥感-GIS·2024-09-02 19:33

SQL SUM() 函数

SQLSUM()函数概述SQL（StructuredQueryLanguage）是一种用于管理关系数据库管理系统（RDBMS）的标准编程语言。
wjs2024·2024-09-02 14:04

整理了上百个开源中文大语言模型，涵盖模型、应用、数据集、微调、部署、评测_基于大语言模型的网络自动配置平台的设计与开发

自ChatGPT为代表的大语言模型（LargeLanguageModel,LLM）出现以后，由于其惊人的类通用人工智能（AGI）的能力，掀起了新一轮自然语言处理领域的研究和应用的浪潮。
AI大模型-搬运工·2024-09-02 07:20

【论文笔记】Training language models to follow instructions with human feedback B部分

TraininglanguagemodelstofollowinstructionswithhumanfeedbackB部分回顾一下第一代GPT-1：设计思路是“海量无标记文本进行无监督预训练+少量有标签文本有监督微调
Ctrl+Alt+L·2024-09-02 01:12

乡村振兴战略下传统村落文化旅游设计 Paperback – Aug. 1 2022 Chinese edition by XU SHAO HUI (Author)

乡村振兴战略下传统村落文化旅游设计Paperback–Aug.12022ChineseeditionbyXUSHAOHUI(Author)Language:Chinese.paperback.PubDate
光明理论·2024-09-02 00:37

Second-Order Information Matters: Revisiting Machine Unlearning for Large Language Models

本文是LLM系列文章，针对《Second-OrderInformationMatters:RevisitingMachineUnlearningforLargeLanguageModels》的翻译。
UnknownBody·2024-09-01 20:46

通义千问-VL-Chat-Int4

Qwen-VL是阿里云研发的大规模视觉语言模型（LargeVisionLanguageModel,LVLM）。Qwen-VL可以以图像、文本、检测框作为输入，并以文本和检测框作为输出。
九品神元师·2024-09-01 20:42

解惑深度学习中的困惑度Perplexity

语言模型(languagemodel)可以预测序列(比如一个句子)中每个时间步词元(比如一个句子中的逐个单词)的概率分布，继而计算一个序列的概率。
Axlsss·2024-09-01 20:11

CLIP-Adapter: Better Vision-Language Models with Feature Adapters

对比语言图像预训练（CLIP）虽然prompt-tuning用于textualinputs，但是建议CLIPAdapter在视觉或语言分支上使用功能适配器进行fine-tuneCLIPAdapter采用了一个额外的瓶颈层来学习新的特征，并将剩余的特征与原始的预训练特征进行混合。为了更好地适应vision语言模型，使用功能适配器，而不是快速调整1.ClassifierWeightGeneration
Tsukinousag·2024-09-01 19:22

大模型对齐方法笔记一：DPO及其变种IPO、KTO、CPO

DPODPO(DirectPreferenceOptimization)出自2023年5月的斯坦福大学研究院的论文《DirectPreferenceOptimization:YourLanguageModelisSecretlyaRewardModel
chencjiajy·2024-09-01 15:36

人工智能相关资源 代码 论文 教程Tutorials 等 Prompt-Engineering 深度学习 辅助驾驶 语言模型 文本生成图片 开源实现 OCR 通用聊天机器人

https://github.com/luban-agi/Awesome-AIGC-Tutorialshttps://github.com/BradyFU/Awesome-Multimodal-Large-Language-Modelshttps
EwenWanW·2024-09-01 12:22

JavaScript语言的基本语法、window 对象、URLSearchParams 对象

所谓“脚本语言”（scriptlanguage），指的是它不具备开发操作系统的能力，而是只用来编写控制其他大型应用程序（比如浏览器）的“脚本
小陈陈一·2024-09-01 07:16

python打包中文报错,解决python3+Gooey使用pyinstaller打包时无法输出中文的问题

fromgooeyimportGooey,GooeyParserdefrun(keywords):print(keywords)@Gooey(richtext_controls=True,#打开终端对颜色支持language
wesinnn·2024-09-01 06:14

vsCode保存代码自动格式化

octref.vetur"},"files.autoSave":"off","eslint.validate":["javascript","javascriptreact","vue-html",{"language
花开富贵城·2024-09-01 02:21

《BERT基础教程：Transformer大模型实战》读书笔记

NLI，Naturallanguageinference，自然语言推理。知识蒸馏(knowledged
johnny233·2024-08-31 19:39

要想孩子英语好，这个全球著名的外语学习理论，必须知道

目前在全球范围内，流传最广，认可度最高的就是美国语言学家克拉申（StephenKrashen)的第二语言习得理论（SecondLanguageAcquisition）。
小Oly英语启蒙·2024-08-31 17:28

大语言模型原理与工程实践：混合微调策略

大语言模型原理与工程实践：混合微调策略作者：禅与计算机程序设计艺术/ZenandtheArtofComputerProgramming1.背景介绍1.1问题的由来随着深度学习技术的迅猛发展，大语言模型（LargeLanguageModels
AGI通用人工智能之禅·2024-08-31 15:13
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他