N-gram语言模型

大语言模型训练数据集（1）

CLUECorpusSmallCLUECorpusSmall包含新闻、社区互动、维基百科、评论语料。原始数据和细节描述在这里语料链接CLUECorpusSmall----https://share.weiyun.com/sC6PMhxxCLUECorpusSmall(BERT格式)----https://share.weiyun.com/9SPPGUOKNewsCommentaryv13(ZH-E
三更科技公社·2024-02-07 10:14

新添“代理”概念，用 GitHub Copilot 追求极致编码智能

大型语言模型（LLM）是在某个时间点上使用公共存储库数据进行训练的。这意味着它们对当前
全云在线allcloudonline·2024-02-07 10:25

商汤科技「日日新4.0」正式发布，多维度升级大模型体系，能力比肩GPT-4！

商汤科技推出的「日日新·商量大语言模型-通用版本（SenseChatV4）」，具备强大的语言能力，支持128K语境窗口长度，整体评测成绩水平比肩GPT4
BFT白芙堂·2024-02-07 09:19

学习知识记录

1、nnlm神经网络语言模型：ANeuralProbabilisticLanguageModel------阅读笔记_hx14301009的博客-CSDN博客2、Word2vec的skipgram模型输入是中心词和背景词
想努力的人·2024-02-07 08:36

【无标题】

构建航班到港时间预测的生成式语言模型数据集，需要将航班数据转换为适合模型处理的文本格式。以下是一个基本的步骤指南：1.数据收集首先，您需要收集关于航班的数据。
路人与大师·2024-02-07 07:10

LLM（大语言模型）——大模型简介

目录概述发展历程大语言模型的概念LLM的应用和影响大模型的能力、特点大模型的能力涌现能力（energentabilities）作为基座模型支持多元应用的能力支持对话作为统一入口的能力大模型的特点常见大模型闭源
1telescope·2024-02-07 05:45

LLM——大型语言模型简介

原视频更加生动，推荐有能力者可以去观看原视频大型语言模型简介-大型语言模型简介|Coursera（翻着翻着发现了别人写过类似的内容，但还是发出来了，毕竟也只是自己的记录而已，感谢捧场的各位）一.LLM是什么
LinkyuW·2024-02-07 05:45

【大模型】万亿级别的大语言模型训练，基础设施如何支持

万亿级别的大语言模型训练，基础设施如何支持前言1）培训百万亿参数的LLM是可行的，但需要每个GPU高达1TiB的次级内存池，双向带宽为100GB/s。
沐风—云端行者·2024-02-07 05:43

企业该如何以及何时聘用数据科学家

公司正在大力投资数据和数据基础设施，将数据用于业务中，无论是分析还是大型语言模型，都为业务的不同部分或面向客户的体验提供了动力。但也很容易被过度的营销所干扰，从而阻碍进步。
c++服务器开发·2024-02-07 05:42

论文阅读-Transformer-based language models for software vulnerability detection

share/biblios/D2xqz52xQJ4RKceFXAFaDU/您还可以一键导入到ivySCI文献管理软件阅读，并在论文中引用」本文主旨：本文提出了一个系统的框架来利用基于Transformer的语言模型来检测软件漏洞
Che_Che_·2024-02-07 04:27

论文阅读-Automated Repair of Programs from Large Language Models

现在基于大语言模型，输入自然语言，生成代码的应用非常普遍。
Che_Che_·2024-02-07 04:27

语音识别和播报模块学习（一）——设置唤醒词、命令词、播报音并生成固件

设置唤醒词、命令词、播报音并生成固件前言1、编辑生成表格2、登录AI语音平台3、语言模型开发4、播报音合成5、拷贝文件到指定目录6、升级固件（1）合并文件（2）打包和升级固件7、安装USB转串口模块驱动
东东不熬夜·2024-02-06 22:23

chartGPT网站

在人工智能日益发展的今天，大语言模型成为了我们生活与工作中不可或缺的一部分。它们能够帮助我们处理文本、回答问题、生成创意内容，甚至协助编程和数据分析。
地瓜伯伯·2024-02-06 20:09

【多模态MLLMs+图像编辑】MGIE：苹果开源基于指令和大语言模型的图片编辑神器（24.02.03开源）

项目主页：https://mllm-ie.github.io/论文:基于指令和多模态大语言模型图片编辑2309.GuidingInstruction-basedImageEditingviaMultimodalLargeLanguageModels
曾小蛙·2024-02-06 20:52

利用Docker Compose快速部署FastGPT知识库问答

FastGPT是一个基于LLM大语言模型的知识库问答系统，提供开箱即用的数据处理、模型调用等能力。同时可以通过Flow可视化进行工作流编排，从而实现复杂的问答场景！
aixiaoxin520·2024-02-06 20:49

部署私有知识库项目FastGPT

FastGPT是一个基于LLM大语言模型的知识库问答系统，提供开箱即用的数据处理、模型调用等能力。同时可以通过Flow可视化进行工作流编排，从而实现复杂的问答场景。
南七小僧·2024-02-06 20:48

GPT教我如何成为rapper

只有这三者结合才能让ChatGPT发挥出强大的语言模型能力。
西堂AI编程提效·2024-02-06 19:31

GPT教我如何成为rapper

只有这三者结合才能让ChatGPT发挥出强大的语言模型能力。GPT教我如何成为rapper-CSDN博客
西堂AI编程提效·2024-02-06 19:31

「天工2.0」MoE大模型发布

北京时间2月6日，昆仑万维正式发布新版MoE大语言模型「天工2.0」与新版「天工AI智能助手」APP，这是国内首个搭载MoE架构并面向全体C端用户免费开放的千亿级参数大语言模型AI应用。
光锥智能·2024-02-06 18:29

大模型 AI Agent 详细介绍

这些AI代理利用了大规模的语言模型（如GPT-3、BERT、T5等）或其他类型的模型（如图像识别模型、多模态模型等）来模拟人类行为和决策过程。
人生万事须自为，跬步江山即寥廓。·2024-02-06 13:19

基于LLM的业务流程自动化

OpenAIGPT-4等大型语言模型(LLM)在处理涉及类人文本生成的复杂任务方面取得了重大进展。然而，他们经常面临特定领域数据的挑战。LLM通常接受广泛（公开）数据
新缸中之脑·2024-02-06 13:53

基于LLM的数据漂移和异常检测

大型语言模型(LLM)的最新进展被证明是许多领域的颠覆性力量（请参阅：通用人工智能的火花：GPT-4的早期实验）。
新缸中之脑·2024-02-06 13:53

为什么先进的RAG方法对AI的未来至关重要?

检索增强生成（RAG）是生成式人工智能领域的一大进步，它将高效的数据检索与大型语言模型的强大功能结合在一起。
lichunericli·2024-02-06 13:52

开源大预言模型中的GGUF和GGML格式分别是什么意思

GGUF和GGML是用于存储推断模型的文件格式，特别是在语言模型如GPT（生成式预训练变换器）的背景下。让我们探讨一下它们之间的关键区别，以及各自的优缺点。
soragui·2024-02-06 12:14

使用CHATGPT进行论文写作的缺点和风险

进入ChatGPT，这是一种复杂的机器学习语言模型，有望减轻负担。提供您的主题和要点，这个AI聊天机器人将在眨眼间生成一篇结构化、连贯的文章。确实是一个诱人的前景。但是，ChatGP
do1twe11·2024-02-06 10:59

支持534种语言，开源大语言模型MaLA-500

无论是开源的LLaMA2还是闭源的GPT系列模型，功能虽然很强大，但对语言的支持和扩展比较差，例如，二者都是以英语为主的大模型。为了提升大模型语言的多元化，慕尼黑大学、赫尔辛基大学等研究人员联合开源了，目前支持语言最多的大模型之一MaLA-500。MaLA-500以LLaMA2为基础模型，再用多语言数据库Glot500-c进行语言扩展训练，支持语言达到了惊人的534种。开源地址：https://h
RPA中国·2024-02-06 10:18

大型语言模型（LLM）的优势、劣势和风险

最近关于大型语言模型的奇迹（）已经说了很多LLMs。这些荣誉大多是当之无愧的。让ChatGPT描述广义相对论，你会得到一个非常好（且准确）的答案。
MinIO官方账号·2024-02-06 08:03

自然语言处理 | (13)kenLM统计语言模型构建与应用

本篇博客中我们将学习如何使用KenLM工具构建统计语言模型，并使用它完成一个典型的'智能纠错'文本任务。
CoreJT·2024-02-06 07:21

【2024最全最细Langchain教程-10】Langchain记忆模块

【2024最全最细Lanchain教程-9】Langchain互联网查询-CSDN博客上节课我们介绍了如何利用langchain去加载互联网页面内容（中文信息）、向量化和利用大语言模型进行查询，这节课我们讲一下
AI小万老师·2024-02-06 07:34

LLM之RAG实战（二十二）| LlamaIndex高级检索（一）构建完整基本RAG框架（包括RAG评估）

在RAG（retrievalAugmentedGeneration，检索增强生成）系统中，检索到文本的质量对大型语言模型生成响应的质量是非常重要的。
wshzd·2024-02-06 06:40

LoRA：语言模型微调的计算资源优化策略

编者按：随着数据量和计算能力的增加，大模型的参数量也在不断增加，同时进行大模型微调的成本也变得越来越高。全参数微调需要大量的计算资源和时间，且在进行切换下游任务时代价高昂。本文作者介绍了一种新方法LoRA，可以在保持模型性能的同时大幅减少微调的参数量和所需资源。LoRA通过引入两个低秩适配矩阵，用矩阵乘法的方法替换大部分参数。实验证明，LoRA在多项NLP任务上的表现与许多微调方法（如Adapte
Baihai IDP·2024-02-06 06:53

【LangChain-04】利用权重和偏差跟踪和检查LangChain代理的提示

除了更强大且幸运的是开放的大型语言模型（LLM）之外，LangChain已成为开发人工智能驱动的应用程序和代理的主要工具。Langchain是一个功能强大且功能丰富的开源框架，适用于LLM。
无水先生·2024-02-06 06:06

Plus GPT API最有前途的应用领域

GPT-3API是由OpenAI开发的一种自然语言处理技术，它是当前最先进的语言模型之一。
橘子海_G·2024-02-06 05:45

深度学习系列57: 清华大模型MiniCPM上手

MiniCPM是面壁智能与清华大学自然语言处理实验室共同开源的系列端侧大模型，主体语言模型MiniCPM-2B仅有24亿（2.4B）的非词嵌入参数量1.上手对比测试mps比cpu大概快了9倍左右。
IE06·2024-02-06 02:53

今日arXiv最热NLP大模型论文：微软提出SliceGPT，删除25%模型参数，性能几乎无损

引言：探索大型语言模型的高效压缩方法随着大型语言模型（LLMs）在自然语言处理领域的广泛应用，它们对计算和内存资源的巨大需求成为了一个不容忽视的问题。
夕小瑶·2024-02-06 01:56

chatgpt对接网络

ChatGPT是OpenAI开发的一种基于语言模型的对话系统，可以与用户进行自然语言交互。为了实现ChatGPT的网络对接，需要将ChatGPT与网络进行集成，使其能够通过网络接口与用户进行对话。
红匣子实力推荐·2024-02-06 01:47

使用LlamaIndex，Qdrant，Ollama和FastAPI构建本地RAG api

人们现在将这些大型语言模型（LLMs）作为主要的个人助手来进行写作、头脑风暴甚至咨询。然而，这些LLMs的问题在于，它们的表现只能和它们接受的训练数据一样好。
ericliu2017·2024-02-06 00:54

GPT-4如何帮助大学生完成毕业设计与毕业论文？

GPT-4是一个由OpenAI开发的大型语言模型，它能够理解和生成人类般的文本。GPT-4
Blind.894·2024-02-05 23:51

最全AI工具汇总一（文本生成，图画，语音，生活助手，AI翻译）

AI问答国内免费使用的Chatgpt3.5URL:https://618ai.comText:ChatGPTChatGPT：优化对话的语言模型URL:https://chat.openai.com/Text
稚肩·2024-02-05 22:44

文心一言4.0API接入指南

概述文心一言是百度打造出来的人工智能大语言模型，具备跨模态、跨语言的深度语义理解与生成能力，文心一言有五大能力，文学创作、商业文案创作、数理逻辑推算、中文理解、多模态生成，其在搜索问答、内容创作生成、智能办公等众多领域都有更广阔的想象空间
小小晓晓阳·2024-02-05 20:37

使用 LoRA 在 viggo 数据集上微调 Microsoft phi-2 小语言模型

一、说明Microsoft的基于Transformer的小语言模型。它可以根据MIT许可在HuggingFace上使用。它在96个A100GPU上使用1.4T令牌进行了14天的训练。
无水先生·2024-02-05 18:54

GPT原始论文：Improving Language Understanding by Generative Pre-Training论文翻译

我们展示了通过在多样化的未标注文本语料库上对语言模型进行生成式预训练，随后对每个特定任务进行区分性微调，可以实现这些任务的大幅度改进。与以往的方法不同，我们在微调过程中使用了任务感知的输入转换，
iKang_dlut·2024-02-05 15:15

MiniCPM：揭示端侧大语言模型的无限潜力

OpenBMB/MiniCPM➤HuggingFace地址：https://huggingface.co/openbmb/MiniCPM-2B-sft-bf161简介MiniCPM是一系列端侧语言大模型，主体语言模型
智慧医疗探索者·2024-02-05 13:58

LLaMA 模型和DeepSpeed 框架联系与使用

1.LLaMA模型介绍LLaMA(LargeLanguageModel-MetaAI)是一个由MetaAI开发的大型语言模型。
samoyan·2024-02-05 13:28

清华系2B模型杀出，性能吊打LLaMA-13B

2月1日，面壁智能与清华大学自然语言处理实验室共同开源了系列端侧语言大模型MiniCPM，主体语言模型MiniCPM-2B仅有24亿（2.4B）的非词嵌入参数量。
智慧医疗探索者·2024-02-05 13:28

从领域外到领域内：LLM在Text-to-SQL任务中的演进之路

导语本文介绍了ODIS框架，这是一种新颖的Text-to-SQL方法，它结合了领域外示例和合成生成的领域内示例，以提升大型语言模型在In-contextLearning中的性能。
Q同学的nlp笔记·2024-02-05 11:26

ChatGPT高效提问—基础知识（LM、PLM以及LLM）

ChatGPT高效提问—基础知识（LM、PLM以及LLM）了解语言模型（languagemodel,LM）、预训练语言模型（pre-trainedlanguagemodel,PLM）和大型语言模型（largelanguagemodel
Bruce_Liuxiaowei·2024-02-05 08:11

复旦大学NLP团队发布86页大模型Agent综述

复旦大学自然语言处理团队（FudanNLP）发布了一篇长达86页的综述论文，探讨了基于大型语言模型的智能代理的现状和未来。
源代码杀手·2024-02-05 06:57

人工智能时代：AI提示工程的奥秘 —— 驾驭大语言模型的秘密武器

文章目录一、引言二、提示工程与大语言模型三、大语言模型的应用实践四、策略与技巧五、结语《AI提示工程实战：从零开始利用提示工程学习应用大语言模型》亮点内容简介作者简介目录获取方式一、引言随着人工智能技术的飞速发展
程序边界·2024-02-05 04:47

太强了，AI时代不容错过的技能！

随着AI的迅速发展，2024年AI模型开始从大型语言模型向大型视觉模型转变。数字人技术作为其分支之一，正日益成为科技、娱乐、教育等多个行业的焦点。
luobobiji·2024-02-05 04:40
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他