N-gram语言模型

【LangChain】LLM

LangChain学习文档基础【LangChain】LLM概述LLMChain是一个简单的链，它围绕语言模型添加了一些功能。它在整个LangChain中广泛使用，包括在其他链和代理中。
山鬼谣me·2023-09-25 23:05

试谈语言模型中无监督非结构化知识融入

ReadingGroup的pdf版本blog版本结构化/纯文本之前的一系列将知识融入BERT的工作大多基于entity三元组这种结构化数据.这就要求有大量且高质量的人工标注(当然我们有HowNet,WordNet,WikiData),人工标注必然出现大量噪声,结构化数据更新周期普遍更长.MLM的无监督是否是无监督的极限(当然ERNIE2.0那种偏语法的任务也可以算),能否有一种无监督或者弱监督的任
gunjianpan·2023-09-25 22:28

深度语言模型-AlBert

Google在2020年提出了AlBert模型。模型是对Bert的改进，效果肯定要好，不然怎么是改进呢，貌似说的是废话。闲言碎语不要讲，直接上结论：image.png各项都很牛到底做什么，让他变得如此强大？Factorizedembeddingparameterization词的embeding长度E，没必要跟特征提取器transformer的隐层向量H长度相等。考虑到词的编码是静态，就本身代表的
南朝容止·2023-09-25 19:42

基于transformer一步一步训练一个多标签文本分类的BERT模型

Bert（BidirectionalEncoderRepresentationsfromTransformers）是一种基于Transformer架构的预训练语言模型，由Google在2018年提出。
人工智能研究所·2023-09-25 19:32

Generative AI 新世界 | 扩散模型原理的代码实践之采样篇

在上一期的文章中，探讨了在AmazonSageMakerStudio上使用QLoRA等量化技术微调Falcon40B大语言模型。
·2023-09-25 19:00

Generative AI 新世界 | 扩散模型原理的代码实践之采样篇

在上一期的文章中，探讨了在AmazonSageMakerStudio上使用QLoRA等量化技术微调Falcon40B大语言模型。
亚马逊云开发者·2023-09-25 19:51

使用 FHE 实现加密大语言模型

近来，大语言模型(LLM)已被证明是提高编程、内容生成、文本分析、网络搜索及远程学习等诸多领域生产力的可靠工具。
Hugging Face·2023-09-25 19:45

Generative AI 新世界 | 扩散模型原理的代码实践之采样篇

在上一期的文章中，探讨了在AmazonSageMakerStudio上使用QLoRA等量化技术微调Falcon40B大语言模型。
亚马逊云开发者·2023-09-25 19:45

代码生成优化：微调Falcon40b

Falcon40b是当前最大的开源大语言模型之一，且采用商业友好的Apache2.0许可证。这使得对于希望将NLP产品推向市场的开发者来说，它具有相当大的吸引力。
·2023-09-25 18:55

人工智能：ChatGPT与其他同类产品的优缺点对比

ChatGPT作为一种强大的语言模型，具有出色的生成能力和上下文理解能力。本文将对比ChatGPT与其他同类产品的优缺点，并展示使用ChatGPT进行对话生成的示例代码。
程序猿看视界·2023-09-25 16:42

MLC-LLM大语言模型部署实战（基于CUDA）

1.简介MLC-LLM为5月初开源的一款基于ApacheTVMUnity、专门用于在不同硬件设备上部署大语言模型的框架；github仓库：https://github.com/mlc-ai/mlc-llmMLC-LLM
wangx569·2023-09-25 16:29

BERT 快速理解——思路简单描述

定义：BERT（BidirectionalEncoderRepresentationsfromTransformers）是一种预训练的语言模型，它基于Transformer架构，通过在大规模的未标记文本上进行训练来学习通用的语言表示
A half moon·2023-09-25 16:58

基于KubeFATE的FATE-LLM任务实战

随着大型语言模型的不断蓬勃发展，相关新模型，新应用和新范式也在不断涌现，自4月发布以来，FATE-LLM已经迭代发布了多个版本，不断完善大语言模型在联邦学习场景下的支持，以解决构建、使用大模型时的数据隐私保护问题以及公域数据短缺
VMware中国研发中心·2023-09-25 16:55

LLM 10-大模型之Adaptation

LLM10-大模型之Adaptation使用语言模型（例如在上下文学习中）通过仅给出提示，我们已经能够执行一些任务。
Gocara·2023-09-25 16:15

LLM 11-环境影响

LLM11-环境影响在本章中，首先提出一个问题：大语言模型对环境的影响是什么？
Gocara·2023-09-25 16:15

大模型从入门到应用——LangChain：代理（Agents）-[代理执行器（Agent Executor）：结合使用Agent和VectorStore]

分类目录：《大模型从入门到应用》总目录LangChain系列文章：基础知识快速入门安装与环境配置链（Chains）、代理（Agent:）和记忆（Memory）快速开发聊天模型模型（Models）基础知识大型语言模型
von Neumann·2023-09-25 14:19

【评论内容关键词提取】多种主流提取算法与大模型测试

文章目录1.写在前面2.TextRank关键词提取算法3.TFIDF算法4.jionlp算法5.sklearn算法6.Rake算法7.hanlp情感分析8.大语言模型1.写在前面  做过舆情项目或文本内容情感分析的大家都知道
吴秋霖·2023-09-25 12:01

Optimizing Instruction-Following Language Models with External Knowledge for Automated Fact-Checking

OptimizingInstruction-FollowingLanguageModelswithExternalKnowledgeforAutomatedFactFactLLaMA：利用外部知识优化指令遵循语言模型实现自动事实核查摘要
UnknownBody·2023-09-25 11:27

Knowledge-tuning Large Language Models with Structured Medical Knowledge Bases for Reliable Response

具有结构化医学知识库的知识调整大型语言模型用于中文可靠响应生成摘要引言相关工作方法实验讨论结论摘要大型语言模型（LLM）在一般领域的各种自然语言
UnknownBody·2023-09-25 11:27

CFGPT: Chinese Financial Assistant with Large Language Model

CFGPT：大型语言模型的中文财务助理摘要1引言2相关工作3数据集4模型和训练5应用6结论摘要大型语言模型（LLM）在金融领域的自然语言处理任务中显示出巨大的潜力。
UnknownBody·2023-09-25 11:26

如何让ChatGPT为留学生所用？

而这一切都要“归功”于以ChatGPT为代表的大语言模型（LLMs）。问世不到一年，ChatGPT几乎已经占据了各个行业。毋庸置疑，LLMs能替代一部分的劳动力，更高效地推进产业更新。
Do1twell·2023-09-25 09:01

GPT研究

1.分词2.embedding在大型语言模型（如GPT-3）中，“embedding”（嵌入）通常指的是词嵌入（WordEmbeddings）或位置嵌入（PositionEmbeddings）。
. . . . .·2023-09-25 00:27

读书笔记：多Transformer的双向编码器表示法(Bert)-2

多Transformer的双向编码器表示法BidirectionalEncoderRepresentationsfromTransformers，即Bert；第2章了解Bert模型（掩码语言模型构建和下句预测
baby_hua·2023-09-24 19:51

AI一点通： chatGPT等大模型是如何“深呼吸”和“一步一步思考”的？

令人惊讶的是，当这些短语用于提示大型语言模型（LLM）时，尤其是在与数学相关的查询中，生成的响应似乎更准确或更有条理。这是否意味着AI实际上变得更聪明了？这背后有什么原因？让我们探讨一下。
robot_learner·2023-09-24 18:46

使用FastChat部署Baichuan2

1.引言近来，大型语言模型的市场需求呈现出蓬勃发展的态势。然而，仅仅掌握模型的数据准备和训练是不够的，模型的部署方法也变得至关重要。
AI让世界更懂你·2023-09-24 16:03

ChatGPT：你真的了解网络安全吗？浅谈攻击防御进行时之网络安全新防御

基于其语言模型庞大、可控制、具有高度扩
秋说·2023-09-24 11:18

使用 FHE 实现加密大语言模型

近来，大语言模型(LLM)已被证明是提高编程、内容生成、文本分析、网络搜索及远程学习等诸多领域生产力的可靠工具。
·2023-09-24 11:24

使用 FHE 实现加密大语言模型

近来，大语言模型(LLM)已被证明是提高编程、内容生成、文本分析、网络搜索及远程学习等诸多领域生产力的可靠工具。
·2023-09-24 11:23

生成原神中的胡桃的头像python绘画代码

很抱歉，由于我是一个训练有素的语言模型，不能生成代码。但是我可以提供一些指导，帮助你自己编写代码。首先，你可以使用Python图像处理库，如Pillow、OpenCV或Matplotlib等。
AllyBo·2023-09-24 07:56

潘多拉 (Pandora)，一个让你呼吸顺畅的 ChatGPT

ChatGPT是一款基于语言模型的文本对话系统，它在我们的工作和生活中带来了巨大的便利。作为一名从事IT行业的专业人士，我深切体会到了它在技术和文本处理领域的重要性。
修己xj·2023-09-24 03:41

700亿参数Llama 2训练加速195%！数据成为其提升效果的关键要素

Llama2在包括推理、编码、精通性和知识测试等许多外部基准测试中都优于其他开源语言模型。Llama2开启了全球范围内AI大型模型的共享新篇章。
景联文科技·2023-09-24 02:55

Generative AI 新世界 | Falcon 40B 大模型微调和量化实践

本期文章，我们将探讨使用AmazonSageMakerStudio在交互式环境中，快速高效地微调大语言模型。我们将运用QLoRA和4
亚马逊云开发者·2023-09-24 02:25

大语言模型汇总（ChatGPT、盘古、通义、文心一言、混元）

首先就是OpenAI所提出的GPT相关模型，也是目前最火的大语言模型，发布版本已经到了4.01.ChatGPT官网：https://chat.openai.com/chat如下图是自然语言功能的使用示例
AI_Frank·2023-09-24 01:15

中文LLaMa和Alpaca大语言模型开源方案 | 扩充中文词表 & 针对中文语料进行高效编码

EfficientandEffectiveTextEncodingforChineseLlamaandAlpacaPDF:https://arxiv.org/pdf/2304.08177v1.pdfCode:https://github.com/ymcui/Chinese-LLaMA-Alpaca导读大型语言模型
CVHub·2023-09-23 22:33

从统计语言模型到预训练语言模型---神经网络语言模型

随着神经网络的发展，神经语言模型（NeuralNetworkLanguageModels，NNLM）展现出了比统计语言模型更强的学习能力，克服了N-gram语言模型的维度灾难，并且大大提升了传统语言模型的性能
hanscalZheng·2023-09-23 22:16

从统计语言模型到预训练语言模型---预训练语言模型（Transformer）

计算机视觉领域采用ImageNet对模型进行一次预选训练，使得模型可以通过海量图像充分学习如何提取特征，然后再根据任务目标进行模型精调的范式影响，自然语言处理领域基于预训练语言模型(Pre-trainedModel
hanscalZheng·2023-09-23 22:16

从统计语言模型到预训练语言模型---统计语言模型

语言模型从历史上来看，自然语言处理的研究范式变化是从规则到统计，从统计机器学习到基于神经网络的深度学习，这同时也是语言模型发展的历史。要了解语言模型的发展历史，首先我们需要认识什么是语言模型。
hanscalZheng·2023-09-23 22:15

从统计语言模型到预训练语言模型---预训练语言模型（BERT，GPT，BART系列）

基于Transformer架构以及Attention机制，一系列预训练语言模型被不断提出。
hanscalZheng·2023-09-23 22:09

Qwen-VL：多功能视觉语言模型，能理解、能定位、能阅读等

Overview总览摘要1引言2方法2.1模型结构2.2输入输出3训练3.1预训练3.2多任务预训练3.3监督finetune4评测4.1图像文本描述和视觉问答4.2面向文本的视觉问答4.3指代表达理解4.4视觉语言任务中的小样本学习4.4现实用户行为下的指令遵循5相关工作6总结与展望附录A数据集细节A.2视觉问答A.3定位A.4文本识别B多任务预训练的数据格式C超参数总览题目:Qwen-VL:A
猴猴猪猪·2023-09-23 21:00

大模型从入门到应用——LangChain：代理（Agents）-[代理执行器（Agent Executor）：处理解析错误、访问中间步骤和限制最大迭代次数]

分类目录：《大模型从入门到应用》总目录LangChain系列文章：基础知识快速入门安装与环境配置链（Chains）、代理（Agent:）和记忆（Memory）快速开发聊天模型模型（Models）基础知识大型语言模型
von Neumann·2023-09-23 16:15

英伟达 nvidia 官方code llama在线使用

新一代编程语言模型CodeLlama面世：重新定义编程的未来随着人工智能和机器学习技术的迅速发展，我们现在迎来了一款革命性的大型编程语言模型——CodeLlama。
三块钱0794·2023-09-23 11:47

如何使用ChatGPT，而不是生成默认风格的八股文

但与所有强大的工具一样，ChatGPT和类似的大型语言模型(LLM)也有其局限性。在我从事人工智能工作的过程中，我多次偶然发现它们。如果您在业务中依赖ChatGPT而不了解其局限性，那是不科学的。
坐望云起·2023-09-23 10:57

吴恩达＋Open AI 《面向开发者的ChatGPT Prompt 工程》课程学习1——课程介绍

但是从开发者的角度来说，通过API调用LLM（largelanguagemodel大语言模型）来快速构建应用程序这个强大的功能被严重低估了。
会写代码的孙悟空·2023-09-23 08:23

ChatGPT竞争对手Writer，获得1亿美元融资；面向不同任务微调Llama-2经验总结

Writer自研了大语言模型Palmyra，并在医疗保健、营销、法律等领域进行了微调。它具备数据安全、操作透明和可解释性，并提供多种个性化功能。Writer适用于各种主流业
go2coding·2023-09-23 05:56

OpenAI官方吴达恩《ChatGPT Prompt Engineering 提示词工程师》（7）聊天机器人 / ChatBot

聊天机器人/ChatBot使用大型语言模型来构建你的自定义聊天机器人在本视频中，你将学习使用OpenAIChatCompletions格式的组件构建一个机器人。
李又懂·2023-09-23 05:54

OpenAI官方吴达恩《ChatGPT Prompt Engineering 提示词工程师》（4）推理/Inferring

而在大型语言模型，对于类似的任务，只需要编
李又懂·2023-09-23 05:23

OpenAI官方吴达恩《ChatGPT Prompt Engineering 提示词工程师》（6）扩写 / Expanding

扩写/Expanding扩展是将短的文本片段，比如一组说明或一系列主题，并让大型语言模型生成更长的文本，比如生成文章，或者电子邮件。
李又懂·2023-09-23 05:51

杂记 | Langchain中few-shot提示词模板的使用（给提示词添加示例）

文章目录01普通的提示词模板02few-shot提示词模板Langchain是一个集成多个大语言模型的开源框架，可以使用它来快速开发大语言模型应用。
程序猿林仔·2023-09-23 05:36

【LLM系列之Tokenizer】如何科学地训练一个LLM分词器

计算机（即语言模型(LM)或查找
致Great·2023-09-23 03:45

大模型从入门到应用——LangChain：代理（Agents）-[工具（Tools）：人工确认工具验证和Tools作为OpenAI函数]

分类目录：《大模型从入门到应用》总目录LangChain系列文章：基础知识快速入门安装与环境配置链（Chains）、代理（Agent:）和记忆（Memory）快速开发聊天模型模型（Models）基础知识大型语言模型
von Neumann·2023-09-22 18:55
上一页 63 64 65 66 67 68 69 70 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他