N-gram语言模型

揭秘高效大型语言模型：技术、方法与应用展望

近年来，大型语言模型（LLMs）在自然语言处理领域取得了显著的进展，如GPT-series(GPT-3,GPT-4)、Google-series(Gemini,PaLM),Meta-series(LLAMA1&
机器学习社区·2023-12-17 19:54

大型语言模型的幻觉研究｜减轻及避免大模型LLM幻觉（二）

“本文及上一篇综述了最近关于语言模型中幻觉问题的研究进展，主要集中在ChatGPT发布后的研究。文章讨论了如何评估、追踪和消除幻觉，并探讨了现有挑战和未来方向。
技术人生黄勇·2023-12-17 19:23

综述 | 揭秘高效大型语言模型：技术、方法与应用展望

深度学习自然语言处理原创作者：Xnhyacinth近年来，大型语言模型（LLMs）在自然语言处理领域取得了显著的进展，如GPT-series(GPT-3,GPT-4)、Google-series(Gemini
zenRRan·2023-12-17 19:52

论文分享 | NeurIPS 2023 使用大语言模型进行超参数优化

文章目录一、前言二、主要内容1.引言2.方法3.结果三、总结CSDN叶庭云：https://yetingyun.blog.csdn.net/一、前言FoundationModelsforDecisionMakingWorkshopatNeurIPS2023：UsingLargeLanguageModelsforHyperparameterOptimizationInsight：我们花了很多
叶庭云·2023-12-17 19:51

本地运行大语言模型并可视化(Ollama+big-AGI方案)

目前有两种方案支持本地部署，两种方案都是基于llamacpp。其中Ollama目前只支持Mac，LMStudio目前支持Mac和Windows。LMStudio：https://lmstudio.ai/Ollama：https://ollama.ai/download本文以Ollama为例step1首先下载zip文件,大概120M,解压并直接安装step2命令行终端运行命令ollamarunlla
小何才露尖尖角·2023-12-17 13:59

自然语言处理的相关基础知识（一）

自然语言处理的相关基础知识什么是语言模型语言模型的发展语言模型的评价指标：困惑度（Perplexity)什么是语言模型概念：语言模型是计算一个句子是句子的概率的模型。
谢城·2023-12-17 12:28

NLP基础知识点：困惑度（Perplexity）

困惑度（Perplexity,PP）用来评估一个语言模型的好坏。我们知道语言模型是用来计算一个句子的概率，但实际中，我们
梆子井欢喜坨·2023-12-17 12:27

自然语言处理基础

自然语言处理基础自然语言处理基础文本的表示词的独热表示词的分布式表示词嵌入表示文本的词袋表示自然语言处理任务语言模型NLP基础任务NLP应用任务基本问题文本分类问题结构预测问题序列到序列问题自然语言处理基础文本的表示在使用字符串表示
沅有沚兮·2023-12-17 12:27

困惑度 | NLP中对"困惑度"感到困惑?

干货作者：时晴来自：炼丹笔记困惑度(Perplexity)在NLP中是个最流行的评估指标,它用于评估语言模型学的到底有多好.但是很多炼丹师可能至今对"困惑度"依然感到困惑,这篇就把这个讲清楚.假设我们要做个对话机器人
zenRRan·2023-12-17 12:57

NLP知识点 - perplexity 困惑度

(一)Perplexity困惑度（Perplexity，缩写为PPL）是衡量语言模型好坏的一个常用指标。
_春天_·2023-12-17 12:55

生成式AI的兴起，为物联网带来了怎样的机遇？

然而，如今随着ChatGPT和生成式AI、大语言模型的突飞猛进，这两者之间正形成一种深刻的默契合作，为物联网开辟着新的发展天地。生成式AI的兴起为物联网带来的首要机遇之一是语言交互的升级。
云长歌·2023-12-17 11:51

【评测】一个问题对比文心一言、讯飞星火、通义千问和无际Ai

ChatGPT的问世给大家带来了前所未有的影响，作为一种先进的人工智能语言模型，ChatGPT以其出色的自然语言处理能力和对话交互技巧，成为了人们日常生活中不可或缺的一部分。
无际Ai·2023-12-17 09:54

【尘缘送书第六期】2023年度学习：AIGC、AGI、GhatGPT、人工智能大模型实现必读书单

目录前言1《ChatGPT驱动软件开发》2《ChatGPT原理与实战》3《神经网络与深度学习》4《AIGC重塑教育》5《通用人工智能》6文末送书前言2023年是人工智能大语言模型大爆发的一年，一些概念和英文缩写也在这一年里集中出现
尘缘..·2023-12-17 09:06

2023 巅峰之作 | AIGC、AGI、GhatGPT、人工智能大语言模型的崛起与挑战

文章目录01《ChatGPT驱动软件开发》内容简介02《ChatGPT原理与实战》内容简介03《神经网络与深度学习》04《AIGC重塑教育》内容简介05《通用人工智能》目录2023年是人工智能大语言模型大爆发的一年
程序边界·2023-12-17 08:09

统一大语言模型和知识图谱：如何解决医学大模型-问诊不充分、检查不准确、诊断不完整、治疗方案不全面？

统一大语言模型和知识图谱：如何解决医学大模型问诊不充分、检查不准确、诊断不完整、治疗方案不全面？医学大模型问题如何使用知识图谱加强和补足专业能力？大模型结构知识图谱增强大模型的方法医学大模型问题问诊。
Debroon·2023-12-17 07:53

使用Pytorch从零开始构建LoRA

LoRA是Low-RankAdaptation或Low-RankAdapters的缩写，它提供了一种高效且轻量级的方法来微调预先存在的语言模型。
Garry1248·2023-12-17 07:47

DeepMind大型语言AI模型FunSearch在数学科学中取得新发现

大型语言模型(LLM)是有用的助手–它们擅长组合概念，并且可以阅读、编写和编码来帮助人们解决问题。但他们能发现全新的知识吗？
喜好儿aigc·2023-12-17 06:47

小狐狸GPT付费2.4.9弹窗版学习源码介绍

小狐狸GPT付费2.4.9弹窗版学习源码是一套基于GPT（GenerativePre-trainedTransformer）模型的开源代码库，旨在帮助开发者快速构建和训练自己的语言模型。
骆驼&沙漠·2023-12-17 05:53

AI技术延续，关键在场景落地

多模态大模型通常由两部分组成：视觉模型和语言模型。视觉模型用于处理图像、视频等视觉数据；语言模型用于处理文本、语音等语言数据。这两部分模型可以通过注意力机制等方式进行交互，从而实现多模态
AIGC方案·2023-12-17 02:25

第31期 | GPTSecurity周报

GPTSecurity是一个涵盖了前沿学术研究和实践经验分享的社区，集成了生成预训练Transformer（GPT）、人工智能生成内容（AIGC）以及大型语言模型（LLM）等安全领域应用的知识。
云起无垠·2023-12-17 02:17

大语言模型：开启自然语言处理新纪元

导言大语言模型，如GPT-3（GenerativePre-trainedTransformer3），标志着自然语言处理领域取得的一项重大突破。
鳗小鱼·2023-12-17 02:39

大模型微调技巧：在 Embeeding 上加入噪音提高指令微调效果

大家好，在去年分享过一篇ACL2022的文章，通过微调前给预训练模型参数增加噪音提高预训练语言模型在下游任务的效果方法。
深度学习算法与自然语言处理·2023-12-17 02:04

大语言模型续写completions

在语言模型中，"completions"指的是通过向模型提供一个上下文或部分文本，让模型继续或完成给定的文本。
weixin_37841024·2023-12-17 01:34

【Datawhale 大模型基础】第六章 大模型的模型架构（中文版）

6.1典型架构Transformer架构已成为创建各种LLMs的主导框架，使得语言模型的参数规模能够扩展到数百亿甚
皓哥好运来·2023-12-16 23:51

AutoGen实战应用(一)：代码生成、执行和调试

AutoGen是一个支持使用多个代理来开发大型语言模型(LLM)应用程序的框架，这些代理采样相互对话的方式来解决人类交给的任务。AutoGen代理是可定制的、可对话的，并且无缝地允许人类参与。
-派神-·2023-12-16 21:27

AI日报：麻省理工学院专家呼吁扩大人工智能治理和监管

欢迎订阅专栏《AI日报》获取人工智能邻域最新资讯文章目录总览呼吁人工智能安全发展具体建议大语言模型知识产权其他麻省理工学院的政策简报概述了各部门对人工智能监管的必要性，强调了人工智能的法律和伦理治理挑战总览麻省理工学院的学者主张强制性的人工智能内容标签和更严格的人工智能法律
Nowl·2023-12-16 21:50

AI日报：苹果为使用Mac的人工智能开发者推出开源工具

总览苹果正在为开发人员提供新的工具，用于在其硬件上训练和运行大型语言模型。主要介绍开发理念苹果公司通过发布一系列新的开源人工智能工具，向开源人工智能领域致敬。
Nowl·2023-12-16 21:14

翻译: LLM大语言模型图像生成原理Image generation

文本生成是许多用户正在使用的，也是所有生成式人工智能工具中影响最大的。但生成式人工智能的一部分兴奋点也在于图像生成。目前也开始出现一些可以生成文本或图像的模型，这些有时被称为多模态模型，因为它们可以在多种模式中操作，如文本或图像。在这个视频中，我想与您分享图像生成是如何工作的。让我们来看看。只需一个提示，您就可以使用生成式人工智能生成一个从未存在过的人的美丽图片，或者一个未来主义场景的图片，或者像
AI架构师易筋·2023-12-16 20:25

LangChain学习一：模型-实战

3.1.2.1AIMessage（AI消息）3.1.2.2HumanMessage（用户消息）3.1.2.3SystemMessage（系统消息）3.1.2.4ChatMessage（聊天消息）3.2LLMs（大语言模型
代码浪人·2023-12-16 20:47

【Datawhale组队学习】2023年11月动手学大模型应用开发 —— 第一章 大模型简介

一、大模型基本概念大语言模型（英文：LargeLanguageModel，缩写LLM），也称大型语言模型，是一种人工智能模型，旨在理解和生成人类语言。
zadarmo_·2023-12-16 19:19

翻译: LLM工具使用和代理Tool use and agents

在这个视频中，我想与您分享LLM（大型语言模型）开始能够使用工具的情况，以及讨论一下前沿的“代理”主题，这是让LLM自己决定下一步采取什么行动的领域。让我们来看看。
AI架构师易筋·2023-12-16 19:14

人工智能对中国教育的影响

人工智能在小学教育中的应用作为一种智能语言模型，ChatGPT可以为小学生提供多方面的
独自vs灿烂·2023-12-16 19:05

揭开机器学习转换器架构的神秘面纱

最近，随着OpenAI公司的ChatGPT和Meta公司的LLama等大型语言模型的出现，转换器的受欢迎程度飙升。所有上述这些模型都建立在转换器架构的基础上，引起了业界极大的关注。
c++服务器开发·2023-12-16 19:06

2021-04-19

没有具体介绍体验了一下，可能是打开方式不对，总感觉没那么带感，测试截图如下：背景：今日，阿里巴巴达摩院发布中文社区最大规模预训练语言模型PLUG，其参数规模达270亿。
两千mu·2023-12-16 17:29

如何将LLMs封装成应用并在本地运行

最近我一直在致力于Ollama的工作，因此我花了很多时间思考如何在本地系统上运行大型语言模型（LLMs）以及如何将它们打包成应用程序。
AI 研习所·2023-12-16 16:39

生成式AI的兴起，为物联网带来了怎样的机遇？

如今ChatGPT和生成式AI、大语言模型的突飞猛进，与物联网有着怎样的关系？给物联网带来了什么样的发展机遇？目前又有哪些实际落地的行业应用？
趣味科技v·2023-12-16 16:03

TaskWeaver：代码优先的代理框架

大型语言模型(LLM)在自然语言理解和生成方面表现出了令人印象深刻的能力，导致它们在聊天机器人和虚拟助理等应用中得到使用。
南楚巫妖·2023-12-16 15:56

微软microsoft推出了最新的小型但强大的开源语言AI模型Phi-2

微软推出了最新的小型开源语言模型Phi-2。该模型只有27亿个参数，却能超过比它大25倍的模型的性能。Phi-2是微软Phi项目的一部分，旨在制作小而强大的语言模型。
喜好儿aigc·2023-12-16 14:30

序列模型，语言模型，RNN的相关概念

序列模型，语言模型，RNN循环神经网络（RNN）通过引入状态变量来存储过去的信息和当前的输入，从而确定当前的输出。这种结构使得RNN非常适合处理序列信息，因为它可以捕捉到序列中的时间依赖性。
hadiii·2023-12-16 11:50

语言模型及Word2vec与Bert简析

语言模型可以对一段文本的合理性概率进行估计，对信息检索，机器翻译，语音识别等任务有着重要的作用。
沧海之巅·2023-12-16 11:17

通义千问 Qwen-72B-Chat在PAI-DSW的微调推理实践

Qwen-72B-Chat是在Qwen-72B的基础上，使用对齐机制打造的基于大语言模型的AI助手。
Python算法实战·2023-12-16 11:04

南京农业大学研发古籍版的ChatGPT，AI大语言模型荀子面世

为响应古籍活化利用号召，推动大语言模型与古籍处理深度融合，以古籍智能化的研究为目的，南京农业大学国家社科基金重大项目“中国古代典籍跨语言知识库构建及应用研究”课题组与中华书局古联公司推出了一系列古籍处理领域大语言模型
喜好儿aigc·2023-12-16 07:14

「X」Embedding in NLP｜神经网络和语言模型 Embedding 向量入门

在「X」EmbeddinginNLP进阶系列中，我们介绍了自然语言处理的基础知识——自然语言中的Token、N-gram和词袋语言模型。
Zilliz Planet·2023-12-16 04:58

GPT-4：背景、技术特点、发展、应用与前景

其中，GPT-4（GenerativePre-trainedTransformer4）作为OpenAI公司推出的最新一代大型语言模型，凭借其卓越的性能和广泛的应用场景，引起了全球范围内的关注。
蒙奇·D·路飞-·2023-12-16 03:15

LLM（七）| Mamba：LLM新架构的浅探

目前大型语言模型（LLM）领域发展如火如荼，本文将重点探索在单个消费级GPU上可以有效运行的小型模型（≤7B个参数）。
wshzd·2023-12-16 02:53

【AIGC】prompt工程从入门到精通--用于破解LLM的prompt方法（大语言模型的黑客技术与防御）

破解提示（PromptHacking）是指通过操纵LLM的输入来利用LLM的漏洞的攻击类型。与通常利用软件漏洞的传统黑客攻击不同，破解提示依赖于精心设计的Prompt来欺骗法学硕士执行意想不到的操作。目前主要有三种（后续看到更多的再增加）：提示注入（promptinjection）：指将恶意或非预期内容添加到prompt中以诱导LLM的输出。即时泄露和越狱实际上是提示注入的特殊情况。即时泄露（pr
Code_LT·2023-12-16 02:18

【AIGC】大语言模型的采样策略--temperature、top-k、top-p等

总结如下：图片链接参考LLM解码-采样策略串讲LLM大模型解码生成方式总结LLM探索：GPT类模型的几个常用参数Top-k,Top-p,Temperature
Code_LT·2023-12-16 02:14

Video-LLaMA An Instruction-tuned Audio-Visual Language Model for Video Understanding 用于视频理解的指令调谐视听语言

1.摘要我们提出了一个多模态框架Video-LLaMA1，它使大型语言模型(LLM)能够理解视频中的视觉和听觉内容。视频-来自冻结的预训练视频和音频编码器和冻结的LLM的美洲驼引导跨模式训练。
庄园特聘拆椅狂魔·2023-12-16 02:25

chatgpt周刊第二期

(image-136f43-1679053920511)]一周资讯OpenAI公布GPT-4：更强更可靠可在考试中超过90%的人类3月14日），人工智能研究公司OpenAI公布了其大型语言模型的最新版本
zhaodsh·2023-12-16 01:06

AI聊天专题报告：ChatGPT全景图聊聊技术产品和未来

语言模型是一个1972年就出现的老古董，只是概率计算，ChatGPT擅长写作，但仅是鹦鹉学舌。大语言模型之大——参透万象24T的跨语言文本知识是人类的群体智慧，预训练模型是世界
人工智能学派·2023-12-16 00:30
上一页 33 34 35 36 37 38 39 40 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他