E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
ERNIE
一文读懂文心大模型
ERNIE
的技术、工具与平台
文章整理自百度杰出研发架构师孙宇的主题演讲——文心大模型
ERNIE
的技术、工具与平台。
飞桨PaddlePaddle
·
2022-11-23 10:28
详细介绍百度
ERNIE
:通过知识集成增强表示
文章目录
ERNIE
简介相关工作采用矢量表示单词,上下文无关的表示采用上下文来预测丢失的单词,没有考虑先验知识采用异构数据
ERNIE
的详细实现Transformer编码器知识整合基本级别掩码短语级别掩码实体级别掩码实验异构语料库预训练
若年封尘
·
2022-11-23 10:27
深度学习
百度
人工智能
深度学习
ERNIE
推广TrustAI可信分析:通过提升数据质量来增强在
ERNIE
模型下性能
项目链接:https://aistudio.baidu.com/aistudio/projectdetail/4622139?contributionType=1fork一下,由于内容过多这里就不全部写出来了。前言TrustAI是集可信分析和增强于一体的可信AI工具集,助力NLP开发者提升深度学习模型效果和可信度。在后续应用中,希望将TrustAI和智能标注以及模型构螺迭代打造持续学习链路。解决训
汀、
·
2022-11-22 23:04
NLP
人工智能
机器学习
深度学习
PaddleHub实战篇{
ERNIE
实现文新闻本分类、
ERNIE
3.0 实现序列标注}【四】
相关文章:基础知识介绍:【一】
ERNIE
:飞桨开源开发套件,入门学习,看看行业顶尖持续学习语义理解框架,如何取得世界多个实战的SOTA效果?
汀、
·
2022-11-22 23:34
NLP
深度学习
人工智能
自然语言处理
paddlepaddle
nlp
快递单信息抽取【二】基于
ERNIE
1.0至ErnieGram + CRF预训练模型
相关文章:1.快递单中抽取关键信息【一】----基于BiGRU+CR+预训练的词向量优化2.快递单信息抽取【二】基于
ERNIE
1.0至ErnieGram+CRF预训练模型3.快递单信息抽取【三】–五条标注数据提高准确率
汀、
·
2022-11-22 23:34
NLP
自然语言处理
深度学习
人工智能
基于
Ernie
-3.0 CAIL2019法研杯要素识别多标签分类任务
相关项目:Paddlenlp之UIE模型实战实体抽取任务【打车数据、快递单】Paddlenlp之UIE分类模型【以情感倾向分析新闻分类为例】含智能标注方案)应用实践:分类模型大集成者[PaddleHub、Finetune、prompt]Paddlenlp之UIE关系抽取模型【高管关系抽取为例】PaddleNLP基于ERNIR3.0文本分类以中医疗搜索检索词意图分类(KUAKE-QIC)为例【多分类
汀、
·
2022-11-22 23:34
NLP
分类
人工智能
机器学习
自然语言处理
数据挖掘
『NLP经典项目集』02:使用预训练模型
ERNIE
优化情感分析
使用PaddleNLP语义预训练模型
ERNIE
优化情感分析注意本项目代码需要使用GPU环境来运行:在2017年之前,工业界和学术界对NLP文本处理依赖于序列模型RecurrentNeuralNetwork
愚昧之山绝望之谷开悟之坡
·
2022-11-22 23:30
NLP实战项目
PaddlePaddle
『NLP经典项目集』06: 使用预训练模型
ERNIE
-GEN自动写诗
使用PaddleNLP预训练模型
ERNIE
-GEN生成诗歌诗歌,是中国文化的瑰宝,它饱含作者的思想感情与丰富的想象,语言凝练而形象性强,具有鲜明的节奏,和谐的音韵,富于音乐美。
愚昧之山绝望之谷开悟之坡
·
2022-11-22 23:30
NLP实战项目
PaddlePaddle
非常详细的transformer笔记,包括XLNet, MT-DNN,
ERNIE
,
ERNIE
2, RoBERTa
华校专老师更新了个人笔记,增加了Transformer笔记,包含XLNet,MT-DNN,
ERNIE
,
ERNIE
2,RoBERTa等内容,内容十分详细,非常值得学习,特此推荐。
风度78
·
2022-11-22 23:26
【实践】基于
ERNIE
实现9项GLUE任务
基于
ERNIE
实现GLUE各项任务1.实验内容本实验将使用
ERNIE
对NLP领域中的经典任务GLUE数据集进行fine-tuning,GLUE数据集中包含多项子数据集,现整理如下:图1GLUE数据集描述图
飞桨PaddlePaddle
·
2022-11-22 23:26
自然语言处理
机器学习
人工智能
【实践】NLP领域中的
ERNIE
模型在阅读理解中的应用
使用
ERNIE
在DuReader_robust上进行阅读理解1.实验内容机器阅读理解(MachineReadingComprehension)是指让机器阅读文本,然后回答和阅读内容相关的问题。
飞桨PaddlePaddle
·
2022-11-22 23:26
自然语言处理
深度学习
机器学习
试试在transformers中调用
ERNIE
ERNIE
是什么
ERNIE
发展路径文心大模型
ERNIE
是百度发布的产业级知识增强大模型,涵盖了NLP大模型和跨模态大模型。
nghuyong
·
2022-11-22 23:52
python
深度学习
开发语言
人工智能
文本多标签分类python_如何用 Python 和 BERT 做多标签(multi-label)文本分类?
BERT是去年以来非常流行的语言模型(包括ELMO,Ulmfit,BERT,
Ernie
,GPT-2等)的一种,长期霸榜,非常
weixin_39822184
·
2022-11-21 08:42
文本多标签分类python
多模态模型前沿研究(1)
1
ERNIE
-ViL(百度,2021.3.,aaai)
ERNIE
-ViL是一个知识增强视觉-语言预训练模型,首次将场景图知识融入到多模态预训练中。
fmf1287
·
2022-11-20 03:29
多模态
深度学习
人工智能
NLP-实体&关系联合抽取-2022:UIE(通用信息抽取模型)【Prompt第四范式】【信息抽取{实体关系抽取、中文分词、精准实体标。情感分析等}、文本纠错、问答系统、闲聊机器人、定制训练】
为了方便大家使用UIE的强大能力,PaddleNLP借鉴该论文的方法,基于
ERNIE
3.0知识增强预训练模型,训练并开源了首
u013250861
·
2022-11-19 17:16
#
中文分词
人工智能
自然语言处理
刷新50多个NLP任务基准,并登顶SuperGLUE全球榜首,百度
ERNIE
3.0知识增强大模型显威力
近日,百度
ERNIE
升级到3.0,重磅发布知识增强的百亿参数大模型。该模型除了从海量文本数据中学习词汇、结构、语义等知识外,还从大规模知识图谱中学习。
百度-NLP
·
2022-11-19 17:11
自然语言处理
自然语言处理
机器学习
深度学习
神经网络
Ernie
-SimCSE对比学习在内容反作弊上应用
作者|ANTI导读AI技术在不同行业和业务被广泛的应用,本文介绍了反作弊团队在与spammer对抗愈演愈烈的趋势下,不断探索前沿技术,将百度NLP预训练模型结合对比学习用于解决spam内容中知道提问群发推广作弊的技术方案。本次分享,首先介绍了知道提问群发推广作弊的形态,分析传统反作弊方案在此形态下的优缺点,对比了对比学习的数据增强和SimCSE两种方法,并分享了SimCSE论文中loss的缺点,最
百度Geek说
·
2022-11-19 16:46
人工智能
ai
Ernie
-SimCSE对比学习在内容反作弊上应用
作者|ANTI导读AI技术在不同行业和业务被广泛的应用,本文介绍了反作弊团队在与spammer对抗愈演愈烈的趋势下,不断探索前沿技术,将百度NLP预训练模型结合对比学习用于解决spam内容中知道提问群发推广作弊的技术方案。本次分享,首先介绍了知道提问群发推广作弊的形态,分析传统反作弊方案在此形态下的优缺点,对比了对比学习的数据增强和SimCSE两种方法,并分享了SimCSE论文中loss的缺点,最
·
2022-11-17 10:27
人工智能
STI比赛任务一:【智能问答
Ernie
3.0基线】
比赛简介百度搜索首届技术创新挑战赛:赛道一答案抽取STI比赛任务一:【比赛数据分析与长尾发现】STI比赛任务一:【NLP常见优化算法和上分Trick】STI比赛任务一:【智能问答baseline】欢迎大家关注公众号ChallengeHub,获取更多比赛资料比赛链接:https://aistudio.baidu.com/ai...本文参与了SegmentFault思否征文「百度搜索技术创新挑战赛」,
·
2022-11-17 00:58
百度搜索技术大赛
百度最强中文AI作画大模型
之前笔者也写过一篇关于文本生产3D模型的文章,大家感兴趣的可以穿梭:https://zhuanlan.zhihu.com/p/570332906今天要给大家介绍的这一篇paper是百度最新的文生图佳作:
ERNIE
-ViLG2.0
weixin_42001089
·
2022-10-31 13:18
程序人生
推广TrustAI可信分析:通过提升数据质量来增强在
ERNIE
模型下性能
小样本学习在文心
ERNIE
3.0多分类任务应用(提示学习)项目链接:https://aistudio.baidu.com/aistudio/projectdetail/4438610?
·
2022-10-31 10:10
算法人工智能自然语言处理
快递单信息抽取【二】基于
ERNIE
1.0至ErnieGram + CRF预训练模型
contributionType=11.
ERNIE
1.0完成快递单信息抽取命名实体识别是NLP中一项非常基础的任务,是信息提取、问答系统、句法分析、机器翻译等众多NLP任务的重要基础工具。
·
2022-10-30 22:40
在colab上运行GitHub项目
在colab上运行GitHub项目最近在学习一个宝藏仓库:649453932/Bert-Chinese-Text-Classification-Pytorch:使用Bert,
ERNIE
,进行中文文本分类
未来影子
·
2022-10-28 07:20
深度学习
github
python
深度学习
文心大模型
ERNIE
-Tiny轻量化技术,又准又快,效果全开
1大模型落地之路维艰近年来,随着深度学习技术的迅速发展,大模型预训练范式通过一次次刷新各种评测基线,证明了其卓越的学习与迁移能力。在这个过程中,研究者们发现通过不断扩大模型参数能持续提升深度学习模型的威力。然而,参数的指数级增长意味着模型体积增大、所需计算资源增多、耗时更长,这在业务方对线上响应效率的要求及机器资源预算等层面,都为大模型落地带来了极大的挑战。如何在保证效果的前提下压缩模型?如何适配
农民小飞侠
·
2022-10-26 09:01
算法
机器学习
人工智能
NLP领域任务如何选择合适预训练模型以及选择合适的方案【规范建议】【
ERNIE
模型首选】
1.常见NLP任务信息抽取:从给定文本中抽取重要的信息,比如时间、地点、人物、事件、原因、结果、数字、日期、货币、专有名词等等。通俗说来,就是要了解谁在什么时候、什么原因、对谁、做了什么事、有什么结果。文本生成:机器像人一样使用自然语言进行表达和写作。依据输入的不同,文本生成技术主要包括数据到文本生成和文本到文本生成。数据到文本生成是指将包含键值对的数据转化为自然语言文本;文本到文本生成对输入文本
汀、
·
2022-10-26 09:01
NLP
自然语言处理
语音识别
人工智能
PaddleHub实战篇{词法分析模型LAC、情感分类
ERNIE
Tiny}训练、部署【三】
相关文章:基础知识介绍:【一】
ERNIE
:飞桨开源开发套件,入门学习,看看行业顶尖持续学习语义理解框架,如何取得世界多个实战的SOTA效果?
汀、
·
2022-10-26 09:00
NLP
paddlepaddle
人工智能
自然语言处理
nlp
迁移学习
【
ERNIE
】芝麻街跨界NLP,没有一个
ERNIE
是无辜的
另外欢迎大家左下角阅读原文关注我的知乎专栏:【BERT巨人肩膀】这篇文章会为大家介绍下同名的"
ERNIE
"小伙伴们,在预训练模型的飞速发展下,芝麻街恐成最大赢家
ERNIE
:EnhancedLanguageRepresentationwithInformativeEntities
zenRRan
·
2022-10-26 09:59
百度艾尼(
ERNIE
)常见问题汇总及解答
一、
ERNIE
安装配置类问题Q1:最适合
ERNIE
2.0的PaddlePaddle版本是?A1:PaddlePaddle版本建议升级到1.5.0及以上版本。Q2:
ERNIE
可以在哪些系统上使用?
百度-NLP
·
2022-10-26 09:59
nlp
预训练模型蒸馏 -- 宽度自适应策略蒸馏TinyBERT
预训练模型蒸馏在前面的课程中,大家了解了自然语言处理领域中一些经典的模型,比如BERT、
ERNIE
等,它们在NLP任务中的强大之处是毫无疑问的,但由于预训练模型的参数较多,体积庞大,在部署时对设备的运算速度和内存大小以及能耗都有着极高的要求
飞桨PaddlePaddle
·
2022-10-26 09:29
自然语言处理
深度学习
机器学习
开源了 | 文心大模型
ERNIE
-Tiny轻量化技术,又准又快,效果全开
文心大模型
ERNIE
-Tiny轻量化技术,又准又快,效果全开大模型落地之路维艰近年来,随着深度学习技术的迅速发展,大模型预训练范式通过一次次刷新各种评测基线,证明了其卓越的学习与迁移能力。
飞桨PaddlePaddle
·
2022-10-26 09:29
算法
机器学习
人工智能
知识蒸馏相关技术【模型蒸馏、数据蒸馏】以
ERNIE
-Tiny为例
1.任务简介基于
ERNIE
预训练模型效果上达到业界领先,但是由于模型比较大,预测性能可能无法满足上线需求。直接使用
ERNIE
-Tiny系列轻量模型fine-tune,效果可能不够理想。
汀、
·
2022-10-26 09:58
NLP
深度学习
机器学习
人工智能
知识蒸馏
模型蒸馏
提速1000倍,预测延迟少于1ms——百度飞桨基于
ERNIE
的语义理解开发套件
在「WAVESummit+」2019深度学习开发者秋季峰会上,百度对外发布基于
ERNIE
的语义理解开发套件,旨在为企业级开发者提供更领先、高效、易用的
ERNIE
应用服务,全面释放
ERNIE
的工业化价值,
Cry2engine
·
2022-10-26 09:58
发布一周年,百度
ERNIE
再夺权威语义评测5项世界冠军
这两天,全球规模最大的语义评测比赛SemEval2020结果出炉,百度基于飞桨平台自研的语义理解框架
ERNIE
一举斩获5项世界冠军,囊括视觉媒体的关键文本片段挖掘、多语攻击性语言检测和混合语种的情感分析
百度-NLP
·
2022-10-24 18:35
自然语言处理
自然语言处理
机器学习
最强中文NLP预训练模型艾尼
ERNIE
官方揭秘【附视频】
“最近刚好在用
ERNIE
写毕业论文”“感觉还挺厉害的”“为什么叫
ERNIE
啊,这名字有什么深意吗?”“我想让艾尼帮我写作业”看了上面火热的讨论,你一定很好奇“艾尼”、“
ERNIE
”到底是个啥?
百度-NLP
·
2022-10-24 18:05
nlp
ai
deep
learning
直播回顾 | 最强中文NLP预训练模型艾尼
ERNIE
官方揭秘
允中发自凹非寺量子位编辑|公众号QbitAI“最近刚好在用
ERNIE
写毕业论文”看了上面热火的讨论,你一定很好奇“艾尼”、“
ERNIE
”到底是个啥?
QbitAl
·
2022-10-24 18:31
带你走进
ERNIE
文章目录写在正文之前
ERNIE
论文框架梳理摘要1.简介2.相关工作2.1上下文无关表示2.2上下文感知表示2.3异构数据3.方法3.1transformer编码器3.2知识整合3.2.1基本级别的掩码3.2.2
【文言】
·
2022-10-24 18:59
深度学习
自然语言处理
ERNIE
快速上手,从一个文本相似度计算任务开始
点击左上方蓝字关注我们项目背景与相关介绍PaddleNLP是飞桨生态文本领域核心库,具备易用的文本领域API、中文预训练模型集、多场景的应用示例、高性能分布式训练和预测部署能力,旨在提升开发者文本领域的开发效率,并提供基于飞桨开源框架v2.x的NLP任务最佳实践。PaddleNLP链接:https://github.com/PaddlePaddle/PaddleNLP本项目主要是NLP核心技术中的
飞桨PaddlePaddle
·
2022-10-22 07:03
百度
大数据
python
机器学习
人工智能
PaddleNLP通用信息抽取技术UIE【一】产业应用实例:信息抽取{实体关系抽取、中文分词、精准实体标。情感分析等}、
相关文章:1.快递单中抽取关键信息【一】----基于BiGRU+CR+预训练的词向量优化2.快递单信息抽取【二】基于
ERNIE
1.0至ErnieGram+CRF预训练模型3.快递单信息抽取【三】--五条标注数据提高准确率
·
2022-10-21 16:57
【一】
ERNIE
:飞桨开源开发套件,入门学习,看看行业顶尖持续学习语义理解框架,如何取得世界多个实战的SOTA效果?
参考文章:深度剖析知识增强语义表示模型——
ERNIE
_财神Childe的博客-CSDN博客_
ernie
模型
ERNIE
_
ERNIE
开源开发套件_飞桨https://github.com/PaddlePaddle
·
2022-10-19 10:53
PaddleNLP--UIE(二)--小样本快速提升性能(含doccona标注
相关文章:1.快递单中抽取关键信息【一】----基于BiGRU+CR+预训练的词向量优化2.快递单信息抽取【二】基于
ERNIE
1.0至ErnieGram+CRF预训练模型3.快递单信息抽取【三】--五条标注数据提高准确率
·
2022-10-18 17:43
ERNIE
3.0多分类任务应用详细教程代码
小样本学习简介:二分类/多分类任务在商品分类、网页分类、新闻分类、医疗文本分类等现实场景中有着广泛应用。现有的主流解决方案是在大规模预训练语言模型进行微调,因为下游任务和预训练任务训练目标不同,想要取得较好的分类效果往往需要大量标注数据,因此学界和业界开始研究如何在小样本学习(Few-shotLearning)场景下取得更好的学习效果。提示学习(PromptLearning)的主要思想是通过任务转
数学是算法的灵魂
·
2022-10-16 07:45
人工智能
硕博成长之路
自然语言语言处理
机器学习
算法
深度学习
自然语言处理
人工智能
文字生成图片
文章目录摘要PaddleHub能力简介文心
ERNIE
-ViLG介绍配置环境模型加载推理Prompt设计原则摘要根据文字生成图像,是近几年大模型领域比较热门的研究。
AI浩
·
2022-09-29 07:04
人工智能
深度学习
人工智能
计算机视觉
AI小程序——文本绘图
文章目录一、摘要二、文心
ERNIE
-ViLG技术原理解读:图文双向生成统一建模三、使用教程2.1exe下载2.2获取API2.3软件使用2.4源码链接一、摘要在文字生成图像上,文心
ERNIE
-ViLG可以根据用户输入的文本
.别拖至春天.
·
2022-09-22 13:39
AI小程序
人工智能
计算机视觉
深度学习
深度学习的最新进展!三行代码实现AI绘画!
近期关于多模态方向的研究进展非常火热,尤其是文生图方向,国内外
ERNIE
-ViLG、Stable-Diffusion、Disco-Diffusion相继开源开放,对于想要快速尝试学术界最新成果的同学,不防试一试开源的工具
·
2022-09-22 10:02
PaddleNLP通用信息抽取技术UIE【一】产业应用实例:信息抽取{实体关系抽取、中文分词、精准实体标。情感分析等}、文本纠错、问答系统、闲聊机器人、定制训练
相关文章:1.快递单中抽取关键信息【一】----基于BiGRU+CR+预训练的词向量优化2.快递单信息抽取【二】基于
ERNIE
1.0至ErnieGram+CRF预训练模型3.快递单信息抽取【三】–五条标注数据提高准确率
汀、
·
2022-09-14 14:43
知识图谱
NLP
自然语言处理
人工智能
深度学习
paddlepaddle
nlp
次元破壁!飞桨文心大模型中秋“新作”牵手传统文化
在国际社交媒体上,一位大V发起关于飞桨文心跨模态图文生成大模型
ERNIE
-ViLG的讨论,并秀出基于该大模型能力生成的画作,当日即获3000多点赞、2000多次转发,许多网友也随之晒出文心
ERNIE
-ViLG
·
2022-09-10 18:05
前端人工智能深度学习算法
『抽丝剥茧』手把手快速上带你开启文心大模型的奇妙冒险
『抽丝剥茧』手把手快速上带你开启文心大模型的奇妙冒险文心大模型简介文心大模型
ERNIE
3.0系列&&
ERNIE
-ViLG文生图系列使用文心大模型网页快速体验代码调用之
ERNIE
3.0系列安装文心库代码调用
三岁学编程
·
2022-09-07 10:14
飞桨实战
paddlepaddle
跨模态
大模型
ERNIE
3.0
ERNIE-ViLG
干货!预训练语言模型在百度大规模召回阶段的应用
此系统采用了百度自研的中文预训练语言
ERNIE
,通过应用基于多
AITIME论道
·
2022-09-05 07:18
百度
人工智能
算法
大数据
编程语言
基于预训练模型
ERNIE
-Gram 实现语义匹配-数据预处理
本案例介绍NLP最基本的任务类型之一:文本语义匹配,并且基于PaddleNLP使用百度开源的预训练模型
ERNIE
-Gram搭建效果优异的语义匹配模型,来判断2段文本语义是否相同。
lovealgorithm.
·
2022-09-02 07:34
深度学习—nlp
python
paddlepaddle
自然语言处理
基于预训练模型
ERNIE
-Gram 实现语义匹配-模型搭建
本章继续分析该案例的模型搭建部分自从2018年10月以来,NLP个领域的任务都通过Pretrain+Finetune的模式相比传统DNN方法在效果上取得了显著的提升,本节我们以百度开源的预训练模型
ERNIE
-Gram
lovealgorithm.
·
2022-09-02 07:34
深度学习—nlp
paddlepaddle
深度学习
神经网络
上一页
2
3
4
5
6
7
8
9
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他