NLP自然语言处理

[人工智能-深度学习-49]：循环神经网络 - RNN与NLP的关系以及RNN在人工神经网络中的位置

文火冰糖（王文兵）的博客_文火冰糖的硅基工坊_CSDN博客本文网址：https://blog.csdn.net/HiWangWenBing/article/details/121433651目录前言：第1章NLP
文火冰糖的硅基工坊·2022-06-23 22:04

NLP自然语言处理-Pytorch情感分析简介

一、概念简介本质上是一个分类任务，其一般是指判断一段文本所表达的情绪状态。其中，一段文本可以是一个句子，一个段落或一个文档。情绪状态可以是两类，如（正面，负面），（高兴，悲伤）；也可以是三类，如（积极，消极，中性）；或是星级（1星~五星）等等。总的来说，可以理解成：是对带有情感色彩的主观性文本进行数据挖掘与情感倾向分析的过程。情感分析的用途：分析文本情感可以帮助我们从海量的文本内容中提取需要的信息
GoAI·2022-06-23 07:05

吴恩达机器学习笔记——第一章

但是网页搜索、垃圾邮件的过滤、图片识别等功能需要应用机器学习的技术，总体来说分成五个方面1、数据挖掘，例如分析用户的点击量来分析用户习惯，更好的了解用户2、对于某些无法直接编写代码的场景，例如无人机自动驾驶3、NLP
莫陌莫墨·2022-05-25 07:03

NLP自然语言处理——问答系统

NLP自然语言处理——问答系统文章目录NLP自然语言处理——问答系统前言一、基于搜索的问答系统二、具体步骤1.处理流程1.1分词1.1.1前向最大匹配(forward-maxmatching)1.1.2
编程‘小白’·2022-05-23 07:07

【NLP自然语言处理】白话理解 Word2vec 词向量表示含义：含Skip-Gram与CBOW代码以及算法优化负采样与层序SoftMax

文章目录Word2vec词向量模型Skip-Gram模型CBOW模型算法优化方法：负采样算法优化方法：层序SoftMaxWord2vec指用特征向量表示单词的技术，且每两个词向量可计算余弦相似度表示它们之间的关系。Word2vec词向量模型实现的算法手段:Skip-Gram(跳元模型)：中间的词预测周围的词CBOW(ContinuesBagofWords,连续词袋)：周围的词去预测中间词算法优化方
量化Mike·2022-05-10 07:06

NLP自然语言处理（三）—— 文本处理方法 & 传统NLP与深度学习NLP & NLP聊天机器人原理

文本处理方法①TF-IDF②Jieba分词③Onehot将类别变量转换为数字型变量稀疏④Word2vec将每个单词映射成二维空间的一个点坐标⑤Stopwords停用词传统NLP与深度学习NLP的区别NLP聊天机器人原理
hxxjxw·2022-05-08 07:41

5 NLP自然语言处理入门--词向量embedding&代码实现(百度架构师手把手带你零基础实践深度学习原版笔记系列)

5NLP自然语言处理入门--词向量(百度架构师手把手带你零基础实践深度学习原版笔记系列)目录5NLP自然语言处理入门--词向量(百度架构师手把手带你零基础实践深度学习原版笔记系列)自然语言处理技术面临的挑战语言学角度同义词问题情感倾向问题歧义性问题对话
aiAIman·2022-04-23 07:35

nlp自然语言处理基于SVD的降维优化学习

目录基于SVD的降维优化SVD的直观意义基于SVD的降维优化向量降维：尽量保留数据“重要信息”的基础上减少向量维度。可以发现重要的轴（数据分布广的轴），将二维数据表示为一维数据，用新轴上的投影值来表示各个数据点的值，示意图如下。稀疏矩阵和密集矩阵转换：大多数元素为0的矩阵称为稀疏矩阵，从稀疏矩阵中找出重要的轴，用更少的维度对其进行重新表示。结果，稀疏矩阵就会被转化为大多数元素均不为0的密集矩阵。这
·2022-04-05 17:45

nlp自然语言处理学习CBOW模型类实现示例解析

目录实现CBOW模型类Trainer类的实现实现CBOW模型类初始化：初始化方法的参数包括词汇个数vocab_size和中间层的神经元个数hidden_size。首先生成两个权重（W_in和W_out），并用一些小的随机值初始化这两个权重。设置astype(‘f’)，初始化将使用32位的浮点数。生成层：生成两个输入侧的MatMul层、一个输出侧的MatMul层，以及一个SoftmaxwithLos
·2022-04-05 17:14

【AI视野·今日NLP 自然语言处理论文速览 第二十三期】Tue, 28 Sep 2021

AI视野·今日CS.NLP自然语言处理论文速览Tue,28Sep2021Totally84papers上期速览✈更多精彩请移步主页DailyComputationandLanguagePapersUsingPauseInformationforMoreAccurateEntityRecognitionAuthorsSahasDendukuri
hitrjj·2022-03-18 07:34

Vision transformer

在大型数据集上表现超过了当前SOTA模型前言当前Transformer模型被大量应用在NLP自然语言处理当中，而在计算机视觉领域，Transformer的注意力机制attention也被广泛应
MarDino·2022-03-18 05:49

NLP自然语言处理-余弦相似性计算文章/文本/字符串雷同率

文章目录前言一、理论知识1.分词2.列出所有的词3.计算词频4.写出词频向量5.计算相似度二、java开发样例1.pom.xml2.相似度计算代码结尾前言计算文章/字符串的相似度有多种算法，本文将采用java+jieba/hanlp分词进行余弦相似性计算。一、理论知识余弦距离，也称为余弦相似度，是用向量空间中两个向量夹角的余弦值作为衡量两个个体间差异的大小的度量。余弦值越接近1，就表明夹角越接近0
、Dong·2022-02-11 07:12

flask学习1

MongoDB数据库文件型数据库{}没有限制和约束Mui+HTML5Plus调用移动操作系统的封装IOSAndroid人工智能技术应用BaiduAIASR语音识别声音转换成文字TTS语音合成文字转换成声音NLP
马昌伟·2022-02-03 23:00

Python机器学习NLP自然语言处理基本操作精确分词

目录概述分词器jieba安装精确分词全模式搜索引擎模式获取词性概述从今天开始我们将开启一段自然语言处理(NLP)的旅程.自然语言处理可以让来处理,理解,以及运用人类的语言,实现机器语言和人类语言之间的沟通桥梁.分词器jiebajieba算法基于前缀词典实现高效的词图扫描,生成句子中汉字所有可能成词的情况所构成的有向无环图.通过动态规划查找最大概率路径,找出基于词频的最大切分组合.对于未登录词采用了
·2021-11-25 12:28

Python机器学习NLP自然语言处理基本操作之命名实例提取

目录概述命名实例HMM随机场马尔科夫随机场CRF命名实例实战数据集crf预处理主程序概述从今天开始我们将开启一段自然语言处理(NLP)的旅程.自然语言处理可以让来处理,理解,以及运用人类的语言,实现机器语言和人类语言之间的沟通桥梁.命名实例命名实例(NamedEntity)指的是NLP任务中具有特定意义的实体,包括人名,地名,机构名,专有名词等.举个例子:LukeRawlence代表人物Aiimi
·2021-11-25 12:52

NLP自然语言处理学习（一）——LSTM、GRU以及文本情感分类

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录前言1.循环神经网络（RNN）1.1文本的tokenization1.1.1中英文分词的方法1.1.2N-garm表示方法1.1.3向量化1.2文本情感分类1.2.1数据设置1.2.2文本序列化1.3循环神经网络1.3.1RNN的不同结构1.3.2LSTM（LongShort-TermMemory）1.3.3GRU（Gated
白衣西蜀梅子酒·2021-11-11 15:25

经验篇：朋友成功入职商汤自然语言处理算法工程师，整理了一份自然语言处理入门学习资料（NLP自然语言处理/学习路径）

自然语言处理（NaturalLanguageProcessing，NLP）是计算机科学领域与人工智能领域中的一个重要方向。简单点说就是怎样让计算机能够理解人类的语言，以执行如机器翻译、文本分析、情感分析等任务。相关学习资料在文末哦！记得去瞄一眼！自然语言处理是人工智能领域比较火热的方向，本人决定入坑是因为听那个谁说，这个方向对数学要求不像计算机视觉那么高巴拉巴拉…其实吧，入门基础要求的数学知识，线
人工智能小雨老师·2021-11-10 17:07

Python机器学习NLP自然语言处理基本操作新闻分类

目录概述TF-IDF关键词提取TFIDFTF-IDFTfidfVectorizer数据介绍代码实现概述从今天开始我们将开启一段自然语言处理(NLP)的旅程.自然语言处理可以让来处理,理解,以及运用人类的语言,实现机器语言和人类语言之间的沟通桥梁.TF-IDF关键词提取TF-IDF(TermFrequency-InverseDocumentFrequency),即词频-逆文件频率是一种用于信息检索与
·2021-11-02 14:25

【计算机视觉的修炼秘笈】深度好文，持续更新

前言：这里我整理的一份人工智能200G学习资料大礼包，内含（Python快速入门、深度学习入门、深度学习必备框架TensorFlow、pytorch、计算机视觉OpenCV、NLP自然语言处理等视频课程
来跟我学AI·2021-10-28 11:31

Python机器学习NLP自然语言处理基本操作之Seq2seq的用法

概述从今天开始我们将开启一段自然语言处理(NLP)的旅程.自然语言处理可以让来处理,理解,以及运用人类的语言,实现机器语言和人类语言之间的沟通桥梁.Seq2seqSeq2seq由Encoder和Decoder两个RNN组成.Encoder将变长序列输出,编码成encoderstate再由Decoder输出变长序列.Seq2seq的使用领域:机器翻译:Encoder-Decoder的最经典应用文本摘
·2021-10-18 17:04

Python机器学习NLP自然语言处理基本操作家暴归类

目录概述数据介绍词频统计朴素贝叶斯代码实现预处理主函数概述从今天开始我们将开启一段自然语言处理(NLP)的旅程.自然语言处理可以让来处理,理解,以及运用人类的语言,实现机器语言和人类语言之间的沟通桥梁.数据介绍该数据是家庭暴力的一份司法数据.分为4个不同类别:报警人被老公打，报警人被老婆打，报警人被儿子打，报警人被女儿打.今天我们就要运用我们前几次学到的知识,来实现一个NLP分类问题.词频统计Co
·2021-10-18 17:33

Python机器学习NLP自然语言处理基本操作词向量模型

目录概述词向量词向量维度Word2VecCBOW模型Skip-Gram模型负采样模型词向量的训练过程1.初始化词向量矩阵2.神经网络反向传播词向量模型实战训练模型使用模型概述从今天开始我们将开启一段自然语言处理(NLP)的旅程.自然语言处理可以让来处理,理解,以及运用人类的语言,实现机器语言和人类语言之间的沟通桥梁.词向量我们先来说说词向量究竟是什么.当我们把文本交给算法来处理的时候,计算机并不能
·2021-10-18 17:03

Python机器学习NLP自然语言处理基本操作词袋模型

概述从今天开始我们将开启一段自然语言处理(NLP)的旅程.自然语言处理可以让来处理,理解,以及运用人类的语言,实现机器语言和人类语言之间的沟通桥梁.词袋模型词袋模型(BagofWordsModel)能帮助我们把一个句子转换为向量表示.词袋模型把文本看作是无序的词汇集合,把每一单词都进行统计.向量化词袋模型首先会进行分词,在分词之后.通过通过统计在每个词在文本中出现的次数.我们就可以得到该文本基于词
·2021-10-18 17:03

Python机器学习NLP自然语言处理Word2vec电影影评建模

目录概述词向量词向量维度代码实现预处理主程序概述从今天开始我们将开启一段自然语言处理(NLP)的旅程.自然语言处理可以让来处理,理解,以及运用人类的语言,实现机器语言和人类语言之间的沟通桥梁.词向量我们先来说说词向量究竟是什么.当我们把文本交给算法来处理的时候,计算机并不能理解我们输入的文本,词向量就由此而生了.简单的来说,词向量就是将词语转换成数字组成的向量.当我们描述一个人的时候,我们会使用身
·2021-10-18 17:32

Python机器学习NLP自然语言处理基本操作之京东评论分类

目录概述RNN权重共享计算过程LSTM阶段数据介绍代码预处理主函数概述从今天开始我们将开启一段自然语言处理(NLP)的旅程.自然语言处理可以让来处理,理解,以及运用人类的语言,实现机器语言和人类语言之间的沟通桥梁.RNNRNN(RecurrentNeuralNetwork),即循环神经网络.RNN相较于CNN,可以帮助我们更好的处理序列信息,挖掘前后信息之间的联系.对于NLP这类的任务,语料的前后
·2021-10-18 17:56

Python机器学习NLP自然语言处理基本操作关键词

目录概述关键词TF-IDF关键词提取TFIDFTF-IDFjiebaTF-IDF关键词抽取jieba词性不带关键词权重附带关键词权重TextRank概述从今天开始我们将开启一段自然语言处理(NLP)的旅程.自然语言处理可以让来处理,理解,以及运用人类的语言,实现机器语言和人类语言之间的沟通桥梁.关键词关键词(keywords),即关键词语.关键词能描述文章的本质,在文献检索,自动文摘,文本聚类/分
·2021-10-09 17:44

Python机器学习NLP自然语言处理基本操作电影影评分析

目录概述RNN权重共享计算过程LSTM阶段代码预处理主函数概述从今天开始我们将开启一段自然语言处理(NLP)的旅程.自然语言处理可以让来处理,理解,以及运用人类的语言,实现机器语言和人类语言之间的沟通桥梁.RNNRNN(RecurrentNeuralNetwork),即循环神经网络.RNN相较于CNN,可以帮助我们更好的处理序列信息,挖掘前后信息之间的联系.对于NLP这类的任务,语料的前后概率有极
·2021-10-08 12:00

HanLP自然语言处理包开源

本文的目标有两个：1、学会使用11大Java开源中文分词器2、对比分析11大Java开源中文分词器的分词效果本文给出了11大Java开源中文分词的使用方法以及分词结果对比代码，至于效果哪个好，那要用的人结合自己的应用场景自己来判断。11大Java开源中文分词器，不同的分词器有不同的用法，定义的接口也不一样，我们先定义一个统一的接口：从上面的定义我们知道，在Java中，同样的方法名称和参数，但是返回
lanlantian123·2021-06-20 13:19

比较全的NLP参考资源

NLP自然语言处理（NaturalLanguageProcessing）是深度学习的主要应用领域之一。
御风之星·2021-05-21 01:22

SnowNLP自然语言处理模块具体用法

简单介绍（摘自作者自述）SnowNLP是一个python写的类库，可以方便的处理中文文本内容，是受到了TextBlob的启发而写的，由于现在大部分的自然语言处理库基本都是针对英文的，于是写了一个方便处理中文的类库，并且和TextBlob不同的是，这里没有用NLTK，所有的算法都是自己实现的，并且自带了一些训练好的字典。注意本程序都是处理的unicode编码，所以使用时请自行decode成unico
什么都干的派森·2021-05-06 11:38

Nlp_compromise在JavaScript中使用自然语言

NLP自然语言处理，涌现了很多技术框架，当中不乏前端JavaScript实现的框架：nlp-compromise.js，本文为大家介绍自然语言处理的基本原理与nlp-compromise.js的调用例子
掌雄·2021-04-24 13:55

人工智能中RPA、NLP、OCR介绍

1、NLP自然语言处理(NaturalLanguageProcessing,NLP)是计算机科学领域与人工智能领域中的一个重要方向。主要研究能实现人与计算机之间用自然语言进行有效通信的各种理论和方法。
OCR识别老张·2021-03-31 10:22

【高德AAAI2021论文解读】LRC-BERT：对比学习潜在语义知识蒸馏

NLP自然语言处理在高德各个业务线发挥重要作用，例如动态事件命名实时识别，搜索场景用户语义理解，共享出行通话文本自动判责等。
高德技术·2020-12-30 17:45

CNN卷积神经网络及其在NLP自然语言处理中的应用（一）

由于可以有效地进行特征提取，卷积神经网络（CNN）已经被广泛地应用于计算机视觉、自然语言处理等领域。之前仅在图像的分类和识别中用过CNN，且对CNN的理解较为浅显。现在重新学习卷积神经网络，并重点学习其在NLP领域的应用。特此记录。参考：https://blog.csdn.net/jiaoyangwm/article/details/80011656目录一、卷积神经网络1、卷积神经网络的概念2、C
一千克欣喜·2020-10-09 09:43

Droidcon上海 2019｜安卓界的大咖们都在Droidcon分享了什麽？

两整天的活动可说是干货满满,内容有最近Android开发最火的Kotlin、Flutter、Jetpack;AI相关的Tensorflow、NLP自然语言处理;华为终端云服务-HMSCore,向开发者展示了华为的全面开放能力
Axiomtech·2020-09-16 17:56

NLP技术相关网站分享

最近在云栖社区看了关于NLP自然语言处理技术的一篇文章，觉得非常不错，拿来分享。
Ooo。·2020-09-14 01:44

HanLP自然语言处理包的使用

HanLP是由一系列模型与算法组成的Java工具包，目标是促进自然语言处理在生产环境中的应用。HanLP具备功能完善、性能高效、架构清晰、语料时新、可自定义的特点。HanLP提供下列功能：中文分词（最短路分词、N-最短路分词等）命名实体识别（中国人名识别、地名识别、实体机构名识别等）关键词提取自动摘要短语提取拼音转换简繁转换文本推荐引入jar包：com.hankcshanlpportable-1.
yue2008·2020-09-13 23:47

画语义树

参考于自然语言处理依存树的可视化）效果：一，在Java中导入Hanlp包网上资料Hanlp官网介绍（有导入教程与使用方法）直接跳转到官网分开下载data和hanlp（ctrl+f找到data）菜鸟如何使用HanlpHanLP
Package Pig·2020-09-13 09:31

java判断中文字符

//代码来自HanLP自然语言处理库，git地址：https://github.com/hankcs/HanLP/blob/master/src/main/java/com/hankcs/hanlp/utility
墨_诚·2020-09-13 02:11

今日 Paper | 多人姿势估计；对话框语义分析；无监督语义分析；自然语言处理工具包等

导语：为了更好地服务广大AI青年，AI研习社正式推出全新「论文」版块目录基于层次表示的面向任务对话框语义分析固定的无监督语义分析斯坦福CoreNLP自然语言处理工具包DeepCut：用于多人姿势估计的联合子集分区和标签基于搜索的神经结构学习的顺序问答基于层次表示的面向任务对话框语义分析论文名称
喜欢打酱油的老鸟·2020-09-10 10:38

NLP自然语言处理：（viterbi算法、隐马科夫链、动态规划、naisy channel 模型）实现英文分词

目录一、viterbi算法二、英文分词基础知识2.1场景2.2公式推导（naisychannelmodel）2.3动态规划三、代码3.1数据处理3.2平滑处理3.3计算模型参数3.4viterbi算法viterbi算法是学习自然语言处理的基础算法，已经会有很多博客写了关于viterbi算法的数学介绍。但是对于在nlp中实践应用的博客很少，导致很多朋友在学习viterbi算法之后，对于viterbi
陈宸-研究僧·2020-08-26 13:07

NLP自然语言处理学习笔记一(环境准备)

前言：由于工作上的需要开始进入NLP领域。关于什么是NLP童鞋们可以自己百度学习这里不做解释。我的学习开发环境是Mac，但团队小伙伴有很多Windows的操作系统，所以使用虚拟机方式统一开放环境。我们将使用VMware＋CentOS7做为我们的我们的学习开发环境。使用Python语言。因为笔者也是边学边做会有一些踩坑的情况还望共同学习的童鞋们多多谅解。更希望大家可以共同探讨交流给出建议意见。工具准
weixin_33948416·2020-08-24 03:10

【python 走进NLP】利用jieba技术中文分词并写入txt

简单介绍：近年来，随着NLP自然语言处理技术的日益成熟，开源实现的分词工具也越来越多，比如NLTK：其在英文分词较为成熟，分词效果较好，在处理中文分词方面则显得力不足；在处理中文分词时，Jieba这一工具普遍为大家所接受
开心果汁·2020-08-22 03:54

【NLP】EMNLP 2019 参会小结及最佳论文解读

阅读大概需要13分钟跟随小博主，每天进步一丢丢导读2019年EMNLP自然语言处理实证方法会议11月3日至7日在中国香港召开。
zenRRan·2020-08-22 02:15

七月组队学习！

↑↑↑关注后"星标"Datawhale每日干货&每月组队学习，不错过Datawhale学习开源支持：阿里云天池、MindSpore开源社区、异步社区本月组队学习，主要包含Python编程基础和NLP自然语言处理两个学习
Datawhale·2020-08-22 00:01

适用于NLP自然语言处理的Python：使用Facebook FastText库

原文链接：http://tecdat.cn/?p=8572在本文中，我们将研究FastText，它是用于单词嵌入和文本分类的另一个极其有用的模块。在本文中，我们将简要探讨FastText库。本文分为两个部分。在第一部分中，我们将看到FastText库如何创建向量表示形式，该向量表示形式可用于查找单词之间的语义相似性。在第二部分中，我们将看到FastText库在文本分类中的应用。语义相似性的Fast
LT_Ge·2020-08-21 17:47

适用于NLP自然语言处理的Python：使用Facebook FastText库

原文链接：http://tecdat.cn/?p=8572在本文中，我们将研究FastText，它是用于单词嵌入和文本分类的另一个极其有用的模块。在本文中，我们将简要探讨FastText库。本文分为两个部分。在第一部分中，我们将看到FastText库如何创建向量表示形式，该向量表示形式可用于查找单词之间的语义相似性。在第二部分中，我们将看到FastText库在文本分类中的应用。语义相似性的Fast
LT_Ge·2020-08-21 17:35

NLP自然语言处理相关技术说明及样例（附源码）

1、简单概述1.1NLP概念NLP(NaturalLanguageProcessing)，自然语言处理，又称NLU(NaturalLanguageUnderstanding)自然语言理解，是语言信息处理的分支，也是人工智能的核心课题，简单来说就是让计算机理解自然语言。1.2NLP涉及的内容及技术自然语言处理研究包含的内容十分广泛，这里只列举出其中的其中的一部分(主要是在移动易系统中涉及到的)，包括
jiekechoo·2020-08-20 20:25

NLP自然语言处理相关技术说明及样例（附源码）

1、简单概述1.1NLP概念NLP(NaturalLanguageProcessing)，自然语言处理，又称NLU(NaturalLanguageUnderstanding)自然语言理解，是语言信息处理的分支，也是人工智能的核心课题，简单来说就是让计算机理解自然语言。1.2NLP涉及的内容及技术自然语言处理研究包含的内容十分广泛，这里只列举出其中的其中的一部分(主要是在移动易系统中涉及到的)，包括
jiekechoo·2020-08-20 20:24

贪心学院NLP自然语言处理训练营第六期

自然语言处理无非是目前最大的风口，从Word2Vec、ElMo、GPT、Bert到XLNet,我们见证了这个领域的高速发展以及未来的前景。互联网中的大量的文本以及IOT时代赋予我们的全新交互带来了这个领域的爆发。为了迎合这种变化，我们的课程也在不断迭代更新，保证不错过任何2周之内出现的重要技术。这次我们迎来了第五期NLP的招生，千万不要觉得这是一个对标其他线上课程的普通的训练营。由于内容的专业性以
Q2118825998·2020-08-13 12:03
上一页 2 3 4 5 6 7 8 9 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他