nltk

NLTK学习笔记——使用叶贝斯分类器性别鉴定

一、性别鉴定步骤根据名字男女规律进行判断建立分类器•1.确定输入特征——特征提取器•2.划分数据集•3.使用训练集构建分类器•4.使用测试集测试分类器效果二、叶贝斯分类器原理特征：假设选取名字的最后一个字母为主要特征类别：男性、女性贝叶斯公式：P(B|A)=P(A|B)*P(B)/P(A)贝叶斯分类器比较P(男性|特征)与P(女性|特征)有如下两种方法1.直接比较P(特征|男性)*P(男性)与P(
小南瓜^o^·2020-08-18 17:51

python 动手实现tfidf

导入一些库和数据importpandasaspdimportglobimportnumpyasnpfromnltk.tokenizeimportword_tokenizeimportnltkfromnltk.corpusimportstopwordsimportmathfromtqdmimp
农民小飞侠·2020-08-18 17:12

ML之K-means：基于K-means算法利用电影数据集实现对top 100 电影进行文档分类

一共得到五类电影：实现代码#-*-coding:utf-8-*-from__future__importprint_functionimportnumpyasnpimportpandasaspdimportnltkfrombs4importBeautiful
一个处女座的程序猿·2020-08-18 16:24

NLP项目实战---基于检索的问答系统

importjsonfrommatplotlibimportpyplotaspltimportreimportstringimportnltkfromnltk.corpusimportstopwordsfromnltk.tokenizeimportword_tokenizefromnltk.stem.porterimportPorterStemmerfromsklearn.feature_extr
子颠三号倒四·2020-08-18 12:45

自然语言处理

是一种利用计算机为工具对人类特有的书面形式、口头形式的自然语言信息进行各种类型处理和加工的技术核心问题文本分类、关键词提取、情感分析、语义消歧、主题模型、机器翻译、问题回答、汉语分词、垂直领域的对话机器人NLTKTokenization
晨恒父·2020-08-18 12:07

从Word2vec中导入训练好的词向量

/usr/bin/envpython#-*-coding:utf-8-*-#Author:JiaShiLinimportnltkfromgensim.modelsimportWord2Vecfromkeras.layers.coreimportDense
贾世林jiahsilin·2020-08-18 01:25

Windows系统下Python与NLTK的安装

操作系统：win8一、安装Python与Nltk1.安装Python:https://www.python.org/downloads/我安装的是最新版本3.4.22.安装Numpy(可选)：http:
gfxjj123·2020-08-17 22:50

Word2Vec

文本处理流程：preprocess:tokenize+lemma/stemming+stopwords+word_list+makefeatures+MLtokenize英文importNLTKsent
weixin_43579079·2020-08-17 19:09

python安装nltk遇到的坑

错误描述错误1ERROR:Commanderroredoutwithexitstatus1:command:'c:\users\administrator\appdata\local\programs\python\python35\python.exe'-u-c'importsys,setuptools,tokenize;sys.argv[0]='"'"'C:\\Users\\ADMINI~1\
limy1997·2020-08-17 13:13

Stanford中文分词

about-stanford-word-segmenter/45668849https://cloud.tencent.com/developer/article/1346917主要解决方法：https://github.com/nltk
jinmingz·2020-08-17 04:11

Install_tf_ notebook_ Spyder_tfgraphviz_pydot_Pandas_scikit-learn_ipython_pillow_NLTK_flask_mlxtend

https://blog.csdn.net/Linli522362242/article/details/106537459:condainstalltensorflowpipinstalltensorflow==[desired-version]pipinstalltensorflow-transform==0.21.2Caution:youmayfounderrorsafteryouexcut
LIQING LIN·2020-08-16 16:38

TensorFlow 情感分析句子分类RNN循环神经网络代码（附带数据）

importtensorflowastffromtensorflow.examples.tutorials.mnistimportinput_dataimportnltkimportpandasaspdfromcollectionsimportCounterimportnumpyasnpMAX_FEATURES
机器玄学实践者·2020-08-16 09:46

LDA主题模型英文完整python代码

fromnltk.corpusimportstopwordsfromnltk.stem.wordnetimportWordNetLemmatizerimportstringfromgensimimportcorporaimportgensimstop
大黄老鼠·2020-08-16 07:01

ImportError: No module named yaml解决方案

ImportError:Nomodulenamedyamlproblem:Igotthe"ImportError:Nomodulenamedyaml"errorwhenIattemptedtoinstallNLTKtoolkittomyubuntusystem.solution
一一空·2020-08-16 00:22

Python入门教程:训练过程(分类为例)

更多代码和教程请参看:disanda.github.io或https://github.com/disanda1.数据集操作Pillow和OpenCV常用于操作图像scipy和librosa常用于操作语音NLTKandSpaCy
disanda·2020-08-15 22:58

黄聪：Python+NLTK自然语言处理学习（一）：环境搭建

最近开始学习Python+NLTK自然语言处理，在此分享自己的学习经验，因为是初学，肯定有很多很多不懂的地方，发布此文章绝非为了显示自己的水平，而是因为网络上对NLTK的资料实在太少了，我就想分享一下自己的心得
weixin_34018202·2020-08-15 08:55

Python之NLP（转）

https://raw.githubusercontent.com/nltk/nltk_data/gh-pages/index.xmlA----http://blog.csdn.net/caicai1617
weixin_33728268·2020-08-15 08:37

Python英文搜索引擎（模糊搜索）

（可考虑NLTK）注意本程序能够对无空格输入、错误拼写输入、乱序输入、部分输入进行完整的模式匹配。并以相关性排序更多python3内容访问omegaxyz.com说明文档：主要步骤1：如何设计一个
Reacubeth·2020-08-15 01:36

自然语言处理学习7：jieba中文关键词提取和词性标注

importjiebaimportjieba.analyseimportnltkparagraph="生活对我
zhuzuwei·2020-08-14 22:58

第一章 语言处理与Python

importnltknltk.download()#从NLTK的book模块加载所有东西fromnltk.bookimport*#搜索文本，词语索引使我们看到词的上下文text1.concordance
Miracle_520·2020-08-14 16:52

Python 网页爬虫 & 文本处理 & 科学计算 & 机器学习 & 数据挖掘兵器库

曾经因为NLTK的缘故开始学习Python，之后渐渐成为我工作中的第一辅助脚本语言，虽然开发语言是C/C++，但平时的很多文本数据处理任务都交给了Python。
xiaoqi030611a·2020-08-14 01:18

[2019计算机视觉]——贪心学院 学习笔记 1.环境配置

,GTX1060系统环境anaconda4.5.11Ubuntu18.04软件环境名称版本python3.6.7cuda9.0cudnn7.4Tensorflow-gpu1.8.0Keras2.1.5nltk3.2.5Pillow5.0.0OpenCV3.4.1PyTorch0.4.1
lvxiangyu11·2020-08-13 15:23

Word2vec相似度模型 + Xgboost 在问题匹配上的应用（kaggle Quora Question Pairs）

kaggleQuoraQuestionPairsIn[1]:importpandasaspdimportnumpyasnpimportgensimfromfuzzywuzzyimportfuzzfromnltk.corpusimportstopwordsfromtqdmimporttqdm_notebookfromnltkimportword_tokenizefromscipy.statsimpo
ljtyxl·2020-08-12 14:20

Pytorch官方教程练习之图像分类器

如何用Pytorch包处理数据常用的：对于图像，可以用Pillow，OpenCV对于语音，可以用scipy，librosa对于文本，可以直接用Python或Cython基础数据加载模块，或者用NLTK和
KKK开讲啦·2020-08-11 21:15

手把手教你NLTK WordNet使用方法

最近看了WordNet，0基础入门，简单记下笔记。因为本身不是学自然语言处理的，好多名词不是特别清楚，现有的博客读的晕乎乎，所以重新写了这个，理清思路。除了行文中提到的链接，其他几个有用的参考链接如下：这个slides很好用：https://sp1920.github.io/wordnet_spacy.pdfhttps://www.cnblogs.com/qq874455953/p/1079257
TinaSmile·2020-08-11 17:00

FrameNet & FrameNet Python API （整理总结）

FrameNet&FrameNetPythonAPI(整理总结)文章目录FrameNet&FrameNetPythonAPI(整理总结)FrameNet介绍FramesLexicalUnitsNLTK下载
康桑思密达安·2020-08-11 17:23

Windows下安装PyQt4+python2.7+(nltk+wordcloud+jieba+pyinstaller打包)——词频分析软件

最近想写个小demo，使用python实现文章的词频统计，并完成词云图的绘制，然后需要具有交互界面，并且能够在没有python环境的电脑下运行，方便不懂编程的人直接使用。支持以下功能，运动结果如下(界面虽丑，五味俱全，毕竟没有美工=_=!!)：选择保留频数下限选择分析的词性保存分析结果绘制可视化云图全部代码实现的打包exe文件：hudongloop-WordCloudAnalysis（下载后直接双
hudongloop·2020-08-11 10:28

【Python实战项目】针对医疗数据进行命名实体识别

一．什么是命名实体识别二．基于NLTK的命名实体识别三．基于Stanford的NER四．【实战案例】医学糖尿病数据命名实体识别一、什么是命名实体识别？
我是九颗·2020-08-11 09:00

【Python实战项目】针对医疗数据进行命名实体识别

一．什么是命名实体识别二．基于NLTK的命名实体识别三．基于Stanford的NER四．【实战案例】医学糖尿病数据命名实体识别一、什么是命名实体识别？
马哥教育·2020-08-11 09:00

情感分析方法之nltk情感分析器和SVM分类器（二）

一、使用NLTKVaderSentimentAnalyser分析NLTK附带了一个内置的情感分析器模块——nltk.sentiment.vader，参考1，参考2。
涵星同学·2020-08-11 04:59

情感分类--中文语料

title:情感分类–中文语料data:2017-03-04tags:NLTK折腾了几天终于上午用nltk实现了中文语料的分类。把整个流程记录一下。
rumusan·2020-08-11 04:08

使用Python的SnowNLP模块实现情感分析

写的类库，可以方便的处理中文文本内容，是受到了TextBlob的启发而写的，由于现在大部分的自然语言处理库基本都是针对英文的，于是写了一个方便处理中文的类库，并且和TextBlob不同的是，这里没有用NLTK
qw_xingzhe·2020-08-11 04:03

自然语言处理学习1：nltk英文分句WordPunctTokenizer、分词word_tokenize和词频统计FreqDist

1.分句SentencesSegment：使用nltk中的punkt句子分割器进行断句加载：nltk.data.load('tokenizer/punkt/english.pickle')importnltkfromnltk.tokenizeimportWordPunctTokenizerimportnumpyasnp
zhuzuwei·2020-08-11 02:34

自然语言处理学习4：nltk词频统计FreqDist，ConditionalFreqDist和tabulate 结合汽车评论实例

1.加载函数和准备数据importnltkimportjiebaimportnumpyasnpimportpandasaspdimportre#读取评价数据defload_comments(filename
zhuzuwei·2020-08-11 02:34

nltk学习之统计词频和分词nltk.word_tokenize nltk.FreqDist

1.分词（1）可以使用split()函数importnltkimportnumpyasnpimportrefromnltk.corpusimportstopwords#1分词1text="Sentimentanalysisisachallengingsubjectinmachinelearning
zhuzuwei·2020-08-11 02:33

【NLTK基础教程】01-02 利用nltk统计词频

在上篇中，简单的介绍了三种获取有效文本的方法，那么接下来就利用nltk来统计这些文本中出现的次数。
闰土不用叉·2020-08-11 01:40

NLP(03)_英文文本处理与NLTK

英文文本处理与NLTKNLTK，全称NaturalLanguageToolkit，自然语言处理工具包，是NLP研究领域常用的一个Python库，由宾夕法尼亚大学的StevenBird和EdwardLoper
Pei_tian·2020-08-10 23:20

Python: NLTK几个入门函数

安装了nltk以及对应的一些英文语料之后,开始按照python自然语言处理学习来学习,有几个入门级别的函数,记录如下:text.concordance(word)这个函数就是用来搜索单词word在text
ShomyLiu·2020-08-10 22:36

中英文分词后进行词频统计（包含词云制作）

fromnltkim
宋凯-SK·2020-08-10 21:21

英文文本分词处理（NLTK）

文章目录1、NLTK的安装2、NLTK分词和分句3、NLTK分词后去除标点符号4、NLTK分词后去除停用词5、NLTK分词后进行词性标注6、NLTK分词后进行词干提取7、NLTK分词后进行词性还原1、NLTK
宋凯-SK·2020-08-10 21:49

NLTK统计中文词频并输出

#-*-coding:utf-8-*-'''使用NLTK对中文进行词频统计并输出'''fromnltkimportFreqDistdefdelblankline(infile,outfile):infopen
为援不可图·2020-08-10 19:36

Python：使用nltk统计词频并绘制统计图

测试环境：macpython3.6.5安装pipinstallnltk代码示例#-*-coding:utf-8-*-fromnltkimportFreqDistfrommatplotlibimportrcParams
彭世瑜·2020-08-10 18:15

nltk之统计词频，去除停用词，生成词云（一）

原文链接：https://www.jianshu.com/p/b41222dded2a导包importnltk,urllib.requestfrombs4importBeautifulSoupfromwordcloudimportWordCloudimportmatplotlib.pyplotaspltimportjiebaimportPIL.Imageasimageimportnumpyasnp
w.r.i.t·2020-08-10 18:31

依存句法分析（NLTK--stanford parser）

依存句法分析句法分析（syntacticparsing）是自然语言处理中的关键技术之一，它是对输入的文本句子进行分析以得到句子的句法结构的处理过程。对句法结构进行分析，一方面是语言理解的自身需求，句法分析是语言理解的重要一环，另一方面也为其它自然语言处理任务提供支持。例如句法驱动的统计机器翻译需要对源语言或目标语言（或者同时两种语言）进行句法分析；语义分析通常以句法分析的输出结果作为输入以便获得更
kasiko·2020-08-10 17:58

NLTK健康领域英文文本分词、词性标注、词频统计

importreimportnumpyasnpimportpandasaspdimportnltk.tokenizeastkimportnltk.corpusasnchandel_file='health_handel.csv
jaffe_wei·2020-08-10 17:19

用nltk对文本分词

用nltk对文本分词在对有标注的文本进行分词时，要用到nltk库中的WordPunctTokenizer和WhitespaceTokenizer,例子如下：importnltkfromnltk.tokenizeimportWordPunctTokenizer
funny123·2020-08-10 16:01

Python自然语言处理——nltk库入门之文本分词（英文）

#-*-coding:utf-8-*-from__future__importunicode_literalsimportnltk.tokenizeastk#需要分词的文本doc="Areyouok?
Quanworld·2020-08-10 14:54

利用NLTK做中英文分词

美图欣赏：一.NLTK环境配置1.安装nltk包（如果开始能装忽然爆红多装几次）pipinstallnltk2.在pythonconsol里面//1.先导入包importnltk//2.下载基本的数据nltk.download
Jackson_MVP·2020-08-10 14:24

使用NLTK进行英文文本的分词和统计词频

目录分词分词后词干提取或词形归一Stemming词干提取Lemmatization词形归一标注词性去停用词统计词频生成英文词云分词先将文档读入，然后全部变为小写txt=open("English.txt","r").read()txt=txt.lower()#将英文全部变为小写中文分词需要专门的方法：英文分词就可以直接使用word_tokenize()进行分词text="Thisisatextfo
Lluvia_2323·2020-08-10 12:50

python nktl语料库下载问题

在执行代码如下代码时报错：fromnltk.corpusimportstopwordsstops=set(stopwords.words("english"))报错提示需要先下载stopwordsimportnltknltk.download
星空-点点·2020-08-10 09:01
上一页 11 12 13 14 15 16 17 18 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他