词频统计

Jieba分词词频统计绘制词云图Wordcloud套图（2018-11-03）

importjiebafromwordcloudimportWordCloudimportmatplotlib.pyplotasplt#AI2017.txt来自http://www.gov.cn/zhengce/content/2017-07/20/content_5211996.htmwithopen('AI2017.txt','r')asf:renmin=f.read()jieba.load_
画奴·2021-06-10 19:02

Leetcode shell 试题词频统计

题目描述image.png思路基于对单列文件排序，即sort|uniq-c|sort-nr，故只需要把空格替换成换行符，成为单列文件。空格替换\n的几种方式tr#translateordeletecharacters说到替换命令，第一个想到的就是tr命令tr-s'''\n'sedsed有替换的功能sed's/old/new/g'，所以空格替换为换行命令sed's??\n?g'或者sed's?\s?
风Boy·2021-06-09 20:38

PySpark 核心概念和操作(词频统计)

1.Spark核心概念1.1Spark简介ApacheSpark是新兴的一种快速通用的大规模数据处理引擎。它的优势有三个方面：通用计算引擎能够运行MapReduce、数据挖掘、图运算、流式计算、SQL等多种框架基于内存数据可缓存在内存中，特别适用于需要迭代多次运算的场景与Hadoop集成能够直接读写HDFS中的数据，并能运行在YARN之上Spark是用Scala语言编写的，所提供的API也很好地利
Zake_Wang·2021-06-08 09:30

Spark案例库V1.0版

Spark案例库案例一：使用SparkRDD实现词频统计pom.xml文件aliyunhttp://maven.aliyun.com/nexus/content/groups/public/clouderahttps
ChinaManor·2021-05-24 22:32

我分析了2.2W条抖音数据，发现“95后”其实很养生，但也不要在晚上9点发视频

晚上9点不要发视频，你会失望的丨毕竟年轻人，爱表达自己，更爱表达喜欢对2.2W条数据的视频描述做分词词频统计，排除了
野蛮人诺基亚·2021-05-19 01:29

Python jieba 中文分词与词频统计的操作

我就废话不多说了，大家还是直接看代码吧~#!python3#-*-coding:utf-8-*-importos,codecsimportjiebafromcollectionsimportCounterdefget_words(txt):seg_list=jieba.cut(txt)c=Counter()forxinseg_list:iflen(x)>1andx!='\r\n':c[x]+=1p
·2021-05-18 17:30

Python学习笔记-3群18组-杜杜狼-2017.8.8

sklearn进行机器学习编程一般分为三步：数据准备与预处理模型选择与训练模型选择与参数调优文档向量化使用sklearn.feature_extraction.text.CountVectorizer类,进行词频统计
渡笃狼·2021-05-16 05:00

Linux小题检验

目录一、英文题二、中文题三、编程题1、校门外的树2．求第N个素数3、词频统计4、输出第N个素数内所有素数的和5、比身高一、英文题1、InLinuxallfilesarestoredinoneuniteddirectorytree
小白乔学技术·2021-05-15 09:44

211. Add and Search Word - Data structure design

典型应用是用于统计，排序和保存大量的字符串（但不仅限于字符串），所以经常被搜索引擎系统用于文本词频统计。
April63·2021-05-14 22:39

文本挖掘HW4----词云美化

在文本挖掘HW3中，我们已经对一篇有关燃料电池的文章进行了词频统计和构建了词云图，接下来就是词云美化。
在做算法的巨巨·2021-05-10 06:34

词频统计 - 词云绘制

作为练习数据对其进行以下几个实验：词频统计-词云绘制-关键词提取-相似文章推荐-自动摘要等实验。本篇为词频统计和词云绘制篇，后面几个实验我会慢慢补上。
_hahaha·2021-05-09 16:26

Python大数据：jieba分词，词频统计

实验目的学习如何读取一个文件学习如何使用DataFrame学习jieba中文分词组件及停用词处理原理了解JupyterNotebook概念中文分词在自然语言处理过程中，为了能更好地处理句子，往往需要把句子拆开分成一个一个的词语，这样能更好的分析句子的特性，这个过程叫就叫做分词。由于中文句子不像英文那样天然自带分隔，并且存在各种各样的词组，从而使中文分词具有一定的难度。不过，中文分词并不追求完美，而
_黑冰_·2021-05-08 13:43

Trie树使用实例

应用经常被搜索引擎系统用于文本词频统计。同时，它也是很多算法和复杂数据结构的基础，如后缀树，AC自动机等优点最大限度地减少无谓的字符串比较，查询效率比哈希表高。
go4it·2021-05-06 00:11

泰迪杯C题-第一问

以及画出词云图导入库importre#正则表达式库importcollections#词频统计库importnumpyasnp#numpy数据处理库importjieba#中文分词importpandasaspdimportwordcloud
紧到长不胖·2021-05-06 00:11

泰迪杯C题-第二问

景区及酒店的综合评价导入库importre#正则表达式库importcollections#词频统计库importnumpyasnp#numpy数据处理库importjieba#中文分词importpandasaspdimportwordcloud
紧到长不胖·2021-05-06 00:11

MapReduce实战-词频统计、文件合并排序

文章目录环境搭建词频统计输入源码输出合并输入源码输出排序输入源码输出环境搭建hadoop伪分布式集群环境，包括设置JAVA_HOME、HADOOP_HOME等。
唔仄lo咚锵·2021-05-05 17:10

MapReduce编程实践（基于deepin 20.2社区版&Hadoop 3.1.3）

参考资料：MapReduce编程实践(Hadoop3.1.3)厦大数据库实验室博客目录词频统计任务要求在Eclipse中创建项目编写Java应用程序编译打包程序运行程序词频统计任务要求首先，在Linux
CCH²¹·2021-05-01 14:37

Python3.5+PyQt5词频统计（三）

主程序编写一、打开文件#打开文件filename_tup=QFileDialog.getOpenFileName(self,'选择文件')iffilename_tup==('',''):#点击打开文件按钮但未选择文件，为防止闪退，设置passpasseliffilename_tup:self.sword_dic={}#初始化字典self.progressBar.show()#显示进度条whiles
Pantheon·2021-04-30 14:08

Excel Power BI 标签云可视化

1、分词与词频统计要做标签云可视化，首先需要对这些评论进行分词，分出一个一个的关键字标签，然后统计他们的频次，得到词频表。要对文本进行分词，可以使用分词工具。
刘万祥ExcelPro·2021-04-25 11:39

Python大佬用词云可视化带你分析海贼王、火影和死神三大经典动漫

利用Python网络爬虫爬取了豆瓣网，将网站上关于这三部动漫的评论全部抓取下来，之后通过Python的第三方库jieba分词进行词频统计和分析，最后通过matplotli
IT派森·2021-04-18 18:22

全国计算机等级考试二级Python精品题库学习笔记1

全国计算机等级考试二级Python精品题库学习笔记1精品试卷01精品试卷01程序题基本操作题2：随机验证码基本操作题3：比赛成绩计算Turtle绘图题：同心圆简单应用题2：员工工资表综合应用题：《从清华到MIT》词频统计精品试卷
zhuyue1995·2021-04-08 20:39

Python 字典:数字频数统计

数据统计#类似哈姆雷特词频统计描述输入两个整数，在这两个整数组成的闭区间范围内生成100个随机整数，并统计出现数据的次数，出现0次的数字不输出（而不是输出0）。
learn 11233466·2021-03-30 00:05

字典树

写在前面字典树(TireTree)，典型应用是用于统计，排序和保存大量的串（但不仅限于字符串），所以经常被搜索引擎系统用于文本词频统计。
华雨欣·2021-03-21 17:30

爬取火影人物能力值及其可视化（pyecharts，selenium库）实现

昨天，我做了一个词频统计的小案例。然后，可视化做上瘾了。今天，我吃饭看火影的凯皇励志片段，我想要了解凯皇有多强，接着去网上百度，将凯皇的能力爬取下来，之后可视化出来。
Mr.Pan_学狂·2021-03-11 23:26

Spark Streaming实时流处理项目实战(七)Spark Streaming入门

SparkStreaming入门概述应用场景集成Spark生态系统的使用SparkStreaming发展史词频统计概述SparkStreaming是核心SparkAPI的扩展，可实现实时数据流的可伸缩，
怒上王者·2021-03-08 20:20

GloVe模型_3分钟热情学NLP第9篇

3分钟热情学NLP第9篇，GloVe模型GloVe的全称叫GlobalVectorsforWordRepresentation，它是一个基于全局词频统计（count-based&overallstatistics
十三先·2021-02-25 11:18

Python中文件的基本操作

python中文件的基本操作1打开文件：open函数2文件操作方法3os模块4json模块5存储为excel文件7练习：词频统计1打开文件：open函数格式：open('path','mode')模式描述
KKang@·2021-02-11 13:32

NLP笔记Day2：词频统计及可视化

在本次练习中，我们主要实现build_freqs()函数，并且把数据喂进去看看可视化的结果。在整个推特情感分析项目中，这个函数的任务是构建一个字典。我们可以在字典里面查找每个词出现的次数。字典对于后续提取数据集的特征值是非常有帮助的。不单单是计算频次，而是计算一个单词，描述正向的次数和负向的次数。也就是说，当一个单词出现在一个句子时，这个句子更可能是在讲正向的话，还是负向的。导入库先来导入我们需要
Wi先森·2021-02-03 15:30

【Python学习笔记】词频统计

前往：我自己搭建的博客所用版本：Python3.6，jieba0.42.1，nltk3.2.4，wordcloud1.8.1NLTK统计将分词后的结果放入list，调用nltk.FreqDist()进行频数统计。支持用下标查询某个词语的频数。用most_common(k)函数可以将频数排名前k的词语存入一个list，list中的元素类型为tuple。生成词云先生成存放着频数的字典，然后调用word
zjgmartin·2021-01-30 17:30

jieba分词+collections 词频统计

jieba分词（一）特点（二）主要功能1.分词（三）载入词典（四）载入词典（五）关键词抽取1.基于TF-IDF算法的关键词抽取2.基于TextRank算法的关键词抽取（六）词性标注二、collections词频统计前言
Txixi·2021-01-25 21:21

我的Python学习之路(6)

的组合数据类型，例如集合类型、序列类型（元组类型、列表类型）、字典类型2.根据三种类型，编写代码实现基本统计值的计算3.安装jieba库并熟悉它的函数4.根据jieba库和学习的组合数据类型，实现文本的词频统计
Mr_BigG·2021-01-15 15:25

大数据从入门到实战 - HDFS和MapReduce综合实训

大数据从入门到实战-HDFS和MapReduce综合实训一、关于此次实践1、实战简介2、全部任务二、实践详解1、第1关：WordCount词频统计2、第2关：HDFS文件读写3、第3关：倒排索引4、第4
发芽ing的小啊呜·2021-01-13 17:45

《流浪地球》豆瓣影评项目心得

完整代码数据分析-词频统计分词和设置停用词词频统计绘制词云取好评和差评数据完整代码数据分析-评论数量及评分与时间的关系设置plt字体绘制评分数量饼图评论数量和日期的关系评论数量与时刻的关
likeGhee·2021-01-05 22:40

Python 中文词频分析——红楼梦人物出场次数

本篇文档，带大家用Python做一下词频统计本章需要用到Python的jieba模块jieba模块是一个经典的用于中文分词的模块首先呢我们需要读取文章的内容，并用jieba库的lcut进行分词importjieba
Miku丨无形·2020-12-28 14:42

仅使用HDFS的Java-API进行WordCount词频统计工作

1.样例输入2.样例输出二、程序步骤1.引入maven依赖2.配置properties文件3.实现步骤三、总结前言本文通过仅使用HDFS的原生Java-API，不调用MapReduce，对文本单词进行词频统计
Zhou.Y.M·2020-12-20 14:22

【文本挖掘】——词频统计、词云绘制与美化+[微微一笑很倾城]实战

词频统计、词云+实战一、词频统计：1.基本概念及原理2.词频统计方法二、词云1.词云绘制工具：2.python词云绘制——Wordcloud三、基于分词频数绘制词云1.利用词频绘制词云2.美化词云四、实战篇
开数据挖掘机的小可爱·2020-12-17 00:51

数据结构-PHP 字典树(Trie)的实现

典型应用是用于统计，排序和保存大量的字符串（但不仅限于字符串），所以经常被搜索引擎系统用于文本词频统计。
爱因诗贤·2020-12-11 03:48

数据结构-PHP 字典树(Trie)的实现

典型应用是用于统计，排序和保存大量的字符串（但不仅限于字符串），所以经常被搜索引擎系统用于文本词频统计。
爱因诗贤·2020-12-11 02:36

超级详细使用jieba分词用wordcloud制作词云并进行词频统计实例

最近学习机器学习课程，学到文本分类就研究了下词云如何处理，写下代码和文件以便帮助更多的人，个人变成基础极其薄弱，如有问题请自行修改相关代码。准备工作使用命令安装jieba分词，这里已经帮大家写好了阿里云的镜像复制使用即可。pipinstalljieba-ihttps://mirrors.aliyun.com/pypi/simple/另外一个下载下我的文件，我这里使用的是长篇小说《白鹿原》，有需要的
microspore·2020-12-10 23:36

数据结构-PHP 字典树(Trie)的实现

典型应用是用于统计，排序和保存大量的字符串（但不仅限于字符串），所以经常被搜索引擎系统用于文本词频统计。
爱因诗贤·2020-12-09 20:59

Python数据可视化——词云图

任务：下载一本txt的电子书，对它分词、词频统计，生成电子书的词云图，作为这本书的概览理解在数据可视化中，词云图是一个比较常用也比较简单的应用。
努力搬砖的阿也吖·2020-12-08 21:57

python 文本分析 区间统计_Python数据分析之文本处理词频统计

1.项目背景：原本计划着爬某房产网站的数据做点分析，结果数据太烂了，链家网的数据干净点，但都是新开楼盘，没有时间维度，分析意义不大。学习的步伐不能ting，自然语言处理还的goon2.分析步骤：(1)停用词，1028个，哪都搜得到(2)fromcollectionsimportCounter(3)fromwordcloudimportWordCloud(4)找一个txt文档玩一下呗，红楼梦不大不小
weixin_39572152·2020-12-03 21:47

编写mapreduce程序实现对输入文件的词频统计排序_分布式计算技术MapReduce 详细解读，不懂得就来学习一下...

各位志同道合的朋友们大家好，我是一个一直在一线互联网踩坑十余年的编码爱好者，现在将我们的各种经验以及架构实战分享出来，如果大家喜欢，就关注我，更多的可以关注wx，一起将技术学深学透，我会每一篇分享结束都会预告下一专题上周我们学习了消息中间件的核心原理以及如何搭建一套高并发高可用且支持海量存储的生产架构(今天设计一套高可用高并发、海量存储可伸缩的消息中间件生产架构)，我们暂且先放一放，后面再进行Ro
weixin_39962153·2020-11-24 15:34

python函数实验总结_Python程序设计实验报告八：文件

1）水浒传词频统计问题描述：使用词频统计的方法，生成《水浒传》出场次数最多的10个人物的姓名。?????????????????
weixin_39952074·2020-11-24 00:34

python 对excel文件进行分词并进行词频统计_初学python，词频统计小实验

今天捣鼓了一下午，搞出了一个词频统计的程序，敲了三四十行代码，还是十分有成就感。本着输出是为了更好的理解知识的初心，我来谈谈我是怎么写的，用的那些方法。
weixin_39560066·2020-11-21 07:04

Python程序设计实验报告【合集】

课堂作业1、词频统计：输入一个文件，程序读取文件，文件内容是英文内容，不少于500个单词的内容，统计每个单词在该短文内出现的次数。
鸽子不二·2020-10-20 20:25

Java实现词频统计

一、随便找一篇英文文章，存储在txt文本中，内容如下：Therearemomentsinlifewhenyoumisssomeonesomuchthatyoujustwanttopickthemfromyourdreamsandhugthemforreal!Dreamwhatyouwanttodream;gowhereyouwanttogo;bewhatyouwanttobe,becauseyou
yeyu_xing·2020-10-14 21:46

Spark(18) -- SparkCore总结

以词频统计Wor
erainm·2020-10-06 10:14

商业数据分析从入门到入职（9）Python网络数据获取

文章目录前言一、网络和网页基础知识1.数据来源2.网络基础知识3.HTML、CSS和网页数据抓取方式二、BOSS直聘数据抓取案例1.网站预览2.数据获取3.提取列表信息4.获取职位详情数据5.词频统计和词云展示三
cutercorley·2020-10-03 10:00

CTFshow月饼杯crypto部分wp

CTFshow月饼杯crypto部分wpcrypto1题目描述:密文如下:第一行给出为自动密码，搜索到相关文章下载break_autokey.py和相关的词频统计脚本，修改ctext跑一下发现不对。
Kr0ne·2020-09-27 18:07
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他