文本分析

NLP_jieba中文分词的常用模块

1.jieba分词模式（1）精确模式:把句子最精确的切分开,比较适合文本分析.默认精确模式.（2）全模式:把句子中所有可能成词的词都扫描出来,cut_all=True,缺点:速度快,不能解决歧义（3）paddle
Hiweir ··2024-09-13 12:48

三国演义python分析系统_Python之三国演义(上)

一、设计实现详细说明1.1任务详细描述以中国四大名著之一——《三国演义》为蓝本，结合python数据分析知识进行本次的文本分析。《三国演义》全书共120回。本次的分析主要基于统计分析、文本挖掘等知识。
weixin_40002692·2024-09-08 18:15

NLP面试题（9月4日笔记）

1）精确模式：将句子最精确的进行切分，适合文本分析，在日常工作中最为常用；2）全模式：将句子中所有可以成词的词语都扫描出来，速度非常快，但不能消除歧义。3）搜索引擎模式：在精确模式的基础上，对长词
好好学习Py·2024-09-08 13:41

批判和展望：Python文本分析在“企业数字化转型”的“滥用”越走越远，远离初心

开文第一问：企业数字化转型真的可以用Python文本分析度量吗？在回答目前大行其道的Python文本分析法能否测算企业数字化转型的问题之前，我们有必要简单地熟悉一下企业数字化转型的基本定义。
Python_魔力猿·2024-09-07 03:13

文本分析之关键词提取（TF-IDF算法）

文本分析之关键词提取：解锁信息精髓的钥匙在信息爆炸的时代，我们每天都被海量的文本数据所包围。无论是新闻报道、学术论文、社交媒体帖子，还是电子邮件和聊天记录，文本都是我们获取知识和信息的主要载体。
富士达幸运星·2024-09-06 16:32

基于 LDA SS-NMF 的文本主题分析可视化分析系统 毕业设计 附完整代码

近年来，各种主题建模技术，特别是概率图建模技术，取得了显著的进展，其中隐含狄利克雷分布(LDA)等最先进的技术已经成功地应用于可视化文本分析。
程序员奇奇·2024-09-04 11:44

Azure和Transformers的详细解释

语言理解服务：包括文本分析、语言翻译、情感
漫天飞舞的雪花·2024-09-04 09:04

学习笔记 | 文件处理grep、awk、sed这三个命令

2)awkawk是一个强大的文本分析工具，相对于grep的查找，sed的编辑，awk
大虎牙·2024-08-30 20:29

自然语言处理（NLP）与机器学习：深度探索两者的关系

与机器学习的关系1.机器学习驱动NLP任务2.深度学习与NLP的结合4.NLP和ML的相互促进5.挑战与未来展望边走、边悟迟早会好自然语言处理（NLP）与机器学习（ML）有着密切的关系，二者结合在一起可以实现自动化文本分析
听忆.·2024-08-30 10:51

文本分析之关键词提取（TF-IDF算法）

键词提取是自然语言处理中的一个重要步骤，可以帮助我们理解文本的主要内容。TF-IDF（TermFrequency-InverseDocumentFrequency）是一种常用的关键词提取方法，它基于词频和逆文档频率的概念来确定词语的重要性。准备工作首先，我们需要准备一些工具和库，包括Pandas、jieba（结巴分词）、sklearn等。Pandas：用于数据处理。jieba：用于中文分词。skl
SEVEN-YEARS·2024-08-30 03:11

Linux Shell文本处理

预计更新1:基础知识简介和安装基本命令变量和环境变量2:流程控制条件语句循环语句函数3:文件处理文件读写文件权限和所有权文件搜索和替换4:网络和进程网络通信进程管理信号处理5:文本处理正则表达式文本分析和处理生成报告和日志
Kali与编程～·2024-08-25 19:16

【Rust光年纪】深度探索：Rust语言中的文本分析与自然语言处理库综述

探索Rust语言文本处理库的奥秘前言在当今信息爆炸的时代，文本分析和自然语言处理技术变得愈发重要。Rust语言作为一种快速、安全、并发的编程语言，也逐渐走进了这一领域。
friklogff·2024-08-25 11:28

探索Ruby的自然语言处理宝库：文本魔法的艺术

Ruby，作为一种优雅而富有表现力的编程语言，拥有一系列强大的NLP库，它们使得文本分析、情感分析、机器翻译等任务变得简单而高效。
2401_85743969·2024-08-25 05:47

深入理解LDA主题模型及其在文本分析中的应用

深入理解LDA主题模型及其在文本分析中的应用在自然语言处理领域，主题模型是一种强大的工具，能够自动发现文档集中的潜在主题。
小高要坚强·2024-08-25 04:45

jieba安装和使用教程

文章目录jieba安装自定义词典关键词提取词性标注jieba安装pipinstalljiebajieba常用的三种模式：精确模式，试图将句子最精确地切开，适合文本分析；全模式，把句子中所有的可以成词的词语都扫描出来
Cachel wood·2024-02-20 10:02

SPSSAU【文本分析】|我的词库

我的词库文本分析时，可能涉及到一些新词，比如‘内卷’，这个词很可能在词典中并未出现过，词库也不认识它。但研究者自己认识它，此时可将该词纳入到新词词库中，让系统统计词频等信息时也对该词进行统计。
spssau·2024-02-19 23:18

SPSSAU【文本分析】|LDA主题分析

LDA主题分析LDA主题分析是一种提取出文本数据核心主题的模型，其可将整份数据文档的信息提取成几个主题，并且标题出主题与关键词之间的权重情况，用于识别主题的具体实际意义，除此之外，LDA主题分析涉及到可视化展示和图形交互等，接下来将具体进行说明。进行LDA主题分析时，首先需要确定主题个数（理论上有确定主题个数的方式，但实际研究分析时，通常是研究者结合实际意义情况来确定主题个数，通常主题个数介于2~
spssau·2024-02-19 23:18

SPSSAU【文本分析】|词云、词定位等

词云分析等文本分析模块中，最重要和最基础的为展示分词结果，通常是使用词云进行展示。
spssau·2024-02-19 23:18

SPSSAU【文本分析】|文本聚类

SPSSAU共提供两种文本聚类方式，分别是按词聚类和按行聚类。按词聚类是指将需要分析的关键词进行聚类分析，并且进行可视化展示，即针对关键词进行聚类，此处关键词可以自由选择。按行聚类分析是指针对以‘行’为单位进行聚类分析，将原始文本中多行数据聚为几个类别，并且可将具体聚类类别信息进行下载等。按词聚类分析按词聚类分析操作如下图：默认情况下，系统会将词频靠前的20个关键词提取，并且得到其词向量值，并且其
spssau·2024-02-19 23:44

自然语言处理入门：使用Python和NLTK进行文本预处理

本文将介绍如何使用Python编程语言和NLTK（NaturalLanguageToolkit）库进行文本预处理，为后续的文本分析和机器学习任务做准备。
Evaporator Core·2024-02-19 19:29

【1105】备课备什么

听干老师备课第一讲有感教了22年的书，最近四五年也特别重视学习，在我们这个十八线的小县城，自认为比较爱学习的人，可是今天听了干老师的文本分析、解读，以及对教学框架设计。
杜香开花2008·2024-02-19 13:24

什么是jieba？

该库能够处理多种文本分析任务，如情感分析、关键词提取、文本分类等。安装在使用jieba库之前，需要先安装它。
zg1g·2024-02-12 22:33

Shell之awk

awk是什么AWK是一种处理文本文件的语言，是一个强大的文本分析工具。
b2105859·2024-02-12 10:03

Linux CentOS7 awk的反转功能

AWK是一种强大的文本分析工具，在Linux系统中常用于文本处理。然而，AWK本身并没有直接的反转功能，它能做的是通过一些编程技巧来实现文本或字段的反转。
·2024-02-11 18:56

C++课程设计：单词统计器

自然语言处理：在自然语言处理领域，单词统计是一种基本的文本分析技术，可以用于文本分类、情感分析、机器翻译等应用。数据分析：在数据分析领域，单词统计可以用于分析文本数据的特征，例如词频分布、词汇多
Feelings◎·2024-02-09 00:11

【爬虫实战】python文本分析库——Gensim

关键词提取04、Word2Vec嵌入（词嵌入WordEmbeddings）05、FastText嵌入（子词嵌入SubwordEmbeddings）06、文档向量化01、引言Gensim是一个用于自然语言处理和文本分析的
认真写程序的强哥·2024-02-08 11:45

探索NLP中的N-grams：理解，应用与优化

N-gram模型在许多与单词序列相关的文本分析应用中非常有用，例如情感分析、文本分类和文本生成。N-gram建模是用于将文本从非结构化格式转换为结构化格式的众多技术之一。
冷冻工厂·2024-02-08 09:23

HanziNLP 软件包介绍-中文自然语言处理，建模和可视化

HanziNLP一个用户友好且易于使用的自然语言处理包，专为中文文本分析、建模和可视化而设计。HanziNLP中的所有功能都支持中文文本，并且非常适用于中文文本分析！
miracles_S·2024-02-07 19:20

用Py做文本分析3：制作词云图

1.词频统计在词频统计之前，需要先完成分词工作。因为词频统计是基于分词后所构建的list进行的。importjieba#对小说文本第一回分词word_list=jieba.lcut(chapter.txt[1])word_list[:10]['第一回','','风雪','惊变','钱塘江','浩浩','江水','，','日日夜夜','无穷']1.1使用Pandas统计#使用pandas统计#将数据
凡有言说·2024-02-07 16:19

SPSSAU上线文本分析啦|“尔滨”旅游攻略文本分析

一、什么是文本分析？作为一种新兴的基于定性研究的量化分析方法，文本分析法能够揭示文本的变化与特征，为经典问题的研究提供了新思路。
spssau·2024-02-06 06:55

使用python简单实现《西游记》文本分析，通过词频对比探索西游记的主角

使用jieba模块简单统计西游记词频，并进行同义词处理（如合并行者，大圣为悟空）及排除词处理。importjiebawithopen('西游记.txt','r',encoding='utf-8')asf:content=f.read()words=jieba.lcut(content)counts={}#同义词处理forwordinwords:iflen(word)==1:continueelif
西红薯炒番茄·2024-02-03 22:42

SPSS 27 下载安装教程，保姆级教程，小白也能轻松搞的，附安装包

前言IBMSPSSStatistics简称为SPSS，是全球领先的统计分析、数据挖掘、预测建模产品及解决方案，提供高级统计分析、丰富的机器学习算法、文本分析、开源可扩展性、与大数据的集成以及无缝部署到应用程序中等功能
石用软件·2024-02-03 20:20

Linux系统Shell脚本 文件三剑客-------------awk

一、awk简介AWK是一种处理文本文件的语言，是一个强大的文本分析工具。
每日一卷哈·2024-02-03 10:35

写作知识分享：在阅读经典作品中学习细节刻画

来源澎湃新闻《作家走走：用大数据为小说做文本分析》，此篇为阅读笔记华东师范大学创意写作专业“名家创作谈”系列课程，这几期在澎湃新闻上都能看到，看了之后每一篇都有所收获。
深海书社·2024-02-03 08:36

百分点科技：《数据科学技术: 文本分析和知识图谱》

随着智能化应用的发展，文本分析和知识图谱技术的重要性日益凸显，成为推动数据科
Percent_bigdata·2024-02-03 06:42

百分点科技：《数据科学技术: 文本分析和知识图谱》

随着智能化应用的发展，文本分析和知识图谱技术的重要性日益凸显，成为推动数据科
Percent_bigdata·2024-02-03 06:05

探索自然语言处理在改善搜索引擎、语音助手和机器翻译中的应用

文章目录每日一句正能量前言文本分析语音识别机器翻译语义分析自然语言生成情感分析后记每日一句正能量努力学习，勤奋工作，让青春更加光彩。
想你依然心痛·2024-02-03 02:28

Linux ---- Shell编程三剑客之AWK

一、awk处理文本工具1、awk概述awk是一种处理文本文件的语言，是一个强大的文本分析工具。AWK是专门为文本处理设计的编程语言，也是行处理软件，通常用于扫描、过滤、统计汇总工作。用来处理列。
AH努力中·2024-02-02 12:28

AWK 报告生成器

一、AWK命令AWK是一种处理文本文件的语言，是一个强大的文本分析工具。
fhjtg·2024-02-01 21:29

python3.6.国家政策文本分析代码

根据学习至今的python，和导师吩咐的方向，一共做了5件事：1.政府网http://www.gov.cn/index.htm中养老政策特殊文本爬取与保存。2.基于的TF/IDF多文档关键词抽取。-基于TF-IDF算法的关键词抽取（原文：https://blog.csdn.net/zhangyu132/article/details/52128924）importjieba.analysejieb
Luzichang·2024-02-01 20:53

Linux文本三剑客-awk

一、awk的介绍：1.awk的简介：AWK是一种处理文本文件的语言，是一个强大的文本分析工具可以在无交互的模式下实现复杂的文本操作相较于sed常作用于一整个行的处理，awk则比较倾向于一行当中分成数个字段来处理
敢敢936·2024-02-01 18:12

flashtext，一个超酷的 Python 库！

Github地址：https://github.com/vi3k6i5/flashtext文本搜索和替换是文本处理中常见的任务，无论是在文本分析、数据清洗还是信息提取方面，都需要有效的工具来处理文本数据
程序媛了了·2024-01-31 15:05

基于java的学生考试成绩分析程序

基本数据输入，能够建立并且输入班级、学生、课程和成绩单的信息，指定特定的班级和课程后，能够输出该班的所有学生的成绩，通过这个方法可以查询学生的成绩，能够对指定的班级和课程的成绩进行以下3种方法的分析，分数文本分析
LEMFOooO·2024-01-31 07:17

Python实现OCR大批量识别图片文字，并将文字保存到txt文档中，文末源码直接拿！

OCR技术可以将印刷体文字转化为可编辑的文本格式，从而方便进行文本分析、数据挖掘等操作。Python作为一种简洁、易用的编程语言，提供了丰富的图像处理和机器学习库，使得实现图像文字识别变得简单而高效。
认真写程序的强哥·2024-01-31 01:27

ES 分词器

概述分词器的主要作用将用户输入的一段文本，按照一定逻辑，分析成多个词语的一种工具什么是分词器顾名思义，文本分析就是把全文本转换成一系列单词（term/token）的过程，也叫分词。
懒鸟一枚·2024-01-29 09:33

首届情感AI大会：当人工智能理解并具备人类感情时……

全文共6077字，预计学习时长16分钟图源：unsplash最近，笔者参加了首届情感AI大会，本次大会由自然语言处理(NLP)、文本分析、情绪分析及其商业应用领域的首席分析师和商业顾问SethGrimes
「已注销」·2024-01-28 13:35

面试了8家公司，他们问了我这些机器学习题目......

首先自我介绍一下：我在机器学习（语音分析、文本分析
城市中迷途小书童·2024-01-27 06:36

NLP自然语言处理介绍

NLP涉及多个技术和方法，包括语音识别、文本分析、语义理解、机器翻译、情感分析等。通过这些技术，NLP可以处理和分析大量的文本数据，识别文本中的关键信息和结构，并从中提取出有用的知识和洞察。NLP在
love6a6·2024-01-25 07:12

【自然语言处理】【深度学习】NLP中的N-gram理解

这个概念主要用于语言建模和文本分析中。具体来说：Unigram(1-gram):包含一个单词的序列，例如句子中的单个单词。Bigram(2-gram):包含两个相邻单词的序列。
忘却的旋律dw·2024-01-25 07:55

用Py做文本分析5：关键词提取

1.关键词提取关键词指的是原始文档的和核心信息，关键词提取在文本聚类、分类、自动摘要等领域中有着重要的作用。针对一篇语段，在不加人工干预的情况下提取出其关键词首先进行分词处理关键词分配：事先给定关键词库，然后在文档中进行关键词检索关键词提取：根据某种规则，从文档中抽取最重要的词作为关键词有监督：抽取出候选词并标记是否为关键词，然后训练相应的模型无监督：给词条打分，并基于最高分抽取无监督学习——基于
凡有言说·2024-01-24 00:04
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他