bilstmcrf词性标注

catia孔深度符号标注_一文看懂词性标注（基本概念+4种方法+7种工具）

什么是词性标注？
weixin_39987926·2023-10-14 15:47

自然语言处理---------jieba调整词频与词性标注

有些句子中出现了一些词语，但是被分开为两个单独的字，虽然这样可以调整词库，只需要重新加载自定义的词库即可，除此之外我们还可以用”调整词频来解决这个问题”importjiebaimportjieba.possegaspg#词性标注的包
不良使·2023-10-14 15:45

python：jieba分词+词性标注

python：jieba分词+词性标注处理数据jieba分词导入相关包创建停用词jieba.cut分词进行词性标注文件读取写入做实验室的一个项目，暂时要做的内容：对文本数据作摘要（<8）。
Cactus_xixi·2023-10-14 15:14

python jieba 词性标注 中文词性分类 nlp jieba.posseg

参考：https://blog.csdn.net/yellow_python/article/details/83991967fromjieba.possegimportdtdt.word_tag_tab['好看']>>>'v'flag_en2cn={‘a’:‘形容词’,‘ad’:‘副形词’,‘ag’:‘形语素’,‘an’:‘名形词’,‘b’:‘区别词’,‘c’:‘连词’,‘d’:‘副词’,‘df
mohana48833985·2023-10-14 15:39

隐马尔可夫(HMM)/感知机/条件随机场(CRF)----词性标注

笔记转载于GitHub项目：https://github.com/NLP-LOVE/Introduction-NLP7.词性标注7.1词性标注概述什么是词性在语言学上，词性(Par-Of-Speech,
mantch·2023-10-13 01:55

中文分词接口

二、功能体验三、产品特点四、API文档4.1景点列表查询4.1.1接入点说明将输入的文本切词，主要功能包括中文分词、词性标注、命名实体识别、新词识别。4.1.2接口地址http[s]
万维易源·2023-10-12 17:16

CRF（条件随机场）

用词性标注问题解释CRF给定一个句子s，比如：“我在公园看到一只猫”，正常标注词性的结果如下：“我”：名词“在”：介词“公园
gaaraZH·2023-10-06 22:47

机器学习笔记 - 深入研究spaCy库及其使用技巧

spaCy在学术界和工业界广泛用于各种NLP任务，例如标记化、词性标注、命名实体识别等。安装，这里使用阿里的源。
坐望云起·2023-10-05 07:32

举例说明自然语言处理（NLP）技术

词性标注：对单词进行分类，如名词、动词、形容词等。例如，“狗”是一个名词，“跑”是一个动词。情感分析：分析文本的情感色彩，如积极、消极或中立。例
超级大超越·2023-10-05 05:36

一款简化Python自然语言处理的开源库

它提供了简单且易于使用的API，使得对文本进行分析、情感分析、词性标注、名词短语提取等任务变得更加简单。TextBlob的核心功能是基于NLTK（自然语言工具包）和Pattern库构建的。
迷途小书童的Note·2023-10-03 15:09

jieba.posseg是jieba中的一个组件，它用于对文本进行词性标注

下面是一个简单的例子，展示了如何使用jieba.posseg组件进行词性标注：importjieba.possegaspsegtext="那位穿着绿色衬衫的女士是我的姐姐。"#
代码改变社会·2023-10-01 07:30

自然语言处理NLP：LTP、SnowNLP、HanLP 常用NLP工具和库对比

WordSegmentation分词–TokenizationStemextraction词干提取-StemmingLexicalreduction词形还原–LemmatizationPartofSpeechTagging词性标注
Cachel wood·2023-09-30 15:43

中文分词的词典中的词性标记

词性标记：包含ICTPOS3.0词性标记集、ICTCLAS汉语词性标注集、jieba字典中出现的词性、simhash中可以忽略的部分词性。
沐雪架构师·2023-09-30 11:48

仿写软件怎么设计

下面简要介绍仿写软件的设计过程：1、仿写软件怎么设计的文本预处理：仿写软件需要对输入的原始文本进行预处理，包括分词、去停用词、词性标注、句法分析等操作，以便后续的文本分析和处理伪原创。
chatgpt001·2023-09-29 13:03

python textblob_文本处理工具 - TextBlob

它可以用来执行很多自然语言处理的任务，比如，词性标注，名词性成分提取，情感分析，文本翻译，等等。你可以在官方文档阅读TextBlog的所有特性。
?? 1·2023-09-28 13:41

【自然语言处理基础技能（NLP)】语言模型基础

3.N-gram实际应用举例3.1词性标注3.2垃圾邮件识别3.3中文分词3.4机器翻译与语音识别4.平滑技术4.1拉普拉斯平滑4.2古德图灵(GoodTuring)平滑4.3组合
皮卡丘的忧伤·2023-09-28 04:02

2022清华暑校笔记之L1_NLP和Bigmodel基础

2022清华大学大模型交叉研讨课2022-6-27L11NLP部分NLPTasks词性标注命名实体的识别（省略的现象）共体消减（代词）标注成分之间的依赖关系中文的自动分词运用：搜索引擎中运用NLP匹配query
鸭脖没了·2023-09-27 14:22

nlp-parser:一个用于依存句法分析的小工具-conll格式-支持sql做更复杂的分析

项目功能分析中文文本的依存关系,生成conll格式的中间文件,以及本地sqlite3数据库文件,方便统计各种词,词性之间的不同依存关系频次主要功能:把中文文本解析为依存关系包含分词,词性标注结果存储为conllu
田丰w·2023-09-25 03:57

知识图谱学习笔记（五）——实体识别（1）

（Grishman，1997）信息抽取的主要任务：实体识别与抽取、实体消歧、关系抽取、事件抽取2.信息抽取的基础：分词和词性标注2.1中文分词中文以字为基本书写单位，词语之间没有明显的区分标记中文分词就是要由机器在中文文本中词与词之间加上标记
aidanmomo·2023-09-24 20:14

python自然语言处理工具包

[Pattern]https://github.com/clips/pattern:Pattern的自然语言处理工具有词性标注工具(Part-Of-SpeechTagger)，N元搜
zerowl·2023-09-23 00:13

大语言模型的机遇和挑战

自然语言处理包含自然语言理解和自然语言生成两个方面,常见任务包括文本分类,结构分析(词法分析,分词,词性标注,句法分析,篇章分析),语义分析,知识图谱,信息提取,情感计算,文本生成,自动文摘,机器翻译,
hanscal·2023-09-19 06:44

一个Python里最好的分词库!

中文分词是很多应用技术的前置技术，如搜索引擎、机器翻译、词性标注、相似度分析等，都是先对文本信息分词处理，再用分词结果来搜索、翻译、对比等。在Python中，最好用的中文分词库是jieba。
菜鸟学Python·2023-09-17 14:47

OntoNotes 4.0、OntoNotes 5.0数据集介绍 && 下载

它已经被广泛应用于命名实体识别、词性标注、句法分析、语义角色标注等任务的研究和开发中，并对推动自然语言处理领域
AINLPer·2023-09-15 21:47

自然语言处理之北大词性标注集

中文领域尚无统一的标注标准，较为主流的为北大的词性标注集和宾州词性标注集两大类。下面分享北大的词性标注集：代码名称解释Ag形语素形容词性语素。形容词代码为a，语素代码ｇ前面置
挨踢～小先生·2023-09-14 16:24

pytorch中的词性标注_seq2seq_比较naive的示例

一、各种用法_查漏补缺：1.关于numpy中的argmax的用法：numpy之argmax()函数-知乎(zhihu.com)具体看这篇文章够了二、代码+注释：参考：SequenceModelsandLongShort-TermMemoryNetworks—PyTorchTutorials2.0.1+cu117documentation01序列模型和基于LSTM的循环神经网络-知乎(zhihu.c
诚威_lol_中大努力中·2023-09-12 10:19

使用jieba 分词拆分文本的逻辑和逻辑对象并制作搜索引擎

jieba中采用了《现代汉语词性标记》标准来标记汉语的词性，使用大量的中文细致地对汉语的各个词性进行分类，详细的列表可参考官方文档：jieba词性标注下面是jieba支持的词性名字及其代号的对照表：名称代号名称代号名称代号名称代号名词
东方佑·2023-09-11 22:05

NLP（4）--BERT

目录一、自监督学习二、BERT的两个问题三、GLUE四、BERT与Transformer的关系五、BERT的训练方式六、BERT的四个例子1、语句分类（情感分析）2、词性标注3、立场分析4、问答系统七、
Struart_R·2023-09-11 09:13

NLP入门（六）pyltp的介绍与使用

它提供的功能包括中文分词、词性标注、命名实体识别、依存句法分析、语义角色标注等。语言技术平台架构  pyltp是LTP的Python封装，同时支持Python2和Python3版本。
山阴少年·2023-09-11 08:47

LTP对象没有seg属性的解决方案 - Python

LTP是一个流行的中文自然语言处理工具包，提供了分词、词性标注、命名
AlianBlank·2023-09-08 09:47

词！自然语言处理之词全解和Python实战！

词干和词缀形态生成词的词性三、词语处理技术词语规范化定义方法词语切分（Tokenization）定义方法词性还原（Lemmatization）与词干提取（Stemming）词性还原词干提取中文分词英文分词词性标注
TechLead KrisChang·2023-09-07 13:10

【小沐学NLP】Python使用NLTK库的入门教程

文章目录1、简介2、安装2.1安装nltk库2.2安装nltk语料库3、测试3.1分句分词3.2停用词过滤3.3词干提取3.4词形/词干还原3.5同义词与反义词3.6语义相关性3.7词性标注3.8命名实体识别
爱看书的小沐·2023-09-04 18:15

知识图谱项目实践

目录步骤SpaCyTextacy——TextAnalysisforCybersecurityNetworkxDateparser导入库写出页面的名称编辑自然语言处理词性标注可能标记的完整列表依存句法分析
BIT_mk·2023-09-04 00:28

NLP：生成熟悉NLP开源工具，如NLTK、 HanLP等，并搜寻、下载和熟悉PKU、 CoreNLP, LTP MSR, AS CITYI 等语料库。

例如，NLTK提供了分词、词性标注、命名实体识别、情感分析等功能。下面是一个使用NLTK进行词性标注的示例：​importnltk
Solitary_孤影照惊鸿·2023-09-03 21:24

pyltp-依存句法分析例子

最近工作中遇到依存句法相关的知识，特此记录一个简单实例：使用哈工大的pyltp工具包进行依存句法分析：1.分词；2.词性标注；3.依存句法分析。
一只当归·2023-09-01 19:52

transformer实现词性标注

1、self-attention1.1、self-attention结构图上图是Self-Attention的结构，在计算的时候需要用到矩阵Q(查询),K(键值),V(值)。在实际中，Self-Attention接收的是输入(单词的表示向量x组成的矩阵X)或者上一个Encoderblock的输出。而Q,K,V正是通过Self-Attention的输入进行线性变换得到的。1.2Q，K，V的计算Sel
TechMasterPlus·2023-08-31 07:09

Stanford-corenlp 英文词性标注

ROOT：要处理文本的语句IP：简单从句NP：名词短语VP：动词短语PU：断句符，通常是句号、问号、感叹号等标点符号LCP：方位词短语PP：介词短语CP：由‘的’构成的表示修饰性关系的短语DNP：由‘的’构成的表示所属关系的短语ADVP：副词短语ADJP：形容词短语DP：限定词短语QP：量词短语NN：常用名词NR：固有名词NT：时间名词PN：代词VV：动词VC：是CC：表示连词VE：有VA：表语形
__笙歌4J·2023-08-25 17:07

【学习笔记】李宏毅2021春机器学习课程第4.1节：自注意力机制（一）

为什么需要自注意力机制1.1更加复杂的输入1.2更多可能的输出1.2.1每一个向量都有一个对应的Label1.2.2输入多个向量，只需要输出一个Label1.2.3机器要自己决定应该输出多少个Label1.3处理词性标注问题的困境
Harryline-lx·2023-08-22 17:34

中文文本处理高手指南：从零到高手掌握Python中jieba库

目录安装和导入简单分词分词模式添加自定义词典关键词提取词性标注并行分词性能优化分词在NLP中的应用总结1.安装和导入在开始之前，我们需要安装jieba
　子午·2023-08-21 11:01

中文文本处理高手指南：从零到高手掌握Python中jieba库

目录安装和导入简单分词分词模式添加自定义词典关键词提取词性标注并行分词性能优化分词在NLP中的应用总结1.安装和导入在开始之前，我们需要安装jieba
·2023-08-21 10:14

机器学习笔记：线性链条件随机场（CRF）

0引入：以词性标注为例比如我们要对如下句子进行标注：“小明一把把把把住了”那么我么可能有很多种词性标注的方法，中间四个“把”，可以是“名词+名词+动词+名词”，可以是“名词+动词+动词+名词”等多种形式
UQI-LIUWJ·2023-08-17 14:09

智能文档处理IDP关键技术与实践

关于自然语言处理技术的研究有很长历史，针对不同层面文本处理和分析有很多技术点，常见技术例如分词与词性标注、命名实体识别、句法结构分析、文本分类、文本摘要等功能。
·2023-08-15 16:36

Python 自然语言处理：使用 spaCy 库进行文本预处理

它包括词汇化、分词、词性标注、命名实体识别等功能。1.安装spaCy库要开始使用spaCy，您需要先安装它。
青春不朽512·2023-08-15 10:51

Python自然语言处理：NLTK入门指南

什么是自然语言处理（NLP）2.Python在NLP中的应用3.为什么选择使用Python进行NLP二、NLTK介绍1.NLTK是什么2.NLTK的历史和现状3.NLTK的安装和配置4.NLTK的基本功能分词：词性标注
格林希尔·2023-08-14 13:10

HanLP中人名识别分析

在看源码之前，先看几遍论文《基于角色标注的中国人名自动识别研究》关于命名识别的一些问题，可参考下列一些issue:名字识别的问题#387机构名识别错误关于层叠HMM中文实体识别的过程HanLP参考博客：词性标注层叠
lanlantian123·2023-08-11 17:49

怎么建立大型语言模型

这可能包括去除特殊字符、标点符号和停用词，进行分词和词性标注等操作。构建词汇表：基于数据集构建词汇表，即将文本中的单词或子词映射到唯一的标识符，用于
diannao720·2023-08-09 10:25

掌握NLTK：Python自然语言处理库中级教程

在之前的初级教程中，我们已经了解了NLTK（NaturalLanguageToolkit）的基本用法，如进行文本分词、词性标注和停用词移除等。
青春不朽512·2023-08-05 07:48

入门NLTK：Python自然语言处理库初级教程

NLTK包括一些有用的工具和资源，如文本语料库、词性标注器、语法分析器等。在这篇初级教程中，我们将了解NLTK的基础功能。一、安装NLTK在开始使用NLTK之前，我们需要确保已经正确安装了它。
青春不朽512·2023-08-04 09:51

自然语言处理学习笔记（二）————语料库与开源工具

目录1.语料库2.语料库建设（1）规范制定（2）人员培训（3）人工标注3.中文处理中的常见语料库（1）中文分词语料库（2）词性标注语料库（3）命名实体识别语料库（4）句法分析语料库（5）文本分类语料库4
阿波拉·2023-08-03 18:19

NLP实践——基于SIFRank的中文关键短语抽取

NLP实践——基于SIFRank的中文关键短语抽取0.本文介绍1.运行环境2.项目目录3.代码实现3.1utils3.2初始化各类组件3.2.1标点和停用词3.2.2预训练词汇权重3.2.3分词/词性标注模型
常鸿宇·2023-08-02 05:14

jieba分词

Python中文分词，主要有以下3种特性：支持3种分词模式：精确模式、全模式、搜索引擎模式支持繁体分词支持自定义词典#导入jiebaimportjiebaimportjieba.possegaspseg#词性标注
米小河123·2023-08-01 02:49
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他