IKAnalyzer分词

NLP入门系列—分词 Tokenization

NLP入门系列—分词Tokenization分词是NLP的基础任务，将句子，段落分解为字词单位，方便后续的处理的分析。
不二人生·2024-02-05 09:18

07、全文检索 -- Solr -- Solr 全文检索 之 为索引库添加中文分词器

目录Solr全文检索之为索引库添加中文分词器添加中文分词器1、添加中文分词器的jar包2、修改managed-schema配置文件什么是fieldType3、添加停用词文档4、重启solr5、添加【*_
_L_J_H_·2024-02-05 09:28

php solr 全文检索引擎,【搜索引擎】Solr Suggester 实现全文检索功能-分词和和自动提示...

功能需求全文检索搜索引擎都会有这样一个功能：输入一个字符便自动提示出可选的短语：要实现这种功能，可以利用solr的SuggestComponent，SuggestComponent这种方法利用Lucene的Suggester实现，并支持Lucene中可用的所有查找实现。实现1.配置managed-schema文件配置自己core文件夹conf下的managed-schema文件这个是自己的字段：新
一十马·2024-02-05 09:57

Elasticsearch(ES) 简述请求操作索引下文档 增删查改操作

上文Elasticsearch(ES)创建带有分词器规则的索引带着大家创建了一个带有分词功能的索引老规矩我们启动一下ES服务本文我们就来说说关于文档的操作我们先来添加一个文档就像数据库加一条数据一样这里并不需要指定什么表结构和数据结构它的文档结构是无模式的添加文档的请求路径是
瑞晟技术服务中心-耿瑞·2024-02-05 08:12

调用Gensim库训练Word2Vec模型

一、前期工作：1.安装Gensim库pipinstallgensim2.安装chardet库pipinstallchardet3.对原始语料分词选择《人民的名义》的小说原文作为语料，先采用jieba进行分词
风筝超冷·2024-02-05 02:56

BI - 如何在 Python 中进行分词并展示词云

本文为「茶桁的AI秘籍-BI篇第11篇」文章目录Python词云展示MarketBasket购物篮词云分析Hi,你好。我是茶桁。之前两节课，咱们学习了基础的数据可视化工具以及决策树的可视化。今天这节课，咱们要看到的是另外一个场景，叫做词云展示。词云应该所有人都不会陌生，一般什么时候用呢？2007年的时候北京的Google总部，一进入谷歌大楼就有一个非常震撼的场景，在谷歌的大屏幕里面就放了一个词云的
茶桁·2024-02-04 22:24

理论与实战：一篇看懂Python词云

实现原理导入一篇txt文档，使用jieba库对文档中的文字进行分词，计算各个词汇出现的频率，使用wordcloud库按照词汇频率的大小生成词云。
工业甲酰苯胺·2024-02-04 21:29

NLP自然语言处理的基本语言任务介绍

NLP的基本任务包括以下几个方面：1.分词（Tokenization）：将文本分割成单词、短语或其他有意义的元素（称为tokens）。分词是许多NLP任务的第一步。
人生万事须自为，跬步江山即寥廓。·2024-02-04 14:43

python222网站实战(SpringBoot+SpringSecurity+MybatisPlus+thymeleaf+layui)-Mysql分词检索实现

锋哥原创的Springboot+Layuipython222网站实战：python222网站实战课程视频教程（SpringBoot+Python爬虫实战）(火爆连载更新中...)_哔哩哔哩_bilibilipython222网站实战课程视频教程（SpringBoot+Python爬虫实战）(火爆连载更新中...)共计23条视频，包括：python222网站实战课程视频教程（SpringBoot+P
java1234_小锋·2024-02-04 13:10

elasticsearch学习六：学习 全文搜索引擎 elasticsearch的语法，使用kibana进行模拟测试（持续更新学习）

文章目录前言一、基本概念1.Node节点与Cluster集群2.Index索引3.Document文档4.Type类型5.逻辑对比6.物理设计二、ES的命令风格三、新建和删除index索引四、分词器使用和学习
java冯坚持·2024-02-04 10:39

Python 中 jieba 库

、简介1、是什么2、安装二、基本使用1、三种模式2、使用语法2.1对词组的基本操作2.2关键字提取2.3词性标注2.4返回词语在原文的起止位置jieba库一、简介1、是什么（1）jieba是优秀的中文分词第三方库中文文本需要通过分词获得单个的词语
SteveKenny·2024-02-04 03:52

Elasticsearch(ES) 创建带有分词器规则的索引

上文Elasticsearch(ES)下载添加IK分词器带大家下载并使用了IK分词器我们先启动ES服务然后我们来说IK分词器怎么用设置分词器我们还是要发put请求创建索引时通过参数设置这里我们put请求类型要换成
瑞晟技术服务中心-耿瑞·2024-02-04 03:03

被动句和无人称句在西班牙语语法中是如何使用的？

被动句中的动词由ser+主动词的过去分词构成。过去分词要与主语的性、数保持一致。ej:Loslibrossoncompradosporelprofesor.(这些书被老师买了。)
你的童年我的童年·2024-02-03 23:38

python使用正则匹配判断字符串中含有某些特定子串及正则表达式详解

判断字符串中是否含有字串二、正则表达式（一）基本内容1.正则表达式修饰符——可选标志2.正则表达式模式（二）常见表达式函数一、判断字符串中是否含有字串in，notin判断字符串中是否含有某些关键词，方法比较多例如分词后对词向量和关键词进行
浮生若梦777·2024-02-03 21:08

【自然语言处理】P3 spaCy 与 NLTK（分词、词形还原与词干提取）以及 Porter 和 Snowball

目录准备工作spaCyNLTK文本分词spaCyNLTK词形还原spaCyNLTK词干提取PorterSnowballstemmers在自然语言处理（NLP）中，文本分词是将文本拆分为单词或词组的过程，
脚踏实地的大梦想家·2024-02-03 20:17

Docker安装ElasticSearch和IK分词器

建议使用阿里云镜像加速参考：https://blog.csdn.net/qq_37495786/article/details/83246421必须提前创建好yml文件mkdir-p/mydata/elasticsearch/configmkdir-p/mydata/elasticsearch/dataecho"http.host:0.0.0.0">>/mydata/elasticsearch/c
elwyn_you·2024-02-03 19:25

hanlp中的N最短路径分词

N-最短路径是中科院分词工具NLPIR进行分词用到的一个重要算法，张华平、刘群老师在论文《基于N-最短路径方法的中文词语粗分模型》中做了比较详细的介绍。
lanlantian123·2024-02-03 17:02

大模型LORA微调总结

大模型LORA微调总结大模型微调总结模型加载使用deepspeed不使用deepspeed使用lora加载分词器数据加载构建source和target构建input_ids和labels标签补齐构建训练器
江小皮不皮·2024-02-03 15:48

托福写作中怎样运用高分词句?

保证自己对整个高分词句列表都熟悉。2.把自己写过的文章找出来，逐句修改，对照高分词句列表，用高分词句替换自己原有的词句。
文以思英语·2024-02-03 13:59

schema.xml配置 - 分词器配置

在FieldType中，对于TextField，可以通过元素配置分词器，从而影响TextField的分词行为。-->-->-->
Vekaco·2024-02-03 08:42

The Sorrows of Young Werther Chapter 08

Theaffectionandsimplicitywithwhichthiswasutteredsocharmedme,thatIsought(seek的过去式和过去分词)toexpressmyfeelingsbycatchingupthechildandkissingherheartily.Shewasfrightened
Mr_Oldman·2024-02-03 04:25

汉语言处理包 HanLP v1.3.5，新功能、优化与维护

HanLPv1.3.5更新内容：大幅优化CRF分词和二阶HMM分词，重构CharacterBasedGenerativeModelSegment自定义词典支持热更新：#563，ngram模型支持热加载：
lanlantian123·2024-02-03 02:04

默默背单词-467

.博学的；有学问的n.饱学之士2.accomplished：[əˈkʌmplɪʃt]adj.熟练的，才华高的；娴于社交的；很成功的，非常优秀的；完成的v.完成，实现（accomplish的过去式和过去分词
ss的专属赫兹·2024-02-02 10:30

基于BERT Adapter的词汇增强型中文序列标注模型

LexiconEnhancedChineseSequenceLabellingUsingBERTAdapter解读01背景与动机近年来，多项研究致力于将词汇信息融入中文预训练模型中以提升命名实体识别、分词和词性标注等序列标注类任务的效果
NLP论文解读·2024-02-02 10:28

Elasticsearch(ES) 下载添加IK分词器

上文通过Web请求对Elasticsearch(ES)进行索引的增删查操作我们通过web请求创建了一个索引但目前我们的索引是不具有分词效果的我们并没有为索引指定分词器所以我们目前加进去的数据就会保持原样没有分词的能力我们执行
瑞晟技术服务中心-耿瑞·2024-02-02 10:36

ElasticSearch搜索与分析引擎-Linux离线环境安装教程

目录一、下载安装包网盘链接:二、安装流程及遇到的问题和解决方案（1）JDK安装（2）Elasticsearch安装（3）Kibana安装（4）Ik分词器安装三、启动过程中的问题（1）日志输出（2）日志一直输出
sliver-毛毛·2024-02-02 10:35

拼音输入的改进

前面我们讲到，在使用拼音输入法的时候，要避免陷入整句误区、联想误区和简拼误区，要采用26键键盘，要学会标准指法，要在科学分词的基础上针对单字、二字词、三字词和多字词利用不同的输入技巧来提高效率。
声笔系列·2024-02-02 09:54

ElasticSearch-IK分词器(elasticsearch插件)安装配置和ElasticSearch的Rest命令测试

四、IK分词器(elasticsearch插件)IK分词器：中文分词器分词：即把一段中文或者别的划分成一个个的关键字，我们在搜索时候会把自己的信息进行分词，会把数据库中或者索引库中的数据进行分词，然后进行一一个匹配操作
666-LBJ-666·2024-02-02 06:52

Java实现全文检索-Solr

SolrVsLucene搭建Solr服务器（Mac系统）Solr搭载IKAnalyer分词器Solr是什么？
cc_smart·2024-02-02 06:26

新概念英语第二册（49）下

【Keystructures】复合句的语序复合句可用两种方法构成：一是用连词把从句与主句连接起来；二是用分词结构或不定式。1、用连词连接的复合句①在复合句中，从句可以是名词从句（即起名词的作用）。
哆啦是个程序员·2024-02-01 22:31

SpringData_Solr

【Solr】主要内容Solr简介Solr搜索原理Solr单机版安装可视化管理界面新建核心分词Dataimport使用SolrJ操作SolrSpringDataforApacheSolrSolrCloud
临江仙.刺客·2024-02-01 22:28

什么是网络数据抓取？有什么好用的数据抓取工具？电商数据API免费测试入口

目前网络数据抓取采用的技术主要是对垂直搜索引擎（指针对某一个行业的专业搜索引擎）的网络爬虫（或数据采集机器人）、分词系统、任务与索引系统等技术的综合运用。
懂电商API接口的Jennifer·2024-02-01 12:41

ElasticSearch(ES)极速入门

ElasticSearch什么是ElasticSearch为什么需要Elasticsearch数据库中的索引(基本概念)Elasticsearch运行原理Elasticsearch的启动ES基本使用ik分词插件的使用
weixin_56483538·2024-02-01 11:54

CentOS 7上安装ElasticSearch及Kibana详细步骤

2、新建非root用户，这里以elastic为例，并设置好帐号密码3、ik分词器安装4、在root用户下，修改elasticserch与kibana路径的拥有者5、在root用户下，修改Linux系统的限制配置
Clang的技术博客·2024-02-01 11:22

Centos7 安装elasticsearch

Centos7安装elasticsearch一、安装前需要准备好elasticsearch、ik分词器、kibana的安装包。
南沫木木·2024-02-01 11:21

ElasticSearch案例

一、预期效果在输入框输入关键词的时候，有自动补全功能(此处需要定义一个选择器)，选择要输入的关键词，点击查询(点击查询以后，需要使用到另一个分词器对关键词进行分词)，显示结果注：输入关键词的时候，使用分词器
qq_44209563·2024-02-01 11:20

ElasticSearch分词器插件

中文分词IK分词器IK分词器支持自定义词库，支持热更新分词字典。
qq_44209563·2024-02-01 11:50

ElasticSearch分词器应用

分词器的使用类型为keyword表示不分词，要想分词，字段类型必须为text一、指定分词器设置mapping,新建一个索引article并且指定字段使用的分词器PUTarticle{"mappings"
qq_44209563·2024-02-01 11:50

ElasticSearch的RestAPI

type为text的字段才能够分词RestAPI查询所有索引GET_cat/indices查询索引movies的信息GETmovies查询索引movies的字段相关信息GETmovies/_mapping
qq_44209563·2024-02-01 11:50

实用工具介绍

https://ai.binwang.me/couplet/1.2微软亚洲研究院对联系统http://duilian.msra.cn/app/couplet.aspx支持修改分词支持修改分词高保真图片放大
夏威夷的芒果·2024-02-01 09:28

自然语言处理系列十二》中文分词》机器学习统计分词

注：此文章内容均节选自充电了么创始人，CEO兼CTO陈敬雷老师的新书《自然语言处理原理与实战》（人工智能科学与技术丛书）【陈敬雷编著】【清华大学出版社】文章目录自然语言处理系列十二中文分词机器学习统计分词总结自然语言处理系列十二中文分词中文分词
陈敬雷-充电了么-CEO兼CTO·2024-02-01 08:15

自然语言处理系列十五》中文分词》机器学习统计分词》CRF分词

注：此文章内容均节选自充电了么创始人，CEO兼CTO陈敬雷老师的新书《自然语言处理原理与实战》（人工智能科学与技术丛书）【陈敬雷编著】【清华大学出版社】文章目录自然语言处理系列十五中文分词CRF分词总结自然语言处理系列十五中文分词中文分词
陈敬雷-充电了么-CEO兼CTO·2024-02-01 08:15

Elasticsearch：构建自定义分析器指南

在本博客中，我们将介绍不同的内置字符过滤器、分词器和分词过滤器，以及如何创建适合我们需求的自定义分析器。
Elastic 中国社区官方博客·2024-02-01 07:37

ElasticSearch Query查询

1.term查询和terms查询term和terms是包含（contains）操作，而非等值（equals）不知道分词器的存在，所以不会去分词所谓的包含是文档分词结果某个分词是否相等，即文档是否包含这个分词因为是在分词结果中匹配
zfh_51d2·2024-02-01 04:18

ElasticSearch面试题整理（持续更新）

Elasticsearch使用一种称为倒排索引的结构，ES中的倒排索引其实就是lucene的倒排索引，区别于传统的正向索引，倒排索引会再存储数据时将关键词和数据进行关联，保存到倒排表中，然后查询时，将查询内容进行分词后在倒排表中进行查询
山河亦问安·2024-02-01 00:27

英语语法学习：非谓语动词、分词作主语补足语及分词作表语用法大全！

一、分词作主语补足语分词作主语补足语，是用来补充说明主语的动作或状态。实际上，主动句式变为被动句式之后，宾语补足语相应地就成为了主语补足语。这也说明了，所有使用分词作主语补足语的句子都是被动句式。
树先生本人·2024-01-31 23:11

elasticsearch的基本使用

添加ik中文分词安装IK分词器插件：下载IK分词器插件，可以从GitHub上的elasticsearch-analysis-ik页面下载最好下载与ES版本相同的IK版本文件。
码农下的天桥·2024-01-31 19:57

BERT问答模型回答问题

预处理数据时，清洗数据、去除无用信息、分词、转换为小写等操作可以帮助提高模型的性能。在选择模型架构阶段，使用预训练的BERT模型作为基础是一个很好的选择。
朱雀333·2024-01-31 13:13

详解SpringCloud微服务技术栈：深入ElasticSearch（2）——自动补全、拼音搜索

实现这种功能需要安装拼音分词器，同时我们需要对其进行自定义，然后开始在之前的旅游类项目中增加搜索框自
布布要成为最负责的男人·2024-01-31 09:33

.net core 6 集成 elasticsearch 并 使用分词器

1、nuget包安装NEST、安装elasticsearch、kibana、ik分词器、拼音分词器2、创建操作对象//索引库staticstringindexName="testparticper";/
小费的部落·2024-01-31 07:54
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他