ICTCLAS分词

经济学人每天5分钟10个单词 第十三天

1.construct/kən'strʌkt/v.建造；做（图）；构想n.概念；构筑物；结构体单词形态：复数：constructs第三人称单数：constructs现在分词：constructing过去式
LongLongName·2023-11-23 20:30

MySQL创建全文索引

它能够利用【分词技术】等多种算法智能分析出文本文字中关键词的频率和重要性，然后按照一定的算法规则智能地筛选出我们想要的搜索结果。在MySql中，创建全文索引相对比较
热爱技术的小陈·2023-11-23 20:46

Spring Cloud学习（十一）【深入Elasticsearch 分布式搜索引擎03】

文章目录数据聚合聚合的种类DSL实现聚合RestAPI实现聚合自动补全拼音分词器自定义分词器自动补全查询completionsuggester查询RestAPI实现自动补全数据同步数据同步思路分析实现elasticsearch
sweetheart7-7·2023-11-23 16:44

SpringCloud 微服务全栈体系（十六）

例如：match_all全文检索（fulltext）查询：利用分词器对用户
柠檬小帽·2023-11-23 15:35

2019思维导图考级图评训2

3.二级分支：骨折线很多，部分词写成竖着的，线的条畅度还是不错的。4.小图标：很形象，通感表达很棒，部分没画在线上，会感思维断了！
杨敏_6aeb·2023-11-23 03:21

基于Bagging集成学习方法的情绪分类预测模型研究（文末送书）

如果文章对你有帮助的话，欢迎评论点赞收藏加关注+目录1.项目背景2.数据集介绍3.技术工具4.实验过程4.1导入数据4.2数据预处理4.3分词处理4.4词云可视化4.5构建语料库4.6词向量化4.7构建模型
艾派森·2023-11-23 01:58

高中语法专题（过去分词）：过去分词作状语知识点综合讲解及习题专练（二）

=Theteacherenteredtheclassroomandhewasfollowedbyagroupofstudents.(6)“with+宾语+过去分词”的用法：①作原因状语。②作时间状语
初高中英语学习资料·2023-11-22 17:37

es入门以及索引原理学习

搜索功能问题分库分表数据查询（存储）大数据量亿级别/PB级别查询（性能）分词查询全文索引全文索引时将存储在数据库中的整本书或整篇文章中的任意内容信息查找出来的技术。
_三石_·2023-11-22 10:30

Transformers库总体介绍

2.分词（To
taoli-qiao·2023-11-22 10:21

python 文本分析库_自然语言处理实战(利用Python理解分析和生成文本)：(美)霍布森·莱恩//科尔·霍华德//汉纳斯·马克斯·哈普克|责编:杨海玲|译者:史亮//鲁骁//唐可欣//王斌 : ...

本书分为3部分：第一部分介绍NLP基础，包括分词、TF-IDF向量化以及从词频向量到语义向量的转换；第二部分讲述深度学习，包含神经网络、词向量、卷积神经网络（CNN）、循环神经网络（RNN）、长短期记忆
weixin_39529128·2023-11-22 09:06

php 搜索引擎 分词_php 中文分词 全文搜索引擎 xunsearch 实例

xunsearch安装下载解压安装安装成功配置信息SCWS中文分词设计表做测试数据配置文件建立索引测试索引xunsearch安装下载cd~/downloads/wgethttp://www.xunsearch.com
格莫拉·2023-11-22 09:31

迅搜xunsearch全文搜索引擎在负载均衡集群中的配置方法

迅搜xunsearch全文搜索引擎在负载均衡集群中的配置方法近来在一个电商项目中需要对商品检索实现中文分词和全文搜索功能,，于是使用了国内做得比较好并且是开源的迅搜全文搜索引擎，对PHP支持良好并且简单易用好上手
风柏杨·2023-11-22 09:59

NLP常用工具包实战 （5）jieba中文分词器：全模式/精确模式切分词、添加自定义词典、关键词抽取、词性标注、wordcloud词云展示

1全模式/精确模式切分词importjiebaimportjieba.analyseimportjieba.possegaspsegseg_list=jieba.cut("我来到北京清华大学",cut_all
太阳不热·2023-11-22 07:48

Solr索引效率的提升和实践

索引：利用分词语言处理等手段得到的词与文档ID对应关系的数据结构。全文搜索：利用索引对非结构化数据进行搜索的方法。文档：类似于数据库的一条记
明翼·2023-11-22 00:14

tokenizers models模块

模块概述在NLP处理中，分词的目标就是是把输入的文本流，切分成一个个子串，每个子串相对有完整的语义，便于学习embedding表达和后续模型的使用。
不负韶华ღ·2023-11-21 23:59

tokenizers pre_tokenizers模块

这将使最终的分词器能够将每个标记与它来自的文本部分进行匹配（我们用于问答或标记分类任务的功能）。
不负韶华ღ·2023-11-21 23:58

tokenizers Tokenizer类

基类原型tokenizers.Tokenizer(model)基类说明Tokenizer函数构造一个分词器对象。
不负韶华ღ·2023-11-21 23:57

tokenizers学习笔记

一、基于字母的分词方法将每个字符看作一个词。优点：不用担心未知词汇，可以为每一个单词生成词嵌入向量表示。缺点：由于字母缺乏内在含义，所以得到的词嵌入向量也缺乏含义。
AlphaFinance·2023-11-21 23:20

tokenizers Tokenizer 类

pipinstalltensorflowpipinstalltensorflow-ihttps://pypi.tuna.tsinghua.edu.cn/simple基类原型tokenizers.Tokenizer(model)基类说明Tokenizer函数构造一个分词器对象
cliffordl·2023-11-21 23:46

利用Python进行中文分词——实现中文文本处理的基础工具

为了更好地处理中文文本数据，Python提供了许多优秀的中文分词工具和库。中文分词是将连续的中文文本切分成独立词语的过程，是中文文本处理的基础工具。
非著名程序员阿强·2023-11-21 12:09

Jieba库——中文自然语言处理的利器

Jieba是一个开源的中文分词工具，具备高性能、易用性和灵活性等优点，可帮助用户有效地进行中文文本处理和分析。本文将介绍Jieba库的基本原理、功能和使用方法，并通过实例演示如何利用Jieba
非著名程序员阿强·2023-11-21 12:38

廿壹-爬 URL 、Python 异步 、Supervisor 安装配置等事宜

1.综述伪代码可以参考《廿-爬URL以及分词情绪分析初步设想》，才发现这个要做一整天才做得出来，不过大部分时间都是用来部署服务器。
小秉子·2023-11-21 10:31

机器学习实践四：文本词频分析

一、文本词频统计importjieba#jieba中文分词库withopen('data/test.txt','r',encoding='UTF-8')asnovelFile:novel=novelFile.read
Tangefly·2023-11-21 03:11

ElasticSearch常用查询生成器

org.elasticsearch.client:elasticsearch-rest-high-level-client:7.12.1QueryBuilders.matchQuery("field","text");//匹配查询，条件会分词
#585858·2023-11-21 03:35

我用Python把《白蛇2青蛇劫起》的评论做了数据可视化分析

imageimage.gif涉及到的库：Pandas—数据处理Pyecharts—数据可视化jieba—分词collections—数据统计可视化部分：折线图—Line柱状图—Bar饼状图
五包辣条·2023-11-20 22:50

SpringCloud学习笔记（一）分布式搜索引擎ElasticSearch

ElasticSearchElasticSearch简介什么是ElasticSearchElasticSearch特点ElasticSearch体系结构ElasticSearch部署Postman调用RestAPIIK分词器安装测试自定义词库
weixin_45533106·2023-11-20 18:12

SpringCloud——分布式搜索之初识elasticsearch

分布式搜索（elasticsearch）目录分布式搜索（elasticsearch）一、初识elasticsearch1、了解ES2、倒排索引3、ES的一些概念4、安装ES、kibana5、安装IK分词器一
原首·2023-11-20 18:41

三、机器学习基础知识：Python常用机器学习库（中文文本分析相关库）

1、Jieba库在自然语言处理过程中，为了能更好地处理句子，往往需要把句子拆分成一个一个的词语，这样能更好地分析句子的特性，这个过程就称为分词。
七层楼的疯子·2023-11-20 18:29

NLP学习:深入NLP

,因为其中涉及到一些深度学习常用的知识或者框架,但苦于不系统以及没有任务focus不能长久.这里借助微软的教程写点东西.tokenization&&representation将一句话中的单词分割就是分词
procoder338·2023-11-20 15:28

SEO

第1节：如何给网站定位_第2节：如何寻找关键词_第3节：关键词难易度分析_第4节：关键词分词_第5节：网站TDK标签优化_第6节：关键词布局密度控制_第7节：网站权重_第8节：权重标签的使用_第9节：次导航与面包屑导航
哆啦拉梦·2023-11-20 11:30

Python——wordcloud词云库

一、操作前的准备（下面代码均用JupyterNoteBook）wordcloud：快速生成词云图jieba:中文分词库fengmatplotlib:一个2D绘图库查询命令：pipshowwordcloudpipshowjiebapipshowmatplotlib
DamianVanilla·2023-11-20 09:47

SpringCloud 微服务全栈体系（十三）

1.mapping映射属性mapping是对索引库中文档的约束，常见的mapping属性包括：type：字段数据类型，常见的简单类型有：字符串：text（可分词的文本）、keyword（精确值，例如：品牌
柠檬小帽·2023-11-20 09:19

电子商务应用课程知识整理 第四章-搜索引擎

文章目录一、搜索引擎定义分类1.全文搜索引擎2.目录索引3.元搜索引擎4.垂直搜索引擎工作原理1.抓取网页2.处理网页3.提供检索服务核心算法组成部分发展趋势二、网络蜘蛛三、中文分词基于词典的分词方法基于统计的分词方法基于理解的分词方法分词难点
butteringing·2023-11-20 08:40

es安装方式

es安装方式1.下载镜像的方式分词器kibana和es和容器互通的方式dockernetworkcreatees-net开始拉去镜像的方式dockerpullkibana:7.12.1运行镜像的方式dockerrun-d
破局缘·2023-11-20 08:19

es为什么这么快

进行数据存储方式，给每一个字段创建索引，相当于创建一本词典，根据词典方式我们可以快速定位，数据的大致内容现在这里有三句话的方式我的名字你的方式我的未来安装es方式如何对这三句话如何存储，利用倒排存储方式，先进行分词方式
破局缘·2023-11-20 08:48

宗成庆《文本数据挖掘》学习笔记：第二章 数据预处理和标注

文章目录第二章：数据预处理和标注1.数据获取数据获取的一般方法2.数据预处理3.数据标注4.基本工具汉语自动分词与词性标注句法分析n元语法模型第二章：数据预处理和标注1.数据获取从数据的来源来看，数据通常分为来自开放域和来自封闭域
Attention守恒·2023-11-20 07:35

英语语法 - 独立主格 | 省略句

形容词[虚拟语气]省略should[固定结构][独立主格]短语非句子1.独立主格作用相当于状语从句2.放在句首或句尾3.用于书面语4.独立主格的逻辑主语和句子的主语不同[名词/人称代词主格/代词+现在分词
we1less·2023-11-20 04:14

ELK技术栈ElasticSearch，Logstash，Kibana

基础部分工作原理es增删改内部原理ELK集群安装部署文档管理索引管理搜索聚合分析分词数据建模Javaapi零停机indexsegmentmerge乐观锁并发控制索引别名相关度评分算法与定制近似聚合算法docvalues
程序员创新营·2023-11-20 03:01

如何利用Python实现分词和NER的Web服务

比如利用gradio、streamlit实现web应用，利用FastApi实现web服务等等，具体详见之前的大模型应用文章，本文采用tornado框架实现httpweb服务，并结合自然语言处理（NLP）的分词和实体识别的需求
一马平川的大草原·2023-11-20 02:56

Elasticsearch 应用

Elasticsearch的应用本文使用的版本为：7.14.0todo:前端部分Kibana的开发工具IK分词器粗粒度#请求,通过【ik_smart】最粗粒度划分GET_analyze{"analyzer
是个吃不饱的人·2023-11-20 01:21

HIS医疗项目

文章目录医疗项目简介HIS项目介绍HIS架构解析HIS业务流程图HIS项目架构图HIS组件解析——服务支撑内存设置为4G或以上部署NGINX服务部署web安装JDK部署Elasticsearch安装ik中文分词器部署
今天你学Java了吗·2023-11-19 21:18

文本向量化 java_文本向量化的原理

一、文本分词将需要进行分析的文本进行分词(英文直接按照空格分隔词汇，中文则需通过分词工具分隔之后，把词之间加上空格)二、去停用词在文本中可以发现类似”the”、”a”等词的词频很高，但是这些词并不能表达文本的主题
排骨酱·2023-11-19 20:47

Spring Cloud学习（九）【Elasticsearch 分布式搜索引擎01】

文章目录初识elasticsearch了解ES倒排索引ES的一些概念安装es、kibana安装elasticsearch部署kibana分词器安装IK分词器ik分词器-拓展词库索引库操作mapping映射属性索引库的
sweetheart7-7·2023-11-19 18:05

Elasticsearch8版本安装详解，单节点部署、多节点部署、冷热温集群部署、IK分词器安装、简单生产安全模式配置

文章目录1、官网文档2、安装elastic安装前提，系统配置：2.1、下载官网安装包2.2、配置文件参数介绍2.2.1、目录结构2.3、启动配置集群2.3.1、重置密码2.3.2、重新生成kibana令牌2.3.3、转换成生产环境后默认的es配置说明3、配置kibana3.1、下载安装4、同一台服务器的elastic集群配置4.1、生成新的elastic5、多服务器部署节点加入同一集群5.1、方法
timber woIf·2023-11-19 18:29

Hadoop自带WordCount进行词频统计（mapreduce）

Hadoop自带WordCount进行词频统计准备：安装好的Hadoop需要统计词频txt文件（用jieba分过词的链接:pycharm分词jieba结巴分词输出txt.step1启动Hadoopcd/
摸仙小蓝是人机·2023-11-19 16:57

Elasticsearch快速入门

Elasticsearch入门学习一.初识Elasticsearch1.什么是Elasticsearch2.正向索引和倒排索引3.安装ES4.安装Kibana5.安装IK分词器二.索引库操作1.创建索引库
Jumanji_·2023-11-19 16:19

1. Elastic Search基本概念

Type类型可以理解为table,在Index之下;在新的版本的ES中,官方建议移除type的概念,把Doc直接存在Index下3.Document文档每一条记录称为一条文档,JSON格式4.倒排索引机制分词
CutieJohn·2023-11-19 13:25

GPT实战系列-P-Tuning本地化训练ChatGLM2等LLM模型，到底做了什么？(一)

P-Tuning微调训练概述1、预训练模型或者是torch模型2、训练器的超参数3、数据预处理工具4、加载数据5、分词处理6、数据预处理，如填充，前后缀7、训练参数配置8、执行训练软件依赖数据处理P-Tuningv2
Alex_StarSky·2023-11-19 08:37

每日一词根MOV/MOT/MOB

MOV/MOB/MOTMOVcomesfromLatinverbmovere"move"其变体形式MOT来源于movere的过去分词形式motus,其变体形式MOB来源于movere的形容词性分词mobilis
巧记词根·2023-11-19 07:39

深入NLP———看中文分词如何影响你的生活点滴 | 硬创公开课

中文分词是中文自然语言处理的一个非常重要的组成部分，在学界和工业界都有比较长时间的研究历史，也有一些比较成熟的解决方案。
weixin_33739523·2023-11-19 05:34
上一页 12 13 14 15 16 17 18 19 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他