E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Tokenizer
String
Tokenizer
类的使用
String
Tokenizer
是一个用来分隔String的应用类，相当于VB的split函数。
stevenliu
·
2014-05-06 11:00
ES中的分词器
一、概念介绍 全文搜索引擎会用某种算法对要建索引的文档进行分析，从文档中提取出若干Token(词元)，这些算法称为
Tokenizer
(分词器)，这些Token会被进一步处理，比如转成小写等，这些处理算法被称为
肖慧
·
2014-05-06 09:00
Hadoop MapReduce程序开发（二）
写的一个单词计数器 Map类 package com.wordcount.map; import java.io.IOException; import java.util.String
Tokenizer
hxl1988_0311
·
2014-05-04 22:00
mapreduce
hadoop
MapWrapper 学习
publicvoidset(Property
Tokenizer
prop,Objectvalue){ if(prop.getIndex()!
微妙率直
·
2014-05-02 09:00
java
setvalue
mapwrapper
Hadoop AWS Word Count 例子
AWS里用ElasticMapReduce开一个Cluster然后登陆masternode并编译以下程序：importjava.io.IOException; importjava.util.String
Tokenizer
hellobinfeng
·
2014-05-01 05:00
hadoop-1.0.4 Type mismatch in value from map解决方法
eclipse:------不记得了 JDK: 1.7.06 hadoop: 1.0.4 2.代码：importjava.io.IOException; importjava.util.String
Tokenizer
huangxia73
·
2014-04-30 09:00
hadoop
map
Hapdoop的一个Mapreduce示例代码--统计单词个数有排序功能
packagecom.mzsx.hadoop; importjava.io.IOException; importjava.util.Random; importjava.util.String
Tokenizer
梦朝思夕
·
2014-04-29 17:03
Hapdoop
Hapdoop的一个Mapreduce示例代码--统计单词个数有排序功能
packagecom.mzsx.hadoop;importjava.io.IOException;importjava.util.Random;importjava.util.String
Tokenizer
梦朝思夕
·
2014-04-29 17:03
Hapdoop
Hadoop
Hapdoop的一个Mapreduce示例代码--统计单词个数
packagecom.mzsx.hadoop; importjava.io.IOException; importjava.util.String
Tokenizer
; importorg.apache.hadoop.conf.Configuration
梦朝思夕
·
2014-04-29 17:13
Hapdoop
Hapdoop的一个Mapreduce示例代码--统计单词个数
packagecom.mzsx.hadoop;importjava.io.IOException;importjava.util.String
Tokenizer
;importorg.apache.hadoop.conf.Configuration
梦朝思夕
·
2014-04-29 17:13
Hapdoop
Hadoop
初窥c++11：从move语义到右值引用
技术人员往往比较傲慢，写c语言的鄙视c++，写c++的鄙视Java，写Java的鄙视c#，要是程序员吵起来怎么办，一个流行的办法就是去github约架，比赛写
tokenizer
和grammaranalyzer
booirror
·
2014-04-26 00:00
C++
String
内存分配
C++11
solr管理工具-- analysis
在solrconfig.xml配置文件中添加 2.左边字母简称KT Keyword
Tokenizer
Factory WT Whitespace
Tokenizer
Factory LCT LowerCa
dongnan591172113
·
2014-04-18 16:00
WordCount程序的新老版源码对比
老版源码如下：packagecom.hadoop.test;importjava.io.IOException;importjava.util.Iterator;importjava.util.String
Tokenizer
闵开慧
·
2014-04-16 17:00
solr 的分析器，分词器和分词过滤器
【本文基于对此英文网页的理解http://wiki.apache.org/solr/Analyzers
Tokenizer
sTokenFilters】（一）分词基本概念概览当对一个文档（document是一系列
明月几时有1116
·
2014-04-11 17:05
solr
solr 的分析器，分词器和分词过滤器
【本文基于对此英文网页的理解http://wiki.apache.org/solr/Analyzers
Tokenizer
sTokenFilters】 （一）分词基本概念 概览 当对一个文档（document
dongnan591172113
·
2014-04-11 17:00
反转字符串
灵感来自于我现在正在看的两本关于java的书，让我想到了用String
Tokenizer
。所以，多看书还是很用帮助的。下面是我的java代码：importjava
michael高_007
·
2014-04-08 04:13
java
反转字符串
灵感来自于我现在正在看的两本关于java的书，让我想到了用String
Tokenizer
。所以，多看书还是很用帮助的。下面是我的java代码：importjava
michael高_007
·
2014-04-08 04:13
Java
为solr添加ansj分词器
源码包在asnj4solr-master目录下执行mvncompile编译源码，执行mvnpackage生成target/ansj4solr-1.0.0-SNAPSHOT.jar在schema.xml中配置
tokenizer
factory
jsw51
·
2014-04-03 11:46
solr
ansj分词器
软件配置
为solr添加ansj分词器
源码包在asnj4solr-master目录下执行mvncompile编译源码，执行mvnpackage生成target/ansj4solr-1.0.0-SNAPSHOT.jar在schema.xml中配置
tokenizer
factory
jsw51
·
2014-04-03 11:46
Solr
ansj分词器
boost中
tokenizer
的用法举例
include #include #include intmain(){ usingnamespacestd; usingnamespaceboost; strings="Thisis,atest";
tokenizer
jwybobo2007
·
2014-04-02 19:00
Hadoop中map/reduce之WordCount实例——分解vs汇总
3、程序示例及注释 packagetest;importjava.io.IOException;importjava.util.String
Tokenizer
;importorg.ap
u012690204
·
2014-03-27 22:00
hadoop
object
map
云计算
String
Tokenizer
类的使用
String
Tokenizer
是一个用来分隔String的应用类，相当于VB的split函数。
木子木
·
2014-03-27 12:00
浏览器探究——webkit部分——解析HTML（3）HTMLToken的处理
接HTML
Tokenizer
的处理篇上篇学习到HTML
Tokenizer
的处理，它是利用有穷状态自动机来完成词法解析的，把解码后的字符串作为输入，输出一个个的HTMLToken的。
zhanglu201112
·
2014-03-25 20:00
html
浏览器
webkit
token
attributes
浏览器探究——webkit部分——解析HTML（2）解码和HTML
Tokenizer
的处理
接解析HTML起源篇起源篇提到数据的处理会调用到如下的两个函数处DocumentParser::appendBytesDocumentParser::finish一个是解析过程中的，一个是解析完成的。而解析开始时，就是起源篇讲的Document，RenderView，DocumentParser的创建，注意当前是html文件，所以创建的是HTMLDocument和HTMLDocumentParse
zhanglu201112
·
2014-03-25 20:00
html
浏览器
buffer
webkit
token
java屏蔽非法字符
import java.io.IOException; import java.util.ArrayList; import java.util.List; import java.util.String
Tokenizer
吕兵阳
·
2014-03-25 09:00
java
hadoop wordcount 代码
直接贴程序了一、程序packageWordCount; importjava.io.IOException; importjava.util.Iterator; importjava.util.String
Tokenizer
smile0198
·
2014-03-23 12:00
hadoop
wordcount
String
Tokenizer
(字符串分隔解析类型) java.util.StringTokeniz
String
Tokenizer
(Stringstr) ：构造一个用来解析str的String
Tokenizer
对象。
SZL
·
2014-03-22 17:00
Java中使用Stream
Tokenizer
按照Javadoc里的描述：Stream
Tokenizer
类获取输入流并将其解析为“标记”，允许一次读取一个标记。解析过程由一个表和许多可以设置为各种状态的标志控制。
liugang594
·
2014-03-21 09:00
Stream
Java中使用Stream
Tokenizer
按照Javadoc里的描述：Stream
Tokenizer
类获取输入流并将其解析为“标记”，允许一次读取一个标记。解析过程由一个表和许多可以设置为各种状态的标志控制。
liugang594
·
2014-03-21 09:00
Stream
Java中使用Stream
Tokenizer
按照Javadoc里的描述：Stream
Tokenizer
类获取输入流并将其解析为“标记”，允许一次读取一个标记。解析过程由一个表和许多可以设置为各种状态的标志控制。
liugang594
·
2014-03-21 09:00
Stream
Python下的英文预处理
defFileRead(self,filePath): f=open(filePath) raw=f.read() returnraw二分割成句子defSenToken(self,raw):#分割成句子 sent_
tokenizer
caicai1617
·
2014-03-21 08:00
python
NLP
英文预处理
Hadoop计算平均值
4.0 代码： package org.apache.hadoop.examples; import java.io.IOException; import java.util.String
Tokenizer
·
2014-03-19 18:00
hadoop
UVa11776 - Oh Your Royal Greediness!
importjava.io.FileReader; importjava.io.InputStream; importjava.io.IOException; importjava.util.String
Tokenizer
wuli2496
·
2014-03-18 23:00
uva1203 - Argus (排序、优先级队列)
importjava.io.InputStreamReader; importjava.io.FileReader; importjava.io.IOException; importjava.util.String
Tokenizer
wuli2496
·
2014-03-18 21:00
Python执行代码的实际操作的五个步骤详细介绍
Python执行代码要经过如下过程：1.
Tokenizer
进行词法分析，把源程序分解为Token2.Parser根据Token创建CST3.CST被转换为AST4.AST被编译为字节码5.执行字节码当执行
sxb0841901116
·
2014-03-18 00:00
python
技术
UVa11269 - Setting Problems
importjava.io.FileReader; importjava.io.BufferedReader; importjava.io.InputStreamReader; importjava.util.String
Tokenizer
wuli2496
·
2014-03-17 18:00
hadoop错误之ClassNotFoundException
下面的代码本质上就是一个wordCount程序packageorg.conan.myhadoop.mr; importjava.io.IOException; importjava.util.String
Tokenizer
yunlong34574
·
2014-03-16 16:00
题目1384：二维数组中的查找
importjava.io.BufferedReader; importjava.io.IOException; importjava.io.InputStreamReader; importjava.io.Stream
Tokenizer
哭哭吓唬你
·
2014-03-14 16:00
将String类型的数据转化为java.sql.Date类型的数据
将String类型的数据转化为java.sql.Date类型的数据代码如下：StringstrDate="2014-03-10";String
Tokenizer
st=newString
Tokenizer
若愚若怯
·
2014-03-10 09:00
hadoop wordcount
importjava.io.IOException; importjava.util.String
Tokenizer
; importorg.apache.hadoop.conf.Configuration
nywsp
·
2014-03-09 14:00
(4)String
Tokenizer
分隔字符串之处理连续的分隔符
importjava.util.String
Tokenizer
; //使用String
Tokenizer
类，包括返回分隔符 publicclassStrTokDemo002{ publicfinalstaticintMAXFIELDS
Xuan6251237011
·
2014-03-05 14:00
(3)String
Tokenizer
分隔字符串
importjava.util.String
Tokenizer
; publicclassString
Tokenizer
Test001{ publicstaticvoidmain(String[]args
Xuan6251237011
·
2014-03-05 14:00
Solr的分析器，分词器和分词过滤器
的分析器，分词器和分词过滤器一个schema.xml可以有两种方式对一个字段进行处理：方法一：使用任何org.apache.lucene.analysis.Analyzer的子类进行设定：方法二：指定一个
Tokenizer
Factory
michael_daiyuntao
·
2014-03-03 19:20
Solr
java中subString、split、string
Tokenizer
三种截取字符串方法的性能比较
最近在阅读java.lang下的源码，读到String时，突然想起面试的时候曾经被人问过：都知道在大数据量情况下，使用String的split截取字符串效率很低，有想过用其他的方法替代吗？用什么替代？我当时的回答很斩钉截铁：没有。google了一下，发现有2中替代方法，于是在这里我将对这三种方式进行测试。测试的软件环境为：WindowsXP、eclipse、JDK1.6。测试用例使用类ip形式的字
candies
·
2014-02-28 13:00
Chapter 7 Tokens, Values, and Variables
1)The
tokenizer
isagreedy
tokenizer
.Itgrabsasmanycharactersasitcantobuildupthenexttoken,notcaringifthiscreatesaninvalidseuenceoftokens.publicclassTest
JavaBeta
·
2014-02-27 17:41
style
invalid
creates
Chapter 7 Tokens, Values, and Variables
1)The
tokenizer
isagreedy
tokenizer
.Itgrabsasmanycharactersasitcantobuildupthenexttoken,notcaringifthiscreatesaninvalidseuenceoftokens.publicclassTest
JavaBeta
·
2014-02-27 17:41
style
values
Invalid
creates
caring
oozie——mapreduce、mysql2hdfs、hdfs2hive
${jobTracker}${nameNode}mapred.job.queue.name${queueName}mapred.mapper.classcom.example.WordCount$
Tokenizer
Mappermapred.reducer.classcom.example.WordCount
xiewenbo
·
2014-02-24 17:00
Lucene知识小总结9:分词
StandardAnalyzer2、TokenStream分词器做好处理之后得到的一个流，这个流中存储了分词的各种信息，可以通过TokenStream有效的获取到分词单元信息生成的流程在这个流中所需要存储的数据3、
Tokenizer
heroShane
·
2014-02-23 23:00
Lucene
Hadoop案例求平均成绩
public class AverageScore { public static class
Tokenizer
Mapper extends Mapper{ private Text word
蓝狐乐队
·
2014-02-21 22:00
【java performance】用'String
Tokenizer
'代替 'indexOf()' 和'substring()'
而使用String
Tokenizer
类来分析字符串则会容易一些，效率也会高一些。
guotong1988
·
2014-02-21 16:00
上一页
33
34
35
36
37
38
39
40
下一页
按字母分类：
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他