- elasticsearch6.3
g0
[1]:maxfiledescriptors[4096]forelasticsearchprocessistoolow,increasetoatleast[65536][2]:maxvirtualmemoryareasvm.max_map_count[65530]istoolow,increasetoatleast[262144]image.png错误一解决方法:切换到root用户,进入vi/et
- Elasticsearch date 类型详解
哦00
引言一直对elasticsearch中的date类型认识比较模糊,而且在使用中又比较常见,这次决定多花些时间,彻底弄懂它,希望能对用到的同学提供帮助。注意:本文测试使用是elasticsearch6.3版本,其他版本规则可能有所变化,如遇到不兼容的情况,还请参考官方文档Date数据类型elasticsearch数据是以JSON格式存储的,而JSON中是并没有date数据类型,因此Elasticse
- elasticSearch的rollover api(索引声明周期管理&&冷热分离)
小胖学编程
rollover可以根据索引大小,文档数或使用期限自动过渡到新索引。当rollover触发后,将创建新索引,写别名(writealias)将更新为指向新索引,所有后续更新将都写入新索引。版本:elasticSearch6.3提供了rollover功能。rollover的使用场景:Elasticsearch中的rollover接口功能来滚动存储日志,从而达到优化日志查询效率的目的,也方便了对老旧日志
- es拦路虎
rncoder
一、写在前面本文旨为记录在实际使用elasticsearch过程中遇到的一些问题及解决方法。默认运行环境:elasticsearch6.3,java8,springboot2.x二、问题2.1、es高亮片段对带html标签的文本截取不全现象:解决方式:在设置高亮时,从第一个分片开始获取高亮片段numOfFragments(0);如下HighlightBuilderhighlightBuilder=
- elasticsearch sql转dsl并获取搜索结果
0箫逝
搜索走过的坑
由于目前的项目上其他同事有es搜索应用的需求,但是由于学习成本较高,所以我构思了一个简单的工具类,针对springboot注入的es进行elasticsearch6.3版本以后推出的sql功能,把sql转为dsl并返回搜索结果(因为essql的jdbc是收费的,所以用这种方法可以做到sql搜索)。直接上代码:(泛型为实体类,用来把es响应结果转对象用的)importorg.apache.http.
- Elasticsearch JDBC案例介绍
yinbp
[i][b]Thebestelasticsearchhighleveljavarestapi-----[url=https://www.oschina.net/p/bboss-elastic]bboss[/url][/b][/i]Elasticsearch6.3以后的版本可以通过jdbc操作es,该功能还在不断的完善当中,本文介绍esjdbc使用方法。[size=medium][b]1.首先在工程
- Elasticsearch6.2.2 X-Pack部署及使用详解
铭毅天下
Elasticsearch
X-Pack已经开源,预计Elasticsearch6.3版本会全面集成,不再收费。赶紧体验一下强大的X-Pack吧!1、X-Pack概览X-Pack简介1)利用X-Pack拓展可能性。X-Pack是集成了多种便捷功能的单个插件—security、alerting、monitoring、reporting、graph探索和machinelearning—您可以在ElasticStack中放心地使用
- ElasticSearch 6.3版本(ES)查询人名关键字不拆词查询
jacobxian
ELK
ElasticSearch6.3版本(ES)查询关键字不拆词查询:类似mysql的like语句.mysql的sql语法类似如下,采用大量like和locate语法,进行模糊查询,导致查询一个需要8秒多.通过ES优化后,总的查询在1秒内完成,提升8倍以上.SELECTecc.id,ecc.customer_codeAScustomerCode,...,ei.industry_nameASindust
- Ubuntu安装Elasticsearch6.3
aa1571537
本文使用的Ubuntu版本信息:DistributorID:UbuntuDescription:Ubuntu16.04.5LTSRelease:16.04Codename:xenial1、新增es用户elasticsearch默认不允许以root账号运行adduseres#新增es用户,期间需要设置密码2、上传软件使用root用户将elasticsearch-6.3.0.tar.gz和elasti
- elasticsearch新建索引、mapping映射、删除数据级联删除es对应的索引
Take^that
ElasticSearch
点击查看在Centos7中安装elasticsearch6.3点击查看elasticsearch安装head插件一、启动elasticsearch,再进入head目录,执行npmrunstart启动插件然后新建索引puthttp://192.168.1.112:9200/test2/{"settings":{"number_of_shards":1,"number_of_replicas":0,"
- Elasticsearch断电后启动异常(failed recovery, failure RecoveryFailedException)
memory_fu
elasticsearch
断电遇到的elasticsearch6.3问题:重启es集群后索引的部分分片无法正常加载(UNASSIGNED状态)。问题现象:Elasticsearchhead页面点击未加载的分片出现如下错误信息:{"index":"objext_result","primary":true,"recovery_source":{"type":"EXISTING_STORE"},"shard":0,"state
- windows 10 在docker下安装elasticsearch(一)
0箫逝
搜索走过的坑
ElasticSearch6.3版本中增加了elasticsearchsql,最近为了研究elasticsearchsql,突发奇想的想在docker中安装es。本文主要介绍的就是在windows10环境下安装docker。下载、安装dockerwindows版本的docker下载地址:http://mirrors.aliyun.com/docker-toolbox/windows/docker-
- elasticsearch6.3的Java api
bug工厂
官方文档地址:https://www.elastic.co/guide/en/elasticsearch/client/java-api/current/index.html1.TransportClientTransportClient使用传输模块远程连接到Elasticsearch群集。它不加入集群,只是获取一个或多个初始传输地址并在每个动作上以循环方式与它们进行通信(尽管大多数动作可能是“两
- Elasticsearch 新增字段
qingmou_csdn
ElasticSearch
Elasticsearch6.3版本下新增字段如:给索引index的类型type新增字段name:POSTindex/type/_mapping{"properties":{"name":{"type":"keyword","doc_values":false,"norms":false}}}注:也可以用PUT。在嵌套节点下面新增字段,mapping正常写:PUTindex/type/_mappi
- Elasticsearch 6.3 发布,你们要的 SQL 功能来了
Hadoop技术博文
本文原文:https://www.iteblog.com/archives/2378.html(点击下面阅读原文即可进入)Elasticsearch6.3于前天正式发布,其中带来了很多新特性,详情请参见:https://www.elastic.co/blog/elasticsearch-6-3-0-released。这个版本最大的亮点莫过于内置支持SQL模块!我在早些时间就说过Elasticsea
- elasticsearch 6.2.4添加用户密码认证
ddyg18536
elasticsearch6.3版本之前的添加认证需安装x-pack插件,6.3之后貌似去掉了这个。1、安装x-pack先切换到elastic用户下,在执行以下命令$cd/data/elasticsearch-6.2.4--进到elasticsearch的安装目录$./bin/elasticsearch-plugininstallx-pack2、设置密码:$cd/data/elasticsearc
- Elasticsearch6.2.2 X-Pack部署及使用详解
铭毅天下
【Elasticsearch检索技术】
X-Pack已经开源,预计Elasticsearch6.3版本会全面集成,不再收费。赶紧体验一下强大的X-pack吧!1、X-Pack概览X-Pack简介1)利用X-Pack拓展可能性。X-Pack是集成了多种便捷功能的单个插件—security、alerting、monitoring、reporting、graph探索和machinelearning—您可以在ElasticStack中放心地使用
- Centos7部署ELK简述以及错误解决
小牧0510
准备:Elasticsearch和logstash都依赖java环境图例:(因为不会作图,从网上找了一张我喜欢的,但是你要先忽略Beats,就当它不存在吧)名称/版本(版本务必一致)地址Elasticsearch6.3链接Logstash6.3链接Kibana6.3链接下载后解压以上文件到/home/elk目录下tar-zxvfelasticsearch-6.3.0.tar.gztar-zxvfl
- Elasticsearch 自6.3版本以来的发布亮点
vkingnew
Elasticsearch
1.License管理和X-pack自Elasticsearch6.3版本开始Elasticsearch集成X-pack,无须额外安装,自带basiclicense2.ElasticSearchSQL6.3版本为experimental功能,使用SQL访问Elasticsearch里的数据.3.Rollup6.3版本支持4.对新版Java的支持:Java96.2Java106.3,6.4Java1
- ElasticSearch中的date类型
Coding Farmer
ELK
引言一直对elasticsearch中的date类型认识比较模糊,而且在使用中又比较常见,这次决定多花些时间,彻底弄懂它,希望能对用到的同学提供帮助。注意:本文测试使用是elasticsearch6.3版本,其他版本规则可能有所变化,如遇到不兼容的情况,还请参考官方文档Date数据类型elasticsearch数据是以JSON格式存储的,而JSON中是并没有date数据类型,因此Elasticse
- centos6.5安装elasticsearch6.3遇到的问题
laiyijian
ElasticSearch
发现问题背景,有天突然想用ip(非127.0.0.1),形如192.168.1.16去访问elasticsearch,当我用crul192.168.1.16:9201的时候,竟然连不了,后来去官网那看了下文档,说要修改这个参数:network.host我把这个参数修改成这个值后:network.host:0.0.0.0,再去启动elasticsearch就报下边这个错误:[2018-11-14T2
- 支持SQL Elasticsearch6.3 新特性概览
会说话的鱼
jaELK
1、Elasticsearch6.3特性概览1.1、支持Sql像操作Mysql一样使用Elasticsearch,缩减DSL的学习成本,更多人爱上ES的特性。这样我们就可以减少DSL的学习成本,这个SQL模块是属于X-Pack的一部分。POST/_xpack/sql?format=txt{"query":"SELECT*FROMlibraryWHERErelease_dateresults.get
- elasticsearch6.3 head插件离线安装总结(ubuntu环境下)
memory_fu
elasticsearch
最近公司有安装head插件的需要,由于生产环境是没有外网环境的,所以需要研究一下使用离线的方式进行安装。安装其实非常简单,只不过我在网上找资料的时候没找到写的比较详细的,所以写下总结供有需要的同学参考。ps:若参考本文档未能安装成功,请添加本人qq:*********,一起交流学习。安装步骤如下:第一步:在有外网环境下安装nodejs、npm、grunt、elasticsearch-head-ma
- 使用JDBC连接ElasticSearch6.3(ElasticSearch SQL JDBC)
李国冬
ElasticSearch
简述安装ES安装ES代码示例执行结果异常处理currentlicenseisnon-compliantfor[jdbc]Cannotinstalla[PLATINUM]licenseunlessTLSisconfiguredorsecurityisdisabled简述Elasticsearch6.3开始内置支持SQL,我们可以像操作MySQL一样使用Elasticsearch,这样我们就可以减少D
- ASM系列五 利用TreeApi 解析生成Class
lijingyao8206
ASM字节码动态生成ClassNodeTreeAPI
前面CoreApi的介绍部分基本涵盖了ASMCore包下面的主要API及功能,其中还有一部分关于MetaData的解析和生成就不再赘述。这篇开始介绍ASM另一部分主要的Api。TreeApi。这一部分源码是关联的asm-tree-5.0.4的版本。
在介绍前,先要知道一点, Tree工程的接口基本可以完
- 链表树——复合数据结构应用实例
bardo
数据结构树型结构表结构设计链表菜单排序
我们清楚:数据库设计中,表结构设计的好坏,直接影响程序的复杂度。所以,本文就无限级分类(目录)树与链表的复合在表设计中的应用进行探讨。当然,什么是树,什么是链表,这里不作介绍。有兴趣可以去看相关的教材。
需求简介:
经常遇到这样的需求,我们希望能将保存在数据库中的树结构能够按确定的顺序读出来。比如,多级菜单、组织结构、商品分类。更具体的,我们希望某个二级菜单在这一级别中就是第一个。虽然它是最后
- 为啥要用位运算代替取模呢
chenchao051
位运算哈希汇编
在hash中查找key的时候,经常会发现用&取代%,先看两段代码吧,
JDK6中的HashMap中的indexFor方法:
/**
* Returns index for hash code h.
*/
static int indexFor(int h, int length) {
- 最近的情况
麦田的设计者
生活感悟计划软考想
今天是2015年4月27号
整理一下最近的思绪以及要完成的任务
1、最近在驾校科目二练车,每周四天,练三周。其实做什么都要用心,追求合理的途径解决。为
- PHP去掉字符串中最后一个字符的方法
IT独行者
PHP字符串
今天在PHP项目开发中遇到一个需求,去掉字符串中的最后一个字符 原字符串1,2,3,4,5,6, 去掉最后一个字符",",最终结果为1,2,3,4,5,6 代码如下:
$str = "1,2,3,4,5,6,";
$newstr = substr($str,0,strlen($str)-1);
echo $newstr;
- hadoop在linux上单机安装过程
_wy_
linuxhadoop
1、安装JDK
jdk版本最好是1.6以上,可以使用执行命令java -version查看当前JAVA版本号,如果报命令不存在或版本比较低,则需要安装一个高版本的JDK,并在/etc/profile的文件末尾,根据本机JDK实际的安装位置加上以下几行:
export JAVA_HOME=/usr/java/jdk1.7.0_25  
- JAVA进阶----分布式事务的一种简单处理方法
无量
多系统交互分布式事务
每个方法都是原子操作:
提供第三方服务的系统,要同时提供执行方法和对应的回滚方法
A系统调用B,C,D系统完成分布式事务
=========执行开始========
A.aa();
try {
B.bb();
} catch(Exception e) {
A.rollbackAa();
}
try {
C.cc();
} catch(Excep
- 安墨移动广 告:移动DSP厚积薄发 引领未来广 告业发展命脉
矮蛋蛋
hadoop互联网
“谁掌握了强大的DSP技术,谁将引领未来的广 告行业发展命脉。”2014年,移动广 告行业的热点非移动DSP莫属。各个圈子都在纷纷谈论,认为移动DSP是行业突破点,一时间许多移动广 告联盟风起云涌,竞相推出专属移动DSP产品。
到底什么是移动DSP呢?
DSP(Demand-SidePlatform),就是需求方平台,为解决广 告主投放的各种需求,真正实现人群定位的精准广
- myelipse设置
alafqq
IP
在一个项目的完整的生命周期中,其维护费用,往往是其开发费用的数倍。因此项目的可维护性、可复用性是衡量一个项目好坏的关键。而注释则是可维护性中必不可少的一环。
注释模板导入步骤
安装方法:
打开eclipse/myeclipse
选择 window-->Preferences-->JAVA-->Code-->Code
- java数组
百合不是茶
java数组
java数组的 声明 创建 初始化; java支持C语言
数组中的每个数都有唯一的一个下标
一维数组的定义 声明: int[] a = new int[3];声明数组中有三个数int[3]
int[] a 中有三个数,下标从0开始,可以同过for来遍历数组中的数
- javascript读取表单数据
bijian1013
JavaScript
利用javascript读取表单数据,可以利用以下三种方法获取:
1、通过表单ID属性:var a = document.getElementByIdx_x_x("id");
2、通过表单名称属性:var b = document.getElementsByName("name");
3、直接通过表单名字获取:var c = form.content.
- 探索JUnit4扩展:使用Theory
bijian1013
javaJUnitTheory
理论机制(Theory)
一.为什么要引用理论机制(Theory)
当今软件开发中,测试驱动开发(TDD — Test-driven development)越发流行。为什么 TDD 会如此流行呢?因为它确实拥有很多优点,它允许开发人员通过简单的例子来指定和表明他们代码的行为意图。
TDD 的优点:
&nb
- [Spring Data Mongo一]Spring Mongo Template操作MongoDB
bit1129
template
什么是Spring Data Mongo
Spring Data MongoDB项目对访问MongoDB的Java客户端API进行了封装,这种封装类似于Spring封装Hibernate和JDBC而提供的HibernateTemplate和JDBCTemplate,主要能力包括
1. 封装客户端跟MongoDB的链接管理
2. 文档-对象映射,通过注解:@Document(collectio
- 【Kafka八】Zookeeper上关于Kafka的配置信息
bit1129
zookeeper
问题:
1. Kafka的哪些信息记录在Zookeeper中 2. Consumer Group消费的每个Partition的Offset信息存放在什么位置
3. Topic的每个Partition存放在哪个Broker上的信息存放在哪里
4. Producer跟Zookeeper究竟有没有关系?没有关系!!!
//consumers、config、brokers、cont
- java OOM内存异常的四种类型及异常与解决方案
ronin47
java OOM 内存异常
OOM异常的四种类型:
一: StackOverflowError :通常因为递归函数引起(死递归,递归太深)。-Xss 128k 一般够用。
二: out Of memory: PermGen Space:通常是动态类大多,比如web 服务器自动更新部署时引起。-Xmx
- java-实现链表反转-递归和非递归实现
bylijinnan
java
20120422更新:
对链表中部分节点进行反转操作,这些节点相隔k个:
0->1->2->3->4->5->6->7->8->9
k=2
8->1->6->3->4->5->2->7->0->9
注意1 3 5 7 9 位置是不变的。
解法:
将链表拆成两部分:
a.0-&
- Netty源码学习-DelimiterBasedFrameDecoder
bylijinnan
javanetty
看DelimiterBasedFrameDecoder的API,有举例:
接收到的ChannelBuffer如下:
+--------------+
| ABC\nDEF\r\n |
+--------------+
经过DelimiterBasedFrameDecoder(Delimiters.lineDelimiter())之后,得到:
+-----+----
- linux的一些命令 -查看cc攻击-网口ip统计等
hotsunshine
linux
Linux判断CC攻击命令详解
2011年12月23日 ⁄ 安全 ⁄ 暂无评论
查看所有80端口的连接数
netstat -nat|grep -i '80'|wc -l
对连接的IP按连接数量进行排序
netstat -ntu | awk '{print $5}' | cut -d: -f1 | sort | uniq -c | sort -n
查看TCP连接状态
n
- Spring获取SessionFactory
ctrain
sessionFactory
String sql = "select sysdate from dual";
WebApplicationContext wac = ContextLoader.getCurrentWebApplicationContext();
String[] names = wac.getBeanDefinitionNames();
for(int i=0; i&
- Hive几种导出数据方式
daizj
hive数据导出
Hive几种导出数据方式
1.拷贝文件
如果数据文件恰好是用户需要的格式,那么只需要拷贝文件或文件夹就可以。
hadoop fs –cp source_path target_path
2.导出到本地文件系统
--不能使用insert into local directory来导出数据,会报错
--只能使用
- 编程之美
dcj3sjt126com
编程PHP重构
我个人的 PHP 编程经验中,递归调用常常与静态变量使用。静态变量的含义可以参考 PHP 手册。希望下面的代码,会更有利于对递归以及静态变量的理解
header("Content-type: text/plain");
function static_function () {
static $i = 0;
if ($i++ < 1
- Android保存用户名和密码
dcj3sjt126com
android
转自:http://www.2cto.com/kf/201401/272336.html
我们不管在开发一个项目或者使用别人的项目,都有用户登录功能,为了让用户的体验效果更好,我们通常会做一个功能,叫做保存用户,这样做的目地就是为了让用户下一次再使用该程序不会重新输入用户名和密码,这里我使用3种方式来存储用户名和密码
1、通过普通 的txt文本存储
2、通过properties属性文件进行存
- Oracle 复习笔记之同义词
eksliang
Oracle 同义词Oracle synonym
转载请出自出处:http://eksliang.iteye.com/blog/2098861
1.什么是同义词
同义词是现有模式对象的一个别名。
概念性的东西,什么是模式呢?创建一个用户,就相应的创建了 一个模式。模式是指数据库对象,是对用户所创建的数据对象的总称。模式对象包括表、视图、索引、同义词、序列、过
- Ajax案例
gongmeitao
Ajaxjsp
数据库采用Sql Server2005
项目名称为:Ajax_Demo
1.com.demo.conn包
package com.demo.conn;
import java.sql.Connection;import java.sql.DriverManager;import java.sql.SQLException;
//获取数据库连接的类public class DBConnec
- ASP.NET中Request.RawUrl、Request.Url的区别
hvt
.netWebC#asp.nethovertree
如果访问的地址是:http://h.keleyi.com/guestbook/addmessage.aspx?key=hovertree%3C&n=myslider#zonemenu那么Request.Url.ToString() 的值是:http://h.keleyi.com/guestbook/addmessage.aspx?key=hovertree<&
- SVG 教程 (七)SVG 实例,SVG 参考手册
天梯梦
svg
SVG 实例 在线实例
下面的例子是把SVG代码直接嵌入到HTML代码中。
谷歌Chrome,火狐,Internet Explorer9,和Safari都支持。
注意:下面的例子将不会在Opera运行,即使Opera支持SVG - 它也不支持SVG在HTML代码中直接使用。 SVG 实例
SVG基本形状
一个圆
矩形
不透明矩形
一个矩形不透明2
一个带圆角矩
- 事务管理
luyulong
javaspring编程事务
事物管理
spring事物的好处
为不同的事物API提供了一致的编程模型
支持声明式事务管理
提供比大多数事务API更简单更易于使用的编程式事务管理API
整合spring的各种数据访问抽象
TransactionDefinition
定义了事务策略
int getIsolationLevel()得到当前事务的隔离级别
READ_COMMITTED
- 基础数据结构和算法十一:Red-black binary search tree
sunwinner
AlgorithmRed-black
The insertion algorithm for 2-3 trees just described is not difficult to understand; now, we will see that it is also not difficult to implement. We will consider a simple representation known
- centos同步时间
stunizhengjia
linux集群同步时间
做了集群,时间的同步就显得非常必要了。 以下是查到的如何做时间同步。 在CentOS 5不再区分客户端和服务器,只要配置了NTP,它就会提供NTP服务。 1)确认已经ntp程序包: # yum install ntp 2)配置时间源(默认就行,不需要修改) # vi /etc/ntp.conf server pool.ntp.o
- ITeye 9月技术图书有奖试读获奖名单公布
ITeye管理员
ITeye
ITeye携手博文视点举办的9月技术图书有奖试读活动已圆满结束,非常感谢广大用户对本次活动的关注与参与。 9月试读活动回顾:http://webmaster.iteye.com/blog/2118112本次技术图书试读活动的优秀奖获奖名单及相应作品如下(优秀文章有很多,但名额有限,没获奖并不代表不优秀):
《NFC:Arduino、Andro