- python redis模块详解-晒酷学院
晒酷学院
前言现在越来越觉得知识的沉淀尤为重要,最近打算慢慢的把一些知识点做个记录,如果长期不用生疏了也可以快速回顾。下面我会依次介绍在python中常用组件redis,rabbitmq,mongodb,ES(lasticsearch),zk的用法。这篇文章主要介绍redis的使用。简单介绍下redis,一个高性能key-value的存储系统,支持存储的类型有string、list、set、zset和has
- elasticsearch-head可视化安装
dehuisun
elasticsearch搜索引擎
一、前言elasticsearch-head是用于监控Elasticsearch状态的客户端插件,包括数据可视化、执行增删改查操作等。elasticsearch是通过API方式进行管理的,因此也可以使用postman等工具操作elasticsearch。二、安装lasticsearch-head插件是使用JavaScript开发的,依赖Node.js库,使用Grunt工具构建。安装Node.js很
- 监控Elasticsearch的关键指标
key_3_feng
监控运维elasticsearch搜索引擎监控
Elasticsearch的核心职能就是对外提供搜索服务,所以搜索请求的吞吐和延迟是非常关键的,搜索是靠底层的索引实现的,所以索引的性能指标也非常关键,Elasticsearch由一个或多个节点组成集群,集群自身是否健康也是需要我们监控的。lasticSearch的架构非常简单,一个节点就可以对外提供服务,不过单点的集群显然有容灾问题,如果挂掉了就万事皆休了。一般生产环境,至少搭建一个三节点的集群
- JAVA 经典面试题:ES如何做到亿级数据查询毫秒级返回?
java后生
每日学习一个小技术elasticsearchjava搜索引擎
面试题#elasticsearch#lasticsearch在数十亿级别以上的大量数据下如何提高查询效率,做到毫秒级数据查询呢?面试官心理分析在JAVA高级面试中这个问题肯定是要被问及的,为什么呢,因为可以知道你有没有实际操作过elasticsearch。其实elasticsearch的性能并没有大家想象中的那么好,当数据量非常大的时候性能问题就会显现出来了。比如当有几十亿的数据的时候,跑一个查询
- Elasticsearch之ELK Stack
好奇新
Toolselasticsearch搜索引擎大数据
Elasticsearch之ELKStack基本介绍ElasticSearch简介下载安装启动安全设置修改配置文件设置用户名和密码修改用户名和密码Logstash简介下载安装启动Kibana简介下载安装启动切换中文日志收集lasticsearch之ELKStackElasticsearch官方用户手册Kibana官方用户手册基本介绍什么是分布式日志在分布式应用中,日志被分散在储存不同的设备上。如果
- Elasticsearch7.7修改network.host IP地址 start启动失败
波波仔86
elasticsearchelasticsearchnetwork.host启动失败
使用的是最新的Elasticsearch7.7版本,启动后默认是绑到127.0.0.1上的,这肯定不是我们需要的,所以修改配置文件network.host配置选改成我们的服务器局域网IP地址。Elasticsearch7.7版本安装后配置文件elasticsearch.yml在录/etc/lasticsearch中,这个目录只允许root权限进行查看和修改。不过修改后再启动es时报错:user@u
- Elasticsearch:理解 Elasticsearch 中的 Percolator 数据类型及 Percolate 查询
Elastic 中国社区官方博客
elasticsearch大数据
Elasticsearch是功能强大的功能丰富的工具。在今天的文章中,我来介绍一下Percolator数据类型。同时也介绍一下Percolatequery。您需要基本了解Elasticsearch,尤其是映射和搜索。概念lasticsearch的正常工作流程是将文档(作为JSON数据)存储在索引中,并执行搜索(也是JSON数据)以向索引询问有关这些文档的信息。简而言之,Percolate可以逆转这
- ElasticSearch学习笔记十四 检索API
灵动的艺术
ElasticSearch学习笔记十四检索API检索_searchhitstookshardstimeout多索引查询查询表达式分页合并查询语句检索lasticsearch不只会_存储(stores)_文档,为了能被搜索到也会为文档添加_索引(indexes)_,这也是为什么我们使用结构化的JSON文档,而不是无结构的二进制数据。文档中的每个字段都将被索引并且可以被查询。ElasticSearch
- ELK(数据批量导入、查询)
乐于技术分享
ELK是一个实时分布式的日志分析平台ELK是一整套的解决方案(E)lasticsearch--数据库(L)ogstash--收集日志、标准化的程序(K)ibana--图形的展示工具[root@kibana~]#gzip-d'/root/桌面/shakespeare.json.gz'gzip-dshakespeare.json.gzcurl-XPOSThttp://192.168.6.10:9200
- ElasticSearch 性能调优,让你的集群飞起来
搬砖的码哥
lasticsearch作为日志存储和分析的工具,在企业级应用中常常使用。Elasticsearch提供强大的搜索、分析功能,已经是后端技术栈不可缺少的一部分。在维护ElastciSearch集群的时候,对Elasticsearch进行了一些调优和分析,现整理成文,纯属拙见,如果有不合理之处,欢迎指出探讨。我所使用的Elasticsearch版本为5.x。文件句柄优化Elasticsearch有大
- elasticsearch安装head插件问题
山东梅长苏
elasticsearch
通过npm安装grunt和gruntserver,按照网上文档在lasticsearch-head-master目录部署npminstall-ggrunt第一个问题是执行完lasticsearch-head-master目录下一直没有node_modules目录产生。lsDockerfileelasticsearch-head.sublime-projectgrunt_fileSets.jsLIC
- ElasticSearch鎺掑簭寮曡捣鐨刟ll shards failed寮傚父鍘熷洜鍒嗘瀽
鏋舵瀯甯坰pringboot
鑳屾櫙娉細ElasticSearch鐗堟湰涓�5.4銆�鍦ㄦ垜浠殑鏃ュ織绯荤粺閲岄渶瑕佷竴浜涚郴缁熺储寮曪紝杩欎簺绯荤粺绱㈠紩鍦ㄥ簲鐢ㄥ垵濮嬪寲鐨勬椂鍊欏氨浼氳娣诲姞鍒癊lasticSearch涓幓锛岃繖浜涘湪ElasticSearch涓殑绯荤粺绱㈠紩鍦ㄦ病鏈夌储寮曟暟鎹殑鏃跺�欙紝鍙湁绱㈠紩鍚嶅拰涓�浜涢厤缃俊鎭紝娌℃湁mapping淇℃伅銆傚綋鐢ㄦ埛鍘绘牴鎹椂闂村尯闂存帓搴
- ELK架构的演变
183530300
ELK架构演变ELK
ELK的名称是由最原始架构的三个组件的首字母组合而来,即E(lasticsearch)L(ogstash)K(ibana),当然ELK演变至今天已经不再只用三个组件了。最原初的三个组件都是基于java语言研发的,相对来说比较重量级,正常运行所需服务器配置要求较高。想在生产中使用ELK做日志分析的朋友需要做好资源准备。要想上手ELK,必须对ELK的架构及运行原理做透彻的理解,废话不多说,先来看ELK
- input和output常用模块的讲解和使用(logstash)
Docuker
elklogstashinput
1ELK是一个实时分布式的日志分析平台ELK是一整套的解决方案(E)lasticsearch--数据库(L)ogstash--收集日志、标准化的程序(K)ibana--图形的展示工具2数据批量导入-X导入使用的方法POST--data-binary导入数据的格式@urfile导入数据的文件名_bulk导入关键字curl-X"POST""http://192.168.1.13:9200/_bulk"
- lasticsearch 集群indices 分片状态UNASSIGNED
无锋剑
lasticsearchindicesUNASSIGNEDELK
lasticsearch集群indices分片状态UNASSIGNED,集群状态为:yellow故障现象GET/_cat/shards/7a_cool7a_cool5rSTARTED4583018759.4mb10.2.4.21pt01-pte-10-2-4-217a_cool17rUNASSIGNED10.2.4.22pt01-pte-10-2-4-22《==异常分片解决办法:为分片指定运行主机
- lasticsearch 入门:Filebeat 安装及输出数据到 elasticsearch 或 logstash
薛定谔的DBA
Elasticsearch
系统:centos5.6i386官方参考:GettingStartedWithFilebeat部署Filebeat#tarzxvffilebeat-5.0.0-linux-x86.tar.gz#mvfilebeat-5.0.0-linux-x86/usr/local/elasticsearch/files/filebeat#cd/usr/local/elasticsearch/files/file
- ElasticSearch学习
liyantianmin
lasticSearch是一个基于Lucene构建的开源,分布式,RESTful搜索引擎。设计用于云计算中,能够达到实时搜索,稳定,可靠,快速,安装使用方便。支持通过HTTP使用JSON进行数据索引。 官方站点:http://www.elasticsearch.com/ 中文站点:http://es-cn.medcl.net/ 1.安装 必须先安装Java环境,并设置JAVA_HOME=>
- elasticsearch中template引见
m635674608
lasticsearch中template介绍template中规定了数据的存储格式、分片数量等信息,下边是一个elasticsearch中template例子: http://192.168.1.215:9200/_template/content_tpl PUT {
"template":"content_*",
"settings":{
"number_of_shards":1,
- elasticsearch-查询基础篇
m635674608
lasticsearch的查询有两部分组成:queryandfilter。两者的主要区别在于:filter是不计算相关性的,同时可以cache。因此,filter速度要快于query。先记录一下es提供的各种query。以下内容只为当做读书笔记,更多详细细节请参见http://www.elasticsearch.org/guide/第一部分:query在需要full-text-search和需要计
- lasticsearch-索引优化篇2
allantaylor81
内存和打开的文件数如果你的elasticsearch运行在专用服务器上,经验值是分配一半内存给elasticsearch。另一半用于系统缓存,这东西也很重要的。你可以通过修改ES_HEAP_SIZE环境变量来改变这个设定。在启动elasticsearch之前把这个变量改到你的预期值。另一个选择上球该elasticsearch的ES_JAVA_OPTS变量,这个变量时在启动脚本(elasticsea
- Elasticsearch源码分析之二------索引过程源码概要分析
july_2
lasticsearch的索引逻辑简单分析,这里只是理清主要的脉络,一些细节方面以后的文章或会阐述。假如通过javaapi来调用es的索引接口,先是构造成一个json串(es里表示为XContent,是对要处理的内容进行抽象),在IndexRequest里面指定要索引文档到那个索引库(index)、其类型(type)还有文档的id,如果没有指定文档的id,es会通过UUID工具自动生成一个uuid
- eclipse maven
IXHONG
eclipse
eclipse中使用maven插件的时候,运行run as maven build的时候报错
-Dmaven.multiModuleProjectDirectory system propery is not set. Check $M2_HOME environment variable and mvn script match.
可以设一个环境变量M2_HOME指
- timer cancel方法的一个小实例
alleni123
多线程timer
package com.lj.timer;
import java.util.Date;
import java.util.Timer;
import java.util.TimerTask;
public class MyTimer extends TimerTask
{
private int a;
private Timer timer;
pub
- MySQL数据库在Linux下的安装
ducklsl
mysql
1.建好一个专门放置MySQL的目录
/mysql/db数据库目录
/mysql/data数据库数据文件目录
2.配置用户,添加专门的MySQL管理用户
>groupadd mysql ----添加用户组
>useradd -g mysql mysql ----在mysql用户组中添加一个mysql用户
3.配置,生成并安装MySQL
>cmake -D
- spring------>>cvc-elt.1: Cannot find the declaration of element
Array_06
springbean
将--------
<?xml version="1.0" encoding="UTF-8"?>
<beans xmlns="http://www.springframework.org/schema/beans"
xmlns:xsi="http://www.w3
- maven发布第三方jar的一些问题
cugfy
maven
maven中发布 第三方jar到nexus仓库使用的是 deploy:deploy-file命令
有许多参数,具体可查看
http://maven.apache.org/plugins/maven-deploy-plugin/deploy-file-mojo.html
以下是一个例子:
mvn deploy:deploy-file -DgroupId=xpp3
- MYSQL下载及安装
357029540
mysql
好久没有去安装过MYSQL,今天自己在安装完MYSQL过后用navicat for mysql去厕测试链接的时候出现了10061的问题,因为的的MYSQL是最新版本为5.6.24,所以下载的文件夹里没有my.ini文件,所以在网上找了很多方法还是没有找到怎么解决问题,最后看到了一篇百度经验里有这个的介绍,按照其步骤也完成了安装,在这里给大家分享下这个链接的地址
- ios TableView cell的布局
张亚雄
tableview
cell.imageView.image = [UIImage imageNamed:[imageArray objectAtIndex:[indexPath row]]];
CGSize itemSize = CGSizeMake(60, 50);
&nbs
- Java编码转义
adminjun
java编码转义
import java.io.UnsupportedEncodingException;
/**
* 转换字符串的编码
*/
public class ChangeCharset {
/** 7位ASCII字符,也叫作ISO646-US、Unicode字符集的基本拉丁块 */
public static final Strin
- Tomcat 配置和spring
aijuans
spring
简介
Tomcat启动时,先找系统变量CATALINA_BASE,如果没有,则找CATALINA_HOME。然后找这个变量所指的目录下的conf文件夹,从中读取配置文件。最重要的配置文件:server.xml 。要配置tomcat,基本上了解server.xml,context.xml和web.xml。
Server.xml -- tomcat主
- Java打印当前目录下的所有子目录和文件
ayaoxinchao
递归File
其实这个没啥技术含量,大湿们不要操笑哦,只是做一个简单的记录,简单用了一下递归算法。
import java.io.File;
/**
* @author Perlin
* @date 2014-6-30
*/
public class PrintDirectory {
public static void printDirectory(File f
- linux安装mysql出现libs报冲突解决
BigBird2012
linux
linux安装mysql出现libs报冲突解决
安装mysql出现
file /usr/share/mysql/ukrainian/errmsg.sys from install of MySQL-server-5.5.33-1.linux2.6.i386 conflicts with file from package mysql-libs-5.1.61-4.el6.i686
- jedis连接池使用实例
bijian1013
redisjedis连接池jedis
实例代码:
package com.bijian.study;
import java.util.ArrayList;
import java.util.List;
import redis.clients.jedis.Jedis;
import redis.clients.jedis.JedisPool;
import redis.clients.jedis.JedisPoo
- 关于朋友
bingyingao
朋友兴趣爱好维持
成为朋友的必要条件:
志相同,道不合,可以成为朋友。譬如马云、周星驰一个是商人,一个是影星,可谓道不同,但都很有梦想,都要在各自领域里做到最好,当他们遇到一起,互相欣赏,可以畅谈两个小时。
志不同,道相合,也可以成为朋友。譬如有时候看到两个一个成绩很好每次考试争做第一,一个成绩很差的同学是好朋友。他们志向不相同,但他
- 【Spark七十九】Spark RDD API一
bit1129
spark
aggregate
package spark.examples.rddapi
import org.apache.spark.{SparkConf, SparkContext}
//测试RDD的aggregate方法
object AggregateTest {
def main(args: Array[String]) {
val conf = new Spar
- ktap 0.1 released
bookjovi
kerneltracing
Dear,
I'm pleased to announce that ktap release v0.1, this is the first official
release of ktap project, it is expected that this release is not fully
functional or very stable and we welcome bu
- 能保存Properties文件注释的Properties工具类
BrokenDreams
properties
今天遇到一个小需求:由于java.util.Properties读取属性文件时会忽略注释,当写回去的时候,注释都没了。恰好一个项目中的配置文件会在部署后被某个Java程序修改一下,但修改了之后注释全没了,可能会给以后的参数调整带来困难。所以要解决这个问题。
&nb
- 读《研磨设计模式》-代码笔记-外观模式-Facade
bylijinnan
java设计模式
声明: 本文只为方便我个人查阅和理解,详细的分析以及源代码请移步 原作者的博客http://chjavach.iteye.com/
/*
* 百度百科的定义:
* Facade(外观)模式为子系统中的各类(或结构与方法)提供一个简明一致的界面,
* 隐藏子系统的复杂性,使子系统更加容易使用。他是为子系统中的一组接口所提供的一个一致的界面
*
* 可简单地
- After Effects教程收集
cherishLC
After Effects
1、中文入门
http://study.163.com/course/courseMain.htm?courseId=730009
2、videocopilot英文入门教程(中文字幕)
http://www.youku.com/playlist_show/id_17893193.html
英文原址:
http://www.videocopilot.net/basic/
素
- Linux Apache 安装过程
crabdave
apache
Linux Apache 安装过程
下载新版本:
apr-1.4.2.tar.gz(下载网站:http://apr.apache.org/download.cgi)
apr-util-1.3.9.tar.gz(下载网站:http://apr.apache.org/download.cgi)
httpd-2.2.15.tar.gz(下载网站:http://httpd.apac
- Shell学习 之 变量赋值和引用
daizj
shell变量引用赋值
本文转自:http://www.cnblogs.com/papam/articles/1548679.html
Shell编程中,使用变量无需事先声明,同时变量名的命名须遵循如下规则:
首个字符必须为字母(a-z,A-Z)
中间不能有空格,可以使用下划线(_)
不能使用标点符号
不能使用bash里的关键字(可用help命令查看保留关键字)
需要给变量赋值时,可以这么写:
- Java SE 第一讲(Java SE入门、JDK的下载与安装、第一个Java程序、Java程序的编译与执行)
dcj3sjt126com
javajdk
Java SE 第一讲:
Java SE:Java Standard Edition
Java ME: Java Mobile Edition
Java EE:Java Enterprise Edition
Java是由Sun公司推出的(今年初被Oracle公司收购)。
收购价格:74亿美金
J2SE、J2ME、J2EE
JDK:Java Development
- YII给用户登录加上验证码
dcj3sjt126com
yii
1、在SiteController中添加如下代码:
/**
* Declares class-based actions.
*/
public function actions() {
return array(
// captcha action renders the CAPTCHA image displ
- Lucene使用说明
dyy_gusi
Lucenesearch分词器
Lucene使用说明
1、lucene简介
1.1、什么是lucene
Lucene是一个全文搜索框架,而不是应用产品。因此它并不像baidu或者googleDesktop那种拿来就能用,它只是提供了一种工具让你能实现这些产品和功能。
1.2、lucene能做什么
要回答这个问题,先要了解lucene的本质。实际
- 学习编程并不难,做到以下几点即可!
gcq511120594
数据结构编程算法
不论你是想自己设计游戏,还是开发iPhone或安卓手机上的应用,还是仅仅为了娱乐,学习编程语言都是一条必经之路。编程语言种类繁多,用途各 异,然而一旦掌握其中之一,其他的也就迎刃而解。作为初学者,你可能要先从Java或HTML开始学,一旦掌握了一门编程语言,你就发挥无穷的想象,开发 各种神奇的软件啦。
1、确定目标
学习编程语言既充满乐趣,又充满挑战。有些花费多年时间学习一门编程语言的大学生到
- Java面试十问之三:Java与C++内存回收机制的差别
HNUlanwei
javaC++finalize()堆栈内存回收
大家知道, Java 除了那 8 种基本类型以外,其他都是对象类型(又称为引用类型)的数据。 JVM 会把程序创建的对象存放在堆空间中,那什么又是堆空间呢?其实,堆( Heap)是一个运行时的数据存储区,从它可以分配大小各异的空间。一般,运行时的数据存储区有堆( Heap)和堆栈( Stack),所以要先看它们里面可以分配哪些类型的对象实体,然后才知道如何均衡使用这两种存储区。一般来说,栈中存放的
- 第二章 Nginx+Lua开发入门
jinnianshilongnian
nginxlua
Nginx入门
本文目的是学习Nginx+Lua开发,对于Nginx基本知识可以参考如下文章:
nginx启动、关闭、重启
http://www.cnblogs.com/derekchen/archive/2011/02/17/1957209.html
agentzh 的 Nginx 教程
http://openresty.org/download/agentzh-nginx-tutor
- MongoDB windows安装 基本命令
liyonghui160com
windows安装
安装目录:
D:\MongoDB\
新建目录
D:\MongoDB\data\db
4.启动进城:
cd D:\MongoDB\bin
mongod -dbpath D:\MongoDB\data\db
&n
- Linux下通过源码编译安装程序
pda158
linux
一、程序的组成部分 Linux下程序大都是由以下几部分组成: 二进制文件:也就是可以运行的程序文件 库文件:就是通常我们见到的lib目录下的文件 配置文件:这个不必多说,都知道 帮助文档:通常是我们在linux下用man命令查看的命令的文档
二、linux下程序的存放目录 linux程序的存放目录大致有三个地方: /etc, /b
- WEB开发编程的职业生涯4个阶段
shw3588
编程Web工作生活
觉得自己什么都会
2007年从学校毕业,凭借自己原创的ASP毕业设计,以为自己很厉害似的,信心满满去东莞找工作,找面试成功率确实很高,只是工资不高,但依旧无法磨灭那过分的自信,那时候什么考勤系统、什么OA系统、什么ERP,什么都觉得有信心,这样的生涯大概持续了约一年。
根本不是自己想的那样
2008年开始接触很多工作相关的东西,发现太多东西自己根本不会,都需要去学,不管是asp还是js,
- 遭遇jsonp同域下变作post请求的坑
vb2005xu
jsonp同域post
今天迁移一个站点时遇到一个坑爹问题,同一个jsonp接口在跨域时都能调用成功,但是在同域下调用虽然成功,但是数据却有问题. 此处贴出我的后端代码片段
$mi_id = htmlspecialchars(trim($_GET['mi_id ']));
$mi_cv = htmlspecialchars(trim($_GET['mi_cv ']));
贴出我前端代码片段:
$.aj