E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hbase集群安装
【ElasticSearch 集群】Linux安装ElasticSearch集群(图文解说详细版)
上次我们讲了linux环境安装ElasticSearchLinux安装ElasticSearch以及Ik分词器(图文解说详细版)这次我们来将一下ElasticSearch的
集群安装
安装es的前置条件:Linux
掉头发的王富贵
·
2023-10-03 02:44
linux
elasticsearch
linux
Elasticsearch
集群安装
文章目录集群节点masterdata数据节点仅协调节点符合远程条件的节点集群配置path.datapath.logscluster.name集群名称node.name节点名称相关网络配置network.hosthttp.porttransport.port集群发现配置discovery.seed_hosts引导集群配置cluster.initial_master_nodes集群搭建安装第一个节点m
没事儿写两篇
·
2023-10-03 02:44
elasticsearch
集群安装
集群配置
远程集群
集群状态
Linux环境下zookeeper的安装教程(超详细!!)
下载安装3.3配置3.3.启动测试3.4.退出1.什么是zookeeperzooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和
Hbase
啊陈晓
·
2023-10-02 21:38
zookeeper
java
linux
java-zookeeper
zookeeper
Spark思维导图
简介SparkSpark是分布式计算框架Spark可以和多种存储系统结合使用,如Kafka、
HBase
、Hive、HDFS以及关系型数据库。
亼珏
·
2023-10-02 14:14
java io报错_Phoenix报错(3)java.io.IOException: Broken pipe
解决办法1,在cm上加环境变量cm→spark→gateway→高级exportHADOOP_CONF_DIR=/etc/
hbase
/conf:/etc/hadoop/conf:/etc/hive/conf2
Mars Zhu
·
2023-10-02 04:45
java
io报错
Hbase
基础面试题
1.
hbase
的特点是什么?(1)
Hbase
一个分布式的基于列式存储的数据库,基于Hadoop的hdfs存储,zookeeper进行管理。
Tim在路上
·
2023-10-02 03:33
蓝盾守护设计书
由于历史数据数据量非常庞大,将其存储在
Hbase
当中。使用redis缓存用户登陆信息以及热数据来降低mysql的访问压力。
罗雪鹏
·
2023-10-01 21:34
Hadoop和
HBase
中的压缩算法、压缩比和压缩配置介绍(详细)
adoop中常用的压缩算法有bzip2、gzip、lzo、snappy,其中lzo、snappy需要操作系统安装native库才可以支持。下面这张表,是比较官方一点的统计,不同的场合用不同的压缩算法。bzip2和GZIP是比较消耗CPU的,压缩比最高,GZIP不能被分块并行的处理;Snappy和LZO差不多,稍微胜出一点,cpu消耗的比GZIP少。通常情况下,想在CPU和IO之间取得平衡的话,用S
Java程序员YY
·
2023-10-01 15:14
zookeeper理论学习(paxos和Zab协议)
动物园管理员协调分布式环境下的服务解决分布式环境中的问题分布式环境下无法保证顺序执行分布式环境下无法明确执行结果(可能由于网络的波动,无法判断结果是否执行成功)无法保证数据一致性应用和dubbo配合保证多点服务的可用性hadoop确保整个集群只有一个NameNode,存储配置信息等
HBASE
qtshe
·
2023-10-01 12:06
Java云原生崛起微服务框架Quarkus入门实践
概述定义Quarkus官网地址Quarkus-SupersonicSubatomicJavaQuarkus官网文档Apache
HBase
™ReferenceGuideQuarkusGitHub源码地址https
「已注销」
·
2023-10-01 06:34
java
云原生
微服务
K8S
集群安装
Istio1.8
在前述k8s集群后续追加新节点配置好集群后,安装配置ServiceMesh首屈一指的Istio。1环境说明框架版本功能Kubernetes1.20.1K8S集群Istio1.8ServiceMesh2下载Istio2.1解压并切换到Istio包所在目录下$cd/usr/local/$curl-Lhttps://istio.io/downloadIstio|sh-$cdistio-1.8.1$tre
泥人冷风
·
2023-10-01 04:14
关于basePath
1.什么是basePat
hbase
Path是我们声明的一个变量,这个变量是通过request对象分别获取协议,IP,端口和应用上下文,并把它们组合在一起后形成的字符串。
muyangren918
·
2023-09-30 18:20
Java
basePath
base标签
群起脚本
最近学习大数据每次到要启动很多东西每次一个个启动特别费劲于是写了一个脚本一起启动脚本如下脚本的原理是检测是否参数包含要启动类目realtime-0317.shhdfs
hbase
包含hdfs
hbase
于是就去启动
百年叔叔
·
2023-09-30 16:02
Hbase
- 自定义Rowkey规则
在Flink中我们有时候需要分析数据1点到2点的范围,可是经过Region又比较慢,这时候我们就可以定制TableInputFormat来实现我们的需求了,我们还可以采用Flink的DataSet的方式读取,另外下面还有Spark读取的例子。使用教程Md5Util.javaimportorg.apache.commons.codec.binary.Hex;importjava.security.M
kikiki2
·
2023-09-30 12:50
【Ambari】银河麒麟V10 ARM64架构_安装Ambari2.7.6&HDP3.3.1问题总结
✨一、版本信息二、问题总结2.1Ambari安装组件版本获取问题2.2hiveserver2启动问题2.3、
HBase
问题2.4Ranger启动
开着拖拉机回家
·
2023-09-30 09:28
#
【====
Ambari
====】
ambari
HDP
hiveserver2
ranger
hive
Linux Ubuntu系统环境下hadoop的安装以及伪分布式
集群安装
与配置
1.环境安装条件1.1版本兼容问题本人在安装过程中遇到的很多问题是由版本不兼容导致的,安装完成后的版本:Ubuntu18.04.6VMwareWorkstation16VMtools-Tools-10.3.21hadoop-3.1.2jdk1.8.0_362windows11系统下安装vm15会出现蓝屏警告,安装vm17会出现vmwaretools下载完成后还是不能拖动共享文件的问题,可能是vmt
尚棹芸
·
2023-09-30 06:20
hadoop
linux
ubuntu
26
Hbase
介绍及其数据模型和架构(
hbase
学习1)
Hbase
介绍Hadoop生态系统spark已经替代mahout
hbase
简介:非关系型数据库知识面扩展cassandra、
hbase
、mongodb(文档型数据库)、rediscouchdb,文件存储数据库
文茶君
·
2023-09-30 03:08
HBASE
集群主节点迁移割接手动操作步骤
HBASE
集群主节点迁移割接手动操作步骤
HBASE
集群主节点指的是包含zk、nn、HM和rm服务的节点,一般这类服务都是一起复用在同一批节点上,我把这一类节点统称为
HBASE
集群主节点。
可乐大数据
·
2023-09-30 00:23
大数据运维工作经验
hbase
数据库
大数据
ubuntu linux 编译 ko,ubuntu下编译linux 内核
.下载内核源代码下载ThelateststableversionoftheLinuxkernelis:2.6.29.4,点后面的“F”按钮下载,这里的字母意义为:F=fullsource,B=patc
hbase
line
weixin_39529443
·
2023-09-30 00:50
ubuntu
linux
编译
ko
Kubernetes部署dashboard
Kubernetes部署dashboardKubernetes
集群安装
鲲鹏arm64架构下安装KubeSpherelinux安装部署k8s(kubernetes)和解决遇到的坑dashboard部署$kubectlapply-fhttps
beyond阿亮
·
2023-09-30 00:43
k8s
kubernetes
k8s
【开发篇】十一、SpringBoot缓存底层实现技术的切换为Ehcache、Redis、Memcached
安装与启停4、切换为memcached--整合SpringBoot提供了缓存的统一整合接口,方便缓存技术的开发与管理:GenericJCacheEhcacheHazelcastInfinispanCouc
hbase
RedisCaffeineSimple
-代号9527
·
2023-09-29 21:16
SpringBoot
缓存
spring
boot
redis
k8s-实战——基于nfs实现动态存储
需要手动创建secrets并关联相关sa部署流程创建NFS共享服务、采用单独的节点用于nfs服务独占安装nfs-utils和rpcbindnfs客户端和服务端都安装nfs-utils包通过部署化脚本安装k8s
集群安装
北城 半夏
·
2023-09-29 19:55
k8s-实战
kubernetes
容器
云原生
时序数据库TimescaleDB 功能介绍、单节点、多节点
集群安装
部署、centos、linux
简介TimescaleDocumentation|GettingstartedwithTimescaleTimescale是一个用于时间序列,事件和分析的PostgreSQL数据平台。提供了PostgreSQL的可靠性,这是时间序列的超能力TimescaleDB,。它提供自动备份和还原、复制的高可用性等功能,无缝缩放和调整大小等等性能对比:TimescaleDBvs.InfluxDB:专为时间序列
拜思特
·
2023-09-29 18:20
时序数据库
时序数据库
docer安装hadoop
基于Docker构建Hadoop平台0.绪论使⽤Docker搭建Hadoop技术平台,包括安装Docker、Java、Scala、Hadoop、
Hbase
、Spark。
汉卿HanQ
·
2023-09-29 13:59
hadoop
eureka
大数据
HBase
架构详解及读写流程
目录一、
HBase
存储结构详解二、
HBase
写流程三、
HBase
读流程
Hbase
是bigtable的开源山寨版本。是建立的hdfs之上,提供高可靠性、高性能、列存储、可伸缩、实时读写的数据库系统。
夜希辰
·
2023-09-29 07:31
ZooKeeper:程序大牛教你学习ZooKeeper,其实ZooKeeper并不难
前言ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和
Hbase
的重要组件。
程序媛马小兮
·
2023-09-28 22:51
SQL还是NoSQL?架构师必备选型技能
如果这时候直接去看MySQL、Mongo、
HBase
、Redis等数据库的用法、特点、区别,其实有点太着急了。这时候,最好从「数据模型」开始讨论。
虚无火星车
·
2023-09-28 22:46
sql
nosql
数据库
【DevOps实战】初始Pod(豌豆荚)
文章目录✨前言1.认识k8s容器调度管理平台架构图核心组件理解集群资源kubectl的使用2.工作流程架构设计的几点思考实践
集群安装
3.Pod定义使用yaml格式定义Pod创建和访问PodInfra容器查看
Albert Edison
·
2023-09-28 21:31
Kubernetes原理与实战
kubernetes
etcd
云原生
docker
kubelet
Linux 系统性能优化思路和优化方法
、系统硬件资源(1)CPU如何判断多核CPU与超线程消耗CPU的业务:动态web服务、mail服务(2)内存物理内存与swap的取舍选择64位Linux操作系统消耗内存的业务:内存数据库(redis/
hbase
资料分享官
·
2023-09-28 19:52
redux-toolkit 在 react 中的用法(续)
//apis/base.tsimport{createApi,fetc
hBase
Query}from"@reduxjs/toolkit/query/react";exportconstbaseApi=creat
niuiic
·
2023-09-28 18:11
react
react.js
redux-toolkit
rtk-query
axios
HBase
详解(对
hbase
集群搭建、读写流程、
hbase
的javaApi等细致入微的讲解与保姆级的图解)
学
HBase
的意义是什么我本想用MySQL来与
HBase
作比较,但发现他们两者毫无可比性,因为两者运用领域不同,各自有各自的优点,就好比爬山穿登山鞋,潜水穿脚蹼一般。
毫无感情的dj
·
2023-09-28 17:35
hbase
大数据
hadoop
HBase
详解
1、学
HBase
的意义是什么我本想用MySQL来与
HBase
作比较,但发现他们两者毫无可比性,因为两者运用领域不同,各自有各自的优点,就好比爬山穿登山鞋,潜水穿脚蹼一般。
吹老师个人app编程教学
·
2023-09-28 17:30
hbase
hbase
工具-tree
常用功能usage:tree[-acdfghilnpqrstuvxACDFJQNSUX][-
Hbase
HREF][-Ttitle][-Llevel[-R]][-Ppattern][-Ipattern][
code追命
·
2023-09-28 12:49
各种数据库表名长度限制整理
数据库类型长度ORACLE30GreenPlum40KINGBASEES63PostgreSql63Gbase63瀚高63OSCAR64MYSQL64
HBASE
64MariaDB64SQLSERVER128
Java小学森
·
2023-09-28 12:51
数据库
kubernetes安全检测工具-kube-bench
集群的各个组件的配置,确认配置文件是否符合安全基线标准,输出检测报告,并给出修复建议,从而使kubernetes集群更加健壮安全二、kube-bench安装安装方式有二进制安装,dockers安装,kubernetes
集群安装
罗显明-技术个人博客
·
2023-09-28 11:02
kubernetes
kubernetes
安全
容器
Kubesphere-多节点安装
Kubesphere-多节点安装主机清单基础环境准备1.安装docker2.安装依赖3.配置ssh互访4.下载KubeKey创建集群1.创建示例配置文件2.编辑配置文件3.使用配置文件创建
集群安装
openelb1
奔跑的海带根
·
2023-09-28 08:04
kubernetes
docker
kubernetes
运维
【k8s】集群搭建篇
)KubernetesMaster初始化KubernetesNode加入集群部署CNI网络插件测试kubernetes集群停止服务并删除原来的配置二进制搭建(单master集群)初始化操作部署etcd
集群安装
Al6n Lee
·
2023-09-28 07:24
#
Kubernets
kubernetes
容器
云原生
人工智能
python
Hadoop
集群安装
部署
目录Hadoop
集群安装
部署1、集群环境准备2、建立免密通道3、集群时间同步4、jdk1.8安装5、hadoop安装部署6、Hadoop配置文件配置7、格式化操作8、启动hadoop集群启动HDFS集群
Wangsh@
·
2023-09-28 02:50
大数据
hadoop
linux
大数据
大数据学习----Hadoop分布式环境搭建
第一章Linux安装第二章Linux配置第三章Hadoop完全分布式环境搭建第四章Zookeeper的安装第五章
HBase
的安装和基础命令参考文章:一、ssh免密码登录配置方法二、Hadoop完全分布式的搭建文章目录大数据学习
cadenye
·
2023-09-28 02:20
大数据
大数据
HADOOP_CLASSPATH配置问题
以前遇到过在本地开发
Hbase
程序,本地编译通过(本地开发有在IDE里面导入jar包),打包jar包(并未包含开发时的
Hbase
的lib中的jar包因为考虑到运行linux环境中有这些jar包)然后在linux
Allocator
·
2023-09-27 17:46
Hadoop
hadoop
hbase
helm3-安装logstash
准备阿里云K8S
集群安装
helm安装Kafka我们首先添加一下helm库,并且搜索到logstash$helmrepoaddbitnamihttps://charts.bitnami.com/bitnami
·
2023-09-27 15:13
helm3logstash
HBase
2.0 vs
HBase
1.x 延时比较
hbase
2.0已经正式发布,对比之前1.x版本,2.0在读写链路上做了完善的优化,offheap、nettyrpc等,这里做个小测试实验对比1.x和2.0在读写上的延时情况。
ad4d39659223
·
2023-09-27 14:24
如何避免
HBase
写入过快引起的各种问题
首先我们简单回顾下整个写入流程clientapi==>RPC==>serverIPC==>RPCqueue==>RPChandler==>writeWAL==>writememstore==>flushtofilesystem整个写入流程从客户端调用API开始,数据会通过protobuf编码成一个请求,通过scoket实现的IPC模块被送达server的RPC队列中。最后由负责处理RPC的hand
栀子花_ef39
·
2023-09-27 10:54
Hbase
- 自定义Rowkey规则
>在Flink中我们有时候需要分析数据1点到2点的范围,可是经过Region又比较慢,这时候我们就可以定制`TableInputFormat`来实现我们的需求了,我们还可以采用Flink的`DataSet`的方式读取,另外下面还有`Spark`读取的例子。##使用教程Md5Util.java```importorg.apache.commons.codec.binary.Hex;importjav
kikiki5
·
2023-09-27 06:35
【大数据存储与处理】1. hadoop单机伪分布安装和
集群安装
0.写在前面0.1软件版本hadoop2.10.2ubuntu20.04openjdk-8-jdk0.2hadoop介绍Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。Hadoop实现了一个分布式文件系统(DistributedFileSystem),其中一个组件是HDFS(Hadoop
唐生一
·
2023-09-27 02:59
大数据存储与处理
大数据
hadoop
分布式
hadoop安装
在Hive中‘InputFormat,OutputFormat‘和‘Stored as‘之间有什么区别?
从客户端开始,您将使用sql继续使用表,但在低级别,它可以是文本文件或序列文件或
hbase
表或其他一些数据结构。InputFormat和OutputFormat-允许您描述原始
梦痕长情
·
2023-09-27 00:29
hive
big
data
2020-02-26
/
hbase
-daemon.shstartmaster./
hbase
-daemon.shstartregionserver
一人一枪一壶酒
·
2023-09-27 00:11
k8s
集群安装
v1.20.9后-1-部署自己的服务k8sApp
先部署无istio的服务,方便后续改造。k8s别名给kubectl命令起别名kc,方便后续查询[root@m~]#aliaskc='kubectl'[root@m~]#kcgetnsNAMESTATUSAGEdefaultActive233distio-systemActive6d18hk8s-demoActive16hkube-node-leaseActive233dkube-publicAct
cc-lady
·
2023-09-26 17:42
kubernetes
k8s
集群安装
v1.20.9后-2-改造部署自己的服务k8sApp,增加istio
1.环境准备:K8s集群,已经实现了k8s-app小例子,可以正常访问。(已包含docker)在此基础上对项目进行改进,实现istio流量切换。2.安装部署istio2.1安装go官网下载go和istio的安装包,上传到k8s集群虚拟机上(三个机器都安装)[root@node1~]#cd/root/Public/istio[root@masteristio]#lsgo1.20.6.linux-am
cc-lady
·
2023-09-26 17:10
kubernetes
istio
HBase
基础架构及存储原理
一、
HBase
介绍
HBase
是Hadoop生态系统中的一个分布式、面向列的开源数据库,具有高可伸缩性、高性能和强大的数据处理能力。广泛应用于处理大规模数据集。
five小点心
·
2023-09-26 15:52
#
HBase
hbase
架构
数据库
上一页
28
29
30
31
32
33
34
35
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他