E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
HBase集群搭建
java
hbase
配置文件_
Hbase
入门(二)——安装与配置
本文讲述如何安装,部署,启停
HBase
集群,如何通过命令行对
Hbase
进行基本操作。并介绍
Hbase
的配置文件。在安装前需要将所有先决条件安装完成。
weixin_39804329
·
2023-12-31 10:30
java
hbase
配置文件
TimescaleDB分布式
集群搭建
Multi-nodeTimescaleDBallowsyoutotieseveraldatabasestogetherintoalogicaldistributeddatabasetocombinetheprocessingpowerofmanyphysicalPostgreSQLinstances.Oneofthedatabasesexistsonanaccessnodeandstoresmet
pigcoffee
·
2023-12-31 09:15
分布式
postgresql
Spring Boot IO官方文档中文版
原文链接SpringBootIO官方文档中文版引言缓存支持的缓存提供程序GenericJCache(JSR-107)HazelcastInfinispanCouc
hbase
RedisCaffeineCache2kSimpleNoneHazelcastQuartzScheduler
逆水行舟x
·
2023-12-31 08:45
spring
boot
spring
boot
后端
java
Canal的学习
SpringBoot基本概念Canal是一个基于MySQL数据库增量日志解析,提供增量数据订阅和消费,支持将增量数据投递到下游消费者(如Kafka、RocketMQ等)或者存储(如Elasticsearch、
HBase
kk变色龙13
·
2023-12-31 08:08
android
微服务
rabbitmq
java
zookeeper
集群搭建
超详细教程
这里写目录标题前言详细步骤1、下载安装包2、解压3、修改配置文件4、将zookeeper目录分发到其他节点5、修改其他节点的myid文件6、编写操作zookeeper集群的脚本7、启动集群8、连接zookeeper集群结尾前言大家好,我是风云,欢迎大家关注我的博客,在未来的日子里我们一起来学习大数据相关的技术,一起努力奋斗,遇见更好的自己!正如大家知道的那样,在大数据领域呢,有很多组件都会依赖zo
笑看风云路
·
2023-12-31 08:25
Zookeeper
集群搭建系列
zookeeper
linux
zookeeper
集群搭建
1.依赖该教程依赖已经准备好的linux环境,请先查看:LINUX集群环境准备2.下载和解压点击下载tar-zxvfapache-zookeeper-3.8.0-bin.tar.gz-C/opt/modulecd/opt/modulemvapache-zookeeper-3.8.0-binzookeeper-3.8.03.配置3.1.创建集群唯一标识准备一个数据文件夹,并创建节点唯一标识myidc
被遗忘的优雅
·
2023-12-31 08:54
zookeeper
Zookeeper
集群搭建
系列文章目录Ubuntu常见基本问题Hadoop3.1.3安装(单机、伪分布)Hadoop
集群搭建
HBase
2.2.2安装(单机、伪分布)Zookeeper
集群搭建
HBase
集群搭建
Spark安装和编程实践
WE-ubytt
·
2023-12-31 08:53
大数据处理与应用
zookeeper
hadoop
大数据
zookeeper之
集群搭建
1.集群角色zookeeper集群下,有3种角色,分别是领导者(Leader)、跟随着(Follower)、观察者(Observer)。接下来我们分别看一下这三种角色的作用。领导者(Leader):事务请求(写操作)的唯一调度者和处理者,保证集群事务处理的顺序性;集群内部各个服务器的调度者。对于create、setData、delete等有写操作的请求,则要统一转发给leader处理,leader
瑜伽娃娃
·
2023-12-31 08:52
Zookeeper
zookeeper
linux
分布式
Vmware虚拟机无法联通主机解决方法二
今天在学习
HBase
时,昨天的问题又重新了,我通过SSH工具MobaXterm都无法联通CentOS-7虚拟机。
在奋斗的大道
·
2023-12-31 05:45
深蓝计划
系统运维
VMware
FastDFS
集群搭建
简介FastDFS是什么?我们这里可以看一下度娘的解释。FastDFS是一个开源的轻量级分布式文件系统,它对文件进行管理,功能包括:文件存储、文件同步、文件访问(文件上传、文件下载)等,解决了大容量存储和负载均衡的问题。我这里使用服务器环境是centos7注意:FastDFS只能上传500MB的小文件FastDFS角色简介tracker:跟踪者,负责调度存储服务。storage:用于文件存储。cl
fanlcwowo
·
2023-12-31 03:39
linux
服务器
运维
CSS 动态提示框
border-right-color:transparent;}}@keyframestypeAndDelete{0%,10%{width:0;}45%,55%{width:200rpx;}/*adjustwidt
hbase
doncontent
特创数字科技
·
2023-12-31 03:43
CSS动画
css
前端
Hbase
- 批量写入加速技巧
##背景之前我们的线上业务一直使用的是
Hbase
的单条put操作,为了提高程序的写入性能我们还针对业务进行了修改,将日志批量化,也就是
hbase
的put多条操作,后面发现
hbase
的客户端是支持本地批量操作
kikiki4
·
2023-12-30 23:02
一篇掌握Elasticsearch7.10
集群搭建
到实战
目录一、背景二、内容概要三、基础概念四、ES版本选择Elasticsearch版本选择ES客户端SDK版本选择五、Elasticsearch多租户多租户下的架构租户的识别和路由六、ES
集群搭建
集群部署架构单集群示例多集群示例
南天一梦N
·
2023-12-30 22:49
spring
JAVA杂七杂八
spring
elasticsearch
es
maven
spring
boot
linux(centos7)mysql8.0主从
集群搭建
(两台机器)
docker安装:(转载)centos7安装Docker详细步骤(无坑版教程)-CSDN博客环境信息主数据库服务器:192.168.1.10从数据库服务器:192.168.1.111.mysql8.0镜像下载dockerpullmysql:8.0.232.创建docker容器2.1在主数据库上创建docker容器dockerrun-d--namemainer-p8008:3306-eMYSQL_R
屌丝的程序员
·
2023-12-30 21:07
数据库相关知识
mysq8.0主从
mysql集群
docker搭建mysql集群
【图文详解】
HBase
数据模型及其架构原理
HBase
简介https://
hbase
.apache.org/
HBase
,HadoopDatabase,是一个高可靠性、高性能、面向列存储、可伸缩、实时读写的分布式开源NoSQL数据库。
禅与计算机程序设计艺术
·
2023-12-30 21:40
【大数据入门核心技术-Hadoop】(六)Hadoop3.2.1高可用
集群搭建
目录一、Hadoop部署的三种方式1、Standalonemode(独立模式)2、Pseudo-Distributedmode(伪分布式模式)3、Clustermode(集群模式)二、准备工作1、先完成zk高可用搭建2、/etc/hosts增加内容3、各台服务器分别创建目录4、关闭防火墙和禁用swap交换分区5、三台机器间免密6、安装jdk7、下载好hadoop安装包三、高可用配置1、配置core
forest_long
·
2023-12-30 18:49
大数据技术入门到21天通关
hadoop
大数据
hdfs
zookeeper
hive
在Linux中进行ZooKeeper
集群搭建
在公网IP为x.x.x.x、y.y.y.y和z.z.z.z并装有AlibabaCloudLinux3.2104LTS64位的服务器上进行zookeeper
集群搭建
,都安装server-jre-8u202
Jerry 二河小鱼
·
2023-12-30 18:21
2023运维
linux
zookeeper
运维
服务器
HBase
2.0的修复工具HBCK2
HBCK是
HBase
1.x中的命令,到了
HBase
2.x中,HBCK命令不适用,且它的写功能(-fix)已删除,它虽然还可以报告
HBase
2.x集群的状态,但是由于它不了解
HBase
2.x集群内部的工作原理
大猿小猿向前冲
·
2023-12-30 15:26
Hbase
预分区建表
![](https://upload-images.jianshu.io/upload_images/9028759-735db08803d91f7c.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)```privatestaticAdminadmin=null;privatestaticfinalStringuser="admin/a
kikiki4
·
2023-12-30 14:28
Hbase
- 表导出CSV数据
MR考查了
Hbase
的各种MR,没有发现哪一个是能实现的,如果有请通知我,我给他发红包。所以我们只能自己来写一个MR了,编写一个
Hbase
的MR,官方文档上也有相应的例子。
kikiki1
·
2023-12-30 11:36
Centos7.6 Docker私服搭建-docker registry
传统架构演进从单体到微服务Docker常用命令K8s
集群搭建
(Harbor)私服仓库(手把手教你搭建DockerRegistry私服基于SSL证书改造RegistryDocker搭建私服(本地镜像库)+
ccren
·
2023-12-30 10:50
分布式环境配置
框架搭建问题汇总
Docker
docker-registry
vmware
宿主机安装
Centos7
Hadoop开发环境搭建
文章目录第1关:配置开发环境-JavaJDK的配置第2关:配置开发环境-Hadoop安装与伪分布式
集群搭建
hadoop-env.sh配置yarn-env.sh配置core-site.xml配置hdfs-site.xml
柔雾
·
2023-12-30 09:42
hadoop
大数据
分布式
共享单车之数据分析
统计共享单车在指定地点的每天平均次数第3关:统计共享单车指定车辆每次使用的空闲平均时间第4关:统计指定时间共享单车使用次数第5关:统计共享单车线路流量第1关:统计共享单车每天的平均使用时间任务描述本关任务:使用
Hbase
柔雾
·
2023-12-30 07:10
数据分析
数据挖掘
Hadoop分布式
集群搭建
(三台虚拟机)
一.准备工作搭建好VMwareWorkstationPro(我这里装的版本是16)二.新建虚拟机hadoop01搭建hadoop集群需要三台虚拟机1.新建虚拟机——>自定义(高级)2.不用改动,点击下一步3.映像文件稍后再加入4.选择Linux——>CentOS764位5.可以在存放虚拟机的文件内新建一个文件夹,专门放hadoop集群需要的虚拟机(有三个)6.处理器数量设置一个就好7.内存不够的选
# Ling
·
2023-12-30 07:00
hadoop
大数据
分布式
Hadoop
集群搭建
教程(完全分布式)
环境准备:本案例使用VMwareWorkstationPro虚拟机创建服务器来搭建Hadoop集群,所用软件及版本及简要配置方法如下:1.VMwareWorkstationPro15.5.1(推荐使用15以上版本,感觉优化比14好了许多)2.Ubuntu16.0464bit(3台,用户名均为Hadoop,主机名分别为node-1,node-2,node-3)注意:三台虚拟机用户名需要一致,也可以对
这是一个死肥宅
·
2023-12-30 07:27
hadoop
hadoop
大数据
三台CentOS7.6虚拟机搭建Hadoop完全分布式集群(三)
9安装
hbase
温馨提示:安装
hbase
先在master主节点上配置,然后远程复制到slave01或slave02,在配置环境即可。
666-LBJ-666
·
2023-12-30 07:56
大数据
分布式
hadoop
大数据
8、服务提供者和消费者注册进微服务以及服务提供者的
集群搭建
1、创建cloud-provider-payment8002image.png仿照cloud-provider-payment8001创建cloud-provider-payment80022、服务提供者注册进Eureka集群image.png在cloud-provider-payment8001和cloud-provider-payment8002中分别将注册地址改成集群地址eureka:cli
Kari开源
·
2023-12-30 06:52
Hbase
详解
Hbase
概念base是分布式、面向列的开源数据库(其实准确的说是面向列族)。
武昌库里写JAVA
·
2023-12-30 05:41
高手面试
hbase
数据库
大数据
集群部署篇--Redis 哨兵模式
文章目录前言一、哨兵模式介绍:1.1介绍:1.2工作机制:二、哨兵模式搭建:2.1redis主从搭建:2.2setinel
集群搭建
:2.2.1配置:sentinel.conf:2.2.2运行容器:2.2.3
拽着尾巴的鱼儿
·
2023-12-29 18:24
java工具篇
db数据库
redis
bootstrap
数据库
集群部署篇--Redis 集群分片模式
文章目录前言一、Redis分片集群介绍1.1介绍:1.2工作机制:1.2.1节点:1.2.2槽slot:1.2.3故障转移:二、Redis分片
集群搭建
:2.1配置文件:2.2redis部署:2.3redis
拽着尾巴的鱼儿
·
2023-12-29 18:52
java工具篇
db数据库
redis
数据库
缓存
HBASE
的应用场景
2018/08/31
HBase
是如何与Hadoop嵌入在一起的,那么他的作用又是什么。这显然跟我原来理解的那些个数据库不太一样,就比如mango这种。现在比较关注的就是他的数据导入,是怎么样的。
VChao
·
2023-12-29 16:49
k8s部署 CNI 网络组件与k8s
集群搭建
(二)
目录部署CNI网络组件部署flannelK8S中Pod网络通信FlannelUDP模式的工作原理ETCD之Flannel提供说明FlannelVXLAN模式跨主机的工作原理在node01节点上操作在master01节点上操作部署Calicok8s组网方案对比Calico主要由三个部分组成Calico工作原理在master01节点上操作node02节点部署在node01节点上操作在node02节点上
whtqwq
·
2023-12-29 14:56
docker
运维
容器
云原生
kubernetes
网络
couc
hbase
的使用(springboot连接couc
hbase
,node.js连接couc
hbase
)
网上的couc
hbase
资料十分有限,这无疑给我们学习增加了难度。
caibixyy
·
2023-12-29 13:49
springboot
Spring
Date
JPA
项目演示示例
couchbase
springboot
node.js
Redis 主从集群 —— 超详细操作演示!
五、Redis主从集群五、Redis主从集群5.1主从
集群搭建
5.1.1、伪
集群搭建
与配置5.1.2、分级管理5.1.3、容灾冷处理5.2主从复制原理5.2.1、主从复制原理5.2.2、数据同步演变过程
酷酷的懒虫
·
2023-12-29 10:19
数据库
#
redis
redis
数据库
缓存
简单的 MapReduce 程序的示例代码,用于统计
HBase
中的成绩表中的单科排名和总分排名,并将结果上传到 HDFS 中。...
下面是一个简单的MapReduce程序的示例代码,用于统计
HBase
中的成绩表中的单科排名和总分排名,并将结果上传到HDFS中:```importjava.io.IOException;importorg.apache.hadoop.conf.Configuration
weixin_42601702
·
2023-12-29 10:19
hbase
hdfs
mapreduce
hadoop
大数据
统计
HBase
中的成绩表中的单科排名和总分排名,并将结果上传到 HDFS 中的完整代码...
这是一个使用
HBase
JavaAPI统计成绩表中的单科排名和总分排名的完整代码示例。首先,你需要在pom.xml中添加
HBase
依赖:org.apache.
hbase
hbase
-client2.3.2
轮胎技术Tyretek
·
2023-12-29 10:18
hbase
hdfs
hadoop
大数据
分布式
读取
HBase
的表数据,然后将数据写入到hdfs上面去
读取
HBase
的表数据,然后将数据写入到hdfs上面去1、MapperpublicstaticclassmapHdfsextendsTableMapper{@Overrideprotectedvoidmap
a大数据yyds
·
2023-12-29 10:48
HBase
hbase
HBase
Java API编程实例
在本实例中,首先创建一个学生成绩表scores,用来存储学生各门课程的考试成绩,然后向scores添加数据。表scores的概念视图如图1所示,用学生的名字name作为行键,年级grade是一个只有一个列的列族,score是一个列族,每一门课程都是score的一个列,如english、math、Chinese等。score的列可以随时添加。例如,后续学生又参加了其他课程的考试,如computing
大数据基础入门教程
·
2023-12-29 10:47
HBase
大数据
大数据开发
利用
hbase
来两张表的联立,求出一个班学生的总分并把结果写到
hbase
(java 代码实现)
importorg.apache.hadoop.conf.Configuration;importorg.apache.hadoop.
hbase
.HColumnDescriptor;importorg.apache.hadoop.
hbase
.HTableDescriptor
CC072615
·
2023-12-29 10:14
hbase
java
hadoop
大数据
big
data
datax
DataXDataX是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括MySQL、SQLServer、Oracle、PostgreSQL、HDFS、Hive、
HBase
、OTS、ODPS等各种异构数据源之间高效的数据同步功能
jerry-89
·
2023-12-29 09:24
DorisDB
database
03.生成Kubernetes集群证书文件
K8S入门学习的难点是
集群搭建
,
集群搭建
的难点是tls证书Kubeadm部署的集群证书默认是一年,所以在证书到期之前需要进行手动更新(生产环境这样可能有风险)这里我把证书生成的过程全部用脚本自动生成,默认有效期
CodingDemo
·
2023-12-29 07:42
Kubernetes入门实战
kubernetes
容器
云原生
Elasticsearch:1.
集群搭建
简介基本概念cluster代表一个集群,集群中有多个节点,其中有一个为主节点,这个主节点是可以通过选举产生的,主从节点是对于集群内部来说的。es的一个概念就是去中心化,字面上理解就是无中心节点,这是对于集群外部来说的,因为从外部来看es集群,在逻辑上是个整体,你与任何一个节点的通信和与整个es集群通信是等价的。shards代表索引分片,es可以把一个完整的索引分成多个分片,这样的好处是可以把一个大
小六的昵称已被使用
·
2023-12-29 06:57
Hbase
- kerberos认证异常
>之前怎么认证都认证不上,问题找了好了,发现它的异常跟实际操作根本就对不上,死马当活马医,当时也是瞎改才好的,给大家伙记录记录。```KrbException:ServernotfoundinKerberosdatabase(7)-LOOKING_UP_SERVER>>>KdcAccessibility:removestorm1.starsriver.cnatsun.security.krb5.K
kikiki5
·
2023-12-29 05:54
kubeadm来搭建k8s集群。
二进制的搭建更适合50台主机以上的大集群,kubeadm更适合中小型企业的
集群搭建
主机配置建议:2c4G主机节点IP组件master20.0.0.101docker、kubeadm、kubelet、kubectl
相遇蟹堡王,尽享蟹黄堡
·
2023-12-29 02:37
kubernetes
容器
云原生
Hbase
- 自定义Rowkey规则
>在Flink中我们有时候需要分析数据1点到2点的范围,可是经过Region又比较慢,这时候我们就可以定制`TableInputFormat`来实现我们的需求了,我们还可以采用Flink的`DataSet`的方式读取,另外下面还有`Spark`读取的例子。##使用教程Md5Util.java```importorg.apache.commons.codec.binary.Hex;importjav
kikiki5
·
2023-12-29 01:49
Spark
集群搭建
文章目录搭建前准备安装搭建解压并重命名环境变量配置配置文件yarn-site.xmlspark-env.sh官网求π(PI)案例启动spark-shell通过浏览器查看显示查看Spark的网页信息展示搭建前准备下载地址:Indexof/dist/spark(apache.org)配置好hadoop环境,hdfs和yarn服务正常可以启动start-dfs.shstart-yarn.sh安装搭建解压
撕得失败的标签
·
2023-12-29 00:42
大数据技术
spark
大数据
分布式
hadoop
yarn
hdfs
Hive和Spark生产
集群搭建
(spark on doris)
1.环境准备1.1版本选择序号bigdata-001bigdata-002bigdata-003bigdata-004bigdata-005MySQL-8.0.31mysqlDataxDataxDataxDataxDataxDataxSpark-3.3.1SparkSparkSparkSparkSparkHive-3.1.3HiveHive1.2主要组件官网hive官网:https://hive.
tuoluzhe8521
·
2023-12-28 23:56
Hive相关
hive
spark
hadoop
大数据
yarn
Hbase
BulkLoad用法
要导入大量数据,
Hbase
的BulkLoad是必不可少的,在导入历史数据的时候,我们一般会选择使用BulkLoad方式,我们还可以借助Spark的计算能力将数据快速地导入。
kikiki2
·
2023-12-28 23:55
Redis
集群搭建
很easy
前言哨兵模式虽然让读写分离更加高可用,但单台服务器由于本身的内存和CPU瓶颈,对于高并发和大数据业务的应用场景还是远远不能满足;对于这种情况,有点经验的小伙伴会毫不犹豫的想到集群,搞他好几个节点,负载均衡再加上故障转移,岂不美哉。是的,就是这个理,接下来玩玩。正文集群,相信这个词小伙伴应该听的耳朵起茧子了吧;多搞几台服务器,让请求/命令平均分发到各个服务器,避免单台服务器承载过大压力;对于Redi
Code综艺圈
·
2023-12-28 23:14
Flink on K8s 企业生产化实践
平台从Hive、
Hbase
、关系型数据库等大数据ODS(OperationalDatastore)层进行快速的数据ETL,将数据抽取到特征平台进行管理,并统一了数据出口,供数据科学
house.zhang
·
2023-12-28 15:00
大数据
big
data
大数据
上一页
11
12
13
14
15
16
17
18
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他