E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
HBase集群搭建
hbase
编程
importorg.apache.hadoop.conf.Configuration;importorg.apache.hadoop.
hbase
.
SunsPlanter
·
2024-01-04 15:23
数据库
ClickHouse高可用
集群搭建
(离线安装)
一、简介ClickHouse官网二、生产
集群搭建
准备Zookeeper集群Linux服务器四台(以四台为列)创建用户组和用户groupaddclickhouse---创建用户组useradd-m-d/home
Sql强
·
2024-01-04 15:49
(十一)数据分片(Sharding)和数据分区(PARTITIONing)简述
虽然可能跟其它的例如
HBase
、Hive之类的比有些差异和不足,但并不影响壮志。
紫狐挽诗
·
2024-01-04 14:36
ElasticSearch
集群搭建
与状态监控cerebro
海量数据存储问题:将索引库从逻辑上拆分为N个分片(shard),存储到多个节点单点故障问题:将分片数据在不同节点备份(replica)目录一、部署es集群二、
集群搭建
案例:利用3个docker容器模拟3
Crhy、Y
·
2024-01-04 13:16
SpringCloud
大数据
Java
elasticsearch
大数据
搜索引擎
java
全文检索
开发语言
ZooKeeper+Kafka+ELK+Filebeat
集群搭建
实现大批量日志收集和展示
文章目录一、集群环境准备二、搭建ZooKeeper集群和配置三、搭建Kafka集群对接zk四、搭建ES集群和配置五、部署Logstash消费Kafka数据写入至ES六、部署Filebeat收集日志七、安装Kibana展示日志信息一、集群环境准备1.1因为资源原因这里我就暂时先一台机器部署多个应用给大家演示硬件资源节点组件8c16g50node1-192.168.40.162Kafka+ZooKee
小蔡技术栈
·
2024-01-04 11:09
Elasticsearch
Kibana
DevOps
zookeeper
kafka
elk
大数据
linux
Nacos 持久化及集群的搭建【微服务】
文章目录一、统一配置管理二、微服务配置拉取三、配置热更新四、多环境共享配置五、Nacos
集群搭建
1.集群结构2.初始化数据库3.搭建集群六、Nginx反向代理七、启动项目测试一、统一配置管理案例练习的时候我们只有两个微服务
栈老师不回家
·
2024-01-04 10:51
SpringCloud
微服务
架构
云原生
nacos
HBase
基本概念与基本使用
1.
HBase
简介1.1什么是
HBase
HBASE
是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,利用
HBASE
技术可在廉价PCServer上搭建起大规模结构化存储集群。
Yobhel
·
2024-01-04 08:28
Java技术栈 —— Hadoop入门(一)
第一印象二、安装Hadoop三、Hadoop解析3.1Hadoop生态介绍3.1.1MapReduce-核心组件3.1.2HDFS-核心组件3.1.3YARN-核心组件3.1.4其它组件3.1.4.1
HBase
3.1.4.2Hive3.1.4.3Spark
键盘国治理专家
·
2024-01-04 08:02
Java技术栈
java
hadoop
开发语言
深入理解Mysql MHA高可用
集群搭建
:从实验到实战
1.简介MHA(MasterHighAvailability)是一个高效的开源MySQL高可用性解决方案。由日本开发者yoshinorim(前DeNA员工,现在Facebook)创建,MHA支持MySQL的主从复制架构,自动化主节点故障转移。当主节点发生故障,MHA能迅速将最新数据的从节点升级为新主节点。这个过程中,MHA从其他从节点获取额外信息,确保数据一致性。MHA还能在线切换主节点,按需调整
光芒软件工匠
·
2024-01-03 22:21
mysql
数据库
启动
Hbase
后HMaster老是掉的原因
1.启动
Hbase
之前先启动hdfs,zookeeper,再启动
Hbase
,但是隔一会就发现HMaster掉线了,但是hregionserver还在.2.解决:重新启动
Hbase
之前,先kill掉hregionserver
夺命大翻斗
·
2024-01-03 22:12
hbase
数据库
大数据
Spark向
Hbase
中写数据报异常:org.apache.hadoop.
hbase
.client.RetriesExhaustedWithDetailsException: Failed 5
解决:将第二行代码中的表名写全,并指定在哪个名称空间valtable:Table=con.getTable(TableName.valueOf("info:tb_order"))
夺命大翻斗
·
2024-01-03 22:12
spark
hbase
apache
电商数仓可视化1--数据导入
、商品信息、店铺信息、订单数据、订单支付信息、活动信息、物流信息等2、埋点数据埋点日志相对业务数据是用于数据分析、挖掘需求,一般以日志形式存储于日志文件中,随后通过采集落地分布式存储介质中如hdfs、
hbase
bigdata从入门到放弃
·
2024-01-03 18:53
数据仓库
linux
hadoop
大数据
java
数据仓库
HDFS重温
今天被问到分布式,有些忘记,查资料回忆起分布式集群构建,现在重温
集群搭建
过程费话不多说,来个简图NameNode:HDFS群集包含单个NameNode(主服务器),它管理文件系统命名空间并控制客户端对文件的访问权限
zty_1995
·
2024-01-03 18:18
HBase
Java API 03:
HBase
与MapReduce整合
HBase
版本:1.2.61.案例说明现有
hbase
表"student",其中内容如下:
hbase
(main):025:0>scan'student'ROWCOLUMN+CELL0001column=info
CoderJed
·
2024-01-03 14:14
认真学SQL——MySQL入门之环境准备
关系型数据库:必须遵循SQL规范,强调以二维表格的形式存储数据举例:MySQLORACLEDB2SqlServerSQLite非关系型数据:NoSQL不仅仅是SQL,强调以key-value形式存储数据举例:
HBase
RedisMongoDB
困了就倒头睡
·
2024-01-03 13:47
sql
mysql
数据库
HBASE
基础
1、NoSQL非关系型数据库2、
hbase
是面向列存储结构,即类似于hashmap3、
hbase
是以hdfs作为基础存储4、官网http://
hbase
.apache.org/5、
hbase
的逻辑结构是由行与列族构成的
xinxinyydss
·
2024-01-03 12:25
hbase
数据库
大数据
【
HBase
】——Shell操作
1基本操作1.1进入
HBase
客户端命令行bin/
hbase
shell1.2查看帮助命令能够展示
HBase
中所有能使用的命令,主要使用的命令有namespace命令空间相关,DDL创建修改表格,DML写入读取数据
那时的样子_
·
2024-01-03 12:51
hbase
数据库
【
HBase
】——Java API
1环境1.1依赖org.apache.
hbase
hbase
-client2.4.111.2配置文件
hbase
-site.xml
hbase
.zookeeper.quorumhadoop102:2181,hadoop103
那时的样子_
·
2024-01-03 12:47
hbase
java
数据库
Redis专题(持续更新)
03-VIP-Redis缓存高可用集群文章目录03-VIP-Redis缓存高可用集群正文1、Redis集群方案比较2、Redis高可用
集群搭建
redis
集群搭建
3、Java操作redis集群4、Redis
Player
·
2024-01-03 09:56
redis
数据库
缓存
kubeadm来快速搭建一个K8S集群
二进制的搭建更适合50台主机以上的大集群,kubeadm更适合中小型企业的
集群搭建
主机节点IP组件master20.0.0.61docker、kubeadm、kubelet、kubectl、flannelnode0120.0
,老六
·
2024-01-03 07:55
kubernetes
docker
容器
HBase
从入门到精通11:
HBase
数据保存过程和Region分裂
本节来介绍一下
HBase
的数据保存过程和Region分裂过程的相关知识。
金字塔下的小蜗牛
·
2024-01-03 07:35
python操作hdfs及
hbase
如果存在权限不足,可以通过命令行对上层目录权限进行修改:hadoopdfs-chmod-R777/tmp或者hdfs的配置文件中,将dfs.permissions修改为False(出方法暂未尝试)操作
Hbase
佛系小懒
·
2024-01-03 04:26
Hbase
- kerberos认证异常
>之前怎么认证都认证不上,问题找了好了,发现它的异常跟实际操作根本就对不上,死马当活马医,当时也是瞎改才好的,给大家伙记录记录。```KrbException:ServernotfoundinKerberosdatabase(7)-LOOKING_UP_SERVER>>>KdcAccessibility:removestorm1.starsriver.cnatsun.security.krb5.K
kikiki4
·
2024-01-03 03:27
HBase
容错和高可用
HBase
是一个没有单点故障的分布式系统,计算层和存储层都有各自的保障了服务的可用性。
Alex90
·
2024-01-03 02:45
Hbase
介绍以及Hive优势
一,
Hbase
介绍
HBase
是典型的NoSQL数据库,通常被描述成稀疏的、分布式的、持久化的,由行键、列键和时间戳进行索引的多维有序映射数据库,主要用来存储非结构化和半结构化的数据。
毛毛虫同学
·
2024-01-02 14:38
MySQL基础学习: 第一章 数据库概述
、数据库的分类1、关系型数据库Oracle:收费MySQL:免费SQLSERVER:收费hiveTIDB人大金仓(KINGBASE)达梦(dm)dorisoceanbase2、非关系型数据库Redis
Hbase
ElasticsearchInfluxdbks3
玉成226
·
2024-01-02 12:43
【MySQL】
数据库
mysql
学习
架构设计内容分享(七十一):架构必备:10WQPS超高并发架构的10大思想
数据分治思想+分库分表3.读写分离思想+主从分离4.池化思想5.缓存思想6.异步思想+消息队列削锋7.服务保护思想:熔断降级8.限流思想9.扩容思想+切流量10.海量数据处理思想ElasticSearch+
Hbase
之乎者也·
·
2024-01-02 11:59
架构设计
内容分享
架构
架构设计
HBase
内容分享(五):
HBase
读写性能优化
目录一、
HBase
读优化1.
HBase
客户端优化2.
HBase
服务器端优化3.
HBase
列族设计优化4.HDFS相关优化5.
HBase
读性能优化归纳二、
HBase
写优化1.写性能优化切入点2.写异常问题检查点一
之乎者也·
·
2024-01-02 10:48
大数据(Hadoop)内容分享
HBase
内容分享
hbase
性能优化
数据库
Apache Hive详解
目录一、引入Hive简介为什么要使用HiveHive的特点Hive的发展历程二、Hive架构体系三、MySQL安装安装准备安装卸载(了解)四、Hive
集群搭建
准备工作安装过程五、Hive的MySQL元数据库与表六
毫无感情的dj
·
2024-01-02 07:06
hive
大数据
hadoop
Hbase
- kerberos认证异常
>之前怎么认证都认证不上,问题找了好了,发现它的异常跟实际操作根本就对不上,死马当活马医,当时也是瞎改才好的,给大家伙记录记录。```KrbException:ServernotfoundinKerberosdatabase(7)-LOOKING_UP_SERVER>>>KdcAccessibility:removestorm1.starsriver.cnatsun.security.krb5.K
kikiki5
·
2024-01-02 06:49
ceph
集群搭建
到应用从入门到熟练,包含块存储、对象存储、cephfs的应用、cephx认证等
ceph-deploy比较适合生产环境,不是用cephadm搭建。相对麻烦一些,但是并不难,细节把握好就行,只是命令多一些而已。ceph理论知识略…ceph集群实验环境服务器主机public网段IP(对外服务)cluster网段IP(集群通信)角色deploy192.168.2.120用于部署集群、管理集群ceph-node1192.168.2.121192.168.6.135ceph-mon、c
绝恋96
·
2024-01-01 14:50
ceph
云原生
linux
运维
ceph
Linux安装
Hbase
并且使用python进行读取操作
1.
Hbase
安装:可以参考这篇文章,写的很详细:https://blog.csdn.net/wuruijie321/article/details/79932752需要注意的。
frankie_cheung
·
2024-01-01 10:29
Hbase
- 表导出CSV数据
MR考查了
Hbase
的各种MR,没有发现哪一个是能实现的,如果有请通知我,我给他发红包。所以我们只能自己来写一个MR了,编写一个
Hbase
的MR,官方文档上也有相应的例子。
kikiki2
·
2024-01-01 09:02
Docker:Docker集群配置与应用(Docker Swarm)
DockerSwarm集群1.1为什么要使用容器集群1.2什么是Swarm集群1.3DockerSwarm特性1.4Swarm节点1.5Swarm集群管理命令Swarm集群节点管理命令1.6DockerSwarm
集群搭建
前言可以认为
boy快快长大
·
2024-01-01 08:55
Docker
docker
eureka
容器
HBase
内容分享(四):深度学习
HBase
目录1.引言2.
HBase
概述3.安装与配置4.数据操作5.数据模型与架构6.客户端开发7.
HBase
优化8.总结1.引言在当今数字化的时代,数据已经成为了推动商业、科研和社会发展的关键资源。
之乎者也·
·
2024-01-01 05:23
大数据(Hadoop)内容分享
HBase
内容分享
hbase
深度学习
数据库
java.io.FileNotFoundException: HADOOP_HOME and hadoop.home.dir are unset.
hadoop-2.8.4包内的bin文件替换,将下载文件中hadoop.dll放到C:\Windows\System32下解决办法:1.下载hadoop,去官网下载对应的hadoop版本,我在linux
集群搭建
的是
Sql强
·
2024-01-01 04:35
程序员如何基于Docker方式搭建MongoDB集群
具体用法,可以参考菜鸟教程《MongDB教程》,这里就不做详细描述在这里我们主要是讲述基于Docker的Mongo
集群搭建
。在早期的项目开发中,一般都是采用单个数据库去存储数据,这是一种很危险的举动。
程序员xysam
·
2024-01-01 00:03
java
程序人生
【mongoDB】MongoDB 4.X 用户和角色权限管理总结
使用Docker一键部署MongoDBhttps://blog.csdn.net/u011104991/article/details/81735960DockerMongoDBv4.0.0
集群搭建
https
Bogon
·
2023-12-31 22:30
Hbase
的三个应用
Hbase
的三个应用分布式自旋锁。分布式的唯一序列号分布式系统黑名单分布式自旋锁是一种在分布式系统中用于实现并发控制的锁机制。
bluedraam_pp
·
2023-12-31 21:17
实时计算
hbase
数据库
大数据
Hbase
- kerberos认证异常
>之前怎么认证都认证不上,问题找了好了,发现它的异常跟实际操作根本就对不上,死马当活马医,当时也是瞎改才好的,给大家伙记录记录。```KrbException:ServernotfoundinKerberosdatabase(7)-LOOKING_UP_SERVER>>>KdcAccessibility:removestorm1.starsriver.cnatsun.security.krb5.K
kikiki5
·
2023-12-31 21:59
redis
集群搭建
详解
一、主从复制1、准备两台机器2、设置主从3、验证4、复制原理二、哨兵Sentinel1、配置2、启动哨兵一、主从复制#查看信息inforeplication127.0.0.1:6379>inforeplication#Replicationrole:master#当前为主角色connected_slaves:0#是否拥有从角色机器master_failover_state:no-failoverm
mapyking
·
2023-12-31 20:49
redis
redis
数据库
阿里巴巴运维体系变迁史
2007年加入阿里,10年间打造了阿里目前使用最为广泛的核心中间件之一的服务框架;建设了阿里的
HBase
团队,发展到今天
HBase
已经是阿里最重要的NoSQL产品;打造阿里基于LXC的虚拟化系统,以及集群资源管理系统
Linux丶晨星
·
2023-12-31 19:43
玩转MYSQL|详细分析mysql-MGR
集群搭建
目录1、简介2、环境准备2.1数据库服务器规划2.2安装mysql5.7.202.3设置hostname和ip映射3、创建复制环境3.1服务器host68.cn3.1.1配置/etc/my.cnf3.1.2服务器host68.cn上建立复制账号:3.1.3在mysql服务器host68.cn上安装groupreplication插件3.1.4启动服务器host68.cn上mysql的groupre
Jum朱
·
2023-12-31 18:32
mysql
数据库
HBase
内存配置及JVM优化
前言本文从
HBase
的内存布局说起,先充分了解
HBase
的内存区的使用与分配,随后给出了不同业务场景下的读写内存分配规划,并指导如何分析业务的内存使用情况,以及在使用当中写内存Memstore及读内存扩展
小枫@码
·
2023-12-31 18:28
hbase
大数据
Hbase
读流程
Client-Server交互逻辑经常有业务同学咨询为什么客户端配置文件中没有配置RegionServer的地址信息,这里针对这种疑问简单的做下解释,客户端与
HBase
系统的交互阶段主要有如下几个步骤:
tracy_668
·
2023-12-31 17:35
3、RocketMQ基础-RocketMQ
集群搭建
RocketMQ
集群搭建
各角色介绍Producer:消息的发送者;举例:发信者Consumer:消息接收者;举例:收信者Broker:暂存和传输消息;举例:邮局NameServer:管理Broker;举例
站得高看得远
·
2023-12-31 16:35
Docker搭建mysql主从复制集群
Docker搭建mysql主从复制
集群搭建
步骤准备docker镜像dockersearchmysqldockerpullmysql准备映射路径#master路径准备mkdir-m777/Users/a1
whhwch1986
·
2023-12-31 16:59
数据库
docker
mysql
adb
k8s
集群搭建
【1个master_1个node】 亲测成功!
k8s
集群搭建
k8s_1个master_1个node_
集群搭建
步骤小结1:安装docker2:安装kubeadm/kubectl/kubelet3:创建master节点的集群(并安装网络插件calico
优雅のbug
·
2023-12-31 15:45
kubernetes
容器
云原生
HBase
例行灾备方案:快照备份与还原演练
该方案是为某用户定制的
HBase
灾备方案,方案本身具有很好的适用性,可以复用于常规H
Laurence
·
2023-12-31 12:28
大数据专题
hbase
灾备
快照
备份
还原
演练
方案
Kafka集群详解
Kafka介绍Kafka集群介绍Kafka集群特点Kafka
集群搭建
在这里插入图片描述Kafka集群如何进行故障切换Kafka集群Leader的选举Kafka集群如何快速横向拓展Kafka
集群搭建
最佳实践
有梦想的攻城狮
·
2023-12-31 10:00
架构设计
kafka
kafka集群
上一页
10
11
12
13
14
15
16
17
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他