E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
HBase集群搭建
GreenPlum的那些事《一》——GreenPlum数据库介绍
列式数据库是按照列存储的,列存储是把多行数据的每一列按照列存储在磁盘,就像一把数据写入excel表格中,每次按照列读取数据,像Vertica,GreenPlum,
HBase
(
数据社
·
2024-01-11 22:22
Hadoop高可靠
集群搭建
步骤(手把手教学)【超级详细】
Hadoop高可靠
集群搭建
步骤(手把手教学)【超级详细】文章目录1HA集群基础配置1.1创建系统为Centos7(Linux)的虚拟机1.2基本网络配置1.3连接FinalShell2NTP时间同步和免密登录
小伍_Five
·
2024-01-11 11:50
hadoop
大数据
分布式
Hbase
读写原理
Hbase
的逻辑结构image.png
Hbase
物理存储结构image.png不同列族分别存在不同的文件夹里。
黑色叉腰魔头
·
2024-01-11 09:55
elasticsearch数据迁移之logstash
系列文章目录第一章es
集群搭建
第二章es集群基本操作命令第三章es基于search-guard插件实现加密认证第四章es常用插件第五章es数据迁移之elasticdump文章目录系列文章目录前言一、logstash
迷茫运维路
·
2024-01-11 08:59
elasticsearch
elasticsearch
运维
linux
DataX 学习笔记
一.DataX简介1.1DataX概述DataX是阿里巴巴开源的一个异构数据源离线同步工具,致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、
HBase
、FTP等各种异构数据源之间稳定高效的数据同步功能
十二同学啊
·
2024-01-11 08:39
数据离线同步框架
数据库
big
data
database
记一次在K8s
集群搭建
的MySQL主从无法正常启动之数据迁移恢复实践
本章目录:记一次在K8s
集群搭建
的MySQL主从无法正常启动之数据迁移恢复实践描述:在K8s集群中里利用bitnami提供的mysql:5.7.32-debian-10-r61镜像并利用helm进行MySQL
全栈工程师修炼指南
·
2024-01-11 06:35
云原生落地实用指南
数据库
mysql
linux
java
kubernetes
Kafka之
集群搭建
1.为什么要使用kafka集群单机服务下,Kafka已经具备了非常高的性能。TPS能够达到百万级别。但是,在实际工作中使用时,单机搭建的Kafka会有很大的局限性。消息太多,需要分开保存。Kafka是面向海量消息设计的,一个Topic下的消息会非常多,单机服务很难存得下来。这些消息就需要分成不同的Partition,分布到多个不同的Broker上。这样每个Broker就只需要保存一部分数据。这些分
瑜伽娃娃
·
2024-01-11 03:22
Kafka
kafka
分布式
黑马头条(APP端)
端用户自媒体端管理平台端涉及技术栈:SpringBoot+SpringCloud+nacos+swagger+freemarker+OSS+ElasticSearch+Redis+Kafka+KafkaStream+xxl-job+
Hbase
一码一上午
·
2024-01-10 23:41
项目
spring
cloud
spring
boot
HBase
开发篇 _ 一文说清
HBase
Connection的使用
目录导读[toc]1.引言对于很多初次接触
HBase
的伙伴,在使用其客户端API来构建Connection连接对象的时候,有可能会陷入以下几个误区。
大猿小猿向前冲
·
2024-01-10 23:47
Phoenix基本使用
1、Phoenix简介1.1Phoenix定义Phoenix是
HBase
的开源SQL皮肤。可以使用标准JDBCAPI代替
HBase
客户端API来创建表,插入数据和查询
HBase
数据。
有语忆语
·
2024-01-10 22:30
大数据之Hive
Phoenix
Redis-Cluster 与 Redis 集群的技术大比拼
集群的技术大比拼前言概念与原理对比Redis-Cluster:基于哈希槽的分布式解决方案传统Redis集群:主从架构下的数据分片方式搭建与配置的异同Redis-Cluster搭建:哈希槽分配、节点配置等步骤传统Redis
集群搭建
一只牛博
·
2024-01-10 21:43
#
redis
redis
数据库
缓存
Hbase
高可用
集群搭建
集群资源与角色规划node1node2node3node4node5zookeeperzookeeperzookeepernn1nn2datanodedatanodedatanodedatanodedatanodejournaljournaljournalrm1rm2nodemanagernodemanagernodemanagernodemanagernodemanagerHMasterHMas
NikolasNull
·
2024-01-10 19:03
ctcd虚拟主机
集群搭建
etcd
集群搭建
上篇文章给博友介绍了etcd及基本命令链接地址:http://t.csdnimg.cn/lMWtR本期介绍etcd
集群搭建
文章目录etcd
集群搭建
集群搭建
:构建集群的三种方式:静态发现:
冷亿!
·
2024-01-10 17:54
开发语言
etcd
etcd集群
Jbd4:
Hbase
Jbd4:
Hbase
教程地址0.背景0.1Hadoop的局限性0.2
HBase
VS传统数据库0.2.1数据类型0.2.2数据库类型0.2.3数据库区别1.概述1.1
HBase
简介1.2
HBase
访问接口
JxWang05
·
2024-01-10 14:05
Juicy_Big_Data
hbase
etcd
集群搭建
安装服务(参考上一篇Etcd安装以及操作)编辑etcd.conf文件,添加集群信息注意修改对应的ip参考etcd.conf,etcd_01.conf,etcd_02.conf修改/etc/etcd/etcd.conf文件后,要先删除/var/lib/etcd目录下保存的数据,再重新启用服务,不然失败cd/var/lib/etcd&&rm-rf*为节点etcd01创建一个etcd服务/etc/sys
鸣名旧
·
2024-01-10 12:20
服务器
linux
运维
kafka KRaft
集群搭建
kafkaKRaft集群安装包下载https://downloads.apache.org/kafka/3.6.1/kafka_2.13-3.6.1.tgzkafka集群构建好后的数据目录结构[root@localhostdata]#tree/data/kafka/data/kafka├──kafka-1#节点1源码目录├──kafka-2#节点2源码目录├──kafka-3#节点3源码目录└──
liao__ran
·
2024-01-10 11:07
运维
kafka
分布式
redis详解
常见三类存储系统RDBMS:关系型数据库系统Oracle、DB2、PostgreSQL、MySQL、SQLServer...NoSQL:非关系型数据库,又包含四种流派键值存储Memcache、Redis列式存储
Hbase
蒜泥不辣
·
2024-01-10 11:18
redis
数据库
缓存
K8S
集群搭建
及控制面板安装
环境准备三台虚拟机主机名配置IP地址master4G4C192.168.0.200node12G4C192.168.0.201node22G4C192.168.0.202注:没特意说明在那个节点执行意思就是全部都要停止防火墙systemctldisablefirewalldsystemctlstopfirewalld禁用SELinux#永久关闭sed-i's/enforcing/disabled/
Rune Mage
·
2024-01-10 10:53
环境安装搭建
kubernetes
linux
docker
Zookeeper系列(一)
集群搭建
(非容器)
系列文章Zookeeper系列(一)
集群搭建
(非容器)目录前言下载搭建Data目录Conf目录集群复制和修改启动配置示例测试总结前言Zookeeper是一个开源的分布式协调服务,其设计目标是将那些复杂的且容易出错的分布式一致性服务封装起来
丶醉卧
·
2024-01-10 09:48
Zookeeper
Zookeeper
Zookeeper集群
Zookeeper集群搭建
kubernetes
集群搭建
ES
---apiVersion:v1kind:Servicemetadata:name:elasticsearchnamespace:${K8S_NAMESPACE}labels:k8s-app:elasticsearchkubernetes.io/cluster-service:"true"addonmanager.kubernetes.io/mode:Reconcilekubernetes.io/
序冢--磊
·
2024-01-10 09:00
elasticsearch
jenkins
大数据
HBase
写性能优化
本文转载自:http://
hbase
fly.com/2016/12/10/
hbase
-parctice-write/上一篇文章主要介绍了
HBase
读性能优化的基本套路,本篇文章来说道说道如何诊断
HBase
博弈史密斯
·
2024-01-10 07:45
HBase
学习之负载均衡(balance)
对于
HBase
来讲,不同节点(RegionServer)用户请求需要负载均衡技术,其实在
HBase
很早的版本中已经实现了负载均衡,0.92版本后
HBase
的负载均衡算法
浩先生_FOREVER
·
2024-01-10 06:54
Hbase
负载均衡
hbase
计算机
分布式
Hbase
安装步骤
相信大家都很头疼安装
hbase
环境吧,开始我也一样,搞了一天才安装成功,为了让第一次安装的朋友少走些弯路,我决定把自己当时总结的文档分析给大家,希望可以帮助到需要的人。
Daner13921
·
2024-01-10 06:46
hbase
hadoop
apache
自定义
HBase
负载均衡器MyCustomBalancer实现步骤与代码解析
目录1.
HBase
默认负载均衡策略1.1负载均衡总体流程1.2不能触发负载均衡的情况1.3负载均衡算法2.自定义的
HBase
负载均衡器的步骤3.MyCustomBalancer的代码细节3.1balanceCluster
数据与后端架构提升之路
·
2024-01-10 06:14
#
Hbase
hbase
负载均衡
Java大数据学习~Hadoop初识三Yarn模式
Hbase
做自己的,Spark也是做自己的,等等。这样的话就会造成资源的浪费,不能充分的把资源给利用
胖琪的升级之路
·
2024-01-10 05:55
ShardingSphere-JDBC初探
切换产品指的是换成es、clickhouse、
hbase
这种支持大数据,试想一下切换产品对整个项目的改动有多恐怖注意:分库分表并不是为了提升性能!!!
有梦想的年轻人6174
·
2024-01-10 03:25
java
分布式
深入理解
HBASE
(3.4)RegionServer-Memstore
简介Region内每个ColumnFamily的数据组成一个Store。每个Store内包括一个MemStore和若干个StoreFile(HFile)组成。Memstore类重要成员变量volatileKeyValueSkipListSetkvset;*//内存中存放更新的KV的数据结构*volatileKeyValueSkipListSetsnapshot;*//Flush操作时的KV暂存区域
宋大壮
·
2024-01-10 01:53
Hadoop
集群搭建
:4.修改Hadoop的配置文件、节点启动
配置文件的路径:/module/hadoop-2.7.2/etc/hadoop1.核心配置文件配置core-site.xml,命令:vicore-site.xml在该文件的中config范围内编写如下配置fs.defaultFShdfs://node1:9000hadoop.tmp.dir/module/hadoop-2.7.2/data/tmpcore-site.xml2.HDFS配置文件配置h
丶珍视当下
·
2024-01-09 23:38
大数据技术原理与应用笔记
参考:课程教学(林子雨老师)程序羊大数据学习路线HDFS入门
Hbase
入门NoSql入门文章目录一、大数据概述1.1大数据时代1.2大数据的概念和影响1.3大数据的应用1.4大数据的关键技术1.5大数据
Moliay
·
2024-01-09 22:16
大数据
大数据
云计算
人工智能
python使用phoenixdb操作
hbase
接前一篇:使用phoenix查询
hbase
今天看看怎样在python中使用phoenixdb来操作
hbase
安装phoenixdb库pipinstallphoenixdb例子首先启动queryserver
kongxx
·
2024-01-09 15:13
java 全栈高级工程师,架构师学习资源 交流
redis集群zookeeper
集群搭建
与调优dubbo/dubbox分布式服务jvm调优,内存分析java并发dockerlinuxjmeter性能测试netty/minamycathadoop管理级别技能
昵称不能为null
·
2024-01-09 15:03
6.1.CentOS7下安装Sqoop安装与使用
(持续更新中…)推荐系统基础一、Sqoop介绍二、Sqoop原理三、Sqoop安装事前准备安装包解压安装四、Sqoop使用1、MySQL->HDFS2、创建job3、导入数据到Hive中4、导入数据到
HBase
IT瘾君
·
2024-01-09 15:29
推荐系统-大数据
sqoop
mysql
hadoop
【2019-07-10】
Hbase
性能调优
1.修改regionserver参数的参数:
hbase
.regionserver.hfile.durable.syncfalse
hbase
.regionserver.wal.durable.syncfalse
hbase
.regionserver.handler.count600
hbase
.regionserver.metahandler.count3002
学师大术
·
2024-01-09 14:00
Hive 基础知识
1.Hive和
HBase
的区别
HBase
是一个用来处理HDFS上文件的NoSQL数据库,建立于HDFS之上。
辰阳星宇
·
2024-01-09 13:22
#
Hive
hive
hadoop
big
data
Spark与
HBase
的集成与数据访问
ApacheSpark和Apache
HBase
分别是大数据处理和分布式NoSQL数据库领域的两个重要工具。
晓之以理的喵~~
·
2024-01-09 11:24
Spark
spark
hbase
大数据
【
HBase
】——整合Phoenix
1概述 Phoenix是
HBase
的开源SQL皮肤。可以使用标准JDBCAPI代替
HBase
客户端API来创建表,插入数据和查询
HBase
数据。
那时的样子_
·
2024-01-09 09:36
hbase
数据库
大数据
hadoop分布式
集群搭建
虚拟机准备虚拟机单机配置:内存4G,硬盘50G安装好linux/boot200M/swap2g/剩余*安装VMTools关闭防火墙sudoserviceiptablesstopsudochkconfigiptablesoff设置静态IP,改主机名编辑vim/etc/sysconfig/network-scripts/ifcfg-eth0改成=============================
麦田里的稻草人19994
·
2024-01-09 08:24
linux
hadoop
Flink SQL1.12 读取Mysql,写到Kafka、
Hbase
FlinkSQL1.12读取Mysql,写到Kafka、
Hbase
概览心路历程案例流程pom文件如下测试代码docker安装kafka、
hbase
、mysql等hosts概览使用flinksql1.12
王糍粑的小夕
·
2024-01-09 07:10
flink
hbase
kafka
mysql
hadoop
集群搭建
、spark
集群搭建
、pyspark搭建(linux+window)
1、前言本文记录学习过程中Hadoop、zookeeper、spark
集群搭建
,主要为pyspark库服务(具体为window上pyspark环境和pyspark库,linux上spark框架、pyspark
Lfx_come on
·
2024-01-09 06:02
hadoop
linux
spark
python
Android-性能优化
先定义有value和type两个参数的注解文件,在Application的attac
hBase
Context方法,在第一个Activity获取焦点,即onWindowFocusChanged方法加注解,
龙腾腾
·
2024-01-09 01:05
android
性能优化
Elasticsearch
集群搭建
、优化及实践
文章目录一、Elasticsearch集群1、Elasticsearch集群概念2、Elasticsearch集群安装3、安装Kibana4、测试集群状态二、Elasticsearch优化1、磁盘选择2、分片策略3、内存设置三、Elasticsearch实践1、ES自动补全2、创建索引3、安装logstash导入数据4、项目搭建5、自动补全功能6、高亮搜索关键字功能7、页面展示总结:一、Elast
帅得真的是无敌了
·
2024-01-08 23:28
分布式
Linux部署安装
elasticsearch
搜索引擎
大数据
ES优化方案
ES优化&联合
HBASE
:【Elasticsearch】优秀实践-ES+
Hbase
的实现_少加点香菜的博客-CSDN博客_sc+es+
hbase
ES写入性能优化方案ElasticSearch调优笔记_index.refresh_interval
m0_46598535
·
2024-01-08 23:56
es
elasticsearch
大数据
item2使用expect 自动ssh登录并且使用rzsz下载问题记录
/bin/s
hbase
path=$(cd`dirname$0`;pwd)exportLC_CTYPE=zh_CNexportLANG=zh_CN.UTF-8#expect脚本所在位置filepath=$
W_GJ
·
2024-01-08 23:39
item2
ssh
运维
大数据开发学习笔记——
hbase
的rowkey设计
写在最前面:今日都是纯文字的笔记,希望朋友们能耐心看rowkey长度原则rowkey是一个二进制码流,可以是任意字符串,最大长度64kb,实际应用中一般为10-100bytes,以byte[]形式保存,一般设计成定长。建议越短越好,不要超过16个字节,原因如下:目前操作系统都是64位系统,内存8字节对齐,控制在16个字节,8字节的整数倍利用了操作系统的最佳特性。rowkey散列原则如果rowkey
卿卿老祖
·
2024-01-08 21:38
开发笔记 – Spring Boot集成
HBase
各种数据加起来超过40G了,使用Mysql数据库存储服务器吃不消,于是考虑使用
HBase
存储大部分数据。
IT东
·
2024-01-08 19:38
JAVA
WEB
SERVICE
后端开发
一、二进制方式 安装部署K8S
目录一、操作系统初始化1、关闭防火墙2、关闭SELinu3、关闭swap4、添加hosts5、同步系统时间二、
集群搭建
——使用外部Etcd集群1、自签证书2、自签EtcdSSL证书①创建CA配置文件:ca-config.json②
繁华依在
·
2024-01-08 18:28
k8s
kubernetes
容器
云原生
java技术专家【分布式框架】Mycat2应用与实战教程(四)
因此,接下来我们来完成Mysql双主双从的
集群搭建
,双主双从的原理很简单,相当于有两个一主一从,然后两个主节点再互为主从,互相复制数据,然后借助MyCat的机制,先把一台主作为写库,另
不走小道
·
2024-01-08 16:15
Java技术专家
java
分布式
开发语言
StarRocks
集群搭建
StarRocks
集群搭建
一、StarRocks简介StarRocks是新一代极速全场景MPP(MassivelyParallelProcessing)数据库。
awsless
·
2024-01-08 14:41
数据库
大数据
数据分析
【技术分享】
Hbase
列式存储入门
HBase
是一种分布式、可扩展、支持海量数据存储的NoSQL数据库。
yestolife123
·
2024-01-08 08:44
笔记
Hadoop、Pig、Hive、Storm、NOSQL 学习资源收集【Updating】 (转)
目录[-](一)hadoop相关安装部署(二)hive(三)pig(四)hadoop原理与编码(五)数据仓库与挖掘(六)Oozie工作流(七)
HBase
(八)flume(九)sqoop(十)ZooKeeper
我爱大海V5
·
2024-01-08 08:15
Hadoop
hadoop
上一页
8
9
10
11
12
13
14
15
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他