E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
HBase集群搭建
Redis
集群搭建
一、修改配置文件bind127.0.0.1注释protected-mode设置成nodaemonize改为yes表明需要在后台运行requirepass123456设置密码123456timeout0以上配置可单机运行masterauth123456redis-主节点设置密码丛节点要设置访问密码,否则会出现不同步appendonlyno持久化-本次部署未开启cluster-enabledyes开启
SDJN_ONE
·
2023-12-18 11:07
redis
数据库
缓存
HBase
1.2.0源码分析:Compact
Compact是指
HBase
表中HRegion上某个ColumnFamily下,部分或全部HFiles的合并。
Alex90
·
2023-12-18 09:39
hbase
环境安装java坏境centos安装javahadoop环境hadoop安装
hbase
配置vi/etc/profile.d/hadoop-eco.sh写入:
HBASE
_HOME=/opt/
hbase
PATH
心里没有一点AC数
·
2023-12-18 05:31
hbase
hadoop
big
data
Datax学习整理
一、简介DataX是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、
HBase
、TableStore(
耗子背刀PK猫
·
2023-12-18 02:53
学习
HBase
基础知识
HBase
是基于HDFS的NOSql数据库,它的数据逻辑存储在Region里,实际物理都存储于hdfs里。
陈超Terry的技术屋
·
2023-12-17 23:18
RabbitMQ学习笔记(原理、多方式安装和配置修改、整合Springboot、死信队列、延迟队列、备份交换机、动态监听、
集群搭建
)
前言文章内容有点多,可以根据需要进行跳转,一文看懂rabbitmq最近公司用到rabbitmq做消息转发服务,将学到的一些内容记录在这,内容会有些繁杂有些内容也不全面,后面根据实际使用会进行一定的补充,文章引用了不少网上的内容这里就不一一列举感谢大佬们的知识分享,由于刚刚开始学习消息队列,错误之处感谢指正。2022-6-24更新非root用户安装方式和systemctl配置文章目录1.概念2.AM
小刘爱搬砖
·
2023-12-17 22:20
SpringBoot
rabbitmq
学习
分布式
HBase
使用JDK21
HBase
使用JDK21启动zookeeper和hadoop创建软件目录mkdir-p/opt/softcd/opt/soft下载软件wgethttps://dlcdn.apache.org/
hbase
李昊哲小课
·
2023-12-17 21:40
数据库
大数据
云计算
hbase
数据库
大数据
java
数据分析
真•Redis
集群搭建
之哨兵模式(详细)
概述:主从切换技术的方法是︰当主服务后,需要手动把一台从服务器切换为主服务器,这就需要人工干预,费事费力,还会造成一段时间内服务不可用。这不是一种推荐的方式,更多时候,我们优先考虑哨兵模式,Redis从2.8开始正式提供了Sentinel(哨兵)架构来解决这个问题。哨兵模式是一种特殊的模式,首先Redis提供了哨兵的命令,哨兵是一个独立的进程,作为进程,它会独立运行。其原理是哨兵通过发送命令,等待
Ken_1115
·
2023-12-17 21:10
redis
linux
redis
linux
Spark课程大纲
Spark环境搭建CentosSpark单机版伪分布式模式Spark单机版intelij开发(maven)Spark完全分布式
集群搭建
Sparkhistoryserver配置使用二种方法实现Spark计算
小猪Harry
·
2023-12-17 19:11
大数据存储技术(3)——
HBase
分布式数据库
目录一、
HBase
简介(一)概念(二)特点(三)
HBase
架构二、
HBase
原理(一)读流程(二)写流程(三)数据flush过程(四)数据合并过程三、
HBase
安装与配置(一)解压并安装
HBase
(二)
Francek Chen
·
2023-12-17 17:44
Spark编程基础
大数据技术基础
分布式
hbase
数据库
大数据
分布式数据库
HBase
文章目录前言一、
HBase
概述1.1.1什么是
HBase
HBase
是一个分布式的、面向列的开源数据库
HBase
是GoogleBigTable的开源实现
HBase
不同于一般的关系数据库,适合非结构化数据存储
僖僖cc
·
2023-12-17 17:41
分布式
数据库
hbase
从传统型数据库到非关系型数据库
讲
HBase
之前,我们先从关系数据库
僖僖cc
·
2023-12-17 17:38
数据库
nosql
如何使用ycsb工具对mongodb进行性能测试过程
测试环境:linux系统:Centos7.2,版本:RedHat4.8.5-44)YCSB简介ycsb是一款性能测试工具,用Java写的,并且什么都可以压,像是mongodb,redis,mysql,
hbase
情勤坊
·
2023-12-17 08:12
mongodb
数据库
Centos7安装Nginx+Keepalived高可用
集群搭建
一、准备工作1、两台Centos7服务器虚拟机即可,分别为:192.168.32.131192.168.32.1292、下载Nginx压缩包并解压安装下载地址选择版本下载压缩包:https://nginx.org/download/wget命令下载:wgethttps://nginx.org/download/nginx-1.22.1.tar.gz安装后解压压缩包并进入解压目录tar-xvfngi
18岁程序员想打职业
·
2023-12-17 07:01
运维相关
nginx
运维
YOLO V8智能城市国外探测方法--译【杂文】
link.springer.comAnimprovedfiredetectionapproac
hbase
donYOLO-v8forsmartcitiesFatmaMTalaat,HanaaZainEldinNeuralComputingandApplications35
小楼先森
·
2023-12-17 05:01
目标检测
ubuntu下
hbase
的搭建和依赖环境搭建以及相关操作
ubuntu从0安装
HBase
和
HBase
所依赖的环境的安装配置简单说三步走java环境的安装和配置hadoop安装和配置
hbase
安装和配置我的搭建环境ubuntu:18软件源阿里云java:openjdkversion
不走小道
·
2023-12-17 05:53
笔记
大数据开发
使用Docker快速搭建一套三主三从Redis集群用于开发、测试
文章目录一基本概念二部署流程2.1准备配置文件2.2启动6个Docker容器2.3
集群搭建
三总结四参考资料一基本概念Redis集群是一种通过将多个Redis节点连接在一起以实现高可用性、数据分片和负载均衡的技术
晨曦蜗牛
·
2023-12-17 03:12
运维之路
docker
redis
容器
数据库
Flink 本地单机/Standalone集群/YARN模式
集群搭建
准备工作本文简述Flink在Linux中安装步骤,和示例程序的运行。需要安装JDK1.8及以上版本。下载地址:下载Flink的二进制包点进去后,选择如下链接:解压flink-1.10.1-bin-scala_2.12.tgz,我这里解压到soft目录[root@hadoop1softpackage]#tar-zxvfflink-1.10.1-bin-scala_2.12.tgz-C../soft/
程序猿进阶
·
2023-12-16 20:26
Flink
flink
大数据
hbase
1.请简要介绍
HBase
的基本架构和组件。
HBase
是一种基于列式存储的分布式数据库,其底层存储采用的是LSM树。这种数据库是Hadoop生态下的核心技术之一。
编织幻境的妖
·
2023-12-16 20:51
hbase
数据库
大数据
Hbase
2.1
集群搭建
>
Hbase
在大数据的体系中扮演着DB角色,不得不说是重要的一员,在上一篇,大猪已经给大家演示了[Hadoop3.2
集群搭建
](https://www.jianshu.com/p/3182aaff918d
kikiki4
·
2023-12-16 19:41
Canal实时同步MySQL数据到ES
一、canal简介canal主要用途是对MySQL数据库增量日志进行解析,提供增量数据的订阅和消费,简单说就是可以对MySQL的增量数据进行实时同步,支持同步到MySQL、Elasticsearch、
HBase
IEVEl
·
2023-12-16 17:09
Elasticsearch
笔记
软件安装
mysql
elasticsearch
RabbitMQ
集群搭建
介绍RabbitMQ是一个开源的消息代理软件,实现了高级消息队列协议(AMQP,AdvancedMessageQueuingProtocol)。它充当了消息的中间件,用于在分布式系统中传递消息,提供了可靠的、异步的、跨应用程序的消息传递机制。RabbitMQ的主要特点和用途:消息队列:RabbitMQ作为消息队列(MessageQueue)的一种实现,允许应用程序之间通过消息进行通信。消息队列可以
云计算1028
·
2023-12-16 16:29
rabbitmq
HBase
理论知识
文章目录
HBase
理论知识存储结构数据类型NameSpaceRegionRowColumnTimeStampCell基础架构MasterRegionServerWAL(Write-AheadlogFile
CODE20220318
·
2023-12-16 16:23
HBase
java
hadoop
big
data
hbase
Zookeeper
集群搭建
文章目录Zookeeper
集群搭建
一.简介二.环境准备三.安装zookeeper3.1下载zookeeper3.2安装jdk解压zookeeper四.配置集群4.1配置zookeeper服务器文件4.2
Direct_
·
2023-12-16 14:37
zookeeper
zookeeper
linux
zookeeper部署
头歌——
HBase
开发:使用Java操作
HBase
第1关:创建表题目任务描述本关任务:使用Java代码在
HBase
中创建表。相关知识为了完成本关任务,你需要掌握:1.如何使用Java连接
HBase
数据库,2.如何使用Java代码在
HBase
中创建表。
Changersh
·
2023-12-16 13:20
容器与集群
hbase
java
python
Creating PDF Files in Java
1.IntroductionInthisquicktutorial,we’llfocusoncreatingPDFdocumentsfromscratc
hbase
dontheiTextandPdfBoxlibraries
lang20150928
·
2023-12-16 12:28
pdf
pdf
java
python
Hbase
- 迁移数据[导出,导入]
有没有这样一样情况,把一个集群中的某个表导到另一个群集中,或者
hbase
的表结构发生了更改,但是数据还要,比如预分区没做,导致某台RegionServer很吃紧,
Hbase
的导出导出都可以很快的完成这些操作
kikiki2
·
2023-12-16 11:51
nacos linux
集群搭建
1.2.1
第一步下载nacoshttps://github.com/alibaba/nacos/releases手动下载再传到服务器,或者linux直接wget都可以解压修改application.properties内容如下server.contextPath=/nacosserver.servlet.contextPath=/nacosserver.port=8484db.num=1db.url.0=j
昵称违规
·
2023-12-16 11:13
ElasticSearch与
HBase
的分布式存储设计
本文内容覆盖如今两大非结构化数据库之间的区别详情介绍从各个角度详细对比1.官方定位
HBase
是Hadoop数据库,是一个分布式、可扩展的大数据存储。
不学会Ⅳ
·
2023-12-16 09:32
分布式
elasticsearch
hbase
HBase
的安装与简单操作
文章目录第1关:
Hbase
数据库的安装第2关:创建表第3关:添加数据、删除数据、删除表第1关:
Hbase
数据库的安装编程要求根据上述步骤安装配置好
HBase
数据库,并启动成功。
柔雾
·
2023-12-16 09:56
hbase
debian
数据库
Hbase
BulkLoad用法
要导入大量数据,
Hbase
的BulkLoad是必不可少的,在导入历史数据的时候,我们一般会选择使用BulkLoad方式,我们还可以借助Spark的计算能力将数据快速地导入。
kikiki1
·
2023-12-16 07:59
初识大数据应用,一文掌握大数据知识文集(1)
05、Hive跟
Hbase
的区别?06、请列出正常工作的hadoop集群中hadoop都需要启动哪些进程,他们的作用分别是什么?07、KafkaUtils.cr
普修罗双战士
·
2023-12-16 06:22
大数据专栏
大数据
数据分析
数据仓库
数据挖掘
database
数据库开发
阿里云
Docker-compose部署zookeeper+storm集群【保成,秒回】
docker-hub官网教程dockerstorm官网docker-compose安装请参考【Docker安装部署Zookeeper+Kafka集群详细教程、部署过程中遇到问题&解决方案】zookeeper
集群搭建
请参考
小小小秃头
·
2023-12-16 05:24
docker
zookeeper
storm
数据结构 | Log-Structured Merge Tree (LSM Tree)
LSMTree最先在1996年被提出,后来被广泛运用于现代NoSQL(非关系型数据库)系统中,包括BigTable,Dynamo,
HBase
,Cassandra,LevelDB,RocksDB,andAsterixDB.LSMTree
赵同学的代码时间
·
2023-12-16 05:50
数据结构
lsm-tree
Storm+Kafka+Redis+zookeeper docker集群实战问题与解决
目录引言问题与解决引言下面的错误主要是在完成大数据展屏时遇到的一些报错,从最开始的storm构建rowkey,
hbase
实现统计到storm直接统计redis存结果,第一种方式是参考的一本storm实战书籍
小小小秃头
·
2023-12-16 05:18
storm
kafka
zookeeper
Nacos配置管理-nacos
集群搭建
二、计划实现--计划架构--3个Nacos节点;3个mysql库;--计划节点地址--三、
集群搭建
3.1基本步骤(1)搭建数据库,初始化数据库表结构(2)下载nacos安装包(3)配置nacos(4)启动
Crhy、Y
·
2023-12-16 04:50
java
开发语言
intellij-idea
spring
cloud
nginx
dubbo
Hbase
- 自定义Rowkey规则
>在Flink中我们有时候需要分析数据1点到2点的范围,可是经过Region又比较慢,这时候我们就可以定制`TableInputFormat`来实现我们的需求了,我们还可以采用Flink的`DataSet`的方式读取,另外下面还有`Spark`读取的例子。##使用教程Md5Util.java```importorg.apache.commons.codec.binary.Hex;importjav
kikiki5
·
2023-12-16 04:13
Redis-分片集群大纲
1.Redis集群方案比较哨兵分片2.Redis分片
集群搭建
3.Java操作redis分片集群jedislettuce4.Redis集群原理分析槽位定位算法HASH_SLOT=CRC16(key)mod16384
JackHuan_code
·
2023-12-16 04:23
redis
redis
数据库
缓存
Hbase
- 迁移数据[导出,导入]
>有没有这样一样情况,把一个集群中的某个表导到另一个群集中,或者
hbase
的表结构发生了更改,但是数据还要,比如预分区没做,导致某台RegionServer很吃紧,
Hbase
的导出导出都可以很快的完成这些操作
kikiki5
·
2023-12-15 22:51
利用 docker 掌握 kafka 总集篇
文章目录第一节Kafka集群承前Kafka
集群搭建
**概述****操作流程**Kafka集群快速搭建安装Docker**zookeeper**集群**新建docker网络****yml脚本****验证*
lluxury
·
2023-12-15 21:59
kafka
cluster
Spark 随机森林算法原理、源码分析及案例实战
大家可以根据自己的喜好使用自己擅长的Linux发行版Java与Scala版本:Scala2.10.4,Java1.7Spark集群环境(3台):Hadoop2.4.1+Spark1.4.0,Spark
集群搭建
方式参见本人博客
黑谷子
·
2023-12-15 19:51
spark
scala
源码
ElasticSearch高可用
集群搭建
1.环境准备本文已三个节点(服务器)为例,准备三台服务器2.搭建过程1).三台服务器分别搭建es(ES8+JDK17)上传安装包和解压tar-zxvfelasticsearch-8.4.1-linux-x86_64.tar.gz新建一个用户,安全考虑,elasticsearch默认不允许以root账号运行创建用户:useraddes_user设置密码:passwdes_user修改目录权限#chm
01宇宙
·
2023-12-15 19:20
elasticsearch
大数据
搜索引擎
全文检索
K8s 入门指南(一):单节点集群环境搭建
系统配置CentOS7.9(2核2G)本文为k8s入门指南专栏,将会使用kubeadm搭建单节点k8s集群,详细讲解环境搭建部署的细节,专栏后面章节会以实战代码介绍相关概念,带您快速入门k8s搭建方式k8s
集群搭建
有三种方式
ReturnTmp
·
2023-12-15 17:48
k8s
k8s
kubernetes
容器
容器编排
集群搭建
大数据基础知识
为了一场紧急考试,没有正经系统学习过大数据知识的我开始恶补概念涉及Hadoop、
Hbase
、Spark、Flink、Flume、Kafka、Sqoop、HDFS、Hive、Mapreduce、Impala
偶余杭
·
2023-12-15 17:22
HBase
高可用集群详细图文安装部署
目录一、
HBase
安装部署1.1Zookeeper正常部署1.2Hadoop正常部署1.3
HBase
安装1.4
HBase
的配置文件1.4.1
hbase
-env.sh1.4.2
hbase
-site.xml1.4.3regionservers1.4.4
Stars.Sky
·
2023-12-15 17:38
HBase
hbase
数据库
大数据
HBase
1.请简要介绍
HBase
的基本架构和组件。
编织幻境的妖
·
2023-12-15 17:35
hbase
数据库
大数据
HBase
详细图文介绍
目录一、
HBase
定义二、
HBase
数据模型2.1
HBase
逻辑结构2.2
HBase
物理存储结构2.3数据模型2.3.1NameSpace2.3.2Table2.3.3Row2.3.4Column2.3.5TimeStamp2.3.6Cell
Stars.Sky
·
2023-12-15 16:24
HBase
hbase
数据库
大数据
Hbase
的Rowkey设计
Hbase
的Rowkey设计rowkey设计#1)长度原则#最大64KB,推荐长度10~100byte#最好设为8的倍数,能短则短,rowkey如果太长会影响性能。
坤坤不爱吃鱼
·
2023-12-15 16:54
大数据
hbase
java
大数据
Hbase
2.5.5分布式部署安装记录
文章目录1环境准备1.1节点部署情况1.2安装说明2
Hbase
安装过程Step1:Step2:Step3:Step4:3WebUI检查状态并测试3.1WebUI3.2创建测试命名空间1环境准备1.1节点部署情况
程序终结者
·
2023-12-15 16:23
Hadoop生态
分布式
万字详解RocketMq
集群搭建
步骤
1.配置三台主机的IP与主机名的映射三台机器都使用vim/etc/hosts将上边的ip与主机名称放到hosts文件里边。cat/etc/hosts可以显示hosts文件里边的内容192.168.150.139mq1192.168.150.137mq2192.168.150.138mq32.安装JDK1.8和RocketMQ在三台机器/usr/local/目录下mkdir/jdk创建放置压缩包的目
努力的布布
·
2023-12-15 15:25
rocketmq
上一页
15
16
17
18
19
20
21
22
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他