E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
~HBase
Hadoop安装配置
HBase
1、文件准备http://archive.apache.org/dist/
hbase
/1.3.1/下载
hbase
-1.3.1-bin.tar.gz并上传到虚拟机/root目录下。
m0_69595107
·
2024-01-24 06:10
Hadoop
hadoop
hbase
大数据
分布式
centos
Hadoop中
HBase
命令行操作
HBase
提供了Shell命令行,功能类似于Oracle、MySQL等关系库的SQLPlus窗口那样,用户可以通过命令行模式进行创建表、新增和更新数据,以及删除表的操作。采用的底层存储为HDFS。
m0_69595107
·
2024-01-24 06:05
Hadoop
hadoop
hbase
大数据
centos
大数据基础设施搭建 -
Hbase
文章目录一、解压压缩包二、配置环境变量三、修改配置文件3.1修改
hbase
-env.sh3.2修改
hbase
-site.xml3.3修改regionservers四、解决
HBase
和Hadoop的log4j
m0_46218511
·
2024-01-24 06:04
大数据
hbase
数据库
10.Flink实时项目之订单维度表关联
1.维度查询在上一篇中,我们已经把订单和订单明细表join完,本文将关联订单的其他维度数据,维度关联实际上就是在流中查询存储在
hbase
中的数据表。
选手一号位
·
2024-01-24 04:46
【大数据精讲】
HBase
基本概念与读写流程
目录基本概念概念数据模型NameSpace命名空间TableRowColumnTimeStampCell逻辑结构json物理存储结构基础架构Meta表架构RegionServer架构⭐️写流程⭐️读流程基本概念Apache
HBase
–Apache
HBase
话数Science
·
2024-01-23 20:15
大数据
面试
大数据
面试
app国际化切换语言
1.在BaseApplication里面重写attac
hBase
Context
则卷滔滔
·
2024-01-23 18:32
Hadoop基本介绍
1、Hadoop的整体框架Hadoop由HDFS、MapReduce、
HBase
、Hive和ZooKeeper等成员组成,其中最基础最重要元素为底层用于存储集群中所有存储节点文件的文件系统HDFS(HadoopDistributedFileSystem
w蕾丝
·
2024-01-23 08:53
Hbase
- 表导出CSV数据
MR考查了
Hbase
的各种MR,没有发现哪一个是能实现的,如果有请通知我,我给他发红包。所以我们只能自己来写一个MR了,编写一个
Hbase
的MR,官方文档上也有相应的例子。
大猪大猪
·
2024-01-23 05:37
【技术预研】starRocks高性价比替换
hbase
hbase
作为类列数据库,更准确说是列族数据库。本质上是一个文件查询系统,追求极限的写入和读取。
偏振万花筒
·
2024-01-23 03:00
hbase
数据库
大数据
starRocks
Hbase
1.什么是
Hbase
?
Cool_Pepsi
·
2024-01-23 02:12
大数据
hbase
Hadoop -- ZooKeeper
ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Hadoop、
Hbase
、kafka、dubbo等重要组件。
Cool_Pepsi
·
2024-01-23 02:42
大数据
zookeeper
kylin
hbase
迁移
一、背景现kylin作为数据源提供报表支撑的场景持续增多,经常出现查询慢的问题,为提高
hbase
支撑的稳定性,同时可以应对读写组合的情况,考虑一种方案即kylin的读写分离。
烂泥_119c
·
2024-01-23 01:13
Impala:基于内存的MPP查询引擎
Impala与Hive1、Impala概述1.1、Impala简介Impala是Cloudera公司主导研发的高性能、低延迟的交互式SQL查询引擎,它提供SQL语义,能查询存储在Hadoop的HDFS和
HBase
对许
·
2024-01-22 17:26
Java大数据
#
Hadoop及生态圈
#
数据湖仓
大数据
Hadooop和
Hbase
是什么关系
HBase
是一个基于Hadoop的NoSQL分布式列存储数据库,用于存储海量结构化和半结构化数据,并提供高可用、高性能和面向列的操作功能。
wwwyx12138
·
2024-01-22 17:50
hbase
数据库
大数据
Hbase
预分区参考
背景我们都知道
hbase
的数据是分布在多台RegionServer角色的机器上的,每个RegionServer都有一到多个Region管理不同rowkey范围的数据,所以建表前通过合理的Region的分区及数量
Samooyou
·
2024-01-22 17:45
Hbase
hbase
数据库
大数据
hbase
预分区
一、原理
HBase
在创建表时,默认会自动创建一个Region分区。在导入数据时,所有客户端都向这个Region写数据,直到这个Region足够大才进行切分。
小枫@码
·
2024-01-22 17:15
大数据运维
hbase
数据库
大数据
Apache doris Datax DorisWriter扩展使用方法
DataX实现了包括MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、
HBase
、TableStore(OTS)、MaxCompute(ODPS)、Hologres
张家锋
·
2024-01-22 15:27
docker搭建
hbase
全部流程(包含本地API访问)
一、使用docker下载并安装
hbase
1、搜索:dockersearch
hbase
2、下载:dockerpullharisekhon/
hbase
(一定要下载这个,下面都是围绕此展开的)3、启动容器:dockerrun-d-p2181
王大拿@
·
2024-01-22 13:12
docker
hbase
容器
Impala
Impala概述Impala是什么Impala是一款针对HDFS和
HBASE
中的PB级别数据进行交互式实时查询工具。
奋斗的蛐蛐
·
2024-01-22 10:42
大数据技术原理及应用课实验3 :熟悉常用的
HBase
操作
目录实验3熟悉常用的
HBase
操作一、实验目的二、实验平台三、实验步骤(每个步骤下均需有运行截图)(一)编程实现以下指定功能,并用Hadoop提供的
HBase
Shell命令完成相同任务:1.列出
HBase
Blossom i
·
2024-01-22 08:08
大数据编程
大数据
hbase
数据库
Hbase
基于HDFS分布式列存储Nosql数据库(五) 概念及原理介绍
Hbase
优化概念:
hbase
优化可通过以下几个方面,flush,compaction,split和列簇属性来实现Flush意义:用于将memstore中的数据写入HDFS,变成storefile文件,
章云邰
·
2024-01-22 06:13
Spark读取
Hbase
内容
不啰嗦直接看代码//初始化
Hbase
的基本配置val
hbase
Conf=
HBase
Configuration.create()
hbase
Conf.set("
hbase
.zookeeper.quorum"
小湘西
·
2024-01-21 20:11
Spark
Hbase
spark
hbase
大数据
java技术栈
#1java基础:1.1算法1.1排序算法:直接插入排序、希尔排序、冒泡排序、快速排序、直接选择排序、堆排序、归并排序、基数排序1.2二叉查找树、红黑树、B树、B+树、LSM树(分别有对应的应用,数据库、
HBase
dpjdrniu
·
2024-01-21 20:14
大数据小白初探HDFS从零到入门(一)
目录1.前言2.大数据的诞生3.发展趋势及应用4.离线计算和实时计算5.大数据的特性1.前言前两天把
Hbase
的初级入门知识整理了下,在文章中提到了“HDFS”这个大数据的基础,有同事小伙伴想要了解下这方面的知识
北京-景枫
·
2024-01-21 20:55
Hadoop
大数据
hdfs
yarn
大数据特性
Hbase
笔记
HBase
-1.
hbase
介绍Apache
HBase
™是Hadoop数据库,是一个分布式,可扩展的大数据存储。当您需要对大数据进行随机,实时读/写访问时,请使用Apache
HBase
™。
MFRain
·
2024-01-21 20:24
Hbase
与 ElasticSearch 的结合使用
最近在做用elasticSearch建立
hbase
的二级索引,通过查询elasticSearch实现对
hbase
的快速查询,从而实现海量数据的秒级快速查询。在这里记录一下自己工作的解决过程。
AnillegalName
·
2024-01-21 19:28
elasticsearch
hbase
mapreduce
[
Hbase
]
Hbase
优化之禁用wal以及Hfile应用
1、WAL:write-aheadlog预写日志灾难恢复,一旦服务器崩溃,通过重放log,即可恢复之前的数据(内存中还没有刷写到磁盘的数据);如果写入wal操作失败,整个操作就认为是失败。因此,如果开启wal机制,写操作性能会降低;如果关闭wal机制,数据在内存中未刷写到磁盘时,server突然宕机,产生数据丢失。解决办法:不开启wal机制,手工刷新memstore的数据落地//禁用WAL机制pu
LZhan
·
2024-01-21 18:54
ubuntu22.04安装atlas2.0.0
使用Atlas内嵌
Hbase
与Solr的部署方式。在ubuntu裸机上安装,裸机未安装java,hadoop等环境。jdk和maven都使用apt方式安装。
playmakerlby
·
2024-01-21 15:37
大数据
大数据
maven
HBase
集群监控
当集群出现问题时,监控系统可以帮助我们更快的定位问题和解决问题如何构建
HBase
集群监控系统?公司有自己的监控系统,我们所要做的就是将
HBase
中我们关心的
云栖精选
·
2024-01-21 14:02
数据库
HBase
节点故障的容错方案
HBase
节点故障的容错方案1.Master高可用1.1选主和HA切换逻辑2.RS高可用2.1感知RS节点异常2.2异常DN上的数据处理4.疑问和思考5.参考文档本文主要探讨
hbase
集群的高可用容错方案和容错能力的探讨
李姓门徒
·
2024-01-21 14:31
Hbase
大数据
hbase
数据库
大数据
HBase
监控方法以及核心指标
文章目录1.监控指标采集2.核心告警指标2.1Master核心指标梳理2.2RegionServer核心指标梳理3.参考文章探讨
hbase
的监控数据采集方式以及需要关注的核心指标,便于日常生产进行监控和巡检
李姓门徒
·
2024-01-21 14:28
Hbase
大数据
hbase
大数据
hbase
shell命令
写于2020年4月17日
hbase
shell进入
hbase
命令行界面existstableNametablename是否存在scan'Test',{LIMIT=>num}获取前num条记录,(貌似LIMIT
AnillegalName
·
2024-01-21 10:13
hbase
linux
数据库
HBase
鉴权设计以及Kerberos鉴权方法
文章目录1.
HBase
鉴权方式整理2.Kerboers鉴权架构整理2.1kerberos的实现架构2.2相关核心参数整理3.客户端的鉴权设计3.1安全管控权限3.2安全管控级别3.3相关操作3.3.1用户授权
李姓门徒
·
2024-01-21 07:35
HDFS
大数据
hbase
数据库
大数据
Ubuntu安装
Hbase
数据库
一、下载解压安装
Hbase
自行下载
Hbase
版本(实验所用为1.1.2)
Hbase
官网:Indexof/dist/
hbase
百度云盘提取码:hoa01.解压
Hbase
,并修改其名称sudotar-zxf
hbase
殊迟
·
2024-01-21 06:51
大数据
hbase
hadoop
big
data
大数据
分布式
ElasticSearch 亿级数据检索深度优化!
一、前言数据平台已迭代三个版本,从头开始遇到很多常见的难题,终于有片段时间整理一些已完善的文档,在此分享以供所需朋友的实现参考,少走些弯路,在此篇幅中偏重于ES的优化,关于
HBase
,Hadoop的设计优化估计有很多文章可以参考
夜空_2cd3
·
2024-01-21 03:53
一文读懂大数据工具Phoenix:让你的数据管理更高效!
它是一个构建在
HBase
上的SQL层,可以使用标准的JDBCAPIs而不是
HBase
客户端APIs来创建表、插入数据和查询
HBase
中的数据。
知识分享小能手
·
2024-01-21 03:26
学习心得体会
大数据
大数据
数据库
数据分析
大数据导论(3)---大数据技术
文章目录1.大数据技术概述2.数据采集与预处理2.1数据采集2.2预处理3.数据存储和管理3.1分布式基础架构Hadoop3.2分布式文件系统HDFS3.3分布式数据库
HBase
3.4非关系型数据库NoSQL4
冒冒菜菜
·
2024-01-20 21:28
大数据导论
大数据导论
大数据技术
课程学习
Sqoop与
HBase
结合使用:实现强大的数据存储
将Sqoop与
HBase
结合使用是在大数据领域中实现强大的数据存储和分析的关键步骤之一。Sqoop用于将数据从关系型数据库导入到Hadoop生态系统中,而
HBase
则用于实时、非关系型数据存储和查询。
晓之以理的喵~~
·
2024-01-20 19:57
sqoop
sqoop
hbase
hadoop
Zookeeper简介
一、Zookeeper简介ZooKeeper是一个分布式的、开放源码的分布式应用程序协调服务,它是Google的Chubby一个开源的实现,是Hadoop和
Hbase
的重要组件。
破茧......
·
2024-01-20 16:35
Zookeeper
zookeeper
分布式
云原生
通过DBeaver连接Phoenix操作
hbase
DBeaverhttps://dbeaver.io/download配置JDK(可选)编辑DBeaver安装目录下DBeaver.ini文件,在首行添加JDK安装路径-vmD:\ProgramFiles\jdk\bin连接
HBase
1
风静花犹落
·
2024-01-20 06:26
数据库入门之3张表对比关系型与非关系型数据库
[endif]SQL与NoSQL的典型引擎和区别数据库类型SQLNoSQL举例Oracle、SqlServer、MySQL、PostgreSQL等MongoDB、Redis、
HBase
等存储结构采用结构化表来存储数据采用半结构化
舒意从生
·
2024-01-19 22:02
如何控制Dolphinscheduler同一任务不能同时执行多个
(有点类似于
hbase
码出天空
·
2024-01-19 16:31
java
spring
cloud
spark+phoenix读取
hbase
phoenix是操作
hbase
的皮肤,他可以轻松的使用sql语句来操作
hbase
,比直接用
hbase
的原语操作要友好的多。
潮落拾贝
·
2024-01-19 06:16
spark
hbase
大数据
Centos7 Ambari集群环境搭建
Ambari集群环境搭建1.1服务规划序号主机名操作系统Ip地址服务1
hbase
100.yunCentOS_7.6172.21.xx.100HTTPServer、amber-server、amber-agent2
hbase
101
香蕉牛奶蛇皮走位
·
2024-01-19 06:57
hdfs
hadoop
mapreduce
cloudera
HBase
第一章:集群搭建
系列文章目录
HBase
第一章:集群搭建文章目录系列文章目录前言一、环境准备二、上传
HBase
三、上传
HBase
四、配置参数五、分发测试六、高可用总结前言Hive的内容基本算是学完了,太深入的东西,现在没有必要死磕
超哥--
·
2024-01-19 00:57
HBase
hbase
hadoop
大数据
HBase
学习总结(1):
HBase
的下载与安装
(
HBase
是一种数据库:Hadoop数据库,它是一种NoSQL存储系统,专门设计用来快速随机读写大规模数据。本文介绍
HBase
的下载与安装的整个过程。)
蝶Wu天涯
·
2024-01-19 00:25
HBase
HBase
HBase
学习七:Compaction
HBase
根据合并规模将Compaction分为两类:MinorCompaction
Studying!!!
·
2024-01-19 00:53
中间件
hbase
学习
数据库
HBase
学习八: 核心参数配置
1、Region相关参数
hbase
.hregion.max.filesize:默认为10G,简单理解为,Region中最大的Store中所有文件大小一旦大于该值整个Region就会执行分裂。
Studying!!!
·
2024-01-19 00:53
中间件
hbase
学习
数据库
【大数据项目学习】第十章:
HBase
分布式集群部署与设计
第十章:
HBase
分布式集群部署与设计一个初学者的大数据学习过程文章目录第十章:
HBase
分布式集群部署与设计1.
HBase
安装前须知1.1必备条件1.1.1硬件1.1.2软件1.2运行模式2.
HBase
学不会K8S不改ID
·
2024-01-19 00:23
大数据项目学习
分布式
hadoop
linux
java
大数据
hbase
学习笔记-
hbase
集群安装部署
1、下载安装包http://archive.apache.org/dist/
hbase
2、规划安装目录/opt/
hbase
3、上传安装包到服务器4、解压安装包到指定的规划目录tar-zxvf
hbase
-
陈同学:
·
2024-01-19 00:22
hbase
hbase
zookeeper
上一页
2
3
4
5
6
7
8
9
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他