E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
【hbase】
Flink异步IO查询
Hbase
数据,采用旁路缓存redis
importcom.alibaba.druid.pool.DruidDataSource;importcom.alibaba.druid.pool.DruidPooledConnection;importcom.alibaba.fastjson.JSONObject;importcom.atguigu.utils.DimUtil;importcom.atguigu.utils.DruidDSUti
小总结
·
2023-11-23 07:12
redis
缓存
flink
hbase
关于Flink的旁路缓存与异步操作
保存起来,以减少和硬盘数据库的交互比如:我们使用mysql时经常查询一个表,而这个表又一般不会变化,就可以放在内存中,查找时直接对内存进行查找,而不需要再和mysql交互2.旁路缓存例子使用dim层使用的是
hbase
叫我莫言鸭
·
2023-11-23 06:29
flink
缓存
大数据
使用squirrel-sql连接phoenix的
Hbase
数据库
安装squirrel-sql下载:http://squirrel-sql.sourceforge.net/下载成功后,文件名为:squirrel-sql-3.9.0-standard.jar安装:双击jar文件或者在cmd中输入命令:java-jarC:\squirrel\squirrel-sql-3.9.0-standard.jar然后就点击下一步,下一步。。。完成安装配置配置host文件打开C
weisen
·
2023-11-23 06:43
HBase
启动成功,但不能访问Web页面
HBase
启动成功,但不能访问Web页面Hadoop,Zookeeper,
Hbase
启动成功如下
Hbase
Shell启动成功Zookeeper启动成功
Hbase
安装目录下的conf文件下的
hbase
-site.xml
坤坤不爱吃鱼
·
2023-11-23 05:33
大数据
hbase
大数据
redis原理及集群主从配置
简介存储系统背景存储系统有三类:RDBMSoracle,dh2,postgresql,mysql,sqlserverNoSQL:KVNoSQL:redis,memcached列式ColumnFamilyNoSQL:
HBase
weixin_30911809
·
2023-11-22 18:03
Hbase
2.1 集群搭建
>
Hbase
在大数据的体系中扮演着DB角色,不得不说是重要的一员,在上一篇,大猪已经给大家演示了[Hadoop3.2集群搭建](https://www.jianshu.com/p/3182aaff918d
kikiki5
·
2023-11-22 18:30
linux出现-bash: jps: command not found
在学习
HBASE
过程中,使用"sudovi/etc/profile"命令修改了profile文件,然后就出现了“-bash:jps:commandnotfound”错误。
左牙7
·
2023-11-22 13:40
学习遇坑
Flink使用指南:状态计算完全搞懂了,你就是大佬!
Flink使用指南:Kafka流表关联
HBase
维度表Flink使用指南:Watermark新版本使用Flink使用指南:FlinkSQL自定义函数目录系列文章目录前言一、Checkpoint机制如何开启
XuTengRui
·
2023-11-22 09:46
Flink
java
flink
spark
Flink使用指南:Flink SQL聚合场景下的优化方案,一定要收藏!
Flink使用指南:Kafka流表关联
HBase
维度表Flink使用指南:Waterm
XuTengRui
·
2023-11-22 09:46
Flink
flink
实时计算
大数据
Clickhouse通过jdbc连接phoenix获取
hbase
数据(clickhouse-jdbc-bridge组件基于配置)
Clickhouse通过jdbc连接phoenix获取
hbase
数据(clickhouse-jdbc-bridge组件基于配置)部署请参考Clickhouse通过jdbc连接获取Mysql/Oracle
不想做咸鱼的王富贵
·
2023-11-22 06:55
大数据
分布式
微服务
java
Doris系列之动态分区操作
系列注:大家觉得博客好的话,别忘了点赞收藏呀,本人每周都会更新关于人工智能和大数据相关的内容,内容多为原创,PythonJavaScalaSQL代码,CVNLP推荐系统等,SparkFlinkKafka
Hbase
HiveFlume
陈万君Allen
·
2023-11-22 05:32
Java和大数据
大数据
数据库
【在Windows 10下的Docker Desktop安装
Hbase
, 并使用SpringBoot进行连接】
在Windows10下的Docker安装
Hbase
,并使用SpringBoot进行连接一、安装Hbse①拉取镜像如果是Windows的DockerDeskTop版,可以打开WindowsPowerShell
喜欢干饭的小白
·
2023-11-22 04:31
hbase
windows
docker
(三)实战1:
hbase
的2.X版本java API开发说明以及demo
Hbase
的2.X版本javaAPI代码开发开发示例参考
hbase
-client使用说明开发可参考《
hbase
权威指南》文章目录
Hbase
的2.X版本javaAPI代码开发1:开发API1.1:主要API
猿来如此dj
·
2023-11-22 04:01
hbase专栏
hbase的java
API解释
HBase
实践 | 使用 Docker 快速上手
HBase
前言:本文主要讲述了如何使用Docker快速上手
HBase
,省去繁杂的安装部署环境,直接上手,小白必备。适合
HBase
入门学习及简单代码测试。
大数据技术架构
·
2023-11-22 04:00
HBase
Docker-13:Docker安装
Hbase
1.背景
HBase
是一个分布式的、面向列的开源数据库,该技术来源于FayChang所撰写的Google论文Bigtable:一个结构化数据的分布式存储系统”。
王老邪
·
2023-11-22 04:30
容器化
hbase
docker
数据库
docker搭建
hbase
单机环境
文章目录前言运行
hbase
容器访问
HBase
Shell访问
hbase
shell访问Zookeeper访问
hbase
UIJavaApi测试前言本文主要讲述了如何使用Docker快速上手
HBase
,省去繁杂的安装部署环境
it噩梦
·
2023-11-22 04:28
中间件
hbase
docker
big
data
Kerberos安全认证-连载11-
HBase
Kerberos安全配置及访问
目录1.ZookeeperKerberos配置2.
HBase
配置Kerberos3.
HBase
启动及访问验证4.
HBase
Shell操作
HBase
5.JavaAPI操作
HBase
技术连载系列,前面内容请参考前面连载
IT贫道
·
2023-11-22 04:58
Kerberos安全认证
hbase
安全
大数据
【生产级实践】Docker部署配置Hadoop3.x +
HBase
2.x实现真正分布式集群环境
网上找了很多资料,但能够实现Docker安装Hadoop3.X和
Hbase
2.X真正分布式集群的教程很零散,坑很多,把经验做了整理,避免趟坑。
麦神-mirson
·
2023-11-22 04:56
生产级实践
大数据
分布式存储
docker
分布式
运维
使用Docker部署
HBase
并使用Java-API连接
HBase
的原型是Google的BigTable论文,受到了该论文思想的启发,目前作为Hadoop的子项目来开发维护,用于支持结构化的数据存储。
当一艘船沉入海底8
·
2023-11-22 04:56
HBase
docker
hbase
Java入门教程!docker服务启动命令
第一个分布式:限流1.1ZooKeeper+Nginx面试常备题(附答案)ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和
Hbase
cxy小刚.
·
2023-11-22 04:26
程序员
面试
后端
java
Mac环境部署单机版
Hbase
及使用JavaAPI对
Hbase
增删改查
一、介绍
HBase
是一个面向列式存储的分布式数据库,其设计思想来源于Google的BigTable论文。
HBase
底层存储基于HDFS实现,集群的管理基于ZooKeeper实现。
Liu_Shihao
·
2023-11-22 04:25
大数据
hbase
hadoop
大数据
docker 部署
hbase
并且java Api连接
首先先运行容器dockerrun-d--name
hbase
-p2181:2181-p16010:16010-p16000:16000-p16020:16020-p16030:16030harisekhon
蓝胖子不是胖子
·
2023-11-22 04:54
docker
hbase
java
clickhouse
hbase
性能对比_携程ClickHouse日志分析实践
ElasticSearch是一种基于Lucene的分布式全文搜索引擎,携程用ES处理日志,目前服务器规模500+,日均日志接入量大约200TB。随着日志量不断增加,一些问题逐渐暴露出来:一方面ES服务器越来越多,投入的成本越来越高;另一方面用户的满意度不高,日志写入延迟、查询慢甚至查不出来的问题一直困扰着用户;而从运维人员的角度看,ES的运维成本较高,运维的压力越来越大。一、为什么选择ClickH
weixin_39583655
·
2023-11-22 04:31
clickhouse
hbase性能对比
netflow流量分析工具
Hbase
使用已经安装的zookeeper
1.修改conf/
hbase
-env.sh,添加jdk支持export JAVA_HOME=/usr/local/jdk export
HBASE
_MANAGES_ZK=false 2.拷贝zookeeper
小小哭包
·
2023-11-22 00:10
大数据
Java
计算机
java
hbase
hadoop
超详细的zookeeper和
hbase
安装教程以及启动脚本zk.sh等
.修改dataDir(数据存储路径)6.创建文件夹7.在zkData下创建myid文件(文件名不可更换)8.分发zookeeper并修改zkData配置9.编写zookeeper的启动、关闭、状态脚本
hbase
动心の瓦狗狗
·
2023-11-22 00:37
运维
zookeeper
hbase
分布式
大数据
本机idea连接虚拟机中的
Hbase
相关环境:虚拟机:Centos7hadoop版本:3.1.3
hbase
版本:2.4.11zookeeper版本:3.5.7JavaIDE:IDEAJDK:8步骤步骤一:在idea创建一个maven项目步骤二
mendianyu
·
2023-11-22 00:16
intellij-idea
hbase
java
超全面试汇总——Hive 超详细!!!带答案!!!持续更新中~
分桶表hive中排序的种类和适用场景动态分区和静态分区的区别+使用场景hive语句执行顺序Hive的几种存储方式列式存储的好处HQL转化为MapReduce的过程Hive和关系型数据库的区别Hive和
HBase
jialun0116
·
2023-11-21 22:27
面试
面经
Hive
数据仓库
大数据
数据库
hive
hadoop
集群-ntp时间同步服务
本不想做运维的奈何现在项目缺人手,不仅需求多,而且还需要教学弟,这篇文章主要是记录在分布式集群中出现的hive或者
hbase
时间同步错误。
yunpiao
·
2023-11-21 19:46
HBase
RegionServer宕机恢复三部曲
目录
HBase
的故障恢复有哪三种不同模式?
HBase
日志切分方法?DistributedLogReplay解决了哪些问题?
尼小摩
·
2023-11-21 14:33
第四课 HTable基本概念
从一个示例说起传统的关系型数据库想必大家都不陌生,我们将以一个简单的例子来说明使用RDBMS和
HBase
各自的解决方式及优缺点。
Arroganter
·
2023-11-20 14:58
让你彻底学会
HBase
让你彻底学会
HBase
Apache
HBase
(HadoopDataBase)是一个开源的、高可靠性、高性能、面向列(这里指列族,非列式存储)、可伸缩、实时读写的分布式数据库。
地球魔
·
2023-11-20 12:11
hbase
数据库
大数据
关于
Hbase
的一些问题
HBase
1.RowKey如何设计,设计不好会产生什么后果唯一原则:在设计上要保持RowKey的唯一性。
地球魔
·
2023-11-20 12:33
hbase
数据库
大数据
Hbase
:namespace异常处理,
hbase
异常处理
Hbase
集群部署启动后几秒自动退出异常处理,1.hadoop与
hbase
版本不兼容,会导致此异常。
Richard-Lui
·
2023-11-20 11:14
namespace
Hbase
TableExistsException:
hbase
:namespace
准备记录下我在学习和工作中遇到的
hbase
报错信息及解决方案。
笔尖的痕
·
2023-11-20 11:43
yarn
hbase
hadoop
转载
浅谈交互式查询⼯工具Impala(一)
一、Impala概述(Impala是什什么,优势,劣势,与Hive对⽐)Impala是什什么Impala是Cloudera提供的⼀一款开源的针对HDFS和
HBASE
中的PB级别数据进⾏行行交互式实时查询
顾子豪
·
2023-11-20 11:14
hbase
启动错误org.apache.hadoop.
hbase
.TableExistsException:
hbase
:namespace
org.apache.hadoop.
hbase
.TableExistsException:
hbase
:namespace这个错误只会出现在安装独立zookeeper的方案中,当以前安装了一个版本,后来又换了一个新版本的时候会包这个错误
weipanp
·
2023-11-20 11:09
hbase
hbase
namespace
hbase
:namespace is not online
由于机器重启导致想去建表,结果一直报Masterisinitializing这个时候去查看master后台日志,发现了一个比较重要的信息org.apache.hadoop.
hbase
.master.HMaster
lvwenyuan_1
·
2023-11-20 11:29
hbase
hbase
namespace
not
online
数仓DWS层之旁路缓存优化
以本程序为例,每次查询都要连接
Hbase
,数据传输需要做序列化、反序列化,还有网络传输,严重影响时效性。可以通过旁路缓存对查询进行优化。旁路缓存模式是一种非常常见的按需分配缓存模式。
大数据阿嘉
·
2023-11-20 10:44
缓存
flink
redis
Zookeeper
一、介绍ZooKeeper是一个开源的分布式应用程序协调服务,是Hadoop和
Hbase
的重要组件,提供配置维护、域名服务、分布式同步、分布式锁等功能。
qingsongxyz
·
2023-11-20 07:01
分布式
zookeeper
分布式
Hbase
- 自定义Rowkey规则
在Flink中我们有时候需要分析数据1点到2点的范围,可是经过Region又比较慢,这时候我们就可以定制TableInputFormat来实现我们的需求了,我们还可以采用Flink的DataSet的方式读取,另外下面还有Spark读取的例子。使用教程Md5Util.javaimportorg.apache.commons.codec.binary.Hex;importjava.security.M
kikiki2
·
2023-11-20 06:12
javaapi 访问
hbase
Hbase
介绍
HBASE
是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,利用
HBASE
技术可在廉价PCServer上搭建起大规模结构化存储集群。
数据萌新
·
2023-11-20 05:35
Zookeeper-3.4.10安装教程
ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和
Hbase
的重要组件。
阮哈哈哈哈哈
·
2023-11-20 03:09
zookeeper
kafka
大数据开发面试(一)
适用于需要将大量数据发送到HDFS、
HBase
等存储系统的场景。具有较强的可靠性、可扩
ChlinRei
·
2023-11-20 01:41
面试
大数据
面试
etl工程师
Apache Atlas 2.1.0编译打包安装记录
ApacheAtlas简介二、编译打包1打开官网下载源码2解压3打包3.1打包前的准备3.2执行打包命令3.3打包报错打包结果三、安装1移动到安装目录2启动服务3启动成功,但没有进程4单独启动4.1启动
Hbase
4.2
终回首
·
2023-11-19 14:48
大数据
Apache
Atlas
元数据管理
数据治理
Hbase
- 预分区的技巧
>可以用两行代码搞定
Hbase
的预分区设计,我们在新建一张表的时候有没有发现,做预分区其实也是要计算的,如果没有写上工具类那可惨了,需要自己用手指头算了,在这给大家提供了一个10进制跟16进制的版本,会根据
kikiki4
·
2023-11-19 09:51
基于Docker搭建大数据集群(七)
Hbase
部署
基于Docker搭建大数据集群(七)
Hbase
搭建一、安装包准备
Hbase
官网下载微云下载|在tar目录下二、版本兼容三、角色分配节点MasterRegionservercluster-masteryesnocluster-slave1backupyescluster-slave2noyescluster-slave3noyes
njpkhuan
·
2023-11-19 08:55
ES优化实战 - 小操作节省百分之三十以上的磁盘空间
然后选用
Hbase
这样的数据库联动。
Hbase
擅长的是根据key来取值,花费的是磁盘。不占太多其它资源。
水的精神
·
2023-11-19 07:09
Elasticsearch
ES搜索优化
elasticsearch
es
如何节省磁盘空间
zookeeper简单应用&分布式锁实现
的客户端原生客户端的使用Curatorzk简单的分布式锁实现Zookeeper的作用ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和
Hbase
Life journey
·
2023-11-19 04:06
框架专题
个人日记
zookeeper
分布式
Spark学习——1.代表性大数据技术
HDFS分布式文件管理系统Hive数据仓库数据仓库,借助底层HDFS和
HBase
完成存
楓尘林间
·
2023-11-18 23:37
Spark
Spark
大数据学习
Rockdb简介
背景最近在使用flink的过程中,由于要存储的状态很大,所以使用到了rockdb作为flink的后端存储,本文就来简单看下rockdb的架构设计Rockdb设计Rockdb采用了LSM的结构,它和
hbase
lixia0417mul2
·
2023-11-18 18:51
flink
大数据
flink
上一页
14
15
16
17
18
19
20
21
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他