E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
--------HBase
电商数仓可视化1--数据导入
、商品信息、店铺信息、订单数据、订单支付信息、活动信息、物流信息等2、埋点数据埋点日志相对业务数据是用于数据分析、挖掘需求,一般以日志形式存储于日志文件中,随后通过采集落地分布式存储介质中如hdfs、
hbase
bigdata从入门到放弃
·
2024-01-03 18:53
数据仓库
linux
hadoop
大数据
java
数据仓库
HBase
Java API 03:
HBase
与MapReduce整合
HBase
版本:1.2.61.案例说明现有
hbase
表"student",其中内容如下:
hbase
(main):025:0>scan'student'ROWCOLUMN+CELL0001column=info
CoderJed
·
2024-01-03 14:14
认真学SQL——MySQL入门之环境准备
关系型数据库:必须遵循SQL规范,强调以二维表格的形式存储数据举例:MySQLORACLEDB2SqlServerSQLite非关系型数据:NoSQL不仅仅是SQL,强调以key-value形式存储数据举例:
HBase
RedisMongoDB
困了就倒头睡
·
2024-01-03 13:47
sql
mysql
数据库
HBASE
基础
1、NoSQL非关系型数据库2、
hbase
是面向列存储结构,即类似于hashmap3、
hbase
是以hdfs作为基础存储4、官网http://
hbase
.apache.org/5、
hbase
的逻辑结构是由行与列族构成的
xinxinyydss
·
2024-01-03 12:25
hbase
数据库
大数据
【
HBase
】——Shell操作
1基本操作1.1进入
HBase
客户端命令行bin/
hbase
shell1.2查看帮助命令能够展示
HBase
中所有能使用的命令,主要使用的命令有namespace命令空间相关,DDL创建修改表格,DML写入读取数据
那时的样子_
·
2024-01-03 12:51
hbase
数据库
【
HBase
】——Java API
1环境1.1依赖org.apache.
hbase
hbase
-client2.4.111.2配置文件
hbase
-site.xml
hbase
.zookeeper.quorumhadoop102:2181,hadoop103
那时的样子_
·
2024-01-03 12:47
hbase
java
数据库
HBase
从入门到精通11:
HBase
数据保存过程和Region分裂
本节来介绍一下
HBase
的数据保存过程和Region分裂过程的相关知识。
金字塔下的小蜗牛
·
2024-01-03 07:35
python操作hdfs及
hbase
如果存在权限不足,可以通过命令行对上层目录权限进行修改:hadoopdfs-chmod-R777/tmp或者hdfs的配置文件中,将dfs.permissions修改为False(出方法暂未尝试)操作
Hbase
佛系小懒
·
2024-01-03 04:26
Hbase
- kerberos认证异常
>之前怎么认证都认证不上,问题找了好了,发现它的异常跟实际操作根本就对不上,死马当活马医,当时也是瞎改才好的,给大家伙记录记录。```KrbException:ServernotfoundinKerberosdatabase(7)-LOOKING_UP_SERVER>>>KdcAccessibility:removestorm1.starsriver.cnatsun.security.krb5.K
kikiki4
·
2024-01-03 03:27
HBase
容错和高可用
HBase
是一个没有单点故障的分布式系统,计算层和存储层都有各自的保障了服务的可用性。
Alex90
·
2024-01-03 02:45
Hbase
介绍以及Hive优势
一,
Hbase
介绍
HBase
是典型的NoSQL数据库,通常被描述成稀疏的、分布式的、持久化的,由行键、列键和时间戳进行索引的多维有序映射数据库,主要用来存储非结构化和半结构化的数据。
毛毛虫同学
·
2024-01-02 14:38
MySQL基础学习: 第一章 数据库概述
、数据库的分类1、关系型数据库Oracle:收费MySQL:免费SQLSERVER:收费hiveTIDB人大金仓(KINGBASE)达梦(dm)dorisoceanbase2、非关系型数据库Redis
Hbase
ElasticsearchInfluxdbks3
玉成226
·
2024-01-02 12:43
【MySQL】
数据库
mysql
学习
架构设计内容分享(七十一):架构必备:10WQPS超高并发架构的10大思想
数据分治思想+分库分表3.读写分离思想+主从分离4.池化思想5.缓存思想6.异步思想+消息队列削锋7.服务保护思想:熔断降级8.限流思想9.扩容思想+切流量10.海量数据处理思想ElasticSearch+
Hbase
之乎者也·
·
2024-01-02 11:59
架构设计
内容分享
架构
架构设计
HBase
内容分享(五):
HBase
读写性能优化
目录一、
HBase
读优化1.
HBase
客户端优化2.
HBase
服务器端优化3.
HBase
列族设计优化4.HDFS相关优化5.
HBase
读性能优化归纳二、
HBase
写优化1.写性能优化切入点2.写异常问题检查点一
之乎者也·
·
2024-01-02 10:48
大数据(Hadoop)内容分享
HBase
内容分享
hbase
性能优化
数据库
Hbase
- kerberos认证异常
>之前怎么认证都认证不上,问题找了好了,发现它的异常跟实际操作根本就对不上,死马当活马医,当时也是瞎改才好的,给大家伙记录记录。```KrbException:ServernotfoundinKerberosdatabase(7)-LOOKING_UP_SERVER>>>KdcAccessibility:removestorm1.starsriver.cnatsun.security.krb5.K
kikiki5
·
2024-01-02 06:49
Linux安装
Hbase
并且使用python进行读取操作
1.
Hbase
安装:可以参考这篇文章,写的很详细:https://blog.csdn.net/wuruijie321/article/details/79932752需要注意的。
frankie_cheung
·
2024-01-01 10:29
Hbase
- 表导出CSV数据
MR考查了
Hbase
的各种MR,没有发现哪一个是能实现的,如果有请通知我,我给他发红包。所以我们只能自己来写一个MR了,编写一个
Hbase
的MR,官方文档上也有相应的例子。
kikiki2
·
2024-01-01 09:02
HBase
内容分享(四):深度学习
HBase
目录1.引言2.
HBase
概述3.安装与配置4.数据操作5.数据模型与架构6.客户端开发7.
HBase
优化8.总结1.引言在当今数字化的时代,数据已经成为了推动商业、科研和社会发展的关键资源。
之乎者也·
·
2024-01-01 05:23
大数据(Hadoop)内容分享
HBase
内容分享
hbase
深度学习
数据库
Hbase
的三个应用
Hbase
的三个应用分布式自旋锁。分布式的唯一序列号分布式系统黑名单分布式自旋锁是一种在分布式系统中用于实现并发控制的锁机制。
bluedraam_pp
·
2023-12-31 21:17
实时计算
hbase
数据库
大数据
Hbase
- kerberos认证异常
>之前怎么认证都认证不上,问题找了好了,发现它的异常跟实际操作根本就对不上,死马当活马医,当时也是瞎改才好的,给大家伙记录记录。```KrbException:ServernotfoundinKerberosdatabase(7)-LOOKING_UP_SERVER>>>KdcAccessibility:removestorm1.starsriver.cnatsun.security.krb5.K
kikiki5
·
2023-12-31 21:59
阿里巴巴运维体系变迁史
2007年加入阿里,10年间打造了阿里目前使用最为广泛的核心中间件之一的服务框架;建设了阿里的
HBase
团队,发展到今天
HBase
已经是阿里最重要的NoSQL产品;打造阿里基于LXC的虚拟化系统,以及集群资源管理系统
Linux丶晨星
·
2023-12-31 19:43
HBase
内存配置及JVM优化
前言本文从
HBase
的内存布局说起,先充分了解
HBase
的内存区的使用与分配,随后给出了不同业务场景下的读写内存分配规划,并指导如何分析业务的内存使用情况,以及在使用当中写内存Memstore及读内存扩展
小枫@码
·
2023-12-31 18:28
hbase
大数据
Hbase
读流程
Client-Server交互逻辑经常有业务同学咨询为什么客户端配置文件中没有配置RegionServer的地址信息,这里针对这种疑问简单的做下解释,客户端与
HBase
系统的交互阶段主要有如下几个步骤:
tracy_668
·
2023-12-31 17:35
HBase
例行灾备方案:快照备份与还原演练
该方案是为某用户定制的
HBase
灾备方案,方案本身具有很好的适用性,可以复用于常规H
Laurence
·
2023-12-31 12:28
大数据专题
hbase
灾备
快照
备份
还原
演练
方案
java
hbase
配置文件_
Hbase
入门(二)——安装与配置
本文讲述如何安装,部署,启停
HBase
集群,如何通过命令行对
Hbase
进行基本操作。并介绍
Hbase
的配置文件。在安装前需要将所有先决条件安装完成。
weixin_39804329
·
2023-12-31 10:30
java
hbase
配置文件
Spring Boot IO官方文档中文版
原文链接SpringBootIO官方文档中文版引言缓存支持的缓存提供程序GenericJCache(JSR-107)HazelcastInfinispanCouc
hbase
RedisCaffeineCache2kSimpleNoneHazelcastQuartzScheduler
逆水行舟x
·
2023-12-31 08:45
spring
boot
spring
boot
后端
java
Canal的学习
SpringBoot基本概念Canal是一个基于MySQL数据库增量日志解析,提供增量数据订阅和消费,支持将增量数据投递到下游消费者(如Kafka、RocketMQ等)或者存储(如Elasticsearch、
HBase
kk变色龙13
·
2023-12-31 08:08
android
微服务
rabbitmq
java
Zookeeper集群搭建
系列文章目录Ubuntu常见基本问题Hadoop3.1.3安装(单机、伪分布)Hadoop集群搭建
HBase
2.2.2安装(单机、伪分布)Zookeeper集群搭建
HBase
集群搭建Spark安装和编程实践
WE-ubytt
·
2023-12-31 08:53
大数据处理与应用
zookeeper
hadoop
大数据
Vmware虚拟机无法联通主机解决方法二
今天在学习
HBase
时,昨天的问题又重新了,我通过SSH工具MobaXterm都无法联通CentOS-7虚拟机。
在奋斗的大道
·
2023-12-31 05:45
深蓝计划
系统运维
VMware
CSS 动态提示框
border-right-color:transparent;}}@keyframestypeAndDelete{0%,10%{width:0;}45%,55%{width:200rpx;}/*adjustwidt
hbase
doncontent
特创数字科技
·
2023-12-31 03:43
CSS动画
css
前端
Hbase
- 批量写入加速技巧
##背景之前我们的线上业务一直使用的是
Hbase
的单条put操作,为了提高程序的写入性能我们还针对业务进行了修改,将日志批量化,也就是
hbase
的put多条操作,后面发现
hbase
的客户端是支持本地批量操作
kikiki4
·
2023-12-30 23:02
【图文详解】
HBase
数据模型及其架构原理
HBase
简介https://
hbase
.apache.org/
HBase
,HadoopDatabase,是一个高可靠性、高性能、面向列存储、可伸缩、实时读写的分布式开源NoSQL数据库。
禅与计算机程序设计艺术
·
2023-12-30 21:40
HBase
2.0的修复工具HBCK2
HBCK是
HBase
1.x中的命令,到了
HBase
2.x中,HBCK命令不适用,且它的写功能(-fix)已删除,它虽然还可以报告
HBase
2.x集群的状态,但是由于它不了解
HBase
2.x集群内部的工作原理
大猿小猿向前冲
·
2023-12-30 15:26
Hbase
预分区建表
![](https://upload-images.jianshu.io/upload_images/9028759-735db08803d91f7c.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)```privatestaticAdminadmin=null;privatestaticfinalStringuser="admin/a
kikiki4
·
2023-12-30 14:28
Hbase
- 表导出CSV数据
MR考查了
Hbase
的各种MR,没有发现哪一个是能实现的,如果有请通知我,我给他发红包。所以我们只能自己来写一个MR了,编写一个
Hbase
的MR,官方文档上也有相应的例子。
kikiki1
·
2023-12-30 11:36
共享单车之数据分析
统计共享单车在指定地点的每天平均次数第3关:统计共享单车指定车辆每次使用的空闲平均时间第4关:统计指定时间共享单车使用次数第5关:统计共享单车线路流量第1关:统计共享单车每天的平均使用时间任务描述本关任务:使用
Hbase
柔雾
·
2023-12-30 07:10
数据分析
数据挖掘
三台CentOS7.6虚拟机搭建Hadoop完全分布式集群(三)
9安装
hbase
温馨提示:安装
hbase
先在master主节点上配置,然后远程复制到slave01或slave02,在配置环境即可。
666-LBJ-666
·
2023-12-30 07:56
大数据
分布式
hadoop
大数据
Hbase
详解
Hbase
概念base是分布式、面向列的开源数据库(其实准确的说是面向列族)。
武昌库里写JAVA
·
2023-12-30 05:41
高手面试
hbase
数据库
大数据
HBASE
的应用场景
2018/08/31
HBase
是如何与Hadoop嵌入在一起的,那么他的作用又是什么。这显然跟我原来理解的那些个数据库不太一样,就比如mango这种。现在比较关注的就是他的数据导入,是怎么样的。
VChao
·
2023-12-29 16:49
couc
hbase
的使用(springboot连接couc
hbase
,node.js连接couc
hbase
)
网上的couc
hbase
资料十分有限,这无疑给我们学习增加了难度。
caibixyy
·
2023-12-29 13:49
springboot
Spring
Date
JPA
项目演示示例
couchbase
springboot
node.js
简单的 MapReduce 程序的示例代码,用于统计
HBase
中的成绩表中的单科排名和总分排名,并将结果上传到 HDFS 中。...
下面是一个简单的MapReduce程序的示例代码,用于统计
HBase
中的成绩表中的单科排名和总分排名,并将结果上传到HDFS中:```importjava.io.IOException;importorg.apache.hadoop.conf.Configuration
weixin_42601702
·
2023-12-29 10:19
hbase
hdfs
mapreduce
hadoop
大数据
统计
HBase
中的成绩表中的单科排名和总分排名,并将结果上传到 HDFS 中的完整代码...
这是一个使用
HBase
JavaAPI统计成绩表中的单科排名和总分排名的完整代码示例。首先,你需要在pom.xml中添加
HBase
依赖:org.apache.
hbase
hbase
-client2.3.2
轮胎技术Tyretek
·
2023-12-29 10:18
hbase
hdfs
hadoop
大数据
分布式
读取
HBase
的表数据,然后将数据写入到hdfs上面去
读取
HBase
的表数据,然后将数据写入到hdfs上面去1、MapperpublicstaticclassmapHdfsextendsTableMapper{@Overrideprotectedvoidmap
a大数据yyds
·
2023-12-29 10:48
HBase
hbase
HBase
Java API编程实例
在本实例中,首先创建一个学生成绩表scores,用来存储学生各门课程的考试成绩,然后向scores添加数据。表scores的概念视图如图1所示,用学生的名字name作为行键,年级grade是一个只有一个列的列族,score是一个列族,每一门课程都是score的一个列,如english、math、Chinese等。score的列可以随时添加。例如,后续学生又参加了其他课程的考试,如computing
大数据基础入门教程
·
2023-12-29 10:47
HBase
大数据
大数据开发
利用
hbase
来两张表的联立,求出一个班学生的总分并把结果写到
hbase
(java 代码实现)
importorg.apache.hadoop.conf.Configuration;importorg.apache.hadoop.
hbase
.HColumnDescriptor;importorg.apache.hadoop.
hbase
.HTableDescriptor
CC072615
·
2023-12-29 10:14
hbase
java
hadoop
大数据
big
data
datax
DataXDataX是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括MySQL、SQLServer、Oracle、PostgreSQL、HDFS、Hive、
HBase
、OTS、ODPS等各种异构数据源之间高效的数据同步功能
jerry-89
·
2023-12-29 09:24
DorisDB
database
Hbase
- kerberos认证异常
>之前怎么认证都认证不上,问题找了好了,发现它的异常跟实际操作根本就对不上,死马当活马医,当时也是瞎改才好的,给大家伙记录记录。```KrbException:ServernotfoundinKerberosdatabase(7)-LOOKING_UP_SERVER>>>KdcAccessibility:removestorm1.starsriver.cnatsun.security.krb5.K
kikiki5
·
2023-12-29 05:54
Hbase
- 自定义Rowkey规则
>在Flink中我们有时候需要分析数据1点到2点的范围,可是经过Region又比较慢,这时候我们就可以定制`TableInputFormat`来实现我们的需求了,我们还可以采用Flink的`DataSet`的方式读取,另外下面还有`Spark`读取的例子。##使用教程Md5Util.java```importorg.apache.commons.codec.binary.Hex;importjav
kikiki5
·
2023-12-29 01:49
Hbase
BulkLoad用法
要导入大量数据,
Hbase
的BulkLoad是必不可少的,在导入历史数据的时候,我们一般会选择使用BulkLoad方式,我们还可以借助Spark的计算能力将数据快速地导入。
kikiki2
·
2023-12-28 23:55
Flink on K8s 企业生产化实践
平台从Hive、
Hbase
、关系型数据库等大数据ODS(OperationalDatastore)层进行快速的数据ETL,将数据抽取到特征平台进行管理,并统一了数据出口,供数据科学
house.zhang
·
2023-12-28 15:00
大数据
big
data
大数据
上一页
6
7
8
9
10
11
12
13
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他