HBase、Parrot

Flink 任务提交失败 Could not deploy Yarn job cluster

1.Flink提价任务，读取Hbase数据和hdfs数据，需要单独倒入一些hbase的依赖jar，所以加入了maven依赖，本地能正常测试运行，但是发布到yarn上运行报错，所以测试读取hdfs文件的时候
'煎饼侠·2023-06-14 17:02

Hbase 查询命令 条件筛选

Hbase查询命令条件筛选方便测试建一下表hbase(main):001:0>create'student','c1'不写namespace的话就是默认在default里查询有哪些namespacehbase
MIDSUMMER_yy·2023-06-14 16:40

Hbase的使用技巧

进入hbaseshell查询一个表的数据量时比较耗时且容易刷屏，使用hbase自带的工具可以直接查询hbaseorg.apache.hadoop.hbase.mapreduce.RowCounter'namespace
MIDSUMMER_yy·2023-06-14 16:39

Hbase-- 03

4.原理加强4.1数据存储4.1.1行式存储传统的行式数据库将一个个完整的数据行存储在数据页中4.1.2列式存储列式数据库是将同一个数据列的各个值存放在一起传统行式数据库的特性如下：①数据是按行存储的。②没有索引的查询使用大量I/O。比如一般的数据库表都会建立索引，通过索引加快查询效率。③建立索引和物化视图需要花费大量的时间和资源。④面对查询需求，数据库必须被大量膨胀才能满足需求。列式数据库的特性
All996·2023-06-14 10:53

Hbase--02

3.客户端操作shell客户端3.1HBase数据模型概念：在hive表或者mysql表中说描述哪一个数据都是说的哪个库里面的哪张表里面的哪一行数据中的哪一列，才能定位到这个数据但是在hbase中没有库的概念
All996·2023-06-14 10:52

HBase的HMaster启动成功几秒后消失了

HBase的HMaster启动成功几秒后消失了我是启动HBase后,jps发现没有HMaster进程,于是各种百度,找到这种方法:将jar包拷贝到$HBASE_HOME/lib目录下进行了此步骤,jps
sheygshsi·2023-06-14 04:45

Hbase - 表导出CSV数据

MR考查了Hbase的各种MR，没有发现哪一个是能实现的，如果有请通知我，我给他发红包。所以我们只能自己来写一个MR了，编写一个Hbase的MR，官方文档上也有相应的例子。
大猪大猪·2023-06-13 20:22

十二、HBase运维

1、HBase监控指标1.1、指标收集：http://master_ip:port/jmx；http://regionserver_ip:port/jmx1.2、HBase核心指标1.2.1、通用指标regionCount
loukey_j·2023-06-13 19:33

AndroidX迁移填坑指南

1.迁移后国际化（多语言）失效问题解决办法：在attachBaseContext后添加代码@OverrideprotectedvoidattachBaseContext(ContextnewBase){
37度开水·2023-06-13 19:55

Hbase安装及简介

什么是hbase1.简介HBase是一个面向列式存储的分布式数据库，其设计思想来源于Google的BigTable论文。HBase底层存储基于HDFS实现，集群的管理基于ZooKeeper实现。
华..·2023-06-13 18:42

BigData－基于代价优化

转：http://hbasefly.com/2017/05/04/bigdata%EF%BC%8Dcbo/还记得笔者在上篇文章无意中挖的一个坑么？
天地不仁以万物为刍狗·2023-06-13 17:32

【大数据监控】Grafana、Spark、HDFS、YARN、Hbase指标性能监控安装部署详细文档

目录Grafana简介下载软件包安装部署修改配置文件创建用户创建Systemd服务启动GrafanaSpark应用监控Graphite_exporterHDFS监控YARN监控HBase监控Grafana
笑起来贼好看·2023-06-13 17:15

ZooKeeper - 分布式服务管理

概述ZooKeeper是一个分布式的，开源的分布式应用程序协调服务，是Hadoop、Hbase、kafka、dubbo等重要组件。
高超不爱笑·2023-06-13 16:06

学习笔记--Zookeeper

Zookeeper概述ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。
浪子呦·2023-06-13 16:05

HBase系列 - HBase Shell操作

HBaseShell基本操作进入HBase客户端命令行bin/hbaseshell查看帮助命令hbase(main):001:0>help查看当前数据库中有哪些表hbase(main):001:0>list
Rex_2013·2023-06-13 12:04

阿里HBase的数据管道设施实践与演进

摘要：第九届中国数据库技术大会，阿里巴巴技术专家孟庆义对阿里HBase的数据管道设施实践与演进进行了讲解。
·2023-06-13 12:02

修改hbase列族数据类型实验

这里通过phoenix来操作habse1、登录phoenix,建表0:jdbc:phoenix:192.168.1.1:2181:/hbase>createtableseenow(idvarcharprimarykey
阿乐_822e·2023-06-13 07:45

连接hbase时候连接不上报错Can‘t get the locations（已解决）

Exceptioninthread"main"org.apache.hadoop.hbase.client.RetriesExhaustedException:Can'tgetthelocationsatorg.apache.hadoop.hbase.client.RpcRetryingCallerWithReadReplicas.getRegionLocations
只会写demo的程序猿·2023-06-13 01:32

Hbase的JavaAPI和数据存储

#导入Maven依赖```XMLorg.apache.zookeeperzookeeper3.4.6org.apache.hbasehbase-client2.2.5org.apache.hadoophadoop-client3.2.1org.apache.hadoopha
_泡泡·2023-06-12 19:00

hadoop+hbase部署，phoeni的安装和使用(二)

1.Hbase的部署（单机）1.1下载安装将下载的hbase-1.2.2-bin.tar.gz文件解压安装到/opt目录下:sudotar-zxvfhbase-1.2.2-bin.tar.gz#解压缩sudomvhbase
枕溪研书·2023-06-12 17:56

Datax+DataX-Web分布式搭建

Datax+DataX-Web分布式搭建DataX简介DataX是一个异构数据源离线同步工具，致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、FTP等各种异构数据源之间稳定高效的数据同步功能
yidichaxiang·2023-06-12 17:00

Kafka基础原理

documentation.html#brokerconfigs1.Kafka适用场景日志收集：一个公司可以用Kafka收集各种服务的log，通过kafka以统一接口服务的方式开放给各种consumer，例如hadoop、Hbase
阳光倾洒·2023-06-12 14:09

CDH(Cloudera DataHub 6.2.1)部署（centos6、7）、常用组件（zookeeper、hive、hdfs、yarn、oozie、hue、impala、hbase）安装及验证

本文介绍了CDH的基础环境部署、cdh的server服务部署和相关组件的部署及验证。具体的组件使用，请参考本人的相关专栏内容。说明：本部署是在centos6的环境中部署的，写法是按照centos7的要求或命令写的，如果其中有不同，则会使用注释说明。本部署计划是server1文章目录一、CM基础环境部署1、下载安装包2、安装依赖包3、安装httpd4、配置host5、关闭防火墙6、关闭selinux
一瓢一瓢的饮 alanchan·2023-06-12 12:41

一篇文章带你入门HBase

本文已收录至Github，推荐阅读Java随想录微信公众号：Java随想录HBase（HadoopDatabase）是一个开源的、分布式的、面向列的NoSQL数据库，它是构建在Hadoop之上的。
·2023-06-12 11:44

一篇文章带你入门HBase

本文已收录至Github，推荐阅读[Java随想录](https://github.com/ZhengShuHai/JavaRecord)微信公众号：[Java随想录](https://mmbiz.qpic.cn/mmbiz_jpg/jC8rtGdWScMuzzTENRgicfnr91C5
Booksea·2023-06-12 10:00

zookeeper学习笔记

一开始，我是带着如下问题来学zookeeper：像Mysql，Hbase这类的数据库已经实现了高可用，为什么我们还要用zookeeper呢？
ssochi·2023-06-12 02:30

2.2 搭建Spark开发环境

一、Spark开发环境准备工作由于Spark仅仅是一种计算框架，不负责数据的存储和管理，因此，通常都会将Spark和Hadoop进行统一部署，由Hadoop中的HDFS、HBase等组件负责数据的存储管理
zl202111·2023-06-12 00:02

Hbase BulkLoad用法

要导入大量数据，Hbase的BulkLoad是必不可少的，在导入历史数据的时候，我们一般会选择使用BulkLoad方式，我们还可以借助Spark的计算能力将数据快速地导入。
大猪大猪·2023-06-11 22:00

linux定时任务配置mysql数据库备份脚本

/bin/bashbaseDir="/usr/local/mysql/backupDataFiles";cd"$baseDir";echo"startbackupdata..
weryou1990·2023-06-11 20:06

大数据技术原理------期末复习HBase

1、HBase数据模型（相关的概念：表、行键、列族、列限定符、单元格、时间戳）、面向列的存储。
小步调LLY·2023-06-11 20:57

Hbase

#简介HBase是一个**面向列式存储的分布式数据库**，其设计思想来源于Google的BigTable论文。HBase底层存储基于HDFS实现，集群的管理基于ZooKeeper实现。
_泡泡·2023-06-11 19:00

Hbase---rowkey的设计

rowkey的设计设计的三大原则Rowkey长度原则Rowkey是一个二进制码流，Rowkey的长度被很多开发者建议设计在10-100个字节，不过建议是越短越好，不要超过16个字节原因如下：数据的持久化文件HFile中是按照KeyValue存储的，如果Rowkey过长比如100个字节，1000万列数据光Rowkey就要占用100*1000万=10亿个字节，将近1G数据，这会极大影响Hfile的存储
咚动咚·2023-06-11 10:39

Hbase

Hbase思考环节：1.什么是hbase1.1简介HBase是一个面向列式存储的分布式数据库，其设计思想来源于Google的BigTable论文。
All996·2023-06-11 09:03

数据仓库-hive&hbase

应用场景Hive主要用户构建基于Hadoop平台的数据仓库，处理大数据量的离线处理工作；HBase适合用来大数据的实时查询、海量数据的存储、离散型数据的存储；
MFLW·2023-06-11 08:30

第一章 数据中台架构总体设计

业务关系业务关注点：在于DA层技术难点：在于PaaS层1.1、PaaS层：基础设施层数据采集：flume、sqoop、datax、flinkcdc、canel数据计算：MR、Spark、flink数据存储：HDFS、Hbase
随缘清风殇·2023-06-11 07:17

HBase介绍 HBase和HDFS的联系 HBase和RDBMS的联系

HBase总览概念：Hbase是建立在Hadoop文件系统（HDFS）之上面向列的分布式数据库.HBase：运行在Hadoop集群上的Apache开源数据库。
只会摆烂的小亮·2023-06-11 03:06

Hbase架构

HBase系统遵循Master/Salve架构，由三种不同类型的组件组成：client提供了访问hbase的接口提供cache缓存提高访问hbase的效率,比如region的信息Zookeeper保证任何时候
今夕何夕9720·2023-06-11 02:42

hbase搭建

目录一、购买ECS二、连接ssh弹性公网官方网站ApacheHBase™ReferenceGuide一、购买ECS二、连接ssh弹性公网利用软件MobaXtermssh连接hbase官网文件ApacheHBase
打CF的小芳·2023-06-11 00:01

【大数据工具】HBase 集群搭建与基本使用

HBase集群搭建HBase安装包下载地址：https://archive.apache.org/dist/hbase/安装HBase的前提：ZooKeeper集群OKHadoop集群OK1.HBase
程序员胖五·2023-06-10 17:18

【HBase】Hive 的集成

如果大量的数据已经存放在HBase上面，需要对已经存在的数据进行数据分析处理，那么Phoenix并不适合做特别复杂的SQL处理，此时可以使用hive映射HBase的表格，之后写HQL进行分析处理。
岱宗夫如何、·2023-06-10 17:17

【HBase】架构

（1）管理元数据表格hbase:meta，接收用户对表格创建
岱宗夫如何、·2023-06-10 17:14

【大数据之路6】分布式 NoSQL 数据库 HBase

6.分布式NoSQL数据库HBase1.HBase概述1.SQL与NoSQL简介2.HBase简介3.HBase核心设计1.相关说明2.HBase核心设计思路3.HBase设计缘由4.HBase存储数据原理
程序员胖五·2023-06-10 17:42

zookeeper集群+消息队列kafka

ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。
Gs1455940586·2023-06-10 17:37

iOS PDF缓存加载预览

YJPDFTools/***IsExist判断是否本地存在*///IsExist-(BOOL)isExistPdfFileWithBase:(UIViewController*)superVCfile:
你的小福蝶·2023-06-10 13:13

HBase安装下载与集群(高可用)

一、准备1.1安装zookeeperzookeeper安装下载与集群1.2安装HADOOPhadoop搭建集群搭建1.3下载HBasehttps://mirrors.tuna.tsinghua.edu.cn
Long long ago.·2023-06-10 11:47

HBASE入门 基本shell命令（一）

一、登录连接shell$HBASE_HOME/bin/hbaseshell二、基本命令2.1help命令help创建命名空间create_namespace'bigdata';查看命名空间list_namespace
Long long ago.·2023-06-10 11:47

基于Canal实现Mysql数据实时同步到Elasticsearch（Docker版）

Canal简介  Canal主要用途是对MySQL数据库增量日志进行解析，提供增量数据的订阅和消费，简单说就是可以对MySQL的增量数据进行实时同步，支持同步到MySQL、Elasticsearch、HBase
姠惢荇者·2023-06-10 06:38

Sqoop

通过Sqoop我们可以方便的将关系型数据库中的数据导入到Hadoop、Hive、HBase中，也可将HDFS中的数据导出到关系型数据库中。
爱过java·2023-06-10 05:51

Hbase

java客户端导入maven依赖XMLorg.apache.zookeeperzookeeper3.4.6org.apache.hbasehbase-client2.2.5org.apache.hadoophadoop-client3.2.1org.apache.hadoophadoop-common3.2.1org.apache.hbasehbase-server2.2.5org.apache
子非我104·2023-06-10 02:56

sqoop系列：sqoop(离线数据同步)开发案例

数据有哪些数据库：1.2：根据mysql表结构创建hive表1.3:RDBMS导入到hdfs（1）条件导入（2）增量导入（3）查询导入-常用1.4：把mysql数据导入hive1.5：把mysql数据导入hbase2
iwester·2023-06-10 00:14
上一页 42 43 44 45 46 47 48 49 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他