__HBase

Hbase - 自定义Rowkey规则

在Flink中我们有时候需要分析数据1点到2点的范围,可是经过Region又比较慢，这时候我们就可以定制TableInputFormat来实现我们的需求了，我们还可以采用Flink的DataSet的方式读取,另外下面还有Spark读取的例子。使用教程Md5Util.javaimportorg.apache.commons.codec.binary.Hex;importjava.security.M
大猪大猪·2023-04-05 08:17

HBase映射hive

目录关闭掉hbase，zookeeper和hive服务进入hive312/conf修改hive-site.xml配置在代码最后添加配置查看一下在hbase235中lib目录下的jar包将hbase235
难以言喻wyy·2023-04-05 07:30

hive启动mysql服务器_hive环境搭建

runtime/jdkexportHADOOP_PREFIX=/usr/local/runtime/hadoopexportHIVE_HOME=/usr/local/runtime/hiveexportHBASE_HOME
Setor·2023-04-05 06:09

es做mysql二级索引_用Elasticsearch实现HBase二级索引

写在前面项目的日志模块中的日志数据都存储在HBase中，由于HBase只有rowkey这个一级索引的特性，为了方便对日志数据的个别字段进行查询，就需要额外创建二级索引之前参考了网络上非常多的二级索引实现方案
Ruyuan Zhang·2023-04-05 02:46

Flink重启策略(restart-strategy)优化

indexFlink重启策略(restart-strategy)优化背景问题分析结论优化背景1、实时任务依赖Zookeeper做高可用，当Zookeeper节点重启，会导致相当一部分任务挂掉；2、依赖DCache、HBase
_Janick·2023-04-05 01:31

hbase regionserver与hbck端口冲突

1、背景近期工作时遇到一个问题就是启动hbck检查hbase状态时会遇到跟regionserver端口冲突的问题，这个问题我是通过增加配置变量的方式进行的解决。
Interest1_wyt·2023-04-05 01:15

利用MapReduce将文件内容写入Hbase

org.apache.hadoophadoop-client2.7.3org.apache.hbasehbase-client1.3.1org.apache.hbasehbase-server1.3.1packagecom.neuedu
小猪Harry·2023-04-04 23:24

impala使用

计算e.分区使用f.impala数据同步1.使用hive插入数据2.impala查询数据3.进行数据同步g.impala参数h.impala不支持的的特性h.impala空值NULLi.impala整合hbase
yang_zzu·2023-04-04 23:03

impala 基础知识及使用

第1章Impala的基本概念1.1什么是ImpalaCloudera公司推出，提供对HDFS、HBase数据的高性能、低延迟的交互式SQL查询功能。
¥程序猿¥·2023-04-04 23:03

Impala架构及其原理

一、Impala概述Impala是Cloudera公司主导开发的新型查询系统，它提供SQL语义，能查询存储在Hadoop的HDFS和HBase中的PB级大数据。
数据小二·2023-04-04 22:11

impala实战篇

第1章impala基本概念1什么是impalaCloudera公司推出，提供对HDFS、Hbase数据的高性能、低延迟的交互式SQL查询功能。
AllenGd·2023-04-04 22:36

Impala 架构了解

Impala整体架构了解一Impala官网PB级大数据实时查询分析引擎，具有实时、批处理、多并发等优点，提供对HDFS、Hbase数据的低延迟SQL查询；Impala不使用MapReduce，通过分布式查询引擎访问数据
叫我阿呆就好了·2023-04-04 22:33

应用性能监控（APM）

catzipkinpinpointskywalking依赖Java678、Maven3+MySQL5.65.7、Linux2.6+hadoop可选Java6，7，8Maven3.2+rabbitMQJava6，7，8maven3+Hbase0.94
weixin_33978016·2023-04-04 22:16

hbase的高级特性之快照功能

hbase的高级特性之快照功能关于snapshot的快照总共有这么多命令：clone_snapshot：这个命令的意思是通过克隆的内容创建一个新表，在创建表的时候不会产生数据副本也不会影响原来的快照数据
枣泥馅·2023-04-04 19:24

hbase学习笔记：快照SNAPSHOTS

列出所有快照hbaseshell列出快照>>list_snapshots创建快照snapshot'DR_RT_OPC_KAFKAAI','DR_RT_OPC_KAFKAAI_SHAPSHOT20200227'3
IT过客·2023-04-04 19:24

Hbase容灾与备份

一、前言本文主要介绍Hbase常用的三种简单的容灾备份方案，即CopyTable、Export/Import、Snapshot。
Cynicism_Kevin·2023-04-04 19:15

HBase快照

什么是快照快照就是一份元信息的合集，允许管理员恢复到表的先前状态，快照不是表的复制而是一个文件名称列表，因而不会复制数据。完全快照恢复是指恢复到之前的“表结构”以及当时的数据，快照之后发生的数据不会恢复。快照就是一系列元数据信息集合，能够允许管理员将表恢复至生成快照时的状态。快照不是表的复制，最简单的方式就是把它想象成为了追踪元数据(表信息和域)和数据(HFiles,内存存储,WALs)一系列操作
chengyuan2789·2023-04-04 19:34

Hbase备份与恢复工具Snapshot的基本概念与工作原理

HBase数据库最核心的备份与恢复工具——Snapshot。一、HBase备份与恢复工具的发展过程HBase备份与恢复功能从无到有经历了多个发展阶段，从最早使用distcp进行关机全备份，到0.
晓之以理的喵~~·2023-04-04 19:54

ClickHouse的bitmap学习之路

前文：Bitmap在大数据领域是一种伟大的思想，在没有Clickhouse出现之前，主流方案是用HBase+Coprocessor通过服务去做整套处理，特别是(1)用户画像领域，以前ES+HBase的方案及其复杂
CesarChoy·2023-04-04 18:10

HBase RowKey设计和实现

HBase由于存储特性和读写性能，在OLAP即时分析中发挥重要作用，Rowkey的设计好坏关乎到HBase的使用情况。
Keven He·2023-04-04 18:51

Hbase 集群的安装部署

目录1、下载HBase二进制源码包2、配置环境变量3、配置ZooKeeper和Hbase配置项4、修改regionservers文件5、修改冲突jar包6、查看相关进程是否启动7、访问hbase页面部署集群
Wangsh@·2023-04-04 17:47

适用于具有Couchbase和WildFly的多容器和多主机应用程序的Docker Machine，Swarm和Compose...

该博客将说明如何使用Docker创建部署在多个主机上的多容器应用程序。这将使用DockerMachine，Swarm和Compose实现。是的，所有这三个工具一起使此博客更加有趣！该图说明了关键组件：DockerMachine用于配置多个Docker主机DockerSwarm将用于创建多主机集群使用Consul注册/发现DockerSwarm集群中的每个节点多容器应用程序将使用DockerComp
dnc8371·2023-04-04 15:43

couchbase_适用于具有Couchbase和WildFly的多容器和多主机应用程序的Docker Machine，Swarm和Compose...

couchbase该博客将说明如何使用Docker创建部署在多个主机上的多容器应用程序。这将使用DockerMachine，Swarm和Compose实现。是的，这三个工具一起使这个博客变得更加有趣！
dnc8371·2023-04-04 15:43

HBase基础条件

在本节中，我们列出了使用HBase时所需要的服务和一些必需的系统配置。一.安装JavaJava是Hadoop和HBase主要先决条件。
步闲·2023-04-04 15:59

Hbase2.1 集群搭建

>Hbase在大数据的体系中扮演着DB角色，不得不说是重要的一员，在上一篇，大猪已经给大家演示了[Hadoop3.2集群搭建](https://www.jianshu.com/p/3182aaff918d
kikiki5·2023-04-04 14:57

OLTP 和 OLAP 的区别 ；hive与其它框架的区别

导航hiveoutlineOLTP和OLAP的区别hive和mysql主要区别hive和hbase的区别hivesql和sparksql的区别hiveonspark和sparkonhive的区别hiveoutlinehiveoutlineOLTP
塞上江南o·2023-04-04 10:32

基于spark+hive+hbase的乘用车辆和商用车辆销售数据分析

1.项目背景汽车销售是消费者支出的重要组成成分，同时能很好的反映出消费者对经济前景的信心。通常，汽车销售情况我们了解一个国家经济循环强弱情况的第一手资料，早于其他个人消费数据的公布。因此，汽车销售为随后的零售额和个人消费支出提供了很好的预示作用，汽车消费额占零售额的25%和整个销售总额的8%。另外，汽车销售可作为预示经济衰退和复苏的早期信号。在本项目中，学生将从各个角度对汽车销售数据进行分析，了解
黑白软件设计·2023-04-04 10:01

Hadoop+Hbase分布式集群架构“完全篇”

本文收录在Linux运维企业架构实战系列前言：本篇博客是博主踩过无数坑，反复查阅资料，一步步搭建，操作完成后整理的个人心得，分享给大家~~~1、认识Hadoop和Hbase1.1hadoop简单介绍Hadoop
weixin_30510153·2023-04-04 09:28

分布式数据库HBase安装部署与应用

1.在安装Hbase之，确保Hadoop已经成功安装,并且Hadoop已经正常启动。
飘羽·2023-04-04 09:27

利用MapReduce将文件内容写入Hbase

引入Hbase的配置文件hbase.zookeeper.quorummaster,slave1,slave2ThedirectorysharedbyRegionServers.org.apache.hadoophadoop-client2.7.3org.apache.hbasehbase-client1.3.1org.apache.hbasehbase-server1.3.1
数据萌新·2023-04-04 07:18

HBase学习之二HBase架构

HBase体系结构HBase客户端HBase客户端Client提供了Shell命令行接口，原生JAVAAPI编程接口。HBase客户端支持所有常见的DML操作以及DDL操作。
yangyanping20108·2023-04-04 07:34

HBase基础原理知识（为什么使用HBase + HBase结构（ZooKeeper、RegionServer等） + 架构图），非常适合初学者和基础不清晰的朋友

HBase学习这些基础知识可以说是HBase学习必不可少的知识，因为我没有学扎实吃了不少亏。希望读者可以耐心看完，真的很好理解！没有想象的那么困难！
Eleven爱Eason·2023-04-04 07:31

HBase的数据写入流程（详细）

1.client先访问zookeeper集群，得到所有数据的hbase:meta表位于哪一个regionserver2.访问对应的regionserver，获取对应的hbase:meta表信息，根据插入数据语句的
请学习好嘛·2023-04-04 07:30

hbase 各个概念，region，storefile

hbase各个概念，region，storefileHBase中有两张特殊的Table，-ROOT-和.META..META.
weixin_30767835·2023-04-04 06:25

HBase基本架构

HBase架构图1.Hbase有2大核心组件Master和RegionServer。
帅成一匹马·2023-04-04 06:22

大数据技术之 HBase简介

大数据技术之HBase第1章HBase简介1.1HBase定义HBase是一种分布式、可扩展、支持海量数据存储的NoSQL数据库。
大数据小理·2023-04-04 06:40

[HBase]RPC框架之 region server实现

HBase的RPC沿用了hadoop的RPC部分代码。HMaster，RegionServer和client都是通过RPC交换数据的。其实大抵相似。
iteye_14085·2023-04-04 06:39

HBase基础笔记

HBASE1.hbase特点hbase是一种基于hdfs的NoSQL数据库，弥补了hdfs无法随机写的缺陷。
donger__chen·2023-04-04 06:36

大数据技术之Hbase

目录目录1.部署Hbase（伪分布式）1.1安装zookeeper1.2安装hbase（伪分布式）2.快速上手HBASE2.1Hbase介绍2.1.1名词解释编辑2.1.2逻辑存储模型2.1基础命令2.2DDL
小猫不会去楼兰捉虫·2023-04-04 06:02

三、大数据存储——HBase

目录一、NOSQL引入1.1.NoSQL数据库简介1.2.混合持久化1.3.数据模型的转变2.HBASE2.1.Hbase是什么2.2.Hbase实践2.3.HBase列式存储模型2.4.Hbase架构
百颂伊·2023-04-04 06:28

HBase Mem Store的flush时机

当Region中某个MemStore的大小达到HBase配置中flush.size的大小时，hbase.hregion.memstore.flush.size（默认值128M）。
永不落后于人·2023-04-04 06:28

【大数据】HBase分布式数据库架构及原理

文章目录一、HBase的整体架构1、Client客户端2、ZooKeeper集群3、HMaster4、HRegionServer5、Region1.HBase的数据存储原理2.HBase读数据流程3.HBase
橙子园·2023-04-04 06:57

HBase详细介绍：起源、实现原理、系统架构

1.Hbase起源HBase是一个开源的非关系型分布式数据库，它参考了谷歌的BigTable建模，实现的编程语言为Java。
AllenGd·2023-04-04 06:27

HBase架构原理(看之前请先了解HBase数据模型)

HBase整个架构与大数据学习生态圈一样以hadoop的HDFS文件系统为基底,通过zookeeper集群的协调建立.而集群又有自己的HMaster和HRegionServer.通过三个框架协调架构运行
请学习好嘛·2023-04-04 06:56

Hive技术初探

作者：陈彩华，贝聊后端开发工程师(文章转载交流请联系[email protected])复制代码1概述1.1基本介绍1.2技术比较Hive与传统数据库比较Hive与Hbase比较Hive是个SQL引擎，
weixin_34310785·2023-04-04 06:16

第1章 初始Hadoop

HDFSHadoopDistributedFileSystem分布式文件系统MapReduce并行计算框架HBase分布式NoSQL列数据库Hive数据仓库工具，将结构化的数据文件映射为一张数据库表，并提供简单的
longbow747·2023-04-04 06:58

六、遇到问题

一、maven工程中，需要连接hbase。
紫雨杰·2023-04-04 04:15

hadoop、hbase自动安装的脚本与步骤

要在多台服务器上搭建hadoop、hbase各种配置很繁琐，自动地安装既省时又省力。
wangyh19870928·2023-04-04 04:03

Hadoop单机环境搭建（JDK+Hadoop）

我在安装的过程中的参考资料：博客和《Hbase不睡觉书》1.服务器选择阿里云服务器基本信息注意本文中的系统是centos7.3，与centos7之前的版本可能有所不同。
analanxingde·2023-04-04 04:18

Hbase基本操作---idea连接hbase（shell脚本 springBoot整合Hbase）

编写自动化脚本vimzhh.sh=============================#shell脚本判断参if[$1=="start"];thenecho'开启zookeeper\hadoop\hbase
kjshuan·2023-04-04 04:17
上一页 47 48 49 50 51 52 53 54 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他