__HBase

HBASE与HIVE转换

hive-to-hbase在hive中建表createtableifnotexistsemployee(uidint,unamestring,ageint,sexstring,provincestring
扎马尾的女孩·2023-03-16 18:18

hadoop+zookeeper+hbase+hive

pucao_cug/article/details/71698903zookeeper安装文档：https://blog.csdn.net/pucao_cug/article/details/72228973hbase
易佰菜鸟·2023-03-16 18:47

kafka实现读文件到hbase 并且实现hbase到hive上的映射

首先还是构建一个父类特质方法packagekafkatohbaseimportorg.apache.hadoop.hbase.client.Putimportorg.apache.kafka.clients.consumer
宝罗·2023-03-16 18:47

Hive,Pig,HBase

Pig可以非常方便的处理HDFS和HBase
jz0320_JLine·2023-03-16 18:47

HBaseAPI——IDEA操作HBase数据库&HBase与Hive的集成

目录一、IDEA操作HBase数据库(一)添加依赖(二)配置log4j(三)IDEA连接HBase并插入数据1.代码实现2.查看命名空间的表(四)java操作HBase数据库——单元测试1.导包2.初始化
雷神乐乐·2023-03-16 18:46

HBase与Hive练习题

本题是一个综合练习题目总共包括以下部分：1.数据的预处理阶段2.数据的入库操作阶段3.数据的分析阶段4.数据保存到数据库阶段5.数据的查询显示阶段原始数据示例：qR8WRLrO2aQ:mienge:406:People&Blogs:599:2788:5:1:0:4UUEKhr6vfA:zvDPXgPiiWI:TxP1eXHJQ2Q:k5Kb1K0zVxU:hLP_mJIMNFg:tzNRSSTGF
Daivei_lai·2023-03-16 18:46

用idea操作hbase数据库，并映射到hive

依赖条件：需要有Hadoop，hive，zookeeper，hbase环境映射：每一个在Hive表中的域都存在于HBase中，而在Hive表中不需要包含所有HBase中的列。
思达滴·2023-03-16 18:45

hbase rowkey 设计(三维有序)

看这篇文章，你首先要了解hbase的基本存储模型，不懂的可以看我的文章，有做特别的说明。
绝尘驹·2023-03-16 17:26

Where to Learn More

TocompletetheGettingStartedsequence,consideryouroptionsastowhattodonexttocontinueimprovingyourknowledge.TheCouchbasedocumentationsetprovidesdetailedinformationonallaspectsoftheplatform
陈超Terry的技术屋·2023-03-16 13:41

zookeeper

zookeeper简介ZooKeeper（动物园管理员），顾名思义，是用来管理Hadoop（大象）、Hive（蜜蜂）、Pig（小猪）的管理员，同时ApacheHBase、ApacheSolr、LinkedInSensei
dreamguys·2023-03-16 12:28

Hbase读写流程

Hbase读数据流程：1、客户端向zookeeper集群发送请求获取元数据所在的RegionServer。2、zk返回meta表所在的RegionServer（简写为mt.RS）。
乡村教师_jack·2023-03-16 11:36

Hbase BlockCache

1LRUCacheLRUBlockCache是目前hbase默认的BlockCache机制，实现机制也比较简单，是使用一个ConcurrentHashMap管理BlockKey到Block的映射关系，缓存
薛定谔的猫Plus·2023-03-16 08:25

HBase读操作

对于HBase而言读取操作有两种，即get和scan。按实现上来看的话，get请求也是一种scan请求，相当于scan长度为1的请求。
掩流年·2023-03-15 15:11

hbase 中 rowkey 的设计

RowKey是一个二进制byte流，可以是任意字符串，最大长度为64kb，实际应用中一般为10-100byte，以字节数组byte[]形式保存，一般设计成定长,也有一些不定长的例如openTSDB、kylin在hbase
莱布尼茨不会求导·2023-03-15 13:36

使用idea操作Hbase数据库

maven项目，然后再pom.xml文件中添加clouderahttps://repository.cloudera.com/artifactory/cloudera-reposorg.apache.hbasehbase-server1.2.4org.apache.hbasehbase-client1.2.4org.apache.hbasehbase1.2.4org.apache.hb
不愿透露姓名的李某某·2023-03-15 12:45

【pyspark】CDH升级后Spark写入Hbase报错问题

【pyspark】CDH升级后Spark写入Hbase报错问题前言报错一找不到StringToImmutableBytesWritableConverte类分析解决办法报错二找不到org.apache.hadoop.hbase.client.Put
Jack_Roy·2023-03-15 12:33

JVM性能调优与实战进阶篇-上

大数据集群如HBase的性能。特性ZGC（TheZGarbageCollector）为JDK11推出一款低延迟的垃圾回收器。STW即停顿时间低于1ms，且不会随着堆的大小
IT小神·2023-03-15 08:43

二十分钟带你了解JVM性能调优与实战进阶

大数据集群如HBase的性能。特性ZGC（TheZGarbageCollector）为JDK11推出一款低延迟的垃圾回收器。STW即停顿时间低于1ms，且不会随着堆的大小
喜欢软测的小北葵·2023-03-15 07:13

kafka connect写入hbase和hdfs

本文通过插件化的方式进行实现kafka版本：1.1.1hdp安装一、Kafka连接器插件包准备1、kafka-connect-hdfs插件包备注：hdfs插件包可以直接下载社区版conflunt平台支持的插件包，无license限制插件包下载地址：https://www.confluent.io/hub/confluentinc/kafka-connect-hdfs插件版本号：5.3.2插件包名：
xhh199090·2023-03-14 21:21

HBase优化

目录1.1、高可用1.2、Hadoop的通用性优化1.3、Linux优化1.4、Zookeeper优化1.5、HBase优化1.5.1、预分区1.5.2、RowKey设计1.5.3、内存优化1.5.4、
Movle·2023-03-14 14:31

Pinpoint部署实践（二）搭设Hbase集群

Hbase集群搭建安装Hbase下载http://hbase.apache.org/downloads.html这里我选择的1.4.9版本，和上篇文章的Hadoop2.9.2版本能够兼容。
哲人王·2023-03-14 12:27

Phoenix-5.0.0 分布式数据库SQL组件 实验示例

首先用一段文字简介Phoenix：Phoenix是构建在HBase上的一个SQL组件，能让我们用标准的JDBCAPIs来操作HBase数据库进行创建表，插入数据和数据查询等常规操作。
Iggi_128·2023-03-14 12:03

Apache Hudi简介、与Kudu、Hive、 HBase对比

一、ApacheHudi数据实时处理和实时的数据实时分为处理的实时和数据的实时，即席分析是要求对数据实时的处理，马上要得到对应的结果，Flink、SparkStreaming是用来对实时数据的实时处理，数据要求实时，处理也要迅速，数据不实时，处理也不及时的场景则是我们的数仓T+1数据而本文探讨的ApacheHudi，对应的场景是数据的实时，而非处理的实时。它旨在将Mysql中的时候以近实时的方式映
四月天03·2023-03-14 11:47

高性能,高可用,高扩展方案总结

4、考虑NoSQL数据库的使用，比如HBase、TiDB等，但是团队必
递归宇宙·2023-03-14 09:32

hbase-memstore flush剖析

memstore是hbase中一个非常重要的组件，对于hbase的读写操作的性能起到举足轻重的作用，下面讲从memstore概述、memstoreflush触发条件、memstoreflush流程、memstoreflush
Demo_zfs·2023-03-14 08:44

搜索推荐后台开发-基本学习路线

基本学习内容目标优化离线数据流处理流程实现和优化搜索的在线服务建立和优化高效索引构建服务学习内容基础内容：Java存储结构Hbase->pegasus大数据框架HadoopSparkKafkaHadoopSparkKafka
bananafish·2023-03-14 07:20

HBase原理 | HBase Region 运行状态学习

HBase为每个Region维护一个状态，并将该状态保留在hbase:meta中。hbase：meta本身的Region状态保留在ZooKeeper中。
步闲·2023-03-14 02:58

Web基础配置篇（十一）: Zookeeper的安装配置及使用

Web基础配置篇（十一）:Zookeeper的安装配置及使用一、概述ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase
逍遥天扬·2023-03-13 20:57

Hadoop / HDFS / Spark / HBase知识点 + 区别

Hadoophadoop调度器Hadoop中常见的调度器有三种，分别为：FIFO调度器、公平调度器FairScheduler、容量调度器CapacityScheduler(计算能力调度器)作用是将系统中空闲的资源按一定策略分配给作业。在Hadoop中，调度器是一个可插拔的模块，用户可以根据自己的实际应用要求设计调度器。考虑因素:作业优先级。作业的优先级越高，它能够获取的资源（slot数目)也越多。
noobiee·2023-03-13 18:59

NoSql数据库之一Hbase学习笔记

NoSql数据库之：HBaseNoSql数据库简介Hbase也是一种主从式的架构HA和传统的关系型数据库的表结构不一样Nosql数据库比较重要，和我们的大数据紧密相连的。
LSophia_·2023-03-13 12:13

【HBase】HBase 协处理器

[TOC]一、协处理器的产生HBase和MapReduce有很高的集成，可以使用MR对存储在HBase中的数据进行分布式计算，但是：有些情况，例如简单的加法计算或者聚合操作（求和、计数等），如果能够将这些计算推送到
w1992wishes·2023-03-13 11:30

022 HBase 压缩和数据局部性

022HBaseCompactionandDataLocalityinHadoop1.HBaseCompactionandDataLocalityWithHadoop1.HBase压实和数据的位置与HadoopInthisHadoopHBasetutorialofHBaseCompactionandDataLocalitywithHadoop
胡巴Lei特·2023-03-13 08:54

Hbase中的各个组件介绍

https://blog.csdn.net/u013332124/article/details/100125269一、Hbase中的4大组件1、hbase-client客户端，用来访问hbase集群。
疯狂的哈丘·2023-03-13 05:21

HBase Filter 过滤器之 DependentColumnFilter 详解

前言：本文详细介绍了HBaseDependentColumnFilter过滤器Java&ShellAPI的使用，并贴出了相关示例代码以供参考。
步闲·2023-03-13 02:20

如何用DataX自定义KuduWriter插件

先了解一下什么是DataX，它能做什么事DataXDataX是阿里巴巴集团内被广泛使用的离线数据同步工具/平台，实现包括MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase
山间浓雾有路灯·2023-03-13 01:56

java连接hbase

在Windows上作映射C:\Windows\System32\drivers\etc更改hosts文件(小技巧:可能需要权限更改不了，可以将此文件拉到桌面更改保存了再拉回去)测试声明我整理的以下代码hbase1
超*·2023-03-12 04:55

NOSQL 分类

如：Hbase，Cassandra，Hypertable文档存储:文档存储一般用类似json的格式存储，存储的内容是文档型的。这样也就有机会对某些字段建立索引，实现关系数据库的某些功能。
涛涛心情_f4c9·2023-03-11 20:34

实习笔记2

retrofit参考--Retrofit+RxJava＋OkHttp让网络请求变的简单-基础篇在安卓中显示gif图片使用WebViewrunWebView.loadDataWithBaseURL(null
Jingtianer·2023-03-11 18:58

大数据大比拼：Hive vs HBase，你知道两者的区别和适用场景吗？

ApacheHive和ApacheHBase是两个非常流行的分布式数据存储技术。尽管两者都是Apache软件基金会的项目，但它们被设计用于不同的用例。
陈书予·2023-03-11 08:12

Flink 1.10 Kerberos权限配置 官网翻译

目标FlinkKerberos安全认证的主要目标是：1.任务访问连接器的时候启用数据安全访问权限2.与Zookeeper进行安全认证3.与Hadoop组件进行安全访问（eg：hdfs，hbase）生产环境部署中
海南中剑·2023-03-11 08:17

HBase 官方文档中文版

from:http://abloz.com/hbase/book.htmlApacheHBase™参考指南HBase官方文档中文版Copyright©2012ApacheSoftwareFoundation
lbyyy·2023-03-11 07:40

hbase官方文档中文版0.97

ApacheHBase™参考指南HBase官方文档中文版摘要这是ApacheHBase(TM)的官方文档。
克终·2023-03-11 07:39

hbase0.95 官方文档

摘要这是ApacheHBase(TM)的官方文档。HBase是一个分布式，版本化，面向列的数据库，构建在ApacheHadoop和ApacheZooKeeper之上。
cheng911215·2023-03-11 07:07

HBase Or Filter FilterList

Hbase多条件过滤使用FilterListWithOR时会报错，不想去纠结，查阅的了FilterList的API，API链接api原文ImplementationofFilterthatrepresentsanorderedListofFilterswhichwillbeevaluatedwithaspecifiedbooleanoperatorFilterList.Operator.MUST
_stone·2023-03-11 02:43

技术更新太快，很容易被淘汰，真的是这样吗？

下面我们举例几个例子：1、存储框架：Hbase、C
ixxqq·2023-03-10 17:04

WebView之loadDataWithBaseUrl()和loadUrl()

前两天因为这个问题改了半天，今天就写一下吧省的下次忘记了；在写WebView的时候，经常会使用WebView，好处主要有两个：可以更改展现的内容（包括样式）可以实现部分功能的跨平台loadData()和loadDataWithBaseUrl
一个不爱敲代码的女孩·2023-03-10 15:05

SparkSQL处理复杂json的例子

颜色标签2":{"颜色2":["黑色","白色","红色","蓝色","绿色","紫色","黄色"],"尺寸2":["超大","大"]}}问题使用SparkSQL将上述的数据根据嵌套提取成3列解答withbase_tbas
天之見證·2023-03-10 15:35

Elasticsearch趟坑记——后台数据篇

image背景：项目隶属于用户画像服务，为了更好的支持前端查询服务，决定将原有的HBase数据源切换成Elasticsearch(以下简称ES)，从k-v型数据库切到nosql。
亦一亦二·2023-03-10 09:12

Hive项目02-数据清洗及函数运用

文章目录一、问题二、本题用到的知识点三、解题过程1、启动服务2、数据准备3、创建临时存储日志数据hive的表4、创建考试记录的表5、创建HBase表6、创建hive表映射hbaseanalysis:accuracy7
xiaoxaoyu·2023-03-10 09:21

Hbase 映射到Hive

目录一、环境配置修改关闭掉hbase，zookeeper和hive服务进入hive312/conf修改hive-site.xml配置，在代码最后添加配置将hbase235的jar包全部拷贝到hive312
Xiayebuliang·2023-03-10 09:50
上一页 54 55 56 57 58 59 60 61 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他