hbase大数据运维

物流实时数仓：数仓搭建（DWS）一

物流实时数仓：数仓搭建（DWD）一物流实时数仓：数仓搭建（DWD）二物流实时数仓：数仓搭建（DWS）一文章目录系列文章目录前言一、代码编写1.文件创建1.主程序2.实体类3.自定义触发器4.自定义聚合函数5.在HbaseUtil
超哥--·2024-01-04 22:56

hbase编程

importorg.apache.hadoop.conf.Configuration;importorg.apache.hadoop.hbase.
SunsPlanter·2024-01-04 15:23

（十一）数据分片(Sharding)和数据分区(PARTITIONing)简述

虽然可能跟其它的例如HBase、Hive之类的比有些差异和不足，但并不影响壮志。
紫狐挽诗·2024-01-04 14:36

HBase基本概念与基本使用

1.HBase简介1.1什么是HBaseHBASE是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBASE技术可在廉价PCServer上搭建起大规模结构化存储集群。
Yobhel·2024-01-04 08:28

Java技术栈 —— Hadoop入门（一）

第一印象二、安装Hadoop三、Hadoop解析3.1Hadoop生态介绍3.1.1MapReduce-核心组件3.1.2HDFS-核心组件3.1.3YARN-核心组件3.1.4其它组件3.1.4.1HBase3.1.4.2Hive3.1.4.3Spark
键盘国治理专家·2024-01-04 08:02

用python抓取yarn和jstorm界面资源信息在grafana展示

背景：大数据系统分布式计算和存储强大功能推动了科技的进步，而在大数据运维过程中计算资源是时刻要关注的指标。
运维仙人·2024-01-04 07:29

启动Hbase后HMaster老是掉的原因

1.启动Hbase之前先启动hdfs,zookeeper,再启动Hbase,但是隔一会就发现HMaster掉线了,但是hregionserver还在.2.解决:重新启动Hbase之前,先kill掉hregionserver
夺命大翻斗·2024-01-03 22:12

Spark向Hbase中写数据报异常:org.apache.hadoop.hbase.client.RetriesExhaustedWithDetailsException: Failed 5

解决:将第二行代码中的表名写全,并指定在哪个名称空间valtable:Table=con.getTable(TableName.valueOf("info:tb_order"))
夺命大翻斗·2024-01-03 22:12

电商数仓可视化1--数据导入

、商品信息、店铺信息、订单数据、订单支付信息、活动信息、物流信息等2、埋点数据埋点日志相对业务数据是用于数据分析、挖掘需求，一般以日志形式存储于日志文件中，随后通过采集落地分布式存储介质中如hdfs、hbase
bigdata从入门到放弃·2024-01-03 18:53

HBase Java API 03：HBase与MapReduce整合

HBase版本：1.2.61.案例说明现有hbase表"student"，其中内容如下：hbase(main):025:0>scan'student'ROWCOLUMN+CELL0001column=info
CoderJed·2024-01-03 14:14

认真学SQL——MySQL入门之环境准备

关系型数据库:必须遵循SQL规范,强调以二维表格的形式存储数据举例:MySQLORACLEDB2SqlServerSQLite非关系型数据:NoSQL不仅仅是SQL,强调以key-value形式存储数据举例:HBaseRedisMongoDB
困了就倒头睡·2024-01-03 13:47

HBASE基础

1、NoSQL非关系型数据库2、hbase是面向列存储结构，即类似于hashmap3、hbase是以hdfs作为基础存储4、官网http://hbase.apache.org/5、hbase的逻辑结构是由行与列族构成的
xinxinyydss·2024-01-03 12:25

【HBase】——Shell操作

1基本操作1.1进入HBase客户端命令行bin/hbaseshell1.2查看帮助命令能够展示HBase中所有能使用的命令，主要使用的命令有namespace命令空间相关，DDL创建修改表格，DML写入读取数据
那时的样子_·2024-01-03 12:51

【HBase】——Java API

1环境1.1依赖org.apache.hbasehbase-client2.4.111.2配置文件hbase-site.xmlhbase.zookeeper.quorumhadoop102:2181,hadoop103
那时的样子_·2024-01-03 12:47

HBase从入门到精通11：HBase数据保存过程和Region分裂

本节来介绍一下HBase的数据保存过程和Region分裂过程的相关知识。
金字塔下的小蜗牛·2024-01-03 07:35

python操作hdfs及hbase

如果存在权限不足，可以通过命令行对上层目录权限进行修改：hadoopdfs-chmod-R777/tmp或者hdfs的配置文件中，将dfs.permissions修改为False（出方法暂未尝试）操作Hbase
佛系小懒·2024-01-03 04:26

Hbase - kerberos认证异常

>之前怎么认证都认证不上，问题找了好了，发现它的异常跟实际操作根本就对不上，死马当活马医，当时也是瞎改才好的，给大家伙记录记录。```KrbException:ServernotfoundinKerberosdatabase(7)-LOOKING_UP_SERVER>>>KdcAccessibility:removestorm1.starsriver.cnatsun.security.krb5.K
kikiki4·2024-01-03 03:27

HBase 容错和高可用

HBase是一个没有单点故障的分布式系统，计算层和存储层都有各自的保障了服务的可用性。
Alex90·2024-01-03 02:45

Hbase介绍以及Hive优势

一，Hbase介绍HBase是典型的NoSQL数据库，通常被描述成稀疏的、分布式的、持久化的，由行键、列键和时间戳进行索引的多维有序映射数据库，主要用来存储非结构化和半结构化的数据。
毛毛虫同学·2024-01-02 14:38

MySQL基础学习: 第一章 数据库概述

、数据库的分类1、关系型数据库Oracle：收费MySQL：免费SQLSERVER：收费hiveTIDB人大金仓（KINGBASE）达梦（dm）dorisoceanbase2、非关系型数据库RedisHbaseElasticsearchInfluxdbks3
玉成226·2024-01-02 12:43

架构设计内容分享(七十一)：架构必备：10WQPS超高并发架构的10大思想

数据分治思想+分库分表3.读写分离思想+主从分离4.池化思想5.缓存思想6.异步思想+消息队列削锋7.服务保护思想：熔断降级8.限流思想9.扩容思想+切流量10.海量数据处理思想ElasticSearch+Hbase
之乎者也··2024-01-02 11:59

HBase内容分享（五）：HBase读写性能优化

目录一、HBase读优化1.HBase客户端优化2.HBase服务器端优化3.HBase列族设计优化4.HDFS相关优化5.HBase读性能优化归纳二、HBase写优化1.写性能优化切入点2.写异常问题检查点一
之乎者也··2024-01-02 10:48

Hbase - kerberos认证异常

>之前怎么认证都认证不上，问题找了好了，发现它的异常跟实际操作根本就对不上，死马当活马医，当时也是瞎改才好的，给大家伙记录记录。```KrbException:ServernotfoundinKerberosdatabase(7)-LOOKING_UP_SERVER>>>KdcAccessibility:removestorm1.starsriver.cnatsun.security.krb5.K
kikiki5·2024-01-02 06:49

Linux安装Hbase并且使用python进行读取操作

1.Hbase安装：可以参考这篇文章，写的很详细：https://blog.csdn.net/wuruijie321/article/details/79932752需要注意的。
frankie_cheung·2024-01-01 10:29

Hbase - 表导出CSV数据

MR考查了Hbase的各种MR，没有发现哪一个是能实现的，如果有请通知我，我给他发红包。所以我们只能自己来写一个MR了，编写一个Hbase的MR，官方文档上也有相应的例子。
kikiki2·2024-01-01 09:02

HBase内容分享（四）：深度学习HBase

目录1.引言2.HBase概述3.安装与配置4.数据操作5.数据模型与架构6.客户端开发7.HBase优化8.总结1.引言在当今数字化的时代，数据已经成为了推动商业、科研和社会发展的关键资源。
之乎者也··2024-01-01 05:23

Hbase 的三个应用

Hbase的三个应用分布式自旋锁。分布式的唯一序列号分布式系统黑名单分布式自旋锁是一种在分布式系统中用于实现并发控制的锁机制。
bluedraam_pp·2023-12-31 21:17

Hbase - kerberos认证异常

>之前怎么认证都认证不上，问题找了好了，发现它的异常跟实际操作根本就对不上，死马当活马医，当时也是瞎改才好的，给大家伙记录记录。```KrbException:ServernotfoundinKerberosdatabase(7)-LOOKING_UP_SERVER>>>KdcAccessibility:removestorm1.starsriver.cnatsun.security.krb5.K
kikiki5·2023-12-31 21:59

阿里巴巴运维体系变迁史

2007年加入阿里，10年间打造了阿里目前使用最为广泛的核心中间件之一的服务框架；建设了阿里的HBase团队，发展到今天HBase已经是阿里最重要的NoSQL产品；打造阿里基于LXC的虚拟化系统，以及集群资源管理系统
Linux丶晨星·2023-12-31 19:43

HBase内存配置及JVM优化

前言本文从HBase的内存布局说起，先充分了解HBase的内存区的使用与分配，随后给出了不同业务场景下的读写内存分配规划，并指导如何分析业务的内存使用情况，以及在使用当中写内存Memstore及读内存扩展
小枫@码·2023-12-31 18:28

Hbase读流程

Client-Server交互逻辑经常有业务同学咨询为什么客户端配置文件中没有配置RegionServer的地址信息，这里针对这种疑问简单的做下解释，客户端与HBase系统的交互阶段主要有如下几个步骤：
tracy_668·2023-12-31 17:35

HBase 例行灾备方案：快照备份与还原演练

该方案是为某用户定制的HBase灾备方案，方案本身具有很好的适用性，可以复用于常规H
　Laurence·2023-12-31 12:28

java hbase 配置文件_Hbase入门(二)——安装与配置

本文讲述如何安装，部署，启停HBase集群，如何通过命令行对Hbase进行基本操作。并介绍Hbase的配置文件。在安装前需要将所有先决条件安装完成。
weixin_39804329·2023-12-31 10:30

Spring Boot IO官方文档中文版

原文链接SpringBootIO官方文档中文版引言缓存支持的缓存提供程序GenericJCache(JSR-107)HazelcastInfinispanCouchbaseRedisCaffeineCache2kSimpleNoneHazelcastQuartzScheduler
逆水行舟x·2023-12-31 08:45

Canal的学习

SpringBoot基本概念Canal是一个基于MySQL数据库增量日志解析，提供增量数据订阅和消费，支持将增量数据投递到下游消费者（如Kafka、RocketMQ等）或者存储（如Elasticsearch、HBase
kk变色龙13·2023-12-31 08:08

Zookeeper集群搭建

系列文章目录Ubuntu常见基本问题Hadoop3.1.3安装（单机、伪分布）Hadoop集群搭建HBase2.2.2安装（单机、伪分布）Zookeeper集群搭建HBase集群搭建Spark安装和编程实践
WE-ubytt·2023-12-31 08:53

Vmware虚拟机无法联通主机解决方法二

今天在学习HBase时，昨天的问题又重新了，我通过SSH工具MobaXterm都无法联通CentOS-7虚拟机。
在奋斗的大道·2023-12-31 05:45

CSS 动态提示框

border-right-color:transparent;}}@keyframestypeAndDelete{0%,10%{width:0;}45%,55%{width:200rpx;}/*adjustwidthbasedoncontent
特创数字科技·2023-12-31 03:43

Hbase - 批量写入加速技巧

##背景之前我们的线上业务一直使用的是Hbase的单条put操作,为了提高程序的写入性能我们还针对业务进行了修改，将日志批量化，也就是hbase的put多条操作，后面发现hbase的客户端是支持本地批量操作
kikiki4·2023-12-30 23:02

【图文详解】HBase 数据模型及其架构原理

HBase简介https://hbase.apache.org/HBase，HadoopDatabase，是一个高可靠性、高性能、面向列存储、可伸缩、实时读写的分布式开源NoSQL数据库。
禅与计算机程序设计艺术·2023-12-30 21:40

HBase2.0的修复工具HBCK2

HBCK是HBase1.x中的命令，到了HBase2.x中，HBCK命令不适用，且它的写功能（-fix）已删除，它虽然还可以报告HBase2.x集群的状态，但是由于它不了解HBase2.x集群内部的工作原理
大猿小猿向前冲·2023-12-30 15:26

Hbase 预分区建表

![](https://upload-images.jianshu.io/upload_images/9028759-735db08803d91f7c.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)```privatestaticAdminadmin=null;privatestaticfinalStringuser="admin/a
kikiki4·2023-12-30 14:28

Hbase - 表导出CSV数据

MR考查了Hbase的各种MR，没有发现哪一个是能实现的，如果有请通知我，我给他发红包。所以我们只能自己来写一个MR了，编写一个Hbase的MR，官方文档上也有相应的例子。
kikiki1·2023-12-30 11:36

共享单车之数据分析

统计共享单车在指定地点的每天平均次数第3关：统计共享单车指定车辆每次使用的空闲平均时间第4关：统计指定时间共享单车使用次数第5关：统计共享单车线路流量第1关：统计共享单车每天的平均使用时间任务描述本关任务：使用Hbase
柔雾·2023-12-30 07:10

三台CentOS7.6虚拟机搭建Hadoop完全分布式集群（三）

9安装hbase温馨提示：安装hbase先在master主节点上配置，然后远程复制到slave01或slave02，在配置环境即可。
666-LBJ-666·2023-12-30 07:56

Hbase详解

Hbase概念base是分布式、面向列的开源数据库（其实准确的说是面向列族）。
武昌库里写JAVA·2023-12-30 05:41

HBASE的应用场景

2018/08/31HBase是如何与Hadoop嵌入在一起的，那么他的作用又是什么。这显然跟我原来理解的那些个数据库不太一样，就比如mango这种。现在比较关注的就是他的数据导入，是怎么样的。
VChao·2023-12-29 16:49

couchbase的使用（springboot连接couchbase，node.js连接couchbase）

网上的couchbase资料十分有限，这无疑给我们学习增加了难度。
caibixyy·2023-12-29 13:49

简单的 MapReduce 程序的示例代码，用于统计 HBase 中的成绩表中的单科排名和总分排名，并将结果上传到 HDFS 中。...

下面是一个简单的MapReduce程序的示例代码，用于统计HBase中的成绩表中的单科排名和总分排名，并将结果上传到HDFS中：```importjava.io.IOException;importorg.apache.hadoop.conf.Configuration
weixin_42601702·2023-12-29 10:19

统计 HBase 中的成绩表中的单科排名和总分排名，并将结果上传到 HDFS 中的完整代码...

这是一个使用HBaseJavaAPI统计成绩表中的单科排名和总分排名的完整代码示例。首先，你需要在pom.xml中添加HBase依赖：org.apache.hbasehbase-client2.3.2
轮胎技术Tyretek·2023-12-29 10:18
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他