HBase日常维护

从传统型数据库到非关系型数据库

讲HBase之前，我们先从关系数据库
僖僖cc·2023-12-17 17:38

Pg数据库日常维护操作指南

本文主要用来记述pg数据库的相关操作和异常排查指南，继上一篇博客之后，异常的频繁更新，导致死亡元组指数级增长之后，空间占用也成倍增长，逻辑问题导致了数据库问题，但细想之下也发现,当pg在面对海量数据的更新删除之后，频繁的autovacuum会导致数据库大量的I/O，完了又会影响其他进程，就参数配置来看，还是有蛮多优化的空间的，毕竟空间和时间是两个相生相克的关系。就目前的默认的配置来看，手动标记60
i查拉图斯特拉如是·2023-12-17 14:49

如何使用ycsb工具对mongodb进行性能测试过程

测试环境：linux系统：Centos7.2,版本：RedHat4.8.5-44)YCSB简介ycsb是一款性能测试工具，用Java写的，并且什么都可以压，像是mongodb，redis，mysql，hbase
情勤坊·2023-12-17 08:12

YOLO V8智能城市国外探测方法--译【杂文】

link.springer.comAnimprovedfiredetectionapproachbasedonYOLO-v8forsmartcitiesFatmaMTalaat,HanaaZainEldinNeuralComputingandApplications35
小楼先森·2023-12-17 05:01

ubuntu下hbase的搭建和依赖环境搭建以及相关操作

ubuntu从0安装HBase和HBase所依赖的环境的安装配置简单说三步走java环境的安装和配置hadoop安装和配置hbase安装和配置我的搭建环境ubuntu:18软件源阿里云java:openjdkversion
不走小道·2023-12-17 05:53

hbase

1.请简要介绍HBase的基本架构和组件。HBase是一种基于列式存储的分布式数据库，其底层存储采用的是LSM树。这种数据库是Hadoop生态下的核心技术之一。
编织幻境的妖·2023-12-16 20:51

Hbase2.1 集群搭建

>Hbase在大数据的体系中扮演着DB角色，不得不说是重要的一员，在上一篇，大猪已经给大家演示了[Hadoop3.2集群搭建](https://www.jianshu.com/p/3182aaff918d
kikiki4·2023-12-16 19:41

Canal实时同步MySQL数据到ES

一、canal简介canal主要用途是对MySQL数据库增量日志进行解析，提供增量数据的订阅和消费，简单说就是可以对MySQL的增量数据进行实时同步，支持同步到MySQL、Elasticsearch、HBase
IEVEl·2023-12-16 17:09

HBase理论知识

文章目录HBase理论知识存储结构数据类型NameSpaceRegionRowColumnTimeStampCell基础架构MasterRegionServerWAL(Write-AheadlogFile
CODE20220318·2023-12-16 16:23

头歌——HBase 开发：使用Java操作HBase

第1关：创建表题目任务描述本关任务：使用Java代码在HBase中创建表。相关知识为了完成本关任务，你需要掌握：1.如何使用Java连接HBase数据库，2.如何使用Java代码在HBase中创建表。
Changersh·2023-12-16 13:20

Creating PDF Files in Java

1.IntroductionInthisquicktutorial,we’llfocusoncreatingPDFdocumentsfromscratchbasedontheiTextandPdfBoxlibraries
lang20150928·2023-12-16 12:28

Hbase - 迁移数据[导出,导入]

有没有这样一样情况，把一个集群中的某个表导到另一个群集中，或者hbase的表结构发生了更改，但是数据还要，比如预分区没做，导致某台RegionServer很吃紧，Hbase的导出导出都可以很快的完成这些操作
kikiki2·2023-12-16 11:51

ElasticSearch与HBase的分布式存储设计

本文内容覆盖如今两大非结构化数据库之间的区别详情介绍从各个角度详细对比1.官方定位HBase是Hadoop数据库，是一个分布式、可扩展的大数据存储。
不学会Ⅳ·2023-12-16 09:32

HBase的安装与简单操作

文章目录第1关：Hbase数据库的安装第2关：创建表第3关：添加数据、删除数据、删除表第1关：Hbase数据库的安装编程要求根据上述步骤安装配置好HBase数据库，并启动成功。
柔雾·2023-12-16 09:56

Hbase BulkLoad用法

要导入大量数据，Hbase的BulkLoad是必不可少的，在导入历史数据的时候，我们一般会选择使用BulkLoad方式，我们还可以借助Spark的计算能力将数据快速地导入。
kikiki1·2023-12-16 07:59

初识大数据应用，一文掌握大数据知识文集(1)

05、Hive跟Hbase的区别？06、请列出正常工作的hadoop集群中hadoop都需要启动哪些进程，他们的作用分别是什么？07、KafkaUtils.cr
普修罗双战士·2023-12-16 06:22

win10环境下git安装和基础操作

简述关于git的作用就不多赘述了，配合GitHub，达到方便人们日常项目维护和管理，每一次项目增删改查都可以看的清清楚楚，方便团队协作和个人项目日常维护。
shark-chili·2023-12-16 05:26

数据结构 | Log-Structured Merge Tree (LSM Tree)

LSMTree最先在1996年被提出，后来被广泛运用于现代NoSQL（非关系型数据库）系统中，包括BigTable,Dynamo,HBase,Cassandra,LevelDB,RocksDB,andAsterixDB.LSMTree
赵同学的代码时间·2023-12-16 05:50

Storm+Kafka+Redis+zookeeper docker集群实战问题与解决

目录引言问题与解决引言下面的错误主要是在完成大数据展屏时遇到的一些报错，从最开始的storm构建rowkey，hbase实现统计到storm直接统计redis存结果，第一种方式是参考的一本storm实战书籍
小小小秃头·2023-12-16 05:18

日常优化Windows 10的十种方法，你用了几种

从简单的Windows配置硬件添加到日常维护，你可以尝试一些措施来优化当前设置。以下是如何在花费最少的情况下充分利用你的电脑。
行走的电脑·2023-12-16 05:47

Hbase - 自定义Rowkey规则

>在Flink中我们有时候需要分析数据1点到2点的范围,可是经过Region又比较慢，这时候我们就可以定制`TableInputFormat`来实现我们的需求了，我们还可以采用Flink的`DataSet`的方式读取,另外下面还有`Spark`读取的例子。##使用教程Md5Util.java```importorg.apache.commons.codec.binary.Hex;importjav
kikiki5·2023-12-16 04:13

Hbase - 迁移数据[导出,导入]

>有没有这样一样情况，把一个集群中的某个表导到另一个群集中，或者hbase的表结构发生了更改，但是数据还要，比如预分区没做，导致某台RegionServer很吃紧，Hbase的导出导出都可以很快的完成这些操作
kikiki5·2023-12-15 22:51

大数据基础知识

为了一场紧急考试，没有正经系统学习过大数据知识的我开始恶补概念涉及Hadoop、Hbase、Spark、Flink、Flume、Kafka、Sqoop、HDFS、Hive、Mapreduce、Impala
偶余杭·2023-12-15 17:22

HBase 高可用集群详细图文安装部署

目录一、HBase安装部署1.1Zookeeper正常部署1.2Hadoop正常部署1.3HBase安装1.4HBase的配置文件1.4.1hbase-env.sh1.4.2hbase-site.xml1.4.3regionservers1.4.4
Stars.Sky·2023-12-15 17:38

HBase

1.请简要介绍HBase的基本架构和组件。
编织幻境的妖·2023-12-15 17:35

HBase 详细图文介绍

目录一、HBase定义二、HBase数据模型2.1HBase逻辑结构2.2HBase物理存储结构2.3数据模型2.3.1NameSpace2.3.2Table2.3.3Row2.3.4Column2.3.5TimeStamp2.3.6Cell
Stars.Sky·2023-12-15 16:24

Hbase的Rowkey设计

Hbase的Rowkey设计rowkey设计#1）长度原则#最大64KB，推荐长度10~100byte#最好设为8的倍数，能短则短，rowkey如果太长会影响性能。
坤坤不爱吃鱼·2023-12-15 16:54

Hbase2.5.5分布式部署安装记录

文章目录1环境准备1.1节点部署情况1.2安装说明2Hbase安装过程Step1：Step2:Step3:Step4：3WebUI检查状态并测试3.1WebUI3.2创建测试命名空间1环境准备1.1节点部署情况
程序终结者·2023-12-15 16:23

便捷搭建 Zookeeper 服务器的方法，好用，收藏~

由于ZooKeeper便捷的使用方式、卓越的性能和良好的稳定性，被广泛地应用于诸如Hadoop、HBase、Kafka和Dubbo等大型分布式系统中。整理了一份Java面试宝典完整版PDFZo
程序员白楠楠·2023-12-15 14:03

Hbase性能调优

client端HTable.setAutoFlush(false)关闭客户端自动刷新HTable.setWriteBufferSize(writeBufferSize)设置HTable客户端的写buffer大小，与上面的参数配合使用。当达到设置的writeBufferSize时，才会触发提交到服务端的请求。（不适合实时读写业务）Put.setWriteToWAL(false)关闭WAL日志客户端向
onwingsofsong·2023-12-15 14:51

HBase-架构与设计

HBase架构与设计一、背景二、HBase概述1.设计特点2.适用场景2.1海量数据2.2稀疏数据2.3多版本数据2.4半结构或者非结构化数据三、数据模型1.表逻辑结构2.RowKey3.ColumnFamily4
临江蓑笠翁·2023-12-15 13:15

【基础知识】大数据概述

参考内容中国开源生态图谱2023.pdf技术组件说明数据集成sqoop、dataX、flume数据存储hdfs、kafka数据处理mapreduce、hive、impala、spark、flink数据分析hbase
偏振万花筒·2023-12-15 12:39

大数据技术13：HBase分布式列式数据库

前言：2007年Powerset的工作人员，通过google的论文开发出了BigTable的java版本，即HBASE。2008年HBASE贡献给了Apache。HBase需要依赖JDK环境。
Java架构何哥·2023-12-15 07:05

物流实时数仓：采集通道搭建

系列文章目录物流实时数仓：环境搭建文章目录系列文章目录前言一、环境准备1.前置环境2.hbase安装1.上传并解压2.配置环境变量3.拷贝jar包4.编写配置文件5.分发配置文件3.Redis安装1.安装需要的编译环境
超哥--·2023-12-15 06:34

物流实时数仓：数仓搭建（DIM）

数仓搭建物流实时数仓：数仓搭建（DIM）文章目录系列文章目录前言一、文件编写1.pom.xml2.目录创建3.DimApp.java4.KafkaUtil.java5.CreateEnvUtil.java6.HbaseUtil.java7
超哥--·2023-12-15 06:34

redis基础及redis的持久化和数据恢复

基础redis：非关系型数据库，内存存储，持久化，键值对存储，监听端口号6379/tcp，默认监听127.0.0.1地址(只能本地访问)1.noSQL数据库类型文档型数据库：MongoDB等列族数据库：HBase
我真的学不会救救我吧·2023-12-15 03:56

Java 操作HBase

Java操作HBase思路1.建立连接2.针对表的操作（创建表、删除表、判断表是否存在、使用/禁用表、列出表）3.针对数据的操作（添加、删除、修改、查看）4.关闭连接HBase常用的JavaAPIJavaAPI
叶子上的考拉·2023-12-15 02:25

sqoop安装及测试（坑解决）

[root@leaderbin]#echo$HADOOP_HOME/opt/hadoop-3.2.2[root@leaderbin]#echo$HBASE_HOME
Java页大数据·2023-12-14 16:27

基于hadoop-3.3.2安装hbase-2.4.11，报错：object is not an instance of declaring class（已处理）

基于hadoop-3.3.2安装hbase-2.4.11，报错：objectisnotaninstanceofdeclaringclass安装之前看了hbase官网，hbase-2.4.11和hadoop
Java页大数据·2023-12-14 16:27

初识Redis

NoSQLSQLNoSQL数据结构结构化非结构化数据关联关联的非关联的查询方式SQL非SQL事务特性ACIDBASE存储方式磁盘内存扩展性垂直水平非结构化数据机构：键值类型：Redis文档类型：MongoDB类类型：HBaseGraph
不爱生姜不吃醋·2023-12-14 15:38

【原创】基于SSM的超市进销存管理系统（超市管理系统毕业设计）

主要目标是对商品日常维护、售卖、商品类别、存储记录、库存维护等功能的统计及整理。系统设计了普通员工和管理员两个角色。
那条学长V·2023-12-14 13:42

CentOS7 Hadoop3.X完全分布式环境搭建

windows10、centos7.9、hadoop3.x、jdk1.8-8u162hadoop各版本jdk各版本特此说明：Hadoop版本最好不要选hadoop3.1.0，因为官网显示此hadoop版本对于各个版本Hbase
向之 所欣·2023-12-14 12:45

ERROR: Can‘t get master address from ZooKeeper； znode data == null

进入HBase使用list命令查询表时报错如下：hbase(main):001:0>listTABLEERROR:Can'tgetmasteraddressfromZooKeeper;znodedata
程序员老五·2023-12-14 12:13

idea连接Hbase卡住，没有输出

1.项目场景（idea连接hbase)先检查hadoop,zookeeper，hbase启动没有idea连接hbase,创建命名空间，idea一直卡住在日志，没有输出packagecom.wf.hbase
挽风821·2023-12-14 12:38

解决ERROR:Can‘t get master address from Zookeeper；znode data == null报错

解决ERROR:Can’tgetmasteraddressfromZookeeper;znodedata==null报错问题描述：启动Hbase时候，jps查看进程，发现有全部进程，但是打开hbaseshell
夢醒汐月·2023-12-14 12:36

HBase Error : Can't get master address from ZooKeeper; znode data == null

  在启动hbase时一切正常，但是输入命令就报错  Error:Can’tgetmasteraddressfromZooKeeper;znodedata==null 首先先检查进程是否都有启动，（JPS
isOllie·2023-12-14 12:33

Hbase报错:ERROR: Can't get master address from ZooKeeper; znode data == null

Hbase报错:ERROR:Can’tgetmasteraddressfromZooKeeper;znodedata==null方法一：查看日志报SessionExpiredException:KeeperErrorCode
我真的不想学啦·2023-12-14 12:30

【已解决】ERROR: Can‘t get master address from ZooKeeper； znode data == null

方法一hbase和zookeeper之间会话超时了修改HBase/conf路径下的配置文件hbase-site.xml，添加下列代码：zookeeper.session.timeout1200000hbase.zookeeper.property.tickTime6000
柳叶lhy·2023-12-14 12:54

hbase报错ERROR: Can't get master address from ZooKeeper; znode data == null

错误如下：运行Hbaseshell时报错：hbase(main):006:0>listTABLEERROR:Can'tgetmasteraddressfromZooKeeper;znodedata==nullHereissomehelpforthiscommand
Yhappy727·2023-12-14 12:17

Hadoop3.x完全分布式环境搭建Zookeeper和Hbase

集群规划IP地址主机名集群身份192.168.138.100hadoop00主节点192.168.138.101hadoop01从节点192.168.138.102hadoop02从节点Hadoop完全分布式环境搭建请移步传送门先在主节点上进行安装和配置，随后分发到各个从节点上。1.安装zookeeper1.1解压zookeeper并添加环境变量1）解压zookeeper到/usr/local文件
向之 所欣·2023-12-14 12:32
上一页 10 11 12 13 14 15 16 17 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他