hbase大数据运维

大数据---35.HBase 常用的api的具体解释

Hbase是一个分布式的、面向列的开源数据库，HDFS文件操作常有两种方式，一种是命令行方式，即Hbase提供了一套与Linux文件命令类似的命令行工具。
学无止境的大象·2023-12-23 13:00

Hbase2.1 集群搭建

>Hbase在大数据的体系中扮演着DB角色，不得不说是重要的一员，在上一篇，大猪已经给大家演示了[Hadoop3.2集群搭建](https://www.jianshu.com/p/3182aaff918d
kikiki4·2023-12-22 22:56

解决安卓（AndroidX）设置多语言失效问题

1.背景最近在做一个香港的项目中，需要设置简体、繁体以及英文三种语言，在切换语言后会重启MainActivity，此时会在BaseActivity中重写attachBaseContext方法，重新设置context
TimberBug·2023-12-22 20:30

解析HBase原理之数据读取流程

和写流程相比，HBase读数据是一个更加复杂的操作流程，这主要基于两个方面的原因：其一是因为整个HBase存储引擎基于LSM-Like树实现，因此一次范围查询可能会涉及多个分片、多块缓存甚至多个数据存储文件
丨程序之道丨·2023-12-22 17:06

Powershell 批量导出 AD中 某个OU 下所有用户

'''Get-ADUser-Filter*-SearchBase'OU=DaTeng,DC=dingtong,DC=COM,DC=CN'-PropertiesName,SamAccountName,Enabled
不明世事的运维人·2023-12-22 15:07

DataX安装与原理

一、简介与安装DataX是一个异构数据源离线同步工具，致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、FTP等各种异构数据源之间稳定高效的数据同步功能
大数据点滴·2023-12-22 14:05

【maven】批量maven 本地 install

举例说明安装hbase包tests.jar结尾得包不需要安装，版本号不是2.4.9的不需要安装hbase-annotations-2.4.9-tests.jarhbase-external-blockcache
lisacumt·2023-12-22 11:23

Oracle数据库概述、SQL plus的使用、SQL分类

如redis、hadoop(hbase)等2.Oracle数据库概述O
特亿安·2023-12-22 11:20

Hbase的安装配置

注：本文默认已经完成hadoop的下载以及环境配置1.上传zookeeper和hbase压缩包到指令路径并且解压(理论上讲，hbase其实内置了zookeeper，我们也可以不另外下载，另外下载的目的在于减少组件间依赖性
printcsr·2023-12-22 07:15

hbase用shell命令新建表报错ERROR: KeeperErrorCode = NoNode for /hbase/master

或者HMster开启后几秒消失问题解决报错如图：首先jps命令查看当前运行的内容有没有HMaster,如果没有，开启一下hbase,稍微等一会儿，再看一下HMaster,如果仍和下图一样没有，就基本找到问题了本人问题原因
什么都不太会的研究生·2023-12-22 07:32

Hbase - 批量写入加速技巧

##背景之前我们的线上业务一直使用的是Hbase的单条put操作,为了提高程序的写入性能我们还针对业务进行了修改，将日志批量化，也就是hbase的put多条操作，后面发现hbase的客户端是支持本地批量操作
kikiki5·2023-12-22 04:14

Hbase--面试题整理-01

01-Hbase的特点以下五点需要准确说出的，如果可以还可以将一下Hbase的写入比读取快的原因(1)Hbase一个分布式的基于列式存储的数据库,基于Hadoop的hdfs存储，zookeeper进行管理
李小李的路·2023-12-22 03:51

HBase基础知识（一）：HBase简介、HBase数据模型与基本架构

第1章HBase简介1.1HBase定义HBase是一种分布式、可扩展、支持海量数据存储的NoSQL数据库。
依晴无旧·2023-12-21 21:48

HBase基础知识（二）：HBase集群部署、HBaseShell操作

1.HBase安装部署1.1Zookeeper正常部署首先保证Zookeeper集群的正常部署，并启动之：创建集群启动脚本：#!
依晴无旧·2023-12-21 21:48

java hbase连接kerberos的几个常见错误

(null))javax.security.auth.login.LoginException:Clockskewtoogreat很常见，时间同步问题，让调用方和hbase、kerberos服务器的时间一致就行
xyhshen·2023-12-21 20:26

【powershell】Windows环境powershell 运维之历史文件压缩清理

个人主页——开着拖拉机回家_Linux,大数据运维-CSDN博客✨感谢点赞和关注，每天进步一点点！加油！
阿龙先生啊·2023-12-21 20:50

大数据----32.hbase高可用的演示

1、概述：Hbase的优缺点和适用场景优点：HBase底层基于HDFS存储，高可用、高扩展、强一致性，支持上亿级别数据。
学无止境的大象·2023-12-21 19:10

大数据----33.hbase中的shell文件操作

HBase的命令行工具，最简单的接口，适合HBase管理使用，可以使用shell命令来查询HBase中数据的详细情况。
学无止境的大象·2023-12-21 19:10

大数据----31.hbase安装启动

二.Hbase安装先前安装：Zookeeper正常部署首先保证Zookeeper集群的正常部署，并启动之。
学无止境的大象·2023-12-21 19:40

大数据---33.HBase数据结构

一、HBase简介HBase是一个开源的、分布式的、版本化的NoSQL数据库（即非关系型数据库），依托Hadoop分布式文件系统HDFS提供分布式数据存储，利用MapReduce来处理海量数据，用Zookeeper
学无止境的大象·2023-12-21 19:07

Flink电商实时数仓（三）

主流数据根据广播数据及时调整处理逻辑，并自动在HBase中创建相应的维度表和写入相应的维度数据。消费Kafkaods业务
十七✧ᐦ̤·2023-12-21 18:48

Android性能优化笔记（一）——启动优化

应用启动类型冷启动场景：开机后第一次启动应用或者应用被杀死后再次启动生命周期：Process.start->Application创建->attachBaseContext->onCreate->onStart
小城哇哇·2023-12-21 13:13

【大数据存储与处理】实验一 HBase 的基本操作

一、实验目的：1.掌握Hbase创建数据库表及删除数据库表2.掌握Hbase对数据库表数据的增、删、改、查。
friklogff·2023-12-21 12:48

【大数据存储与处理】第二次作业

A.可以使用汉字B.本身是无序的C.尽量保证越短越好D.可以使用字符串正确答案:ACD(多选题)下面对HBase的描述哪些是正确的？
friklogff·2023-12-21 12:18

【MMEngine】RUNNER.ITERBASEDTRAINLOOP与RUNNER.EPOCHBASEDTRAINLOOP 源码解析——如何设置按照迭代次数和轮数进行网络训练

目录动机MMEngine.runner设置config参数举例MMEngine.runner源码IterBasedTrainLoop说明输入输出IterBasedTrainLoop源码EpochBasedTrainLoop
zy_destiny·2023-12-21 12:46

HBase 整合 Phoenix

Phoenix简介1.1Phoenix定义1.2为什么使用Phoenix二、Phoenix快速入门2.1安装部署Phoenix2.1.1上传并解压tar包2.1.2复制server包并拷贝到各个节点的hbase
Stars.Sky·2023-12-21 12:07

【大数据存储与处理】实验二 HBase 过滤器操作

实验二HBase过滤器操作【实验目的】：1.掌握使用HBase过滤器进行全表扫描。
friklogff·2023-12-21 12:07

【MMEngine】由EpochBased 切换至 IterBased参数修改解析及源码讲解

目录背景动机EpochBased配置举例按照iter训练模型train_cfgdefault_hooksparam_schedulerlog_processor按照epoch训练模型train_cfgdefault_hooksparam_schedulerlog_processor
zy_destiny·2023-12-21 12:06

大数据存储技术（4）—— NoSQL数据库

目录前言一、键值数据库Redis（一）Redis简介（二）Redis数据类型（三）Redis持久化二、列存储数据库HBase（一）简介（二）HBase数据表（三）Hbase物理存储三、文档数据库MongoDB
Francek Chen·2023-12-21 08:46

数据结构与算法之美学习笔记：38 | 分治算法：谈一谈大规模计算框架MapReduce中的分治思想

分治算法应用举例分析分治思想在海量数据处理中的应用解答开篇内容小结前言本节课程思维导图：MapReduce是Google大数据处理的三驾马车之一，另外两个是GFS（hdfs）和Bigtable(hbase
浊酒南街·2023-12-21 03:51

HBase2.4.10 踩坑笔记

安装目标：安装HBase2.4.10，伪分布式，使用自带的Zookeeper参考确保有Java环境确保有Hadoop环境，我的是Hadoop3.3.1[root@main~]#start-all.shStartingnamenodeson
inch-whf·2023-12-21 02:36

Hbase - 预分区的技巧

>可以用两行代码搞定Hbase的预分区设计，我们在新建一张表的时候有没有发现，做预分区其实也是要计算的，如果没有写上工具类那可惨了，需要自己用手指头算了，在这给大家提供了一个10进制跟16进制的版本，会根据
kikiki5·2023-12-20 21:13

ES在查询中发现无法匹配的字段类型

2023-12-1909:15:23,059[ERROR][http-nio-8301-exec-1][hbaseReader-1077]e.b.es.service.impl.EsQueryImpl-matchQueryerror
罗亚方舟·2023-12-20 12:28

sqoop简介及安装配置

导入数据：MySQL，Oracle导入数据到Hadoop的HDFS、HIVE、HBASE等数据存储系统；导出数据：从Hadoop的文件系统中导出数据到关系数据库1.png工作机制将导入或导出命令翻译成mapreduce
一个人一匹马·2023-12-20 11:30

用户行为分析遇到的问题-ubantu16,hadoop3.1.3

用户行为分析传送门我的版本ubantu16hadoop3.1.3habse2.2.2hive3.1.3zookeeper3.8.3sqoop1.46/1.47我sqoop把MySQL数据往hbase导数据时候有问题重磅
To Shine·2023-12-20 08:49

ZooKeeper分布式协调服务

后来，ApacheZooKeeper成为Hadoop，HBase和其他分布式框架使用的有组织服务的标准。
时光故事·2023-12-20 08:23

Android热补丁之Robust原理解析(一)

整体来说Robust热更新系统分为了四个模块，如下图：image.pngautopatchbase是整个项目的一个基础库，用于存放公共的代码gradle-plugin是Robust的插桩插件，会对指定的类插入静态字段
wayDevelop·2023-12-20 05:40

架构设计：远程调用服务架构设计及zookeeper技术详解

当我研究学习hadoop的相关技术时候，有两块知识曾经让我十分的困惑，一个是hbase，一个就是zookeeper。
Java圈子·2023-12-19 22:36

Hbase2.1 集群搭建

>Hbase在大数据的体系中扮演着DB角色，不得不说是重要的一员，在上一篇，大猪已经给大家演示了[Hadoop3.2集群搭建](https://www.jianshu.com/p/3182aaff918d
kikiki5·2023-12-19 20:39

HBase shell 基础实操

目录1查看HBase状态2查看帮助命令3查看版本号4命名空间操作5创建表6列出所有的表7获取表描述8删除列族9其他DDL操作1查看HBase状态进入HBase客户端命令行：(base)[root@hadoop01
Stars.Sky·2023-12-19 19:21

RDD编程

操作1、转换操作2、行动操作3、惰性机制（三）持久化（四）分区（五）一个综合实例二、键值对RDD（一）键值对RDD的创建（二）常用键值对转换操作（三）一个综合实例三、数据读写（一）文件数据读写（二）读写HBase
Francek Chen·2023-12-19 10:19

Flink：异步IO关联HBase维表数据

一、使用异步IO关联HBase维表数据优点为避免在流计算环境中频繁的以同步方式查询外部维表，Flink官方提供使用异步IO与外部系统并发的交互方式，这样可以减轻因为网络交互引起的系统吞吐和延迟问题。
GScallion·2023-12-19 08:11

Flink源码分析 | 读取HBase配置

1、前言上面文章中总结了Flink获取HBase配置的逻辑和优先级，但是并没有对源码进行分析，本文主要是补充这一部分的源码分析。
董可伦·2023-12-19 08:40

2018-10-25

Zookeeper是一个分布式的,开放源码的分布式应用程序的协调服务组件,是谷歌和Chubby一个开源的实现,是Hadoop和Hbase的重要组件,他是一个为分布式应用提供一致性服务的软件,提供的功能包括
极客123·2023-12-19 02:13

TTS | 2019~2023年最新增强/生成情绪的语音合成调研(20231211更新版)

，在本文中，标识如下：【ICML】【✨Interspeech】【ICASSP】2019.09.30_Determinationofrepresentativeemotionalstyleofspeechbasedonk-meansalgorithm
夏天｜여름이다·2023-12-18 22:53

HBase查询的一些限制与解决方案

ApacheHBase是一个开源的、非关系型、分布式数据库，它是Hadoop生态系统的一部分，用于存储和处理大量的稀疏数据。
KevinAha·2023-12-18 19:05

HBase最佳实践——读性能优化策略

HBase也一样，在真实生产线上大家或多或少都会遇到很多问题，有些是HBase还需要完善的，有些是我们确实对它了解太少。
丨程序之道丨·2023-12-18 15:01

SLF4J: Class path contains multiple SLF4J bindings.

问题截图问题原因这里就是由于hbase安装路径下的一个文件和hadoop安装路径下的文件起冲突了解决办法我的路径：这个一定要看自己电脑上的路径/usr/local/hbase/lib/client-facing-thirdparty
To Shine·2023-12-18 14:56

大数据Flink电商实时数仓实战项目流程全解(五）

前提概要：之前我们已经实现了动态分流，即通过TableProcessFunction1类把维度数据和事实数据进行了分流处理，接下来就是把数据写入Hbase表和Kafka主题表中：hbaseDS.addSink
大数据YYDS·2023-12-18 14:44

基于hadoop下的spark安装

目录简介安装准备spark安装配置文件配置简介Spark主要⽤于⼤数据的并⾏计算，⽽Hadoop在企业主要⽤于⼤数据的存储（⽐如HDFS、Hive和HBase等），以及资源调度（Yarn）。
necessary653·2023-12-18 14:43
上一页 8 9 10 11 12 13 14 15 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他