Hbase进阶之路

HBase入门教程

1.1Hbase概念术语1、行键RowKey：主键是用来检索记录的主键，访问hbasetable中的行。
xmvip01·2024-08-22 10:08

关于HDP的20道高级运维面试题

HDP（HortonworksDataPlatform）的主要组件包括Hadoop框架、HDFS、MapReduce、YARN以及Hadoop生态系统中的其他关键工具，如Spark、Flink、Hive、HBase
编织幻境的妖·2024-03-26 15:34

HBase入门教程

1.1Hbase概念术语1、行键RowKey：主键是用来检索记录的主键，访问hbasetable中的行。
xmvip01·2024-03-26 03:04

HBase常用命令

简介：HBaseShell是一种操作HBase的交互模式，支持完整的HBase命令集。
叶域·2024-03-18 23:35

Flink异步io关联Hbase

主程序publicstaticvoidmain(String[]args)throwsException{//1.获取流执行环境StreamExecutionEnvironmentenv=StreamExecutionEnvironment.getExecutionEnvironment();env.setParallelism(1);SimpleDateFormatformatter=newSi
//承续缘_纪录片·2024-03-16 05:06

Hbase集群搭建超详细教程

Hbase集群搭建前言详细步骤1、下载安装包2、解压3、修改配置文件3.1修改hbase-env.sh文件3.2修改hbase-site.xml3.3修改regionservers文件4、分发hbase
笑看风云路·2024-03-13 09:02

基于HBase和Spark构建企业级数据处理平台

摘要：在中国HBase技术社区第十届Meetup杭州站上，阿里云数据库技术专家李伟为大家分享了如何基于当下流行的HBase和Spark体系构建企业级数据处理平台，并且针对于一些具体落地场景进行了介绍。
weixin_34071713·2024-03-12 22:44

大数据开发（Hadoop面试真题-卷九）

2、既然HBase底层数据是存储在HDFS上，为什么不直接使用HDFS，而还要用HBase?3、Sparkmapjoin的实现原理？4、Spark的stage如何划分？
Key-Key·2024-03-09 10:06

hbase、hive、clickhouse对比

概念架构hbasemaster存储元数据、regionServer实际控制表数据，存储单位是Region，底层数据存储使用HDFShive通过driver将sql分解成mapreduce任务元数据需要单独存储到一个关系型数据库
freshrookie·2024-03-05 16:40

【Java编程进阶之路 04】深入探索：Java类加载器与双亲委派 & 打破双亲委派桎梏

文章目录导言01双亲委派模型的基本概念02双亲委派模型的工作流程03双亲委派模型的优势04双亲委派模型在Java生态系统中的应用05如何打破双亲委派模型5.1线程上下文类加载器5.2类加载器的代理模式5.3使用JavaAgent和InstrumentationAPI步骤1:编写一个JavaAgent步骤2:打包JavaAgent步骤3:使用JavaAgent步骤4:使用Instrumentatio
浅夏的猫·2024-03-01 04:42

【Java编程进阶之路 06】深入探索：JDK、JRE与JVM的关系与差异

JDK、JRE与JVM：揭开Java运行环境的神秘面纱在Java开发者的日常工作中，JDK、JRE和JVM这三个概念是不可或缺的。它们构成了Java应用程序的运行环境，但很多初学者可能对这三者的关系和差异感到困惑。本文旨在详细解析JDK、JRE和JVM之间的关系，帮助读者更好地理解Java的运行机制。01JDK：Java开发工具包1.1定义与重要性JDK是Java开发工具包，它提供了开发、调试和运
浅夏的猫·2024-02-29 20:31

openeuler20.03在线安装docker最新版

Docker的官方仓库源：sudotee/etc/yum.repos.d/docker-ce.repo<hbaseurl
·2024-02-27 20:48

Java面试八股文

面渣逆袭必看，面试题八股文Java基础、Java集合框架、Java并发编程、JVM、Spring、Redis、MyBatis、MySQL、操作系统、计算机网络、RocketMQ、分布式、微服务|二哥的Java进阶之路
翁正存·2024-02-26 05:16

新员工第一次出差？你可能需要知道这些细节。

这是「职场菜鸟进阶之路」的第6篇文章阳阳最近和师兄在外出差，在师兄身上学到了很多东西。今天的职场主题：新人出差时应注意哪些细节？今天的故事来自我的师兄C哥。润物无声的背后，是一次次细致入微的准备。
小小的阳阳·2024-02-24 19:51

Kafka痛点与Puslar介绍

隔离,写高了读不动,读高了写不动没有多租户IO模型过于简单,面对大量topic时性能下降严重消费模型有限,无法利用部分业务可以接受消息无序的特点Puslar是一个非常优秀的开源系统，它的整体框架偏向于HBase
weidajiangjiang·2024-02-20 19:34

Hadoop生态圈

生态圈1.HBase的数据存储在HDFS里2.MapReduce可以计算HBase里的数据，也可以计算HDFS里的数据3.Hive是数据分析数据引擎，也是MapReduce模型，支持SQL4.Pig也是一个数据分析引擎
陈超Terry的技术屋·2024-02-20 19:47

《身为职业女性》遇见更好的自己

萨丽·海格森和马歇尔·古德史密斯在本书中详细阐述了12个足以破坏女性职场进阶之路的坏习惯，在事业陷入“瓶颈”时，或许能帮我们缓解工作上的一些迷茫。也是希望我们践
沐晨时光·2024-02-20 17:54

HBase 进阶

参考来源:B站尚硅谷HBase2.x目录Master架构RegionServer架构写流程MemStoreFlush读流程HFile结构读流程合并读取数据优化StoreFileCompactionRegionSplit
魅美·2024-02-20 08:11

HbaseAPI

hbaseAPI方法：API本质就是调用对象的方法去实现的。ddl的概念是对表的操作和对外面的大的操作，ddl都是去调用admin对象的方法实现的admin对象通过连接.getAdmin获取。
astudybear·2024-02-20 08:40

HBase API

参考来源:B站尚硅谷HBase2.x环境准备新建Maven项目后在pom.xml中添加依赖：注意：会报错javax.el包不存在，是一个测试用的依赖，不影响使用org.apache.hbasehbase-server2.4.11org.glassfishjavax.elorg.glassfishjavax.el3.0.1
魅美·2024-02-20 08:37

Hbase - 自定义Rowkey规则

>在Flink中我们有时候需要分析数据1点到2点的范围,可是经过Region又比较慢，这时候我们就可以定制`TableInputFormat`来实现我们的需求了，我们还可以采用Flink的`DataSet`的方式读取,另外下面还有`Spark`读取的例子。##使用教程Md5Util.java```importorg.apache.commons.codec.binary.Hex;importjav
kikiki5·2024-02-20 07:17

HBase——基础概念介绍

一、初识HBaseHBase是一个面向列式存储的分布式数据库，其设计思想来源于Google的BigTable论文。HBase底层存储基于HDFS实现，集群的管理基于ZooKeeper实现。
zhanglf1016·2024-02-20 04:43

以史为镜，看看和珅从0到99的职场进阶之路，对我们的启示

文/校尉职说世人皆说和珅是个大贪官，乾隆皇帝时期的“二黄帝”，可谓一人之下，万人之上。他的家产相当于嘉庆年间15年的国库总收入，曾有记录说，和珅贪污十几亿两白银，按如今白银的价格算，折合人民币大概有1520多亿，这可是一个天文数字，他可谓是中国历史上贪官的集大成者。很多人对和珅的印象都停留在王刚老师等人主演的《铁齿铜牙纪晓岚》、《宰相刘罗锅》等电视剧中，一个本来是狡猾奸诈、手握大权的反叛人物，被王
北柠闻溪·2024-02-20 02:13

K8s进阶之路-Pod的生命周期

Pod创建过程：首先创建一个pod，然后创建一个APIServer和Etcd【把创建出来的信息存储在etcd中】然后创建Scheduler，监控APIServer是否有新的Pod，如果有的话，会通过调度算法，把pod调度某个node上在node节点，会通过kubelet--apiserver读取etcd拿到分配在当前node节点上的pod，然后通过docker创建容器在容器环境初始化后：初始化阶段
是芸晗ya·2024-02-19 21:36

K8s进阶之路-核心概念/架构：

架构：Master/NodeMaster组件--主控节点{负责集群管理（接收用户事件转化成任务分散到node节点上）}Apiserver：资源操作的唯一入口，提供认证、授权、API注册和发现等机制Scheduler：负责集群资源调度，按照预定的调度策略将Pod调度到相应的node节点上注：容器负载均衡部署Deployment控制器是之一Controller-manager：负责维护集群的状态，比如
是芸晗ya·2024-02-19 21:31

K8s进阶之路-安装部署K8s

参考：（部署过程参考的下面红色字体文档链接就可以，步骤很详细，重点部分在下面做了标注）安装部署K8S集群文档：使用kubeadm方式搭建K8S集群·GitBook本机：master：10.0.0.13masternode1：10.0.0.11node1node2：10.0.0.12node2#systemctlstopfirewalld&&systemctldisablefirewalld#sys
是芸晗ya·2024-02-19 20:12

K8s进阶之路-命名空间级-服务发现 ：

服务发现：Service（东西流量）：集群内网络通信、负载均衡（四层负载）内部跨节点，节点与节点之间的通信，以及pod与pod之间的通信，用Service暴露端口即可实现Ingress（南北流量）：将内部服务暴露外网访问的服务ingress-nginx，也就是nginx反向代理负载均衡服务（七层http负载）Service：
是芸晗ya·2024-02-19 20:12

K8s进阶之路-Pod(创建过程)/Pause/Replicas

Pod：是一个容器组，基于容器组管理容器（建议一个pod创建一个应用程序容器必须是紧耦合实例放在一起）pause容器：实现容器与容器之间的共享（在容器创建之前，底层都要先创建一个容器叫pause，用来实现对内的网络及ip、文件系统、主机名、内存等共享）Replicas副本数：描述制定副本数创建第二个即为副本，名字和uid会自动调整组件架构图：k8s集群，至少需要2台ECS机器k8s本身，也是以客器
是芸晗ya·2024-02-19 16:55

K8s进阶之路-控制器无状态服务：

RC/RS/Deployment控制器deployment无状态（最常用）：nginx和Apachestatefulset有状态：mysql和redisdamonset初始化job一次性任务cronjob任务计划1无状态：不会对本地环境产生依赖如：nginx和Apache3.RC、RS和Deployment区别：RC和RS：动态更新pod副本数管理pod，控制pod怎么创建，创建不同的pod类型，
是芸晗ya·2024-02-19 13:42

k8s进阶之路-pod探针：容器内的监控机制，检测应用是否存活

配合Pod重启策略：RestartPolicy应用程序是否启动完成：3.startupProbe启动探针1.16：排他性如果三个都配置了，会优先启动，会禁用前两个反馈成功后，才会启动以下两个应用启动成功后：1.LivenessProbe存活探针-->故障自动恢复：如果容器挂掉了，会检测是否有重启策略，决定是否需要重启2.ReadnessProbe就绪探针--->应用初始化探针探测成功，确认应用容器
是芸晗ya·2024-02-19 13:42

Hbase - 自定义Rowkey规则

在Flink中我们有时候需要分析数据1点到2点的范围,可是经过Region又比较慢，这时候我们就可以定制TableInputFormat来实现我们的需求了，我们还可以采用Flink的DataSet的方式读取,另外下面还有Spark读取的例子。使用教程Md5Util.javaimportorg.apache.commons.codec.binary.Hex;importjava.security.M
kikiki2·2024-02-15 06:39

【MySQL进阶之路】亿级数据量表SQL调优实战

欢迎关注公众号（通过文章导读关注：【11来了】），及时收到AI前沿项目工具及新技术的推送！在我后台回复「资料」可领取编程高频电子书！在我后台回复「面试」可领取硬核面试笔记！文章导读地址：点击查看文章导读！感谢你的关注！亿级数据量表SQL调优实战先说一下案例背景：在电商平台中，有一个商品表，数据量级别上亿，有一天晚上突然出现大量的慢查询告警，导致每一个数据库连接执行慢查询耗费几十秒的时间，以至于数据
11来了·2024-02-15 05:32

【MySQL进阶之路】详解执行计划 type 列

欢迎关注公众号（通过文章导读关注：【11来了】），及时收到AI前沿项目工具及新技术的推送！在我后台回复「资料」可领取编程高频电子书！在我后台回复「面试」可领取硬核面试笔记！文章导读地址：点击查看文章导读！感谢你的关注！详解执行计划type列通过explain语句可以帮助我们查看查询语句的具体执行计划，那么在执行计划中的type列表示MySQL是如何查找对应的数据了，我们先来说一下执行计划中type
11来了·2024-02-15 05:32

【MySQL进阶之路】通过实操理解 explain 执行计划

欢迎关注公众号（通过文章导读关注：【11来了】），及时收到AI前沿项目工具及新技术的推送！在我后台回复「资料」可领取编程高频电子书！在我后台回复「面试」可领取硬核面试笔记！文章导读地址：点击查看文章导读！感谢你的关注！通过实操理解explain执行计划案例一：开胃小菜SQL语句：explainselect*fromtest1;执行计划如下：首先，id=1，id是每一个SQL语句的唯一标识selec
11来了·2024-02-15 05:32

【MySQL进阶之路】十亿量级评论表SQL调优实战

欢迎关注公众号（通过文章导读关注：【11来了】），及时收到AI前沿项目工具及新技术的推送！在我后台回复「资料」可领取编程高频电子书！在我后台回复「面试」可领取硬核面试笔记！文章导读地址：点击查看文章导读！感谢你的关注！十亿量级评论表SQL调优实战先说一下案例背景：在电商系统的评论表中，数据量非常大，达到了十亿量级，因此对评论的数据库进行分库分表处理，在分库分表之后，基本上单表的评论数据在百万级别左
11来了·2024-02-15 05:32

dp进阶之路——最后一块石头的重量

1049.最后一块石头的重量II有一堆石头，用整数数组stones表示。其中stones[i]表示第i块石头的重量。每一回合，从中选出任意两块石头，然后将它们一起粉碎。假设石头的重量分别为x和y，且x=stones[i];j--){//两种情况，要么放，要么不放dp[j]=Math.max(dp[j],dp[j-stones[i]]+stones[i]);}}returnsum-2*dp[targ
半个菜鸟_·2024-02-14 17:07

维护职场关系才是你的进阶之路

我加入了我的理解杨蜜月爱读书2020-03-2219:20:22今天在知乎看到一个问题：为什么公司里贡献多的人，反而很难得到晋升？@杨蜜月爱读书有这么一个小伙子，大概30岁出头，是典型的IT男，在互联网公司做技术经理。永远都穿一件看起来很廉价的绿色格子衬衫。裤子永远是一件发了黄的牛仔裤，上面还有两个洞。和其他穿着干净时尚的同事形成鲜明对比，是一个不太注重形象的人。但他是公司的技术牛人。他曾用他的技
a阿铠·2024-02-14 13:43

大数据开发之Sqoop详细介绍

用户可以在Sqoop的帮助下，轻松地把关系型数据库的数据导入到Hadoop与其相关的系统(如HBase和Hive)中；同时也可以把数据从Hadoop系统里抽取并导出到关系型数据库里。
只是甲·2024-02-14 01:17

Ubuntu16.04下HBase安装笔记

基础准备JDKHadoopSSHServer下载HBasehttps://hbase.apache.org/tar-zxvfhbase-1.4.2-bin.tar.gzsudomvhbase-1.4.2
bluexiii·2024-02-13 22:48

HBase过滤器

HBase过滤器Get和Scan都支持过滤器，这些类提供的接口不能对行键、列名和列值进行过滤，但过滤器可以实现。过滤器的接口为Filter。
橙汁啤酒厂·2024-02-13 16:28

HBase Shell操作命令

一、general操作1.1获取帮助#引号不能省略help'status'1.2查询服务器状态1.statushbase(main):002:0>status1activemaster,0backupmasters
橙汁啤酒厂·2024-02-13 16:58

【Linux进阶之路】网络——“?“（上）

文章目录一、历史发展1.独立形态2.互联形态3.局域网二、网络协议1.OSI七层协议2.TCP/IP四（五）层模型三、网络通信1.封装与解包2.数据的传输1.局域网2.广域网总结尾序本篇文章的目的是带大家初步认识网络，为后面的网络编程打下基础，一、历史发展1.独立形态说明：数据的传递人来完成，效率是较低的，且中间可能会出现错误。2.互联形态说明：数据的传输由人变为了机器，更加的高效。拓展：服务器的
舜华丶·2024-02-13 00:31

学习笔记12-zookeeper

提供一种集中式信息存储服务特点:数据存在内存中,类似文件系统的树形结构(文件和目录),高吞吐和低延迟,集群高可靠作用:基于zookeeper可以实现分布式统一配置中心,服务注册中心,分布式锁等功能1.zookeeper的应用案例Hbase
在知识的海洋里遨游·2024-02-12 19:09

Hbase - 迁移数据[导出,导入]

>有没有这样一样情况，把一个集群中的某个表导到另一个群集中，或者hbase的表结构发生了更改，但是数据还要，比如预分区没做，导致某台RegionServer很吃紧，Hbase的导出导出都可以很快的完成这些操作
kikiki5·2024-02-12 16:55

Hbase - 自定义Rowkey规则

在Flink中我们有时候需要分析数据1点到2点的范围,可是经过Region又比较慢，这时候我们就可以定制TableInputFormat来实现我们的需求了，我们还可以采用Flink的DataSet的方式读取,另外下面还有Spark读取的例子。使用教程Md5Util.javaimportorg.apache.commons.codec.binary.Hex;importjava.security.M
大猪大猪·2024-02-12 15:45

zk01

zookeeper基础ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Hadoop和Hbase的重要组件。提供的功能包括：命名服务、配置管理、集群管理、分布式锁、队列管理。
矮肥·2024-02-12 11:41

Python爬虫之非关系型数据库存储#5

列存储数据库：代表有Cassandra、HBase和Riak等。文档型数据库：代表有CouchDB和MongoDB等。图形数据库：
仲君Johnny·2024-02-12 07:59

-bash: export: =‘: 不是有效的标识符 -bash: export:

问题：Xshell连接linux时出现以下错误：Lastlogin:SunFeb1114:45:022024-bash:export:`=':不是有效的标识符-bash:export:`/opt/hbase
橙汁啤酒厂·2024-02-12 05:24

在运行hbase操作时出现错误：ERROR: Can‘t get master address from ZooKeeper； znode data == null

在运行hbase操作时出现错误：ERROR:Can’tgetmasteraddressfromZooKeeper;znodedata==null，可能是ZooKeeper不稳定导致的hbase(main
橙汁啤酒厂·2024-02-12 05:54

HBase集群部署

1.HBase安装相关版本：Hadoop：2.7.3hbase：1.3.1hbase相关版本下载安装HBase需要安装hbase-1.3.1-bin.tar.gz软件包，下载并解压到/opt目录下2.HBase
橙汁啤酒厂·2024-02-12 05:23
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他