HBase、Parrot

iOS PDF缓存加载预览

YJPDFTools/***IsExist判断是否本地存在*///IsExist-(BOOL)isExistPdfFileWithBase:(UIViewController*)superVCfile:
你的小福蝶·2023-06-10 13:13

HBase安装下载与集群(高可用)

一、准备1.1安装zookeeperzookeeper安装下载与集群1.2安装HADOOPhadoop搭建集群搭建1.3下载HBasehttps://mirrors.tuna.tsinghua.edu.cn
Long long ago.·2023-06-10 11:47

HBASE入门 基本shell命令（一）

一、登录连接shell$HBASE_HOME/bin/hbaseshell二、基本命令2.1help命令help创建命名空间create_namespace'bigdata';查看命名空间list_namespace
Long long ago.·2023-06-10 11:47

基于Canal实现Mysql数据实时同步到Elasticsearch（Docker版）

Canal简介  Canal主要用途是对MySQL数据库增量日志进行解析，提供增量数据的订阅和消费，简单说就是可以对MySQL的增量数据进行实时同步，支持同步到MySQL、Elasticsearch、HBase
姠惢荇者·2023-06-10 06:38

Sqoop

通过Sqoop我们可以方便的将关系型数据库中的数据导入到Hadoop、Hive、HBase中，也可将HDFS中的数据导出到关系型数据库中。
爱过java·2023-06-10 05:51

Hbase

java客户端导入maven依赖XMLorg.apache.zookeeperzookeeper3.4.6org.apache.hbasehbase-client2.2.5org.apache.hadoophadoop-client3.2.1org.apache.hadoophadoop-common3.2.1org.apache.hbasehbase-server2.2.5org.apache
子非我104·2023-06-10 02:56

sqoop系列：sqoop(离线数据同步)开发案例

数据有哪些数据库：1.2：根据mysql表结构创建hive表1.3:RDBMS导入到hdfs（1）条件导入（2）增量导入（3）查询导入-常用1.4：把mysql数据导入hive1.5：把mysql数据导入hbase2
iwester·2023-06-10 00:14

大数据必备的技术栈有哪些？

Spark，Hadoop，数据仓库，Python，SQL，Mapreduce，Hbase等等大数据的方向的切入是全方位的，基础语言的学习只是很小的一个方面，编程落实到最后到编程思想，有了指导思想学习起来就能方便很多
我想去吃ya·2023-06-09 23:45

kafka重点问题解答-----kafka 的设计架构

kafka的一些应用日志收集：一个公司可以用kafka可以收集各种服务的log，通过kafka以统一接口服务的方式开放给各种consumer，例如hadoop、HBase、Solr等。
咚动咚·2023-06-09 23:34

Hbase---hfile

逻辑数据组织格式Scannedblocksection：表示顺序扫描HFile时（包含所有需要被读取的数据）所有的数据块将会被读取，包括LeafIndexBlock和BloomBlock；Non-scannedblocksection：HFile顺序扫描的时候该部分数据不会被读取，主要包括MetaBlock和IntermediateLevelDataIndexBlocks两部分；Load-on-o
咚动咚·2023-06-09 23:31

Zookeeper概述

是Google的Chubby的一个开源实现，是Hadoop和Hbase的重要组件。主要用于解决分布式集群中应用系统的一致性问题。提供了基于类似Unix系统的目录节点树方式的数据存储。
千锋IT教育·2023-06-09 23:10

【大数据学习篇8】 热门品类Top10分析

在HBase命令行工具中执行“list”命令，查看HBase数据库中的所有数据表。
小杰911·2023-06-09 20:27

./bin/sqoop export --connect jdbc:mysql://localhost:3306无法运行的问题

如图，是你没开hadoop，开了就行了【当然也可能是hbase版本对不上，所以jdbc连不了】如图，开了hadoop后就成功运行
ZYT＿庄彦涛·2023-06-09 18:52

clickhouse 21.x生产实践优化

1时间字段类型建表时能用数值型或日期时间型表示的字段就不要用字符串，全String类型在以Hive(hbase)为中心的数仓建设中常见，但ClickHouse环境不应受此影响。
架构师老狼·2023-06-09 15:15

Hbase - 迁移数据[导出,导入]

有没有这样一样情况，把一个集群中的某个表导到另一个群集中，或者hbase的表结构发生了更改，但是数据还要，比如预分区没做，导致某台RegionServer很吃紧，Hbase的导出导出都可以很快的完成这些操作
大猪大猪·2023-06-09 13:19

关于Hadoop前景、毕业薪酬，你所关心的问题答案在这

Hadoop能学到什么主要学习hadoop中的四大框架:hdfs、mapreduce、hive、hbase。这四大框架是hadoop最最核心的，学习难度最大的，也是应用最广泛的。
丨程序之道丨·2023-06-09 11:35

复习HBase之Region Split

RegionSplit时机当一个region中的某个Store下所有StoreFile的总大小超过hbase.hregion.max.filesize（0.94版本之前）；当一个region中的某个Store
daladalabao·2023-06-09 10:29

Hbase 相关组件功能

HBase是一个分布式、可扩展、支持海量数据存储的NoSQL数据库。底层物理存储是以Key-Value的数据格式存储的，HBase中的所有数据文件都存储在HadoopHDFS文件系统上。
清 悸·2023-06-09 08:34

HBase各个组件的作用/相关知识点/HLog(WAL log)说明

HBase各个组件的作用:1.Client：包含访问Hbase的接口，并维护cache来加快对Hbase的访问，比如region的位置信息。
weixin_43203897·2023-06-09 08:03

HBase架构中各组件功能及联系

zookeeper3.HMaster4.RegionServer5.Hlog6.Region7.Store8.MemStore9.StoreFile10.HFile1.架构图2.各组件功能作用1.Client整个HBase
菜鸡努力学习中·2023-06-09 08:55

Hbase

什么是hbase1.1简介HBase是一个面向列式存储的分布式数据库，其设计思想来源于Google的BigTable论文。HBase底层存储基于HDFS实现，集群的管理基于ZooKeeper实现。
子非我104·2023-06-09 05:44

Hbase的安装与配置

文章目录Hbase安装配置一，测试Hadoop安装1，ssh免密测试2，jps查看进程二，安装Hbase1，拷贝Hbase-2.5.0到/opt目录下三，配置环境1，配置环境变量,/etc/profile
气质&末雨·2023-06-09 04:53

Hbase 操作命令

文章目录HbaseShell操作一，基本操作1,启动hbase2,命名空间操作命令3,表操作命令二，DML1,写入数据2,读取数据三、删除与版本介绍四、HbaseJavaAPI操作HbaseShell操作一
气质&末雨·2023-06-09 04:53

Hbase配置手册

1）下载hbase解压到每台服务器的/data/soft解压root@master:/data/soft# tar zxvf hbase-0.90.0.tar.gz  建立软连root@master:/
小小哭包·2023-06-09 03:35

[博学谷学习记录] 超强总结，用心分享|Pyspark基础入门7_RDD的内核调度

Pyspark注：大家觉得博客好的话，别忘了点赞收藏呀，本人每周都会更新关于人工智能和大数据相关的内容，内容多为原创，PythonJavaScalaSQL代码，CVNLP推荐系统等，SparkFlinkKafkaHbaseHiveFlume
陈万君Allen·2023-06-09 03:25

kafka系统的架构

你可以理解为数据库中“表”的概念；比如，将app端日志、微信小程序端日志、业务库订单表数据分别放入不同的topicpartition分区（提升kafka吞吐量）topic中数据的具体管理单元；（你可以理解为hbase
华..·2023-06-09 02:10

Ubuntu常见基本问题

系列文章目录Ubuntu常见基本问题Hadoop3.1.3安装（单机、伪分布）Hadoop集群搭建HBase2.2.2安装（单机、伪分布）Zookeeper集群搭建HBase集群搭建Spark安装和编程实践
WE-ubytt·2023-06-09 00:30

Hadoop学习笔记--HBase相关操作指令

文章目录引言0.HBase的启动与停止1.创建表2.删除表3.表的其他操作3.1修改表结构3.2查看表结构3.3显示所有用户定义的表3.4查询表是否存在3.5查询表是否可用3.6查询表中记录数4.插入数据
官乐·2023-06-08 22:33

MybatisPlus 自定义插件实现拦截SQL修改功能

最近项目内使用MybatisPlus整合Phoenix实现对HBase进行操作,但是Phoenix的sql语法和MySQL不太一样,导致得在列上加@TableField申明列簇名称和列名称,不太友好,所以自己写了个插件拦截
爱码猿·2023-06-08 22:52

Spark安装和编程实践（Spark2.4.0）

系列文章目录Ubuntu常见基本问题Hadoop3.1.3安装（单机、伪分布）Hadoop集群搭建HBase2.2.2安装（单机、伪分布）Zookeeper集群搭建HBase集群搭建Spark安装和编程实践
WE-ubytt·2023-06-08 20:41

Spark集群搭建

系列文章目录Ubuntu常见基本问题Hadoop3.1.3安装（单机、伪分布）Hadoop集群搭建HBase2.2.2安装（单机、伪分布）Zookeeper集群搭建HBase集群搭建Spark安装和编程实践
WE-ubytt·2023-06-08 20:41

HBase集群搭建

系列文章目录Ubuntu常见基本问题Hadoop3.1.3安装（单机、伪分布）Hadoop集群搭建HBase2.2.2安装（单机、伪分布）Zookeeper集群搭建HBase集群搭建Spark安装和编程实践
WE-ubytt·2023-06-08 20:40

Hadoop集群搭建

系列文章目录Ubuntu常见基本问题Hadoop3.1.3安装（单机、伪分布）Hadoop集群搭建HBase2.2.2安装（单机、伪分布）Zookeeper集群搭建HBase集群搭建Spark安装和编程实践
WE-ubytt·2023-06-08 20:05

大数据的基石Hadoop生态圈——核心组成及解释

Hadoop生态圈——核心组成1、数据收集层：Flume、Sqoop、ython2、数据存储层：HDFS3、数据处理层：Hive、Spark、MapReduce、Storm4、数据缓冲层：Kafka、Hbase
程崇越·2023-06-08 19:54

Flume学习笔记

1简介(1)ApacheFlume是一个分布式、可信任的数据采集、日志收集弹性系统(框架)，用于高效收集、汇聚和移动大规模日志信息从多种不同的数据源到一个集中的数据存储中心(HDFS、Hbase或者本地文件系统
学不下了·2023-06-08 18:44

HBase中Region的分裂和合并问题分析

下面是具体的细节：1.当一个region里的StoreFile增长到大于配置的参数：hbase.hregio
叫我不矜持·2023-06-08 15:09

hbase查询报错unable to find region for

hbase大面积regionserver负载爆炸卡死，隔天发现部分查询报错集群中一张表某些查询找不到region尝试了重启集群和滚动重启集群，考虑滚动重启的过程会把regionserver上的region
Mumunu-·2023-06-08 12:05

原生apache hadoop3.3.1集群安装配置Kerberos

博客部署好了kerberos之后，首先添加用户和生成认证文件在KDC中添加需要认证的用户具体用户看情况而定(hadoop集群主要由hdfs管理，所以除了建hdfs账户还有HTTP账户，另外还有hive、hbase
Mumunu-·2023-06-08 12:05

SpringBoot Redis Cache

Generic、JCache(JSR-107)、（EhCache3，Hazelcast，Infinispan，andothers）、EhCache2.x、Hazelcast、Infinispan、Couchbase
√Angelの爱灬·2023-06-08 08:58

Java开发实战！一篇文章教你搞定计算机网络面试

第一个分布式：限流1.1ZooKeeper+Nginx面试常备题（附答案）ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase
上班划水小能手·2023-06-08 05:39

微服务架构案例(03)：数据库选型简介，业务数据规划设计

非关系型Hbase、Redis、MongodDB等。行式存储MySQL、Oracle、DB2、SQLServer等。列式存储Hbase、ClickHouse等。
知了一笑·2023-06-08 02:23

Java HotSpot(TM) 64-Bit Server VM warning: ignoring option PermSize=128m； support was removed in 8.0

HBase集群启动和停止的报错情况及处理办法1.启动报错：PermSize和MaxPermSize的限制报错信息：出错原因：HBase默认这两个参数有128M的限制，由于长期使用导致程序超过了该阈值解决办法
程序员胖五·2023-06-08 00:49

分布式数据库HBase

大数据基础-分布式数据库HBase概述HBase简介HBase与传统关系数据库的对比分析HBase数据模型数据模型概述数据模型相关概念数据坐标HBase的实现原理HBase功能组件表和RegionRegion
so.far_away·2023-06-08 00:24

Hbase - 自定义Rowkey规则

在Flink中我们有时候需要分析数据1点到2点的范围,可是经过Region又比较慢，这时候我们就可以定制TableInputFormat来实现我们的需求了，我们还可以采用Flink的DataSet的方式读取,另外下面还有Spark读取的例子。使用教程Md5Util.javaimportorg.apache.commons.codec.binary.Hex;importjava.security.M
大猪大猪·2023-06-07 23:42

04.hadoop上课笔记之java编程和hbase

1.win查看服务netstat-an#linux也有#R数学建模语言SCALAR2.java连接注意事项,代码要设置用户System.setProperty("HADOOP_USER_NAME","hadoop");3.伪分布式的好处(不用管分布式细节,直接连接一台机器…,适合用于学习)4.官方文档查看类(static|new)hadoop.org—>javaAPI5.单点故障:一个节点出错全部
默默努力的小老弟·2023-06-07 20:42

第 5 章 HBase 优化

1）生成随机数、hash、散列值2）时间戳反转3）字符串拼接**需求：**使用hbase存储下列数据，要求能够通过hbase
WziDeng(也会有发光的一天吖！)·2023-06-07 20:11

3.4 DML

packagecom.atguigu;importorg.apache.hadoop.hbase.Cell;importorg.apache.hadoop.hbase.CellUtil;importorg.apache.hadoop.hbase.TableName
WziDeng(也会有发光的一天吖！)·2023-06-07 20:41

3.4 DML

packagecom.atguigu;importorg.apache.hadoop.hbase.Cell;importorg.apache.hadoop.hbase.CellUtil;importorg.apache.hadoop.hbase.TableName
WziDeng(也会有发光的一天吖！)·2023-06-07 20:41

hbase常用命令

常用命令格式名称命令表达式创建表create‘表名称’,‘列名称1’,‘列名称2’,‘列名称N’添加记录put‘表名称’,‘行名称’,‘列名称:’,‘值’查看记录get‘表名称’,‘行名称’查看表中的记录总数count‘表名称’删除记录delete‘表名’,‘行名称’,‘列名称’删除一张表先要屏蔽该表，才能对该表进行删除，第一步disable‘表名称’第二步drop‘表名称’查看所有记录scan“
老朱-yubing·2023-06-07 20:40

Zookeeper集群安装部署——详细讲解

Zookeeper集群安装部署简介ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Hadoop和Hbase的重要组件。
懒羊羊夸夸~·2023-06-07 20:09
上一页 41 42 43 44 45 46 47 48 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他