HBase、Parrot

centos7搭建kylin3.1.0

apache-livy-0.6.0-incubating-binhadoop-2.7.0jdk1.8.0_141spark-2.3.1-bin-hadoop2.6apache-kylin-3.1.0-bin-hbase1xapache-maven
bluesky2004·2023-04-09 08:59

datax-web在windows上环境搭建及同步数据测试

WeiYe-Jing/datax-webDataX是阿里巴巴集团内被广泛使用的离线数据同步工具/平台，实现包括MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase
BellCalderon·2023-04-09 08:51

Datax3.0+DataX-Web打造分布式可视化ETL系统

DataX致力于实现包括关系型数据库（MySQL、Oracle等）、HDFS、Hive、ODPS、HBase、FTP等各种异构数据源（即不同的数据库）间稳定高效的数据同步功能。
无精疯·2023-04-09 08:42

Hbase1.4.12安装配置

hbase1.4.12高可用配置hbase-env.sh文件配置exportJAVA_HOME=/java/jdk1.8.0_161#不使用Hbase的zookeeperexportHBASE_MANAGES_ZK
陈文瑜·2023-04-09 07:39

Mysql数据导出到Hbase

Mysql表center_pub_merchant数据导出为center_pub_merchant.tsvmysql-h172.xx.x.175-P3307-uUSER-pPASSWORD-e"SELECTconcat('merchant:',id),parentId,id,cascade_labelAScascadeLabel,cascade_levelAScascadeLevel,accoun
gofun·2023-04-09 02:45

bulkload导致性能变慢

HBase支持使用bulkload和put方式加载数据，在大部分场景下bulkload提供了更快的数据加载速度，但bulkload并不是没有缺点的，在使用时需要关注bulkload和put适合在哪些场景使用
半_调_子·2023-04-08 22:05

2021-05-15 Elasticsearch面试题 如何监控 Elasticsearch 集群状态？

数据结构优缺点Array/List使用二分法查找，不平衡HashMap/TreeMap性能高，内存消耗大，几乎是原始数据的三倍SkipList跳跃表，可快速查找词语，在lucene,redis,HBase
微软MVP Eleven·2023-04-08 22:41

搭建HBase + Phoenix大数据平台

一、介绍因为代驾过程中，需要保存驾驶途中的GPS定位，将来计算代驾真实里程的时候，就需要用到这些坐标点。那么这些定位点保存在MySQL中可以吗？当然不行，MySQL单表记录超过两千万就卡的不行。那么保存在MongoDB中可以吗？也不行，因为MongoDB里面的条件查询真的是超级蹩脚，所以想要用复杂条件检索数据，还是打消用MongoDB的念头吧。除了GPS定位数据之外，还要把代驾过程中的聊天对话的文
chengbo_eva·2023-04-08 19:33

Java代码实现对dubbo服务的查询压力测试（Hbase数据库）

测试简介底层数据库采用Hbase，可视化工具使用的是Phoenix。
小白中的小小白啊·2023-04-08 11:45

datax3.0 mysql mysql_DataX3.0介绍

概览datax是一个异构数据源离线同步工具，主要实现包括关系型数据库(MySQL、Oracle等)、MongoDB、Hive、HBase、FTP等各种异构数据源之间稳定高效的数据同步功能。
Asama浅间·2023-04-08 09:56

DataX的简介与使用

HDFS案例同步HDFS数据到MySQL案例一、DataX的简介DataX是阿里巴巴开源的一个异构数据源离线同步工具，致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase
勤奋的ls丶·2023-04-08 09:21

HBASE RPC 源码实现及解析

HBASERPC详细解析注：下面的图是作者随便画的，不怎么严格，大家能看懂就好。
roger_han·2023-04-08 09:53

Hbase高手之路 -- 第一章 -- Hbase简介

Hbase高手之路–第一章–Hbase简介一、Hadoop从1970年开始，大多数的公司数据存储和维护使用的是关系型数据库大数据技术出现后，很多拥有海量数据的公司开始选择像Hadoop的方式来存储海量数据
落空空。·2023-04-08 09:16

HBASE应用场景

1、用户画像比如大型的视频网站，电商平台产生的用户点击行为、浏览行为等等存储在HBase中为后续的智能推荐做数据支撑。
夏洛克fms·2023-04-08 08:06

1-3 交互式查询工具Impala

一、Impala概述1.1什么是ImpalaImpala是Cloudera提供的一款开源的针对HDFS和HBASE中PB级别数据进行交互式实时查询（Impala速度快），Impala是参照谷歌中新三篇论文中
小羊and阿童木·2023-04-08 07:48

交互式查询工具Impala

第1部分Impala概述1.1Impala是什什么Impala是Cloudera提供的⼀一款开源的针对HDFS和HBASE中的PB级别数据进⾏行行交互式实时查询(Impala速度快)，Impala是参照
猿大山·2023-04-08 07:46

Impala：大数据交互查询工具

impala的介绍Impala是由Cloudera公司开发的一款开源的大数据交互查询工具，能够对存储在HDFS、HBase上的数据进行快速的交互式SQL查询。
健鑫.·2023-04-08 07:46

大数据，头歌，Hbase的配置

Hbase的配置第一关#创建app目录mkdir/app#进入/opt目录下cd/opt#解压Hbase压缩包tar-zxvfhbase-2.1.1-bin.tar.gz-C/app#编辑hbase-env.sh
Closer9·2023-04-08 06:50

堪称最完整的Java知识笔记(基础+进阶+架构+算法+网络)

开发知识笔记)将每个知识点细分成29个章节JVM、JAVA集合、JAVA多线程并发、JAVA基础、Spring原理、微服务Netty与RPC、网络、日志、Zookeeper、Kafka、RabbitMQHbase
java梦想口服液·2023-04-08 05:59

数据仓库电商项目-整体架构

任务调度：azkaban/oozie、informatica元数据管理：atlas（或自研系统）OLAP引擎：即席查询kylin/impala前端界面：superset（或自研javaweb系统）产出存储（hbase
四月天03·2023-04-08 05:50

Lucene搜索

Lucene搜索架构图搜索的过程：用户输入、分词、索引搜索、评分（相关性计算）排序，输出列表Lucene搜索APILucene搜索代码示例publicclassSearchBaseFlow{publicstaticvoidmain
WinnXUDONG·2023-04-08 03:28

Zookeeper集群安装部署（超详细操作演示）—— Linux

Zookeeper集群安装部署（超详细操作演示）——Linux简介安装测试简介ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Hadoop和Hbase的重要组件。
期望上岸的鱼·2023-04-08 03:30

下秒数据李元佳：湖仓一体带来现代数据栈变革

数据集成部分主要是采用Oracle及HBase等做OD
CSDN云原生·2023-04-08 01:36

基于idea操作hbase数据库并映射到hive表

目录一：先关闭所有服务二：配置文件三：启动服务依赖条件：需要有Hadoop，hive，zookeeper，hbase环境映射：每一个在Hive表中的域都存在于HBase中，而在Hive表中不需要包含所有
·2023-04-08 01:39

大数据训练营课程大纲&项目简介

文章目录课程大纲模块一：大数据的“三驾马车”：HDFS、MapReduce/YARN、HBase模块二：大数据时代数据仓库实践：Hive模块三：更快的数据处理引擎：Spark模块四：重构现代化数据仓库：
greedy-hat·2023-04-07 21:45

【学习历程】21 HBase表的热点

当大量的client访问hbase集群的一个或少数几个节点，造成少数regionserver的读/写请求过多、负载过大，而其他regionserver负载却很小，就造成了“热点”现象。
LALALAND__·2023-04-07 17:19

HBase权威指南（二）客户端API基础

1、概述HBase的主要客户端接口是由org.apache.hadoop.hbase.client包中的HTable类提供所有修改数据的操作都保证了行级别的原子性，要么读到最新的修改，要么等待系统允许写入该行修改尽量使用批量处理更新来减少单独操作同一行数据的次数创建
kaiker·2023-04-07 16:35

新手入门大数据，认识大数据学习路线

一、数据采集与预处理FlumeNGNDCLogstashSqoop流式计算Zookeeper二、数据存储HBasePhoenixYarnMesosRedisAtlasKudu三、数据清洗OozieAzkaban
金光闪闪耶·2023-04-07 13:48

六阶段大数据--day03--hadoop分布式文件系统HDFS/ MapReduce介绍/ Yarn资源调度

:HadoopDistributedFilesystem(hadoop分布式文件系统)HDFS起源于Google的GFS论文（GFS，Mapreduce，BigTable为google的旧的三驾马车）HBASE
心猿意码~~·2023-04-07 08:34

Pyspark基础入门5_RDD的持久化方法

Pyspark注：大家觉得博客好的话，别忘了点赞收藏呀，本人每周都会更新关于人工智能和大数据相关的内容，内容多为原创，PythonJavaScalaSQL代码，CVNLP推荐系统等，SparkFlinkKafkaHbaseHiveFlume
陈万君Allen·2023-04-07 05:47

Pyspark基础入门6_RDD的共享变量

Pyspark注：大家觉得博客好的话，别忘了点赞收藏呀，本人每周都会更新关于人工智能和大数据相关的内容，内容多为原创，PythonJavaScalaSQL代码，CVNLP推荐系统等，SparkFlinkKafkaHbaseHiveFlume
陈万君Allen·2023-04-07 05:16

存储系统 - noSql一般概念

一、noSQL定义notonlysql二、noSql分类（1）kv存储典型：redis优点：查询速度快缺点：数据缺乏结构化组织（2）列式存储典型：hbase，Cassandra优点：查询速度快，同列数据相似度搞
yi_wen·2023-04-07 04:44

分布式NoSQL数据库HBase实践与原理剖析（二）

title:HBase系列第五章HBase核心原理5.1系统架构注意，其实上图中的HLog应该在HRegionServer里面，而不是在HRegion里面。所以图有点点问题。
落叶飘雪2014·2023-04-07 04:05

spark读写hbase基本操作

依赖包:org.apache.sparkspark-sql_2.112.1.1org.apache.sparkspark-core_2.112.1.1org.apache.hbasehbase-server1.2.1
会飞的蜗牛66666·2023-04-06 23:07

Hbase2.1 集群搭建

>Hbase在大数据的体系中扮演着DB角色，不得不说是重要的一员，在上一篇，大猪已经给大家演示了[Hadoop3.2集群搭建](https://www.jianshu.com/p/3182aaff918d
kikiki4·2023-04-06 20:46

hbase踩坑记---HMaster启动后不久就消失（hbase-2.2.4版本）

版本介绍：hadoop-3.1.3hbase-2.2.4问题简述：在学习HBase的过程中，安装后启动，开始是可以看见HMaster进程的，但是几秒后就消失了，反复尝试了几次，都是同样的情况，也就是启动失败
十八画_生·2023-04-06 19:46

【6.824分布式系统笔记】LEC 3: GFS ｜HDFS、背景、GFS架构、文件读写、一致性

上层还有HBase（BigTable）用于存储结构化数据。再上层就是MapReduce计算框架。GFS这是这门课里有关如何构建大型存储系统的众多案例学习的第一篇。
Mengo_x·2023-04-06 19:13

大数据组件Hive性能测试和性能优化

部门主要是给一些国产芯片做服务器的软件性能测试，包括大数据生态软件Hadoop、Hbase、Hive等。本人负责的是Hive软件的性能测试和性能优化，最终对比Hive在x86和arm服务器上的性能。
Wilbur.Dreamer·2023-04-06 19:29

【2019-07-21】spark on hbase运行一天token失效

问题描述运行一天发现访问hbase失败，异常如下tokencantbefoundIncache。
学师大术·2023-04-06 18:34

Sharding-jdbc分库分表

MySQL大数据量造成的性能瓶颈解决方案：从SQL入手加入索引->缓存->主从复制/读写分离使用缓存，减少对数据库的同步访问减少MySQL使用，可以使用HBase
Lyzxii·2023-04-06 17:47

【HBase学习笔记-尚硅谷-Java API shell命令 谷粒微博案例】

HBase学习笔记HBase一、HBase简介1、HBase介绍2、HBase的逻辑结构和物理结构3、数据模型4、基本架构二、快速入门1、配置HBase2、命令三、API1、获取HBase连接2、创建表
爱酸柠檬·2023-04-06 15:35

Hbase - 预分区的技巧

>可以用两行代码搞定Hbase的预分区设计，我们在新建一张表的时候有没有发现，做预分区其实也是要计算的，如果没有写上工具类那可惨了，需要自己用手指头算了，在这给大家提供了一个10进制跟16进制的版本，会根据
kikiki4·2023-04-06 13:36

Apache Phoenix 映射已存在 HBase 表，查询不到数据

问题描述按照网友提供的phoenix映射已存在的hbase表demo时，表映射正常，但是使用phoenix查询时，一直查询不到数据。
aaron_ouyang·2023-04-06 13:02

03 | 脉冲输出控制步进电机伺服

Nomodulenamed'encodings'问题2：ModuleNotFoundError:Nomodulenamed'pyserial'问题3：ValueError:invalidliteralforint()withbase10
农耕园·2023-04-06 13:16

UVM-1.1学习（一）——uvm代码的分类

相关文件：base/uvm_globals.svhbase/uvm_object_globals.svhBase定义了搭建环境所需要的components、transactions、ports。
kevindas·2023-04-06 13:10

redis

0.NoSQL产品(key-value)RDBMS：MySQL，Oracle，MSSQL，PGNoSQL:Redis,MongoDB,ES,HBASE.NewSQL----->分布式数据库架构（学习了MongoDB
昇昇不息·2023-04-06 12:18

HDFS/HBase技术报告·分布式数据库设计架构的全面解析

从广义的理解，分库分表的传统关系型数据库，传统关系型数据库集群，关系型数据库的主从架构，分布式KV数据库（例如：HBase），分布式文档数据库（例如：MongoDB），分布式关系数据库(例如：TiDB)
守护石技术研究·2023-04-06 12:45

Pyspark_结构化流1

Pyspark注：大家觉得博客好的话，别忘了点赞收藏呀，本人每周都会更新关于人工智能和大数据相关的内容，内容多为原创，PythonJavaScalaSQL代码，CVNLP推荐系统等，SparkFlinkKafkaHbaseHiveFlume
陈万君Allen·2023-04-06 09:45

Pyspark_结构化流2

Pyspark注：大家觉得博客好的话，别忘了点赞收藏呀，本人每周都会更新关于人工智能和大数据相关的内容，内容多为原创，PythonJavaScalaSQL代码，CVNLP推荐系统等，SparkFlinkKafkaHbaseHiveFlume
陈万君Allen·2023-04-06 09:45

Pyspark_结构化流3

Pyspark注：大家觉得博客好的话，别忘了点赞收藏呀，本人每周都会更新关于人工智能和大数据相关的内容，内容多为原创，PythonJavaScalaSQL代码，CVNLP推荐系统等，SparkFlinkKafkaHbaseHiveFlume
陈万君Allen·2023-04-06 09:15
上一页 48 49 50 51 52 53 54 55 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他