HBase、Parrot

DataX数据同步工具

DataX实现了包括MySQL、Oracle、OceanBase、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS
躺着听Jay·2023-11-07 17:23

基于Hadoop与Electron的京东商品评论词云统计系统

爬取京东或淘宝某一商品的评论1000条，统计词频（使用MapReduce或HBase或Hive），并以词云的方式可视化呈现，最后设计为一套可以操作的系统。
没头发的米糊·2023-11-07 15:06

数据库基础

Oracle、DB2、Access、PostgreSQL、SqLite、OceanBase、GaussDB、TDSQL、DM非关系型数据库---->Redis、Mongodb、CouchDB、Couchbase
AnotherMoon_·2023-11-07 09:50

Ubuntu环境下Hadoop1.2.1, HBase0.94.25, nutch2.2.1各个配置文件一览

http://www.cnblogs.com/xxx0624//×××××××××××××××××××××××××××××××××××××××××/Hadoop伪分布式配置过程：Hadoop：1.2.1Hbase
weixin_30491641·2023-11-07 09:10

flinksql如何关联mysql维表_Flink实战（八十三）：flink-sql使用（十）维表join（五）Flink SQL之维表join之Temporal Table Join...

在实时数仓中，同样也有维表与事实表的概念，其中事实表通常存储在kafka中，维表通常存储在外部设备中(比如MySQL，HBase)。对于每条流式数据，可以关联一个外部维表数据
axiao2·2023-11-07 05:39

实时数仓|Flink SQL之维表join

在实时数仓中，同样也有维表与事实表的概念，其中事实表通常存储在kafka中，维表通常存储在外部设备中(比如MySQL，HBase)。
大数据技术与数仓·2023-11-07 05:05

大数据从入门到实战 - HBase 开发：使用Java操作HBase

大数据从入门到实战-HBase开发：使用Java操作HBase一、关于此次实践1、实战简介2、全部任务二、实践详解1、第1关：创建表2、第2关：添加数据3、第3关：获取数据4、第4关：删除表叮嘟！
发芽ing的小啊呜·2023-11-06 23:07

flink-connector-hbase 任务提交yarn出现类冲突bugfix

第一种报错信息：java.lang.RuntimeException:CannotcreateconnectiontoHBase.atorg.apache.flink.connector.hbase.sink.HBaseSinkFunction.open
TreeCode·2023-11-06 23:35

Java-Hbase介绍

HDFS为Hbase提供可靠的底层数据存储服务，MapReduce为Hbase提供高性能的计算能力，Zookeeper为Hbase提供稳定服务和Failover机制，因此我们说Hbase是一个通过大量廉价的机器解决海量数据的高速存储和读取的分布式数据库解决方案
狠情·2023-11-06 23:05

HBase+ElasticSearch二级索引实践总结

前言：还记得那是2018年的一个夏天，天气特别热，我一边擦汗一边听领导大刀阔斧的讲述自己未来的改革蓝图。会议开完了，核心思想就是：我们要搞一个数据大池子，要把公司能灌的数据都灌入这个大池子，然后让别人用各种姿势来捞这些数据。系统从开始打造到上线差不多花了半年多不到一年的时间，线上稳定运行也有一年多的时间。今天想简单做个总结。一、背景介绍公司成立差不多十五六年了，老公司了。也正是因为资格老，业务迭代
大数据技术架构·2023-11-06 23:56

交叉编译ffmpeg+x264+x265 （x86、arm-linux双版本）亲测有效

/bin/shBASE
爱学习的诸葛铁锤·2023-11-06 13:25

FlinkSQL - 级联窗口计算并Sink2Hbase

一、背景说明背景来源为一个实时指标计算的需求：实时计算过去一小时订单配对数。订单配对的口径是用户下单后司机接单，且后续没有发生订单取消则定义为配对订单（基于打车场景）。该口径在计算上，需要实现两次聚合，即对过去一小时窗口的订单进行计算，对后续发生取消的订单打上标签，下一个窗口对上一层基础上，剔除取消的订单，计算出配对单的数量。在此该需求可以再往上抽象一层：对过去N小时的窗口数据，做级联GoupBy
Rango_lhl·2023-11-06 13:50

监控jira license 证书过期时间

/bin/bashbase_auth="https://jira.web.
tony_wzx·2023-11-06 12:30

hbase安装

这里安装0.99版本，如果hadoop为2.7可以换为更高版本hbase下载（当前目录有安装包）Hbase下载官网mkdir/opt/hbasetar-zxvfhbase-0.99.2-bin.tar.gzip
比基尼海滩章鱼哥·2023-11-06 09:49

理解索引（上）

最近有个需求，要修改现有存储结构，涉及查询条件和查询效率的考量，看了几篇索引和HBase相关的文章，回忆了相关知识，结合项目需求，说说自己的理解和总结。
情情说·2023-11-06 06:57

Scala - shell 使用外部包方法

我们可以使用scalashell做很多事情，比如测试一些demo，不用再打开idea那类那么重的编辑器，当然还有其它用法，像我们使用hbase有这样的问题，只是想测试hbase一些东西，但是每次连接hbase
kikiki5·2023-11-06 05:28

【基础篇】大数据学习笔记（4）相关名词解释

GoogleFileSystemGoogle文件系统HDFS：HadoopDsitributedFileSystemHadoop分布式文件系统Zookeeper：分布式应用程序协调服务，是Hadoop和Hbase
风也醉·2023-11-06 02:54

pyarrow读写hdfs

https://arrow.apache.org/docs/python/index.html1、测试服务器能够正确连接hdfs:>hadoopfs-ls/Found5itemsdrwxrwxrwx-hbasesupergroup02021
影子飞扬·2023-11-06 00:19

【项目实战】在win10上安装配置Hadoop的环境变量

一、说明注意：该教程适用于：远程连接Linux上的Hadoop集群，因此本步骤是不需要在本地再下载hadoop的在win10操作系统上，运行Hadoop以及其相关依赖包（比如Hbase依赖包）时，我遇到的情况是
本本本添哥·2023-11-05 22:57

hbase 数据迁移

hbase数据迁移前提2套集群的hosts文件内容都需要包含对方的主机地址配置hosts在源集群所有机器的hosts中配置目标集群的hostname与ip快照方式hbasesnapshot数据迁移问题不需要提前建表
邵红晓·2023-11-05 20:08

关于代码迁移到androidx后，语言环境失效的问题

@OverrideprotectedvoidattachBaseContext(ContextnewBase){StringselectedLanguage=AccountPreference.getLanguage
Guow110·2023-11-05 17:32

HBase的详细介绍(概念以及特性)

1什么是hbaseHBASE是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBASE技术可在廉价PCServer上搭建起大规模结构化存储集群。
随风奔跑之水·2023-11-05 16:35

9、hbase

第十（九）天：hbase一、简介（一）概述（Ⅰ）概述（Ⅱ）行存储和列存储（二）基本概念（Ⅰ）概述（Ⅱ）RowKey：行键（Ⅲ）列族（列簇）（Ⅳ）Cell与时间戳二、安装（一）单机安装（Ⅰ）特点（Ⅱ）安装步骤
qq_44304788·2023-11-05 13:35

2021-02-08a

impala/hdfs/kudu的区别hive和impala则更偏向于查询分析，需要基于hdfs或kuduImpala即可操作hdfs上的数据，又可操作kudu上的数据Hive只可操作hdfs上的数据30.hbase
saluch·2023-11-05 11:10

HBase 优化

1高可用在HBase中HMaster负责监控RegionServer的生命周期，均衡RegionServer的负载，如果HMaster挂掉了，那么整个HBase集群将陷入不健康的状态，并且此时的工作状态并不会维持太久
djm猿·2023-11-05 03:11

Hbase - 表导出CSV数据

MR考查了Hbase的各种MR，没有发现哪一个是能实现的，如果有请通知我，我给他发红包。所以我们只能自己来写一个MR了，编写一个Hbase的MR，官方文档上也有相应的例子。
大猪大猪·2023-11-05 00:37

Hbase 客户端批量写入数据

hbase新版本中引入了BufferedMutator，可以提供更加高效清晰的写操作。
xhh199090·2023-11-04 23:28

Phoenix编译支持cdh5.10.2

前言由于Phoenix还没有发布支持cdh5.10以上的版本，这里在在4.9-HBase-1.2-cdh5.9的基础上修改cdh版本为cdh5.10.2，我这边分别编译了Phoenix支持cdh5.9.3
荒野雄兵·2023-11-04 19:25

数据仓库Hive安装部署与测试练习

master10.176.2.103zjx0310.176.2.105zjx05cent-os6.5zookeepercdh3.4.5hadoopapache2.7.7jdk1.8.191mysql5.17sqoop1.4.7hbase1.2.7hiveapache2.3.4
zwb_jianshu·2023-11-04 15:21

sqoop数据迁移

导入数据：MySQL，Oracle导入数据到Hadoop的HDFS、HIVE、HBASE等数据存储系统；导出数据：从Hadoop的文件系统中导出数据到关系数据库mysql等工作机制：是将导入和导出的命令翻译成
lsy107816·2023-11-04 14:04

大数据技能竞赛（需要提供相关答疑私信）

可视化，综合分析）大数据平台搭建大数据技术与应用技能竞赛题目解析及代码分析实验Hadoop完全分布式安装配置/伪分布式安装配置Spark、Zookeeper、Flink、Hive、Kafka、Flume、HBase
笨鸟先-森·2023-11-04 13:03

2018-06-12

GO一些常见的并发编程错误onelangOhcount：源代码行计数器和分析器HBase,Phoenix,andJava—Part1HBase,Phoenix,andJava—Part2【HBase从入门到精通系列
baitu·2023-11-04 10:54

Ubuntu18安装Hadoop，zookeeper，hbase--记录

安装的版本如上:三台电脑都需要统一安装首先安装hadoop下载：Indexof/dist/hadoop/common/hadoop-2.7.7上传文件，并解压cd到haddop目标，创建目录Haddop配置：保存退出：fs.defaultFShdfs://master:9000io.file.buffer.size131072hadoop.tmp.dirfile:/opt/hadoop-2.7.7
嘟嘟Listing·2023-11-04 09:33

数据转换工具sqoop安装和使用

一、Sqoop概述Sqoop是Apache一款开源工具，主要用于在HDFS、Hive、HBase等数据存储系统与关系性数据库之间传输数据。
七羽319·2023-11-04 09:03

CentOS7 Sqoop 安装和使用

核心的功能有两个：导入、迁入导出、迁出导入数据：MySQL，Oracle导入数据到Hadoop的HDFS、HIVE、HBASE等数据存储系统导出数据：从Hadoop的文件系统中导出数据到关系数据库mysql
fangwei1234·2023-11-04 09:01

Impala 入门

Cloudera公司推出，提供对HDFS、Hbase数据的高性能、低延迟的交互式SQL查询功能。基于Hive，使用内存计算，兼顾数据仓库、具有实时、批处理、多并发等优点。
djm猿·2023-11-04 09:26

使用 Spark-HBase-Connector 读取 HBase

{Level,Logger}importorg.apache.spark.sql.execution.datasources.hbase.
焉知非鱼·2023-11-04 04:58

Android 多语言 切换

你还在重写attachBaseContext自定义多语言切换吗？你还需要自己用轻量级存储（SharedPreferences、datastore）之类的来保存你切换的语言吗？
小铁-Android·2023-11-03 22:29

大数据复习考试

填空题—范围（10*2）1.大数据概念，2.Hadoop概念及两个配置文件：hadoop-env.sh，core-site.xml3.HDFS概念及底层结构，4.HBASE数据模型及原理简答题—范围（10
我叫小武，不是跳舞的舞·2023-11-03 14:19

期末考试题

•HBase的实现包括三个主要的功能组件：–（1）库函数：链接到每个客户端–（2）一个Master主服务器–（3）许多个Region服务器•主服务器Master负责管理和维护HBase表的分区信息，维护
等风带走·2023-11-03 14:12

Hive使用HBaseBulkLoad导入Hbase

官网地址：HBaseBulkLoad-ApacheHive-ApacheSoftwareFoundation概述：如果数据量比较小，可以使用Hive和Hbase集成的方式（HBaseIntegration
weixin_43721102·2023-11-03 12:45

ZooKeeper基本讲解 & 集群构建 & 常用操作指令

一、ZooKeeper概述ZooKeeper是一种为分布式应用所设计的高可用、高性能且一致的开源协调服务，是Google的Chubby一个开源实现，是Hadoop和Hbase的重要组件，它提供了一项基本服务
Summer_1981·2023-11-03 10:32

大数据学前准备--zookeeper详解与集群搭建（保姆级教程）

我将陆续发布大数据阶段所学，包括但不限于（hadoop，hive，hbase，phoneix，flume，bdeaver，kafka，spark，kylin，flink，azkaban）。
毫无感情的dj·2023-11-03 09:37

话单分析之HBaseUtil

objectHBaseUtil{/***regionCode_call1_buildTime_call2_flag_duration**@paramregionCode区号*@paramcaller主叫号码
刚入门的程序猿·2023-11-03 08:00

【大数据基础平台】星环TDH社区集群版本部署

概述二、环境配置三、安装Manager四、配置集群五、安装服务六、基本配置6.1开启安全6.2安装TDH客户端6.3集群外使用hadoopclient6.3.1使用hadoop/hdfs6.3.2使用hbaseshell6.3.3beeline
开着拖拉机回家·2023-11-03 06:43

docker安装zookeeper，以及zk可视化界面介绍

zookeeper简单介绍ZooKeeper是一个开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。
shenlbang·2023-11-03 05:34

生产环境评估机器

学习了kafka的原理知识后，还要学会如何评估生产环境集群，如果是一个大数据架构师，这个是必须要会的，比如kafka集群、Hbase集群、hadoop集群，评估集群的方式差不多，现在以kafka为例。
yx️·2023-11-03 05:32

Ubuntu18.04 部署Flink HA

flink-conf.yaml1.2.2配置slaves1.2.4配置master2.1启动Flink1.Flink安装下载地址：https://flink.apache.org/downloads.html1.1安装Flink解压hbase
_林小凡·2023-11-03 03:22

十、复制

1、复制场景1.1、现有一个SSD的HBase集群被业务方A访问，业务方A对HBase集群的延迟和可用性要求非常高。现在又收到业务方B的数据分析任务需求，每天定期对表TableX跑数据分析任务。
loukey_j·2023-11-02 23:31

理论学习--【Hadoop生态原理学习】

一、Hadoop原理1.核心：HDFS(存储)、MapReduce(分析)解决大量数据存储与处理的问题离线分析：hive实现查询：hbaseBI分析：Mahout2.版本1.0mapreduce还进行资源调度
zenas_yuan·2023-11-02 18:31
上一页 17 18 19 20 21 22 23 24 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他