-----【kudu】

ClickHouse高可用集群的安装与部署

随着业务体量的扩张，我们的业务人员逐渐有了分析海量用户行为和点击流数据的需求，经过各种调研，最终敲定ClickHouse为最佳方案（成功挤掉了之前有丰富实操经验的Kudu哈哈）。
LittleMagics·2020-07-05 01:49

开源OLAP系统对比

常见OLAP对比数据库响应时间并发能力社区处理能力分析能力理解Impala慢低适中支持的数据规模大兼容HQL以及多表join和窗口函数目前通用的解决方案是impala+kudu，mpp架构Kylin快高活跃支持的数据规模大性能高
ghy429090·2020-07-04 16:24

第五例：MQTT服务端及客户端学习

的代理，也可以用IBM的ISMB)http://mosquitto.org/download/(2)、下载AndroidPushNotificationsDemohttps://github.com/tokudu
陌凡·2020-07-04 10:52

HBase(一): HBase 表结构及数据模型和架构的理解

4.1.2memstore4.1.3storefile4.1.4blockcache:读缓存4.1.4HLog1.大数据领域常用存储介绍对比：HDFS：NOSQLHive：有SQL慢HBase:NoSQL快（Phoenix+HBase）Kudu
冬瓜螺旋雪碧·2020-07-02 07:15

Flink SQL自定义TableSource读取Kudu数据

本文的背景就是使用SQL查询批量数据，但是批量数据存储在kudu中，由于没有提供connector所以需要自定义读取数据逻辑。官方文档中给出了自定义批量数据读取的实现方式：然而实际
anickname·2020-07-02 05:25

scala中json嵌套json

最近在使用神策的时候，要把自己的一部分数据导入神策中遇到问题：1.因为hdfsImporter无法把数据直接导入到kudu中，用户数据都是存在kudu中的。
kelovemn·2020-07-02 05:15

Linux系统管理硬件配置

常用命令整理如下：查看主板的序列号:dmidecode|grep-i’serialnumber’用硬件检测程序kuduz探测新硬件：servicekudzustart(orrestart)查看CPU信息
iteye_5750·2020-07-02 04:52

Kudu、Hudi和Delta Lake的比较

https://www.cnblogs.com/kehanc/p/12153409.html目录Kudu、Hudi和DeltaLake的比较存储机制读数据更新数据其他如何选择合适的存储方案Kudu、Hudi
吃鱼的羊·2020-07-02 02:13

CDH6.3.1中安装StreamSets3.16.0

StreamSets（StreamSetsDataCollector）是一款开源的强大的实时数据采集和ETL工具，数据源支持包括结构化和半/非结构化，目标源支持HDFS，HBase，Hive，Kudu，
象在舞·2020-07-02 00:33

Kudu + IMPALA 的安装部署

ApacheKudu是由Cloudera开源的存储引擎，可以同时提供低延迟的随机读写和高效的数据分析能力。
剪草的Kross·2020-06-30 21:14

kudu 导入/导出 数据

日萌社人工智能AI：KerasPyTorchMXNetTensorFlowPaddlePaddle深度学习实战（不定时更新）大数据组件使用总文章Impala操作/读写Kudu，使用druid连接池Kudu
あずにゃん·2020-06-30 17:20

Spark(SparkSql) 写数据到 MySQL中（Spark读取TCP socket/文件）

日萌社人工智能AI：KerasPyTorchMXNetTensorFlowPaddlePaddle深度学习实战（不定时更新）Impala操作/读写Kudu，使用druid连接池Kudu原理、API使用、
あずにゃん·2020-06-30 17:19

Spark Streaming 整合 Flume（Spark读取Flume）

日萌社人工智能AI：KerasPyTorchMXNetTensorFlowPaddlePaddle深度学习实战（不定时更新）Impala操作/读写Kudu，使用druid连接池Kudu原理、API使用、
あずにゃん·2020-06-30 17:19

kudu初探小坑

前言在一个数据处理的项目中用到了kudu数据库．使用kuduapi作为访问方式．在此记录一些遇到的小坑．那些坑1.尽量使用最新的版本．由于kuduapi还在不断的完善，尽可能使用最新的api一方面能确保你遇到更少的
LLittleKevin·2020-06-30 16:16

hadoop启动jar脚本

home/targetHIVE_HOME=/opt/cloudera/parcels/CDH/lib/hiveHBASE_HOME=/opt/cloudera/parcels/CDH/lib/hbaseKUDU_HOME
LLittleKevin·2020-06-30 16:16

Kudu 学习 - 第一篇 Kudu 简介

一、为什么会有Kudu要在Hadoop生态系统中实现数据的快速输入和快速分析，一直以来只有少数可用但是不够完美的解决方案。
程序了个猴·2020-06-30 11:48

Impala查询详解第一篇——简介

而Impala可以说是一个MPP计算引擎，它需要处理的数据存储在HDFS、Hbase或者Kudu之上，这些存储引擎都是独立于Impala的，可以称之为第三方存储引擎，Impala使
教练_我要踢球·2020-06-30 09:22

Impala高性能探秘之HDFS数据访问

Impala是一个高性能的OLAP引擎，Impala本身只是一个OLAP-SQL引擎，它访问的数据存储在第三方引擎中，第三方引擎包括HDFS、Hbase、kudu。
教练_我要踢球·2020-06-30 09:22

Kudu

GoalKudu主要面向OLAP应用，支持大规模数据存储，支持快速查询，并且支持实时数据更新。
07H_JH·2020-06-30 09:22

Linux下大数据集群安装presto+kudu(3节点)

免密登录、配置hosts文件（127.0.0.1的2行删除）cat/etc/hosts192.168.0.107test3192.168.0.108test4192.168.0.109test52、安装kuducd
姚敦林博客·2020-06-30 06:46

kudu集群安装配置

本次记录为在线安装kudu，需要所有机器联网。
同是天涯程序猿·2020-06-29 23:01

配置kudu-1.9.0软件源

安装httpd，createrepoyum-yinstallhttpdcreaterepo启动httpdsystemctlstarthttpd.service创建kudu软件源存放目录mkdir-p/var
woloqun·2020-06-29 20:54

大数据&ETL&kettle学习积累

以下为本博客及其他资料的分享：大数据：Kudu的学习Sqoop同步数据命令HBASE知识积累大数据Hive的学习积累HDFS的学习积累impala-shellNotConnected的问题Azkaban
大宇进阶之路·2020-06-29 19:22

kudu 添加master

kudu添加master节点不像其他大数据组件直接添加即可，操作比较复杂，步骤如下：1.kudu添加master节点，集群不可用2.Master节点数为奇数3.在已存在master节点查看wal和数据目录
kevin_wf·2020-06-29 18:12

Apache Kudu集群安装

安装Kudu集群必须是奇数的集群，建议用一个主节点（无容错）或者三个主节点（可以允许容错一个），双主机部署无容错功能。
清风狂刀·2020-06-29 10:25

Apache KUDU 安装搭建

ApacheKUDU安装搭建节点规划节点角色node1MasterServer、TabletServernode2MasterServer、TabletServernode3KuduClient、TabletServernode4MasterServer
lemon lime·2020-06-29 08:31

Kudu安装部署

Kudu集群安装必须配置ntpd服务器。
磨刀大神·2020-06-29 07:20

利用 StreamSets 实现将 MySQL 中数据实时同步写入 Kudu

环境准备开启MariaDB的Binlog日志修改/etc/my.conf文件，在配置文件[mysqld]下增加如下配置server-id=999log-bin=mysql-binbinlog_format=ROW注意:MySQLBinlog支持多种数据更新格式包括Row、Statement和mix（Row和Statement的混合），这里建议使用Row模式的Binlog格式，可以更加方便实时的反应
storm_fury·2020-06-29 07:49

kudu ---- 集群一键部署

#创建工作目录mkdir-p/home/kuducd/home/kudu##获取镜像dockerpullapache/kudu:latest##获取compose编排文件wgethttps://github.com
October-·2020-06-29 02:59

kudu数据刷新策略api

课程链接：http://edu.51cto.com/course/15174.htmlpackagesrc.main.java.org.kududb.examples.sample;importcom.google.common.collect.ImmutableList
@black·2020-06-28 22:51

kudu报错解决

，因为master的元数据全部在本地磁盘文件，如果额外的添加了一个master，会报错，找不到consensus-meta,也就是master的容错机制，需要对数据格式化错误二：impala中创建使用kudu
@black·2020-06-28 22:50

kudu命令详解

课程链接：http://edu.51cto.com/course/15174.htmlkudutabletkudutabletleader_step_down功能：强制使的leaderstepdown(
@black·2020-06-28 22:50

kudu1.6.0的已知问题和限制

架构主键在创建表之后，主键可能不会更改。您必须删除并重新创建一个表以选择新的主键。构成主键的列必须首先在模式中列出。行的主键可能不会使用该UPDATE功能进行修改。要修改一个行的主键，该行必须被删除，并用修改后的键重新插入。这样的修改是非原子的。包含DOUBLE，，FLOAT或BOOL类型的列不被允许作为主键定义的一部分。另外，作为主键定义一部分的所有列都必须是NOTNULL。自动生成的主键不受支
@black·2020-06-28 22:50

kudu性能调优

课程链接：http://edu.51cto.com/course/15174.html1、KuduTabletServerMaintenanceThreads解释：Kudu后台对数据进行维护操作，如写入数据时的并发线程数
@black·2020-06-28 22:50

Kudu建表语句

--建表CREATETABLEkudu_testdb.perf_test_t1(idstringENCODINGPLAIN_ENCODINGCOMPRESSIONSNAPPY,int_valueint,
weixin_38168173·2020-06-28 20:59

kudu操作

一、介绍kudukudu的定位是实时数据仓库，kudu功能上有交集的有两个数据库：ODPS、hbase。
玄尺·2020-06-28 20:04

使用Apache Kudu和Impala实现存储分层

对于快速更新和实时分析工作较多的场景，我们可能希望使用ApacheKudu，但是对于低成本的大规模可伸缩性场景，我们可能希望使用HDFS。因此，需要一种解决方案使我们能够利用多个存储系统的最佳特性。
weixin_34117211·2020-06-28 11:00

hadoop生态圈列式存储系统--kudu介绍及安装配置

介绍Kudu是一个针对ApacheHadoop平台而开发的列式存储管理器。
weixin_33842328·2020-06-28 06:11

Kudu系列: Kudu主键选择策略

每个Kudu表必须设置PimaryKey(unique),另外Kudu表不能设置secondaryindex,经过实际性能测试,本文给出了选择Kudu主键的几个策略,测试结果纠正了我之前的习惯认知.简单介绍测试场景
weixin_33819479·2020-06-28 06:17

CDH部署StreamSets

StreamSets是一个大数据采集工具，数据源支持包括结构化和半/非结构化，目标源支持HDFS，HBase，Hive，Kudu，ClouderaSearch,ElasticSearch等。
weixin_30650859·2020-06-27 22:37

kudu安装部署

安装部署节点规划节点kudu-masterkudu-tservernode01是是node02是是node03是是配置本地Yum的Repository下载kudu安装yum源。
weixin_30648963·2020-06-27 22:27

MQTT的学习研究（1）MQTT学习网站

id=37MQTT的学习研究（一）MQTT学习网站MQTT的官方推荐网站：http://mqtt.org/software使用IBM的MQTT协议实现push消息地址：http://tokudu.com
weixin_30633405·2020-06-27 22:53

使用Spark Streaming + Kudu + Impala构建一个预测引擎

随着用户使用天数的增加，不管你的业务是扩大还是缩减了，为什么你的大数据中心架构保持线性增长的趋势？很明显需要一个稳定的基本架构来保障你的业务线。当你的客户处在休眠期，或者你的业务处在淡季，你增加的计算资源就处在浪费阶段；相对应地，当你的业务在旺季期，或者每周一每个人对上周的数据进行查询分析，有多少次你忒想拥有额外的计算资源。根据需求水平动态分配资源VS固定的资源分配方式，似乎不太好实现。幸运的是，
weixin_30480583·2020-06-27 20:24

Apache Kudu

ApacheKudu是由Cloudera开源的存储引擎，可以同时提供低延迟的随机读写和高效的数据分析能力。
weixin_30292745·2020-06-27 15:48

Kudu vs HBase

本文由网易云发布背景Cloudera在2016年发布了新型的分布式存储系统——kudu，kudu目前也是apache下面的开源项目。
wangyiyungw·2020-06-27 13:12

KUDU安装

Kudu是一个比较新的大数据组建，在国内大规模应用的公司并不多，kudu的安装文档也只找到官网上的一份，自己在按照官网的步骤进行安装的过程中也遇到了一些问题，现记录一下完整的安装过程：Step1，配置Yum
wangjinming1976·2020-06-27 10:06

hadoop平台存储文件格式的概念及对比

kudu又是什么？事实上，
fly_air·2020-06-27 04:49

网易大数据基础平台建设之路

文章后半部分重点介绍了ad-hoc查询引擎Impala与分布式存储系统Kudu，非常值得借鉴。如果觉得文章有帮助请转发朋友圈+在看，完整的
大数据技术架构·2020-06-27 01:44

kudu踩坑记之一

在开发过程中，难免会手误，由于在通过impala-shell建kudu表时候把bigint类型的字段写成了string，以致后面在计算时候报错。
紧到长卜帅·2020-06-27 00:43

spark-sql实现Kudu同步数据到mysql

Kudu同步数据到mysql实施方案简介目前kudu导出到mysql没有比较好的方案，临时借助spark-sql进行数据导出，处理逻辑是会把老的数据给删除再导入，已经完成了生产环境的上线。
tianjun2012·2020-06-26 19:04
上一页 3 4 5 6 7 8 9 10 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他