Impala

Git: gnutls_handshake() failed: Error in the pull function

apt-get-yinstallbuild-essentialnghttp2libnghttp2-devlibssl-dev安装docker-impala时，执行gitclonehttps://github.com
guoguangwu·2022-12-07 10:14

2013 Bossie评选：最佳开源大数据工具

Giraph、Hama以及Impala等工具的出现则是为了突破MapReduce的局限。
xiyf2046·2022-12-05 11:03

基于 Impala 的高性能数仓实践之物化视图服务

本文将主要介绍NDHImpala的物化视图实现。接上篇，前两篇分别讲了执行引擎和虚拟数仓，它们是让一个SQL又快又好地执行的关键。
·2022-12-01 13:23

深度强化学习CS285-Lec17 Distributed RL

TransferLearning与DistributedRL概述一、分布式RL架构1.1DQN1.2GORILA1.3A3C1.4IMPALA1.5Ape-X1.6R2D3二、其它引用较高的分布式RL架构
Nemo555·2022-11-29 18:01

大数据Hive和Impala经典分析

目录一、Impala是什么？？？
小飞猪666·2022-11-29 17:33

CDH6 配置LDAP，Kerberos，Sentry

CDH6配置LDAP，Kerberos，Sentry1.开启Sentry控制Hive，Hue，Impala权限仅用作个人笔记，还没有二次验证1.1在mysql中配置数据库[root@cdh1~]#mysql-uroot-p
途足·2022-11-29 16:57

hive不在同一台机 hue_【Impala篇】---Hue从初始到安装应用

基于Hive使用内存计算，兼顾数据仓库、具有实时、批处理、多并发等优点是CDH平台首选的PB级大数据实时查询分析引擎.一般公司选择使用CDH部署集群，可以考虑下Impala。
weixin_39557087·2022-11-29 16:26

Impala和Hive集成Sentry、Kerberos认证

2019独角兽企业重金招聘Python工程师标准>>>关于Kerberos的安装和HDFS配置kerberos认证，请参考HDFS配置kerberos认证。关于Kerberos的安装和YARN配置kerberos认证，请参考YARN配置kerberos认证。关于Kerberos的安装和Hive配置kerberos认证，请参考Hive配置kerberos认证。请先完成HDFS、YARN、Hive配置
weixin_34137799·2022-11-29 16:55

hive+impala+hue+sentry+ldap整合

www.cloudera.com/documentation/enterprise/5-14-x/topics/sentry.html本文主要写一些openldap的搭建和phpldap的使用，还有ldap和（hive，impala
weixin_33889245·2022-11-29 16:25

hue启用ldap

.…..http://gethue.com/ldap-or-pam-pass-through-authentication-with-hive-or-impala/https://www.cloudera.com
weixin_30871905·2022-11-29 16:54

impala学习

impala配置个人认为配置文件的书写要注意格式+内容，非常重要。
心有猛虎_xy·2022-11-29 16:17

OLAP(三)：Impala介绍 、 (和hive/spark对比)、COMPUTE STATS

一、Impala概述Impala是用于处理存储在Hadoop集群中的大量数据的MPP（大规模并行处理）SQL查询引擎。与其他Hadoop的SQL引擎相比，它提供了高性能和低延迟。
四月天03·2022-11-29 16:45

hue oozie执行impala sql

在hue使用oozie即workflow执行impalasql，需要使用shell调用impala-shell一、如果开启了LDAP，impala-shell需要输入密码，则shell需要调用expect
lishengping_max·2022-11-29 16:45

impala hive启用LDAP hue (cdh6.3)

1配置impala:注意：上述互斥项，如果使用ldap的uid，直接配置上面一个。
peidezhi·2022-11-29 16:14

Impala和Hive集成Sentry

本文主要记录CDH5.2Hadoop集群中配置Impala和Hive集成Sentry的过程，包括Sentry的安装、配置以及和Impala、Hive集成后的测试。
Junjie_M·2022-11-29 16:04

Hive、Impala、Hue集成LDAP

1.LDAP简介轻型目录访问协议，是一个开放的，中立的，工业标准的应用协议，通过IP协议提供访问控制和维护分布式信息的目录信息。在hadoop生态圈中，LDAP主要是用来做账号管理的。2.LDAP安装配置2.1安装LDAP（以下操作都只需在主节点执行）yuminstall-yopenldap-*2.2配置（1）更改配置rm-rf/var/lib/ldap/*cp/usr/share/openlda
心有猛虎_xy·2022-11-29 16:30

机器学习基础

音频-HDFS、MR、Hive半结构化数据-XML、HTML形式-HDFS、MR、Hive、Spark速度快数据的增长速度快-TB-PB-ZB-HDFS数据的处理的速度快MR-HIVE-PIG-Impala
erainm·2022-11-22 03:40

波克城市：从Impala到StarRocks，让游戏分析焕发新活力

作者：波克城市大数据平台部门波克科技股份有限公司（以下简称“波克城市”）成立于2010年，立足于精品休闲游戏的全球化研发、发行，旗下拥有《爆炒江湖》《我是航天员》《猫咪公寓》等精品休闲游戏，连续五年入选中国互联网百强。目前，波克游戏积极探索和发展“游戏+”模式，努力构建以游戏产业为核心、多产业交融发展的互联网新生态。基于大数据和人工智能的技术，波克城市正在组建自己的数据平台，赋能各个项目组，以保障
StarRocks_labs·2022-11-21 09:36

大数据技术栈

ETL职位现状和未来发展技术栈Hadoop相关基本原理和操作：hdfs，yarn，mrOLTP：mysql，oracle，pg，etc…OLAP：Kylin，clickhouse，presto，impala
辉常努腻·2022-11-20 04:32

爱奇艺|海量数据实时分析服务技术架构演进

1.现状与挑战爱奇艺目前使用到的大数据相关技术有Druid、Impala、Kudu、Kylin、Presto、ElasticSearch等，并且随着各技术框架的版本升级而升级。
浪尖聊大数据-浪尖·2022-11-15 10:49

充分复用离线空闲算力，降低了实时计算资源开支

针对提供下游数据报表展示的场景，一般需要走预计算的流程将结果持久化下来，对数据就绪和计算耗时的敏感度都较高，而且查询逻辑相对复杂，Trino/Impala集群规模相对较小，执行容易失败，导致稳定性欠佳。
feidodoxcx·2022-11-15 10:37

记录python使用pymysql连接mysql数据库，使用impyla、ibis-framework[impala]连接hive\impala（kerberos）数据库（备以后查阅）

记录python使用pymysql连接mysql数据库，使用impyla、ibis-framework[impala]连接hive\impala（kerberos）数据库（备以后查阅）连接mysql数据库
想考个研·2022-11-14 09:37

大数据之Python实现每日钉钉数据自动推送

Python+impala+钉钉最近有一个需求，领导们需要关注每日的一些指标。
热心市民楚先生·2022-11-01 14:12

hive与impala相关

hive与impala相关hive的orc格式详解ORC（TheOptimizedRowColumnar），被设计用来给hive提供更高效的数据存储格式。
岁月的眸·2022-11-01 10:13

如何在Hive中创建自定义函数UDF及通过Impala同步元数据重用UDF的jar文件

简介如何在Hive中创建自定义函数UDF及使用如何在Impala中使用Hive的自定义函数UDF函数开发使用Intellij工具开发Hive的UDF函数，进行编译准备工作创建Maven工程，导入如下依赖
Vicky_Tang·2022-10-26 07:34

Apache Spark：大数据处理统一引擎

在开源ApacheHadoop堆栈中，类似Storm和Impala的系统也是特有的。即使在关系数据库世界中，“一刀切”系
仲培艺·2022-10-22 07:08

为何选MPP架构？

介绍像Greenplum（GPDB），ClickHouse，Impala，Presto，Tidb，Greenplum衍生物AnalyticDBPostgreSQL（adbpg）等都是采用MPP架构的，采用
·2022-10-20 22:04

基于 Impala 的高性能数仓实践之物化视图服务

本文将主要介绍NDHImpala的物化视图实现。接上篇，前两篇分别讲了执行引擎和虚拟数仓，它们是让一个SQL又快又好地执行的关键。
·2022-10-13 18:39

数据中台开源解决方案（一）

以查询引擎为例，可以使用的开源工具有MySQL、Redis、Impala、MongoDB、PgSQL等。可以根据实际业务需要，选择合适的开源套件。
梯度科技·2022-10-13 15:56

impala 执行计划详解

Impala是一个MPPMassivelyParallelProcessing计算引擎，简单来说就是将计算压力分到多个节点，得到结果后汇总，然后再返回给客户端。
屏占比·2022-09-30 10:39

hive on spark报错:Client closed before SASL negotiation finished

问题用python写了个脚本，用impala.dbapi包并行执行多个spark任务，发现偶尔会报错如下Traceback(mostrecentcalllast):File"E:/project/hivemerge
weixin_41956627·2022-09-21 13:38

数据采集模块——Flume消费Kafka数据写入到HDFS

测试集群为第三方公司基于当前主流开源组件自主研发并搭建的大数据平台，包含常用组件：HDFS,MapReduce,Yarn,Hive,HBase,Phoenix,Zookeeper,Spark,Impala
Diego_zh·2022-09-21 11:16

行业案例｜长安汽车质量管理数据分析实践

引入KyligenceEnterprise解决了当前长安大数据平台的不足，在大规模数据场景下，满足高并发亚秒级多维查询的性能要求，避免当前Vertica和Impala多维查询性能不足的问题；其次，基于免编程拖拽式模型开发
Kyligence·2022-09-07 10:12

大白话描述SQL面试的知识点

一、SQL(结构化查询语言)SQL的分类：基本需要了解的：MySQL(99SQL)、HQL(HiveSQL)、SparkSQL、ImpalaSQL、OracleSQL的应用：MySQL数据库用于存放元数据较多
来自偶然的尘土·2022-09-06 09:51

行业案例｜长安汽车质量管理数据分析实践

引入KyligenceEnterprise解决了当前长安大数据平台的不足，在大规模数据场景下，满足高并发亚秒级多维查询的性能要求，避免当前Vertica和Impala多维查询性能不足的问题；其次，基于免编程拖拽式模型开发
·2022-09-05 12:17

基于 Impala 的高性能数仓建设实践之虚拟数仓

导读：本文主要介绍网易数帆NDH在Impala上实现的虚拟数仓特性，包括资源分组、水平扩展、混合分组和分时复用等功能，可以灵活配置集群资源、均衡节点负载、提高查询并发，并充分利用节点资源。接着上一篇。
·2022-08-19 17:15

SQL on Hadoop在快手大数据平台的实践与优化

给公众号标星置顶更多精彩第一时间直达本文转自|快手星球作者|钟靓一、SQLonHadoop介绍SQLonHadoop，顾名思义它是基于Hadoop生态的一个SQL引擎架构，我们其实常常听到Hive、SparkSQL、Presto、Impala
Hadoop技术博文·2022-08-13 12:54

美团 R 语言数据运营实战

一、引言近年来，随着分布式数据处理技术的不断革新，Hive、Spark、Kylin、Impala、Presto等工具不断推陈出新，对大数据集合的计算和存储成为现实，数据仓库/商业分析部门日益成为各类企业和机构的标配
美团技术团队·2022-07-18 15:27

【hadoop生态之Flume】概念【笔记+代码】

Flume、Kafka用来实时进行数据收集，Spark、Flink用来实时处理数据，impala用来实时查询。
iken_g·2022-07-18 13:10

impala高级设置之BROADCAST_BYTES_LIMIT

官网地址https://impala.apache.org/docs/build/html/topics/impala_broadcast_bytes_limit.htmlSetsthelimitforthesizeofthebroadcastinputbasedonestimatedsize.TheImpalaplannermayinrarecasesmakeabadchoicetobroadc
cclovezbf·2022-07-18 07:17

数据分析引擎百花齐放，为什么要大力投入ClickHouse？

更多技术交流、求职机会、试用福利，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群近年来，OLAP产品的竞争日渐激烈，目前企业间流行的既有Impala、Greenplum等上一代较为成熟的数据分析产品
·2022-07-13 13:27

spark sql加载parquet格式和json格式数据

Parquet是一种列式存储格式，可以被多种查询引擎支持（Hive、Impala、Drill等），并且它是语言和平台无关的。2.Parquet文件下载后是否可以直接读取和修改呢？
zhousishuo·2022-05-17 17:47

Spark SQL 操作 Parquet 类型文件

Parquet介绍ApacheParquet是Hadoop生态圈中一种新型列式存储格式，它可以兼容Hadoop生态圈中大多数计算框架(Hadoop、Spark等)，被多种查询引擎支持（Hive、Impala
路飞DD·2022-05-17 16:52

Spark SQL下的Parquet使用最佳实践和代码实战

过去整个业界对大数据的分析的技术栈的Pipeline一般分为一下两种方式：A）DataSource->HDFS->MR/Hive/Spark(相当于ETL)->HDFSParquet->SparkSQL/impala
靖-Drei·2022-05-17 16:40

Airflow 动态创建Task

importairflowimportMySQLdbfromimpala.utilimportas_pandasfromairflowimportDAGfromairflow.operators.dummy_operatorimportDummyOperatorfromairflow.operators.bash_operatorimportBashOperator
灯火gg·2022-05-12 11:48

Apache Impala架构解析及与Hive、SparkSQL的性能比较

一、Impala介绍Impala是Cloudera公司主导开发的新型查询系统，它提供SQL语义，能查询存储在Hadoop的HDFS和HBase中的PB级大数据。
·2022-03-29 10:38

数据仓库 —— Hive

要实现这个目标，就需要大数据分析引擎，常见的有：Hadoop体系的Hive和PigSparkSQLFlinkTable&SQLPresto：支持SQL，基于内存，通常集成Presto和HiveImpala
小胡_鸭·2022-03-24 18:41

大数据开发面试：impala和hive的比较

Impala:Cloudera公司推出，提供对于hdfs，hbase数据的高性能，低延迟的交互式sql查询功能基于hive，使用内存计算，兼顾数据仓库，具有实时，批处理，多并发等优点是CDH首选的PB级大数据实时查询
道法—自然·2022-02-28 15:44

python存数据到impala_python连接impala（安装impyla）

相关环境如下:Python3.4Win764位参照官网https://github.com/cloudera/impyla中的安装步骤执行：1、pipinstallsix2、pipinstallbit_array3、pipinstallthriftpy##thrift(onPython2.x)orthriftpy(onPython3.x)4、pipinstallsasl-0.2.1-cp34-cp
weixin_39839968·2022-02-28 15:36

问题排查--Impala查询Decimal数据为NULL，Hive查询正常

目前，线上反馈一个问题：同一张表，使用Hive查询正常，但是使用Impala查询，返回的数据中，部分字段值为NULL。
skyyws·2022-02-28 15:31
上一页 4 5 6 7 8 9 10 11 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他