Cloudera(CDH) 第9页

CentOS 7 下安装 Impala 5.14报错解决方法

Error:Package:impala-shell-2.11.0+cdh5.14.0+0-1.cdh5.14.0.p0.50.el6.x86_64(cdh)Requires:libpython2.6.

YasinZhu·2023-10-28 06:45

【Django】快速入门_基本配置

前提已安装python3.X安装完django创建项目#在命令行执行#HelloWorld项目名称django-adminstartprojectHelloWorld#进入项目cdHelloWorld目录说明

来简书捡书_·2023-10-28 01:42

scala JDBC 方式连接 impala 代码以及pom.xml文件中的依赖

pom.xml依赖com.clouderaImpalaJDBC412.5.42org.apache.hivehive-jdbc1.2.1org.apache.hivehive-cli1.2.1org.apache.hivehive-metastore1.2.1org.apache.hivehive-common1.2.1org.apache.hadoophadoop-common2.3.0org

jzy3711·2023-10-27 11:09

HTTPS的理解（证书、认证方式、TLS握手）

基本介绍证书文件证书种类证书内容服务器获取证书步骤和客户端验证步骤证书链自签名证书生成根证书生成自签名服务器端证书生成自签名客户端证书JavaAPI调用cfssl的使用认证方式和TLS握手(※)单向认证双向认证RSA握手具体分析TLS第一次握手TLS第二次握手TLS第三次握手TLS第四次握手RSA算法的缺陷ECDHE

迷雾总会解·2023-10-27 09:33

Hudi 0.14.0 编译

Java1.8maven3.9.3hadoop3.3.4hive3.1.3spark3.2.1flink1.16.0hudi0.14.02hudi准备2.1源码$gitclonehttps://github.com/apache/hudi.git$cdhudi

跟着大数据和AI去旅行·2023-10-27 01:00

【现场问题】CDH文件权限，Permission denied: user=root, access=WRITE, inode=“/user“:hdfs:supergroup:drwxr-xr

Hive执行语句的时候提示/user权限不够hive>>selectcount(*)fromfact_sale;QueryID=root_20201119152619_16f496b5-2482-4efb-a26c-e18117b2f10cTotaljobs=1LaunchingJob1outof1Numberofreducetasksdeterminedatcompiletime:1Inorde

吃素的哈士奇·2023-10-26 23:09

使用vue-cli3脚手架创建项目

cli.vuejs.org/zh/guide/prototyping.html一、使用命令方式创建1、控制台输入vuecreate+你所创建的项目名2、选择预设(选默认就行)3、安装完成之后的样子如下进入到项目目录cdhello-world

涅槃no重生·2023-10-26 19:25

尚硅谷Flume（仅有基础）

q1概述1.1定义Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构，灵活简单。

Int mian[]·2023-10-26 19:43

动静分离。

三台虚拟机nginx：192.168.233.30代理又是静态tomcat1：192.168.233.100动态页面tomcat2：192.168.233.50实验：61：nginx.confnginx-tcdhtmlvimindex.html

喝点维C·2023-10-26 11:12

大数据技术之Hadoop-入门

1.2Hadoop发展历史1.3Hadoop三大发行版本Hadoop三大发行版本：Apache、Cloudera、Hortonworks。Apache版本最原始（最基础）的版本，对于入门学习最好。

华尔街的幻觉·2023-10-26 06:14

学习小组Day2笔记--Linux（陈立）

rmdir删除非空文件夹：rm-r-r递归，多级目录一并删除-f强制删除，不用任何提示egpreparationmkdirrm_testcdrm_testtouchdoodle.txtmkdirhuahuacdhuahuato

陈立0522·2023-10-26 01:46

StreamSet的环境的初始化

环境：CDH-5.13.3StreamSets3.3.1demo主要是基于网上一篇介绍如何增量同步mysql的数据到hive库中。上面大概就是整个过程的工作流。

chenjiehao·2023-10-25 23:57

利用 Databend + COS助力 CDH 分析 | 某医药集团

黄志武某医药集团信息中心数据库组组长，13年数据库行业从业经历，OracleOCM，关注Oracle、MySQL、Redis、MongoDB、Oceanbase、Tidb、Polardb-X、TDSQL、CDH

云存储小天使·2023-10-24 19:26

LDAP Admin工具的使用

在CDH集群中集成了OpenLDAP后，在向LDAP中添加一个用户需要通过编辑ldif文件，对于一些不熟悉的新手来说是非常不方便的，在前面的文章《12.OpenLDAP管理工具Phpldapadmin的安装及使用

阿汤哥的程序之路·2023-10-24 14:49

Cloudera Hadoop 5& Hadoop高阶管理及调优课程(CDH5,Hadoop2.0,HA,安全,管理,调优)

weixin_33856370·2023-10-24 08:00

keepalived 和haproxy 搭建

包准备服务器两台192.168.20.112，192.168.20.113准备浮动ip（同网段）192.168.20.1142、Harpoxy安装解压：命令：tarzxvfhaproxy-1.7.8.tar.gz#cdhaproxy

那小子、真烦·2023-10-24 08:21

CDH集群添加新的节点

2、cloudera-scm-agent服务添加方法一：上传cloudera-manager文件到/opt目录，修改agent配置文件：vi/opt/cm-5.15.0/etc/cloudera-scm-agen

果粒多·2023-10-24 07:53

执行autoreconf -fi的过程报错

https://xie.infoq.cn/article/6bba9dd34fb49b7adacb4aacdhttps://github.com/curl/curl/blob/master/docs/HTTP3

ww要努力呀·2023-10-23 22:14

hadoopCDHStart

="hadoop101"]thenecho------------$iisstartinghdfs-------------ssh$i"source/etc/profile&&/opt/module/CDH

白纸糊·2023-10-23 21:23

CDH服务最大文件描述符

CDH最大文件描述符ConfiguringMaximumFileDescriptors一：问题：在这里插入图片描述二：解决在这里插入图片描述三：参考CDH服务最大文件描述符修改

sunTengSt·2023-10-23 21:01

Presto-实时数据分析引擎

FacebookPresto是以sql语言作为接口的分布式查询引擎，类似Cloudera公司的impala，但presto支持更丰富的数据库查询；Presto支持标准的ANSISQL包含查询，聚合函数，

小埋汰男孩--·2023-10-23 20:51

SparkSql读取Snappy Parquet压缩文件报错：java.lang.UnsatisfiedLinkError: org.xerial.snappy.SnappyNative.unc...

版本信息Spark-sql：2.2.0.cloudera2Spark-core：2.2.0.cloudera2JDK：1.8Scala：2.11.11问题描述在通过SparkSqlAPI读取SnappyParquet

Producer晨·2023-10-23 13:10

org.postgresql.util.PSQLException: Connection refused. Check that the hostname and port are correct and that the postmaster is accepting TCP/IP connections.

cloudera-scm-server宕机后重启，报错，日志如下：2017-12-0512:51:11,920WARNcom.mchange.v2.async.ThreadPoolAsynchronousRunner

hhhh2·2023-10-23 11:14

kafka 数据可靠性深度解读

目前越来越多的开源分布式处理系统如Cloudera、ApacheStorm、Spark等都支持与Kafka集成。如果想学习Java工程化、高性能及分布式、深入浅出。

程序员日常填坑·2023-10-23 09:11

java大数据之flume

（3）Flume/Kafka用来进行数据收集的，Spark,Storm用来实时处理数据，impala用来实时查询（4）Flume是Cloudera提供的一个高

这一刻_776b·2023-10-23 05:31

Flink on Yarn三部曲之二：部署和设置

Java、Docker、Kubernetes、DevOPS等；本文是《FlinkonYarn三部曲》系列的第二篇，上一篇《FlinkonYarn三部曲之一：准备工作》已将所需的机器和文件准备完毕，可以部署CDH

程序员欣宸·2023-10-23 01:51

Sqoop的安装与配置

Sqoop安装准备安装Sqoop的前提是已经具备Java和Hadoop、Hive、ZooKeeper、HBase的环境安装步骤上传安装包sqoop-1.4.6-cdh5.14.2.tar.gz到虚拟机中解压

菜鸟也学大数据·2023-10-23 00:56

Alluxio 简单使用

一、AlluxioHA下载tar包，这里选择了2.0版本，下载后解压到cdh01ssh免密配置：cpconf/alluxio-site.properties.templateconf/alluxio-site.properties

w1992wishes·2023-10-22 17:13

Hadoop 系列（七）—— HDFS Java API

如果是CDH版本的Hadoop，还需要额外指明其仓库地址：4.0.0com.heibaiyinghdfs-java-api1.0UTF-82.6.0-cdh5.15.2clouderahttps://repository.cloudera.com

heibaiying·2023-10-22 01:01

【200页】CDH安装运维手册

摘要：1.200页CDH大数据集群运维手册2.内容涵盖大数据集群安装、节点管理、用户管理、资源管理和安全管理目录1.ClouderaManager使用【1】2.配置安装源【2】2.1.配置Linux源【

大数据研习社·2023-10-21 18:14

hadoop基础结构

1.hadoop几个点HADOOP免费CDH收费HDP收费后2者合并成为CDP2.结构图HDFS就是分布式存储，包含NameNode（nn）、DataNode(dn)、SecondaryNameNode

阿里纳斯_0097·2023-10-20 20:09

大数据技术系列（1）

1系统平台（Hadoop、CDH、HDP）1.1Hadoop ApacheHadoop是一个

爱吃西瓜的小菜鸟·2023-10-20 11:32

docker安装下airflow调度CDH中hive,报错ModuleNotFoundError: No module named ‘sasl‘

docker安装下airflow调度CDH中hive,报错ModuleNotFoundError:Nomodulenamed‘sasl’完整报错[2021-03-2514:38:48,763]{{models.py

Vivellice·2023-10-20 09:46

windows 配置kerberos访问启用spnego的CDH 集群web UI页面

一问题描述CDH集群启用HTTPWeb控制台的Kerberos身份验证后，FireFox下HTTP访问HDFS、Yarn、Hive、HBase等Hadoop服务的WebUI(如Namenode的50070

weixin_34038652·2023-10-20 08:18

启用Kerberos后，Windows上浏览器访问CDH页面的那些事

前言在对Hadoop集群施加安全认证的过程中，往往会有需要开启对应服务组件WebUI认证的需求。在启用认证后，如果直接使用浏览器打开WebUI页面，都会提示需要进行认证。大部分情况下，都会用到下面几个步骤，来在Windows上打开需要认证的WebUI：安装Firefox浏览器安装MITKerberosWindows客户端配置krb5.ini文件配置Firefox的高级选项：network.nego

咕噜咕噜大数据·2023-10-20 08:47

Windows 配置kerberos访问并启动访问CDH 集群web UI页面

1、问题描述：CDH集群启用HTTPWeb控制台的Kerberos身份验证后，FireFox下HTTP访问HDFS、Yarn、Hive、HBase等Hadoop服务的WebUI(如Namenode的50070

大大大大大大太阳·2023-10-20 08:14

CDH启用Kerberos导致hdfs,yarn等页面无法访问解决

CDH启用Kerberos，导致namenode和resourcemanager等页面无法访问，访问页面的时候报错Problemaccessing/cluster.Reason解决方案：将hdfs/yarn

me凡·2023-10-20 08:13

安装HAProxy实现Impala负载均衡(有Kerberos)

实现软均衡负载，具体方案；在客户端与服务端直接搭建HAProxy服务，监听相应接口，分发请求；以下是通过HAProxy实现impala均衡负载方案前提条件：impala服务正常本文impala版本3.2.0+cdh6.3.2

邢一·2023-10-20 08:12

大数据技术之Hadoop（入门）V3.0 --配置安装较多

大数据部门组织结构(重点)第2章从Hadoop框架讨论大数据生态2.1Hadoop是什么2.2Hadoop发展历史(了解)2.3Hadoop三大发行版本(了解)Hadoop三大发行版本：Apache、Cloudera

okbin1991·2023-10-20 07:00

openssl-key-exchange 基于ECDH (Elliptic-Curve Diffie–Hellman) 的密钥交换流程

openssl-key-exchange本文摘自我在GitHub的开源项目https://github.com/zhoupeng6d/openssl-key-exchange简介该方案介绍一种通过ECDH

zhoupeng6d·2023-10-20 07:27

ZooKeeper的安装与详解

安装zookeeper的注意事项：安装前需要安装好jdk检测集群时间是否同步检测防火墙是否关闭检测主机ip映射有没有配置##下载安装包、解压下载地址：CDH版本：http://archive.cloudera.com

大数据狂人·2023-10-20 06:19

基于mpvue的微信小程序全栈保姆式教程一

预览最终效果https://github.com/FFGF/XCDHBook/blob/master/static/XCDHBook.gif顺便推荐一个视频转gif的好工具https://ezgif.com

qq_17112235·2023-10-20 00:11

rust学习（一）rustc和cargo

（1.2）helloworld：mkdir+文件夹名XXX：创建空白文件夹XXX；例如mkdirhello_world（俩单词之间用“_”连接起来）cd+文件夹名XXX：进入文件夹XXX；例如cdhello_world

一只工程鸭·2023-10-19 23:42

maven指南

@(OTHERS)[maven]maven指南1maven下载出错2打包超级包shade与provided3依赖冲突NoSuchMethodErrorClassNotFoundException4添加CDH

jediael_lu·2023-10-19 22:40

压测九种工具

下载地址：http_load-12mar2006.tar.gz安装很简单#tarzxvfhttp_load-12mar2006.tar.gz#cdhttp

佳司海心·2023-10-19 19:22

tomcat、nginx实现四层转发+七层代理+动静分离实验

1nginx3——20.0.0.31——代理服务器2动态页面：tomcat1——20.0.0.12——后端服务器1tomcat2——20.0.0.22——后端服务器2实验步骤：1、nginx1四层代理cdhtmlvimindex.html2

咩咩230·2023-10-19 08:14

在两个kafka集群同步topic

在两个kafka集群同步topic目标：把debezium节点所在集群上的kafka集群的名为sysdata的topic同步到目标集群cdh上的kafka集群上。

yostkevin·2023-10-19 04:19

Hive官方手册翻译(Getting Started)

内容列表Cloudera制作的Hive介绍视频安装与配置系统需求安装Hive发行版从Hive源码编译运行Hive配置管理概览运行时配置Hive,Map-Reduce与本地模式错误日志DDL操作元数据存储

weixin_33985679·2023-10-18 20:25

Hive官方手册翻译(Getting Started)(转)

内容列表Cloudera制作的Hive介绍视频安装与配置系统需求安装Hive发行版从Hive源码编译运行Hive配置管理概览运行时配置Hive,Map-Reduc

weixin_33701251·2023-10-18 20:24

hue实现对hiveserver2 的负载均衡

如果你使用的是CDH集群那就很是方便的在ClouderaManager中，进入HDFSService进入Instances标签页面，点击AddRoleInstances按钮，如下图所示点击Continue

墨卿风竹·2023-10-18 19:12

推荐频道

Cloudera(CDH)