CDH大数据环境搭建第13页

解决配置完kerberos后，HDFS、YARN的web页面无法访问

HDFSWebUI浏览器认证我们设置CDH支持kerberos后会出现下图所示的情况：这是因为权限问题，按照下面的方式可完美解决1.浏览器配置（Firefox）1.打开火狐浏览器，在地址栏输入：about

fanbuer·2023-07-22 15:15

第五届字节跳动青训营(寒假) - 后端练习题&官方答案

我发在否·2023-07-22 08:45

Linux_NTP 网络同步 -> ntpd / CDH6

参考文章：解决CentOS7下用ntpdate同步时间问题https://blog.csdn.net/qq_27754983/article/details/69386408Linux配置ntp时间服务器（全）https://www.cnblogs.com/quchunhui/p/7658853.htmlCloudera建议使用NTP使Hadoop群集实现时间同步http://www.cnblog

高达一号·2023-07-22 08:08

[Hive]创建UDF不重启集群解决方案

clouderahttps://repository.cloudera.com/artifactory/cloudera-repos/org.apache.hadoophadoop-common2.6.0-cdh5.14.2

帅可儿妞·2023-07-22 00:52

大数据之Hadoop 安装（macOS Mojave）

本教程采用CDH版，以避免版本依赖冲突导致错误，本教程同样适用于Linux（推荐CentOS）;本教程Hadoop使用伪分布式模式Hadoop运行模式本地模式（单机模式）Hadoop默认模式为非分布式模式

etrols·2023-07-22 00:45

hadoop,spark中使用lzo

一、环境准备hadoop-2.6.0-cdh5.15.1并支持压缩(参考:hadoop安装文档)lzojar包(下载地址:lzojar下载地址)lzo安装包(下载地址:lzo下载地址)lzop安装包(下载地址

吃货大米饭·2023-07-20 16:02

大数据------安装错误集锦（详细解决教程）

https://www.acfun.cn/a/ac10294589（免费教程）这里是实际项目CDH安装过程中的一部分错误，如果大家也有类似的问题，可以查阅。

ItStar·2023-07-20 10:36

【系统】VMware安装 centos 6.5 详细教程

26741933/article/details/114858201系统:CentOS-6.5-x86_64-minimal链接：https://pan.baidu.com/s/1lbKrWc0XP65jspq5CDHU

上官、·2023-07-20 05:30

CDH-6.3.2从零到一的详细安装教程&hive on Spark性能测试教程

目录一、集群部署规划二、部署前准备1、安装JDK（五台）1.1在hadoop101的/opt目录下创建module1.2上传oracle-j2sdk1.8-1.8.0+update181-1.x86_64.rpm并安装1.3分发2、安装MySQL2.1安装包准备2.2安装MySQL服务器2.3安装MySQL客户端2.4MySQL中user表中主机配置3、CM安装部署3.1MySQL中建库3.2CM

小雏菊的成长·2023-07-19 15:43

seatunnel-2.3.2 doris数据同步到hive(cdh-6.3.2)首次运行踩坑记录

seatunnel-2.3.2doris数据同步到hive(cdh-6.3.2)首次运行报错解决，解决的报错如下：1、java.lang.NoClassDefFoundError:org/apache/

小雏菊的成长·2023-07-19 15:13

安装 CDH执行scm_prepare_database.sh报错，java.sql.SQLException: Access denied for user ‘scm‘@‘localhost‘

1、安装CDH报错CDH是ClouderaDistributionforHadoop的缩写，是一套由Cloudera提供的面向企业的开源Hadoop生态系统解决方案。

申子辰林·2023-07-19 02:40

windows Server 2012修复(CVE-2016-2183)(CVE-2013-2566)(CVE-2015-2808)

TLS_ECDHE_ECDSA_WITH_AES_128_GCM_SHA256_P256,TLS_ECDHE_ECDSA_WITH_AES_128_GCM_SHA256_P384,TLS_ECDHE_ECDSA_WITH_AES

乐大师·2023-07-19 02:26

HBase探索篇 _ OpenJdk15编译并部署CDH版HBase

但是我们线上在用的HBase的版本是cdh6.3.2-hbase2.1.0，CDH组装的大数据组件与原生版本相

大猿小猿向前冲·2023-07-18 10:06

密码学中的各种假设——DL/SDH...

t-StrongDiffie-Hellman(t-SDH)Assumption.4.t-BilinearStrongDiffie-Hellman(t-BSDH)Assumption.5.RSAassumption6.Square-CDH

mutourend·2023-07-17 19:30

hive增加Update、Delete支持

一、配置hive-site.xml二、建表三、操作四、总结一、配置hive-site.xmlCDH版本先进入Hive配置页选择高级，找到hive-site.xml的Hive客户端高级配置代码段配置项点击

zxfBdd·2023-07-16 16:23

远程虚拟环境安装python3.7.1

SyntaxError:futurefeatureannotationsisnotdefinedsolutions:needPython>=3.7进入需要装新环境的文件夹(不要在远程电脑的根目录下装)cdhome

freya_hu·2023-07-16 16:49

【kafka】-入门篇

CDH

机智的路易·2023-07-16 10:44

Article Reading

基于指定安全硬件和ECDH算法的车联网安全密钥导出函数（Keyderivationfunction）一次性密钥（one-timepad）：这种适合见面的时候传递密钥，想在网络上安全的传递是不现实的。

GGGYL111·2023-07-16 03:26

CDH+Kylin三部曲之一：准备工作

欢迎访问我的GitHubhttps://github.com/zq2599/blog_demos内容：所有原创文章分类汇总及配套源码，涉及Java、Docker、Kubernetes、DevOPS等；关于《CDH

程序员欣宸·2023-07-16 00:24

解决问题：解除HUE下载10万行的限制

解决问题：解除HUE下载10万行的限制这个目录下的vim/opt/cloudera/parcels/CDH/lib/hue/apps/beeswax/src/beeswax/conf.py可以调整数量也可以更改为

墨卿风竹·2023-07-16 00:27

Hadoop SQL客户端工具之Dbeaver安装及使用

测试环境1.RedHat7.22.CM和CDH版本为5.15.03.WindowServer2012R22DBeaver的安装1.通过如下地址下载DBeaver安装包2.双击安装包dbeaver-ce-

yoku酱·2023-07-16 00:16

98.StreamSets实时采集Kafka

98.1演示环境介绍已安装Kafka并正常运行未启用KerberosRedHat版本：7.4CM和CDH版本：cdh5.13.3kafka版本：3.0.0(0.11.0)Kudu版本：1.5.098.2

大勇任卷舒·2023-07-15 20:09

第三章React脚手架

项目目录解析1-3、hello-react一、脚手架的使用1-1、创建项目并且启动1.全局安装:npmi-gcreate-react-app2.创建项目:create-react-app项目名3.项目文件夹：:cdhello-react4

忧郁火龙果·2023-07-15 15:29

Kerberos下Dbeaver连接Hive

注：使用其他平台如cdh等自行百度如何获取认证文件下载完认证文件后得到用户keytab

shining_yyds·2023-07-15 14:01

万字长文 | Hadoop 上云：存算分离架构设计与迁移实践

一面数据原有的技术架构是在线下机房中使用CDH构建的大数据集群。自公司成立以来，每年都保持着高速增长，业务的增长带来了数据量的剧增。

Juicedata·2023-07-15 11:01

Flink on Yarn三部曲之一：准备工作

DevOPS等；关于FlinkonYarn三部曲本文是《FlinkonYarn三部曲》的第一篇，整个系列由以下三篇组成：准备工作：搭建FlinkonYarn环境前，将所有硬件、软件资源准备好；部署和设置：部署CDH

程序员欣宸·2023-07-15 09:06

HOMER7 docker setup

#HOMER7dockersetup##start```shellgitclonehttps://github.com/sipcapture/homer7-dockercdhomer7-docker/heplify-server

无名387·2023-07-15 07:12

35.安装CDH环境准备

测试环境CentOS6.5使用root用户操作操作系统CentOS6.535.1环境前置节点数量最小规模，建议最少4台服务器，一台用作管理节点ClouderaManager和NameNode等，另外三台用作工作节点，该规模仅用于开发和测试。如果是生产系统，最少6台，3台管理节点包括1个ClouderaManager，2个NameNode启用高可用，3个工作节点。常见的较小规模的生产系统一般为10-

大勇任卷舒·2023-07-14 13:39

Hadoop集群启动配置

三台机器主hadoop01从hadoop02从hadoop031、Hadoop解压包修改core-site.xmlcdhadoop-2.7.4/etc/hadoop/vimcore-site.xmlfs.defaultFShdfs

redstone618·2023-07-14 13:19

Hudi编译

//拉取代码gitclonehttps://github.com/apache/hudi.git&&cdhudi//修改hudi/pom.xmlnexus-aliy

寒暄·2023-07-14 10:54

javax.security.auth.login.LoginException: Receive timed out

CDH集群，启用了Kerberos（使用FreeIPA管理），没有启动防火墙。根据公司运维要求，需要启用防火墙。

邢为栋·2023-07-14 07:58

CDH Hive建表中文注释乱码

在使用CDH6.2.1过程中，通过hue可视化页面访问hive，执行建表语句，showcreatetable发现COMMENT中文部分乱码，如图所示：解决方案：1、后台登录hive源数据库mysql，进入

BarryAllenx·2023-07-14 07:18

CDH更换logo:更换CDH自带logo

原始页面：如下图所示：更换方法：1、每个环境路径不一定一致，建议find文件find/-namelogo.svg2、进入对应目录，备份原始logo.svg文件并上传新文件到本目录下3、重启CM的agent和serverserver节点操作：systemctlrestartcloudera-scm-server所有agent节点操作systemctlrestartcloudera-scm-agent

BarryAllenx·2023-07-14 07:48

Hue创建oozie workflow调度，Hue创建workflow，HUE配置邮件告警

workflow中sqoop无法找到mysql驱动报错（1）上传mysql-connector-xxx.jarcpmysql-connector-java*/opt/cloudera/parcels/CDH

BarryAllenx·2023-07-14 07:48

NameNode and SecondaryNameNode have different heapsizes

NameNodeandSecondaryNameNodehavedifferentheapsizesCDHmanager页面警告NameNodeandSecondaryNameNodehavedifferentheapsizes

BarryAllenx·2023-07-14 07:47

在linux中安装HAProxy

xfrp将压缩包上传到linux的opt目录下1.解压HAProxy安装包tar-zxvfhaproxy-1.8.12.tar.gz2.查看点钱的内核及版本:uname-r3.根据内核版本选择编译参数cdhaproxy

流殇꧂·2023-07-13 23:31

大数据ETL工具kettle与sqoop对比分析

sqoop有两个版本：sqoop1和sqoop2，sqoop2功能比sqoop强一些，但sqoop2产品不成熟，不适合生产环境使用，且CDH和AmbariHDP都默认集成sqoop1，所以不考虑sqoop2

tomalun·2023-07-13 21:49

CDH常用端口汇总

Hadoop：50070：HDFSWEBUI端口8020：高可用的HDFSRPC端口9000：非高可用的HDFSRPC端口8088：Yarn的WEBUI接口8485：JournalNode的RPC端口8019：ZKFC端口10020：historyserver端口Zookeeper:2181：客户端连接zookeeper的端口2888：zookeeper集群内通讯使用，Leader监听此端口388

AlexYao·2023-06-24 04:56

二进制方式搭建k8s集群

文章目录使用二进制方式搭建K8S集群k8s架构1.准备工作2.准备虚拟机3.操作系统的初始化4.部署Etcd集群4.1准备cfssl证书生成工具4.2生成Etcd证书（1）自签证书颁发机构（CA）（2）使用自签CA签发EtcdHTTPS

安安csdn·2023-06-23 15:41

Spark实战之读写HBase

1配置1.1开发环境：HBase：hbase-1.0.0-cdh5.4.5.tar.gzHadoop：hadoop-2.6.0-cdh5.4.5.tar.gzZooKeeper：zookeeper-3.4.5

朝和(zixi0825)·2023-06-23 08:11

iOS 关于使用ECDH算法遇到的几个问题

最近在项目中网络请求项目需要用到ECDH算法（椭圆曲线选择P-384），计算出协商秘钥后导出密码使用HKDF进行密钥扩展，这里将算法遇到的几个问题记录下来1、生成公钥和私钥iOS10.0之后有个类SecKey

yy倚楼听风雨·2023-06-23 08:07

hdfs ha脚本邮件预警failover

HOSTNAME=""NN1_SERVICEID=""NN2_SERVICEID=""NN1_SERVICESTATE=""NN2_SERVICESTATE=""[email protected]#CDH_BIN_HOME

cllblogs·2023-06-23 00:37

大数据中台技术组件

一、平台搭建1.1.Amabari+HDP1.2.CM+CDH二、相关的技术栈数据存储：HDFS，HBase，Kudu等数据计算：MapReduce,Spark,Flink交互式查询：Impala,Presto

TURING.DT·2023-06-22 16:31

CDH集群离线部署-6.3.1

第一片心意·2023-06-21 22:09

【安全】椭圆曲线加密算法(ECC)深入理解

背景由于在实际的项目中使用到了基于ECDH的秘钥协商算法，所以对背后基于椭圆曲线密码学(ECC-EllipticCurveCryptography)进行了较为深入的学习，本篇文章主要分享一下几点:ECC

赖small强·2023-06-21 14:25

1.react脚手架创建

创建项目并启动第一步，全局安装：npmi-gcreate-react-app第二步，切换到想创项目的目录，使用命令：create-react-apphello-react第三步，进入项目文件夹：cdhello-react

Dear热热·2023-06-20 15:34

Centos7离线部署CDH6.3.2集群

一、CDH6要求和支持的版本官方指导：https://docs.cloudera.com/documentation/enterprise/6/release-notes/topics/rg_hardware_requirements.html

小KKKKKKKK·2023-06-20 14:18

PSI算法之ECDH-PSI

参考文献基于ECDH的隐私集合求交(PSI)方法，该文出处《PrivatesetintersectionwithECDH》隐匿集合求交（privatesetintersection，PSI）算法：KKRT

shuizhongmose·2023-06-20 01:45

任务调度框架之oozie

目录Oozie（基于cdh平台）1一、Oozie简介1二、Oozie的功能模块介绍1三oozie部署2四案例4五可能遇到的问题13Oozie（基于cdh平台）一、Oozie简介Oozie英文翻译为：驯象人

陈朝辉_39f7·2023-06-19 20:17

推荐频道

CDH大数据环境搭建