CDH

大数据平台CDH集群在线安装

标签：Cloudera-ManagerCDHHadoop部署集群摘要：管理、部署Hadoop集群需要工具，ClouderaManager便是其一。本文详细记录了以在线方式部署CDH集群>的步骤。
weixin_33724570·2022-02-11 11:48

客快物流大数据项目(三十四)：CDH开始安装

目录CDH开始安装CDH开始安装由于CDH需要使用CM的WebUI可视化界面配置集群，又是单节点安装，CM与CDH的安装包都在同一个节点中(均在Apache服务/var/www/html/下)，直接在浏览器中输入
Lansonli·2022-02-11 11:12

CDH离线安装

系统参数系统centos：CentOSLinuxrelease7.5.1804(Core)JDK：jdk-8u162-linux-x64ClouderaManager：5.15.0服务器5台，内存16g，磁盘50g，其中主节点磁盘不要小于50g，其他的可适当减少或增加配置1、提前下载各个离线安装包文件由于在线安装速度很慢，最好还是先把安装包先下载下载，为了方便安装以下安装包放在server01服务
豪大大大·2022-02-11 06:15

(5)Linux_软件管理_yum安装本地软件

软件管理通用安装源码包流程：(1)cdhttpd-2.2.32:.
至未来自己·2022-02-11 05:44

Dva In Mobile

安装依赖使用命令react-nativeinitHelloDva创建一个react-native项目，进入该项目根目录cdHelloDva，
Zack1994·2022-02-11 05:22

2020-11-27vs2017和vs2019专业版和企业版

专业版：Professional:KBJFW-NXHK6-W4WJM-CRMQB-G3CDH企业版：Enterprise:NJVYC-BMHX2-G77MM-4XJMR-6Q8QF激活成功了记得回来点赞哦
Nmao·2022-02-11 04:50

HBase/Spark Guava依赖冲突解决方案

前言版本guava版本Spark2.2.012.0.1HBase1.0.0-cdh5.6.020.0由于guava的版本在16.0以后，不向后兼容，所以Spark程序中集成HBase是会报找不到依赖的方法错误
zfylin·2022-02-10 10:05

开源实践 | OceanBase 在红象云腾大数据场景下的实践与思考

作者：童小军红象云腾(REDOOP)公司董事长兼CTO，中国首位ClouderaCCDH认证工程师，曾任ChinaHadoopSummit联合主席。
·2022-02-09 18:52

CDH安装hdfs后Permission denied: user=root, access=WRITE, inode="/":hdfs:supergroup:drwxr-xr-x 的解决

newFilesudo-uhdfsyarnjarhadoop-examples.jarpi3100方法二、进入root用户，再suhdfs进入hdfs用户去执行方法三、在hdfs-site.xml中添加设置这种方法可让所有用户访问hdfs了，不用进入hdfs用户再执行命令下面是默认的配置CDH
Ahuuua·2022-02-09 16:12

spark-submit解读

本文基于spark1.6-CDH5.7.2讨论当执行spark-submit时，会产出如下操作：1、设置HADOOP_HOME=/opt/cloudera/parcels/CDH-5.7.2-1.cdh5.7.2
凡尔Issac·2022-02-08 22:56

cdh6.3.2安装

1.数仓之ClouderaManager1.1CM简介1.1.1CM简介ClouderaManager是一个拥有集群自动化安装、中心化管理、集群监控、报警功能的一个工具，使得安装集群从几天的时间缩短在几个小时内，运维人员从数十人降低到几人以内，极大的提高集群管理的效率。CM功能管理：对集群进行管理，如添加、删除节点等操作。监控：监控集群的健康情况，对设置的各种指标和系统运行情况进行全面监控。诊断：
coderKeNan·2022-02-07 14:35

HomeBrew 安装说明

解决问题使用github镜像，如mirrors.ustc.edu.cn如何使用[email protected]:richard2010/homebrew-install.gitcdhomebrew-install
e357a1700e85·2022-02-07 10:26

2019-10-04 开发环境 开发工具 编译器 编辑器 解释器之间的区别

url=gO7UsA_Q5oAGHPW8WiI5Dz67jFxOkZlLE5pLeGrv5cdh6t9RmRGW7xzx64k7kZym&wd=&eqid=e8917cf10009a424000000035d96fea8
LingSmart·2022-02-06 21:58

CDH6.2安装教程（详细步骤）

一.安装介绍本文介绍CDH安装，安装版本以当前最新版CDH6.2为例。
绿叶悠·2022-02-06 21:24

Hadoop入门一(3.2.2版本)

一.大数据广义大数据：以hadoop软件为主的生态圈(Sqoop、Flume、Spark、Flink、Hbase、Kafka和cdh环境)狭义大数据：hadoop软件本身，开源的(在gitlab上可以看到源代码和地址
comer_liu·2022-02-05 12:57

1. Hadoop：环境搭建以及 MapReduce 程序运行

针对这种情况，在学习Hadoop时，需要使用统一的版本，商业化的CDH正是其中之一，它将H
东方未曦·2022-02-05 08:25

CDH5.13.2集成phoenix测试

注意官方提供的没有sha文件，需要自己命令生成执行命令：sha1sumAPACHE_PHOENIX-4.14.0-cdh5.13.2.p0.3-el7.parcel>APACHE_PHOENIX-4.14.0
hbtszyt·2022-02-05 07:13

xcode11 没有了Products路径

在这里可以自行添加image点击加号，输入CONFIGURATION_BUILD_DIR方法2首先打开项目，然后进入到你的项目目录并打开project.pbxproj文件搜索productRefGroup关键字cdHqMacDevStuopenHqMacDevStu.xc
西充小凡哥·2021-12-29 09:02

搭建企业级实时数据融合平台难吗？Tapdata + ES + MongoDB 就能搞定

在大数据时代，几乎每家企业都有上一套数据平台的冲动，目前也有很多的离线解决方案，包括Hadoop体系的CDH、TDH，还有一些传统的数仓。但是有两大因素让企业无从下手：一是“实时”，二是“融合”。
·2021-12-02 15:33

记jupyter-notebook linux下 跨机器 环境迁移

背景：公司老集群升级（CHD5升级到CDH6），集群资源重新分配。
AmiWang·2021-11-30 13:53

Hadoop入门一(3.2.2版本)

一.大数据广义大数据：以hadoop软件为主的生态圈(Sqoop、Flume、Spark、Flink、Hbase、Kafka和cdh环境)狭义大数据：hadoop软件本身，开源的(在gitlab上可以看到源代码和地址
jiangliu·2021-11-27 18:46

【阿里云 CDP 公开课】 直播预告来袭！

扫描海报上的钉钉群二维码入群，线上观看直播，还可以与来自阿里云和Cloudera的技术专家交流~背景介绍CDP(ClouderaDataPlatform)是Cloudera和Hortonworks合并后，选择原CDH
·2021-11-25 13:46

如何运用vue结合elementUI

1、创建一个hello-vue的工程vueinitwebpackhello-vue2、安装依赖#进入工程目录cdhello-vue#安装vue-routernnpminstallvue-router--
咸鱼_翻身·2021-11-20 01:01

Apache Kyuubi 助力 CDH 解锁 Spark SQL

ApacheKyuubi(Incubating)（下文简称Kyuubi）是⼀个构建在SparkSQL之上的企业级JDBC网关，兼容HiveServer2通信协议，提供高可用、多租户能力。Kyuubi具有可扩展的架构设计，社区正在努力使其能够支持更多通信协议（如RESTful、MySQL）和计算引擎（如Flink）。Kyuubi的愿景是让大数据平民化。一个的典型使用场景是替换HiveServer2，
·2021-11-18 16:07

Hadoop Meetup 2021 回顾 - Apache Kyuubi 助力 CDH 解锁 Spark SQL

ApacheKyuubi(Incubating)（下文简称Kyuubi）是⼀个构建在SparkSQL之上的企业级JDBC网关，兼容HiveServer2通信协议，提供高可用、多租户能力。Kyuubi具有可扩展的架构设计，社区正在努力使其能够支持更多通信协议（如RESTful、MySQL）和计算引擎（如Flink）。Kyuubi的愿景是让大数据平民化。一个的典型使用场景是替换HiveServer2，
网易杭研·2021-11-17 11:48

CDH6.3.3 paywall版之前自定义http服务器放置parcels安装数据

当前大数据集群的工具选型上,巨头们都是自研大数据工具,中小微企业都是开源大数据组件搭积木,中间层级的厂商或买商业软件(MaxCompute/腾讯云/华为云)或在CDH基础上再集成商业套件(Dataphin
江畔独步·2021-11-09 18:14

大数据开发之HDFS的API操作过程

clouderahttps://repository.cloudera.com/artifactory/cloudera-repos/org.apache.hadoophadoop-client2.6.0-mr1-cdh5.14.0org.apache.hadoophadoop-common2.6.0
·2021-10-28 11:08

go的基本操作

创建目录mkdirhellocdhello创建项目gomodinitexample/hellogo:creatingnewgo.mod:moduleexample/hello编写codepackagemainimport"fmt"funcmain
zXuan·2021-10-08 03:54

Hadoop——练习1(统计单词个数)

1、启动Hadoopcd/optcdhadoop.
小镭敲代码·2021-09-29 11:58

Hbase——练习1

1.进入hbasecdhbase.
小镭敲代码·2021-09-27 14:52

acwing查看做题总数

):self.base_url='https://www.acwing.com/problem/{}/'self.headers={'Cookie':'csrftoken=mixU7wxaV35yyyCDhqbXcIoW3z3Ms0NH31jbb
·2021-09-16 17:31

STM32：TFT—LCD显示屏操作：2021-08-26

STM32F103ZET6的外接TFT—LCD显示屏，并红绿蓝循环闪烁FSMC设置1：FSMC设置2：GPIO设置：添加.c.h文件：引入头文件：#include"lcd_header.h"主函数程序：//初始化LCDHAL_Delay
zhaohaobingniu·2021-08-26 22:51

ElasticSearch 安装采坑

这里有一个坑，不要在装在root用户下，我是在一个测试服务器上玩的，直接装在root下了，导致后面启动不了，后面又卸载重新装的或者你移动到非root目录中应该也可以我这里装在/home/elk目录下的进入目录：cdhome
·2021-08-25 19:32

CDH集群断电重启后DataNode无法连接到NameNode

周末公司断电，之后发现集群一个DataNode无法连接到NameNode，看了日志和页面报错一致。在网上查资料，尝试了刷新DataNode节点（hdfsdfsadmin-refreshNodes）、查看hosts、查看防火墙等方法，都没有效果。使用hdfsdfsadmin-report命令，发现该节点配置容量为0，又查找该问题。最终定位在IP问题上。使用ipaddr，发现该节点除了我自行设置的静态
等闲之辈莫等闲·2021-08-23 16:14

docker安装CDH6.3.1集群版（内含安装包）

一、前言本次采用的在线安装方式，cdh为6.3.2版本，系统为centos7.4，docker节点可以为任意多个，下文将以3个docker容器为示例进行展示。
胖子捏肚子·2021-08-05 23:19

Flink on Zeppelin问题四则（并没有优雅的解决方案

Flink版本为1.13.0，Hadoop版本为CDH6.3.2自带的3.0.0。经过两天的探索，发现了一些问题，在百忙之中抽出点时间简要记录一下并不成功的troubleshooting过程。
LittleMagic·2021-07-30 20:19

搭建本地大数据研发环境（16G内存+CDH）

本文将从头开始详细的记录整个大数据环境的搭建过程，本文所使用的笔记本电脑内存为16G，将使用CDH6.3.2管理整个大数据集群。由于cl
·2021-07-27 20:24

编译支持 spark 读写 oss（cdh 5.x)

前言背景：使用spark读取hdfs文件写入到osshadoop:2.6.0-cdh5.15.1spark:2.4.1主要参考链接：https://blog.csdn.net/wankund...增加了注意点和坑点编译
·2021-07-27 19:46

在Win10中用Hyper-V虚拟机搭建CDH集群

Version:v0.1LastUpdate:July/23/2021Keywords：CDH，Hadoop，BigDataPlatform，Hyper-V，VirtualMachineAbstract
lionxcat·2021-07-23 13:04

spark thrift server 与 网易 kyuubi thrift server

默认情况下，cdh安装的spark没有包含thriftserver模块，因此我们需要重新编译spark。
__destory__·2021-07-13 15:50

【CDH安装】2、CDH 集群安装配置

bigdata001:7180admin/admin2、选择免费版或者试用版3、继续下一步4、选择当前管理主机cloudera-scm-agent正常启动后，可发现相应的节点，指定集群服务的安装节点5、选择CDH
粮忆雨·2021-06-27 21:28

娶老婆到底是为了什么，这个答案轰动朋友圈，看哭无数人

文|韩九叔·主播|培培来源：国学文化堂（ID:CDHGXZH）娶老婆到底为了什么？《爱情保卫战》中，涂磊的回答堪称完美：“老婆，不是用来生孩子的，而是一起相伴到老的。
書酱·2021-06-27 04:35

搭建Hive环境

下载hive：wgethttp://archive.cloudera.com/cdh5/cdh/5/hive-1.1.0-cdh5.7.0.tar.gz解压:tar-zxvf.......
Ace_Wang·2021-06-27 00:55

Apache Zeppelin 迁移 - Jar 包冲突解决与思考

最近整个公司大数据集群迁移（cdh->ambrihdp），随之Zeppelin也需要迁移，由于各个组件版本有变化，且Zeppelin源码是有过改动的，迁移起来很麻烦。
咬尘归·2021-06-26 05:43

Cloudera Manager（CDH）入门系列之三 （安装）

操作系统:CentOs6.4虚拟机（4核3G）主机：cdh01(server&agent)+cdh02(agent)CDH版本：cdh5.7.1jdk8准备工作关闭防火墙在两台主机上都运行一下命令serviceiptablesstop
Kooola大数据·2021-06-25 19:46

Flink SQL Client集成Hive

环境CDH-6.3.2Flink-1.12.2最后会补充说明Flink-1.13.1的使用方法准备在flink-1.12.2/lib目录需要放如下jar包flink-sql-connector-hive
Woople·2021-06-25 09:50

启用kerberos的环境下在CDH中使用Spark SQL On HBase

一、前言在大数据领域，海量存储与快速检索方面HBase早已有了自己的一席之地。MapReduce计算框架早已对接了HBase，以HBase作为数据源，完成批量数据的读写。而Hive默认底层以MapReduce作为计算引擎，支持以HBase作为外部表，通过HQL对HBase中的数据进行分析，HiveOnHBase也是很好的满足在某些场景下通过SQL对HBase表中的数据进行分析。如今即MapRedu
和腐朽说再见·2021-06-25 08:01

1.3 Hello, Cargo

一cargo用途构建系统和包管理工具，可以自动下载你的项目依赖库二查看cargo版本$cargo--versionimage.png三创建项目目录cargonewhello_cargocdhello_cargo
剑有偏锋·2021-06-25 01:32

hbase-window idea调试源码

个人觉得debug运行代码是理解代码最为有效的方式，所以今天说一下在window上使用idea进行调试运行hbase源码（使用的是cdh版本的hbase）。
Demo_zfs·2021-06-22 23:30

每天一个Linux命令（29）：du 命令

1、语法格式du[-abcDhHklmsSx][-L][-X][--block-size][--exclude=][--max-depth=][--help][--version][目录或文件]2、参数说明
奔跑的Tester·2021-06-22 23:19
上一页 20 21 22 23 24 25 26 27 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他