Cloudera(CDH)

Flume基操

Flume概述Flume定义Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构，灵活简单。
curtime·2023-04-15 17:40

数据科学之路（7）即席查询工具Impala

为了解决实时交互式查询这一问题，Cloudera公司开发了Impala，Impala的查询速度是Hive的3~30倍。当然，Impala
LiuShaodong·2023-04-15 08:07

【CDH】cloudera manger 如何开启Debug 日志调试模式

前言在安装ClouderaManger时，遇到报错，需要开启Debug日志级别来排查下问题原因。这里记录下CM如何开启Debug级别。
kiraraLou·2023-04-15 04:38

golang 和docker初次搭建

这里配上成功的流程：1.创建工程mkdirhelloWorldDockercdhelloWorldDocker2.创建main.go文件packagemainimport("fmt""net/http"
DanielC·2023-04-15 01:34

cloudera安装 cdh集群

#1.软件下载准备下载CM软件包:wgethttp://archive.cloudera.com/cm5/redhat/7/x86_64/cm/5.15.1/RPMS/x86_64/cloudera-manager-agent
越sir·2023-04-15 00:08

CDH常见问题及解决方法（待续）

启动CDH提示DeployClientconfigurationfail原因：依赖包perl未安装yuminstall-yperl自用脚本中的yum操作所需依赖包，仅做参考yum-Cyinstallwgetbind-utilspsmisclibxsltzlibsqlitecyrus-sasl
奥利奥_3357·2023-04-14 20:52

CDH 6.3.2 高可用安装步骤

CDH6.3.2高可用安装步骤官方安装步骤https://docs.cloudera.com/documentation/enterprise/6/6.3/topics/cm_ig_reqs_space.html1
爱当厨子的小章同学·2023-04-14 17:32

CDH6.3.2安装（rhel7.6)

CDH6.3.2一、基本介绍基于最新CDH发布版本编写安装文档，CDH6安装过程基本与CDH5一致，主要包括以下几步：1、安装前置准备：包括安装操作系统、关闭防火墙、同步服务器时钟等；2、mysql安装部署
鱼观渔_·2023-04-14 17:02

阿里云安装CDH6.3.2并集成flink1.12

1.购买阿里云服务器，修改配置信息如果有服务器可以跳过前面购买流程,如果没有服务器只是作为测试练习的话可使用抢占实例的服务器，一天几块钱（按小时使用时长收费）但是服务器有百分之0-3的回收率选择4核16GB的服务器，通用型g5最便宜所以选择这个选择无确定使用时长。三台实例，镜像选择centos7.5，硬盘40GB选择交换机所在地址，宽带峰值可自由调配，毕竟按流量收费下一步确定订单购买完成8毛钱一个
与风共存·2023-04-14 17:00

CDH6.3.2 集群部署（尚硅谷）

第一章数仓之ClouderaManager1.1CM简介1.1.1CM简介ClouderaManager是一个拥有集群自动化安装、中心化管理、集群监控、报警功能的一个工具，使得安装集群从几天的时间缩短在几个小时内
小于同学饿了·2023-04-14 17:30

CDH6.3.2安装部署

1.修改主机名称vi/etc/hostnamecdh-100cat/proc/sys/kernel/random/uuid2.固定ip每台机需调整ipaddrvi/etc/sysconfig/network-scripts
k5003·2023-04-14 17:27

Apache Dolphinscheduler —— CDH6.3.2集群模式部署(Cluster)

4、配置hosts和ssh5、数据库初始化二、ApacheDolphinscheduler配置修改1、数据库配置2、修改运行参数三、一键部署1、执行2、登录3、启停服务一、前期准备1、基础环境配置关于CDH6.3.2
Carson_xcb·2023-04-14 17:25

kerberos环境下Flink on Yarn集群部署 基于flink1.15.3 hadoop 3.0CDH6.3.2

1.1概要介绍FlinkonYarn的HA高可用模式，首先依赖于Yarn自身的高可用机制（ResourceManager高可用），并通过Yarn对JobManager进行管理，当JobManager失效时，Yarn将重新启动JobManager。其次FlinkJob在恢复时，需要依赖Checkpoint进行恢复，而Checkpoint的快照依赖于远端的存储：HDFS，所以HDFS也必须是高可用，同
Mumunu-·2023-04-14 17:21

CDH6.3.2安装文档

正式安装之前，先说明一下CDH是基于ApacheHadoop及相关项目的发行版。CDH通过WEB界面管理，并提供了hadoop的两个核心功能：可扩展存储和分布式计算，以及企业级的重要功能。
尘世壹俗人·2023-04-14 17:20

centos7安装cdh6.3.2-附带安装包

安装包路径百度云盘：链接:https://pan.baidu.com/s/1nIxYHXE0tJH4Ty-S07qLMQ?pwd=2qyb提取码:2qyb安装前准备#关闭、禁用防火墙systemctlstopfirewalld&&systemctldisablefirewalld#关闭selinuxsetenforce0sed-is#SELINUX=enforcing#SELINUX=disabl
catcher92·2023-04-14 17:50

CDH6.3.2 HDFS、YARN、Zookeeper安装

关注微信公共号：小程在线关注CSDN博客：程志伟的博客HDFS、YARN、Zookeeper安装1.1选择自定义安装1.2选择安装服务1.3分配节点1.4集群设置全部选默认即可1.5自动启动进程1.6修改HDFS的权限检查配置关闭HDFS中的权限检查：dfs.permissions。1.7配置NameNodeHA1）进入HDFS页面点击启用HighAvailability2）命名3）分配角色4）审
程志伟·2023-04-14 17:49

Cloudera Manager6.3.1&CDH6.3.2集群部署（超详细，亲测可用）

部分素材来自网络，若不小心影响到您的利益，请联系我们删除第1章ClouderaManager环境部署1.1.CM简介1.1.1.CM简介ClouderaManager是一个拥有集群自动化安装、中心化管理
IYOU私塾·2023-04-14 17:48

CDH6.3.2 组件优化

1hdfs开启HA且hive启用连接改为HA模式1.进入hdfs组件2.hdfs组件中选择操作按钮3.操作下拉列表中选择启用highavailability4.配置service名称5.等待启用完成6.进入hive组件7.hive组件选择操作按钮8.操作下拉列表中选择更新HiveMeTastoreNameNodeschema9.等待完成2yarn开启HA1.进入yarn组件2.yarn组件中选择操
Seeking007·2023-04-14 17:18

基于CM管理的CDH6.3.2集群集成Atlas2.1.0

基于CM管理的CDH6.3.2集群集成Atlas2.1.0大数据平台进行数据治理需要，采用ApacheAtlas进行数据治理。下载Atlas2.1.0版本源码包。
百夜﹍悠ゼ·2023-04-14 17:15

CDH 6.3.2 离线安装部署详细教程 （亲妈级别教学，有手就行）

CDH6.3.2安装手册更新文档见https://gitee.com/baomili/bigdata-notes最新最全文章目录@[toc]参考博客官网地址1下载CM和CDH2CDH6.2.1组件版本信息
BoomLee·2023-04-14 17:15

CDH6.3.2大数据集群生产环境安装(八)之各组件参数调优，yarn参数调优，hdfs参数调优等

yarn资源调优主要涉及到了ResourceManager、NodeManager这几个概念，相关的优化也要紧紧围绕着这几方面来开展。这里还有一个Container的概念，现在可以先把它理解为运行map/reducetask的容器28.1.内存堆栈等配置原值调优值
日复一日伐树的熊哥·2023-04-14 17:44

spark3.3.1通过hbase-connectors连接CDH6.3.2自带hbase

补充编译hbase-connectors-master源码下载wgethttps://github.com/apache/hbase-connectorsmvn--settings/Users/admin/Documents/softwares/repository-zi/settings-aliyun.xml-Dspark.version=3.3.1-Dscala.version=2.12.10
sunnyboy_4·2023-04-13 19:47

CDH6.3.2引入debezium-connector-mysql-1.9.7监听mysql事件

1、首先说明一下为啥选用debezium，它能够根据事务的提交顺序向外推送数据，这一点非常重要。再有一个结合kafka集群能够保证高可用，对于熟悉java语言的朋友后面一篇博文会介绍怎样编写插件将事件自定义路由到你想要的主题甚至分区中。提高按顺序消费事件的并发能力。如果觉得好，请关注一下，后续将推出编写插件支持按照表名hash取模将事件分配到不同的主题或者分区当中支持多线程顺序并发消费,实现表与表
sunnyboy_4·2023-04-13 19:47

CDH6.3.2版本pyspark-sql通过hive访问hbase

1、添加所需要包环境cp/opt/cloudera/parcels/CDH-6.3.2-1.cdh6.3.2.p0.1605554/lib/hive/lib/hive-hbase-handler-2.1.1
sunnyboy_4·2023-04-13 19:17

Hadoop-Spark企业应用实战

课程大纲本课程会介绍Hadoop/Spark各组件的架构，但不会涉及任何安装的内容，安装的教程、录像视频什么的网上到处都是，讲安装太浪费时间~Hadoop/Spark环境的安装请大家自行解决，建议用ClouderaCDH
hadoopshow·2023-04-13 09:16

Spark读写HBase实践

2.6.0-cdh5.7.01.2.0-cdh5.7.0org.apache.hadoophadoop-client${hadoop.
北邮郭大宝·2023-04-13 06:42

centos8 Ambari-2.7.6.3+HDP-3.3.1离线安装详细教程（附安装包）

自2021年1月31日开始，所有Cloudera软件都需要有效的订阅，且订阅费昂贵。此外，CDH6和HDP3将是CDH和HDP的最后企业版本，原有企业版用户无法继续获取新的功能和性能提升。
Toroidals·2023-04-13 02:00

CDH5部署三部曲之一：准备工作

欢迎访问我的GitHubhttps://github.com/zq2599/blog_demos内容：所有原创文章分类汇总及配套源码，涉及Java、Docker、Kubernetes、DevOPS等；系列介绍《CDH5
程序员欣宸·2023-04-12 21:56

ZooKeeper运行环境搭建

分布式安装部署前置条件jdk已经安装完成，三台机器防火墙已经关闭用第7章笔记里的三台备胎虚拟机2、解压安装解压zookeeper安装包到/opt/install/目录下tar-zxvfzookeeper-3.4.5-cdh5.14.2
Cheney6·2023-04-11 10:29

CDH大数据平台 30Cloudera Manager Console之superset之redis、ldap配置(markdown新版四)

个人主页：@与自己作战作者简介：CSDN@博客专家、CSDN@大数据领域优质创作者、CSDN@内容合伙人、阿里云@专家博主希望大佬们多多支持，携手共进如果文章对你有帮助的话，欢迎评论点赞收藏加关注⛔如需要支持请私信我，必支持文章目录一、redis配置1、安装redis二、修改superset配置1、修改config.py文件2、创建superset用户3、创建superset的Kerberos文件
与自己作战·2023-04-11 06:30

使用ECDH的一些感慨

ECDH一脸??????第一次听说ECDH是不是就像上面的图一样,一脸的问好,不要紧谷歌是万能的.刚开始做的时候老大给我说你去了解一下ECDHE...心想这是个啥鬼,难顶啊!
无赖_V·2023-04-10 19:28

cdh的安装

链接地址：https://www.cloudera.com/documentation/enterprise/5-12-x.html安装的必要条件：操作系统层面：所有机器操作系统一致包括发行版的版本大版本号必须一致操作系统我们就选用
N_O_W·2023-04-10 17:37

在有Sentry控制下的CDH中部署Hive的UDF

问题在CDH5.13.x启用Sentry后，HiveServer2的Client(Beeline、Thrift)中不能使用addjar语句（hivecli方式还是可以的，不过这样无法控制权限Sentry
gregocean·2023-04-10 16:30

Vector - CAPL - AES算法介绍（续1）

SecurityLocalGenerateSHA256代码示例SecurityLocalGenerateSHA512代码示例SecurityLocalGenerateCMACSecurityLocalGenerateSharedSecretECDHSecurityLocalGener
车载网络测试·2023-04-10 14:58

CDH中MySQL的作用

CM底层自动部署安装数据库进行系统配置、schema等并进行相应管理。同时CM也支持使用外部数据库作为系统配置、数据表结构等的底层存储，具体支持的数据库包括：MySQL：5.1、5.5、5.6、5.7PostgreSQL：8.1、8.3、8.4、9.1、9.2、9.3、9.4Oracle：11gR2、12c一般来说外部元数据库都会采用系统自带的MySQL服务。确保以下配置：增加数据库的最大连接数确
小菜鸡一号·2023-04-10 12:51

cdh5.15.1添加kafka服务

安装好cdh后在cloudera-manager管理界面上并没有kafka服务，在CDH官网中关于Kafka的安装和升级中已经说到，在CDH中，Kafka作为一个分布式的parcel，单独出来作为parcel
Demo_zfs·2023-04-10 10:05

Cisco交换机里IOS DHCP Server里配置推送路由

平时我们用ISCDHCPD的话，可以在配置文件里面，向dhcp的客户端推送路由。现在如果我们用cisco交换机做dhcp服务器的话，这个该怎么破。这事儿其实交换机是支持的。
贺鱼·2023-04-10 04:32

ROS初学：用VScode基于c++输出“helloworld”（课程笔记来自赵虚左老师）

一、创建ros空间1、创建包，包名为helloworldmkdir-phelloworld/src2、进入包cdhelloworld3、编译、合并构建，创建工程包catkin_make4.打开vscodecode
Angelina馨·2023-04-10 03:25

ROS入门教程（二） 用C++ 实现Hello world

：创建工作空间→创建功能包→编辑源文件→编辑配置文件→编译并执行step1.创建工作空间Ctrl+Alt+T打开终端分别输入：【在主目录下创建工作空间】mkdir-phelloworld_ws/srccdhelloworld_wscatkin_make
luoganttcc·2023-04-10 03:50

2019-2020 ICPC Asia Taipei-Hsinchu Regional Contest（C,D,H,J,K）

2020/11/2更新CDHK2020/11/4更新J关于第一次写icpc
chitudexixi·2023-04-09 00:36

大数据面试题_Impala等查询组件(除Hive外的其它组件)

Impala是cloudera提供的一款高效率的Sql查询工具，提供实时的查询效果，官方测试性能比Hive快10到100倍，其Sql查询比SparkSql还要更加快速，号称是当前大数据领域最快的查询Sql
Jerry Hong·2023-04-08 07:55

1-3 交互式查询工具Impala

一、Impala概述1.1什么是ImpalaImpala是Cloudera提供的一款开源的针对HDFS和HBASE中PB级别数据进行交互式实时查询（Impala速度快），Impala是参照谷歌中新三篇论文中
小羊and阿童木·2023-04-08 07:48

交互式查询工具Impala

第1部分Impala概述1.1Impala是什什么Impala是Cloudera提供的⼀一款开源的针对HDFS和HBASE中的PB级别数据进⾏行行交互式实时查询(Impala速度快)，Impala是参照
猿大山·2023-04-08 07:46

Impala：大数据交互查询工具

impala的介绍Impala是由Cloudera公司开发的一款开源的大数据交互查询工具，能够对存储在HDFS、HBase上的数据进行快速的交互式SQL查询。
健鑫.·2023-04-08 07:46

【大数据开发】sqoop报错汇总

cp/usr/local/hive/lib/hive-shims-*/usr/local/sqoop/lib/解决办法：cp/usr/local/hive/lib/hive-common-1.1.0-cdh5.13.2
这个妹妹我见过·2023-04-08 07:25

使用 ES-Hadoop 将 Spark Streaming 流数据写入 ES

一、开发环境1、组件版本CDH集群版本：6.0.1Spark版本：2.2.0Kafka版本：1.0.1ES版本：6.5.12、Maven依赖org.scala-langscala-library2.11.8org.apache.sparkspark-core
武念·2023-04-08 04:47

linux 下 kettle（pdi）将 mysql 数据导入 hive parquet 表中

背景linux下使用kettle（pentahodataintegration）将mysql数据，通过ParquetOutput导入CDH6.2集群hive的parquet表中。
cooooper·2023-04-07 14:27

六阶段大数据--day06--Apache Flume/ Source案例练习/ 集群部署

一ApacheFlume1．概述Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的软件。
心猿意码~~·2023-04-07 08:34

【华为OD机试真题 python】 连续字母长度【2022 Q4 | 100分】

示例1输入输出示例仅供调试，后台判题数据一般不包含示例输入AAAAHHHBBCDHHHH3输出2说明同一字母连续出现的最多的是A和H，四次；第
无痕de泪·2023-04-07 05:18

Thrift JDBC/ODBC Server安装

添加Clouderamaven镜像在spark的pom文件中添加CDH的maven镜像[1]，并添加Hadoopcdh5.6.1的profileclouderahttps://repository.cloudera.com
专职掏大粪·2023-04-06 16:29
上一页 15 16 17 18 19 20 21 22 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他