Cloudera(CDH)

cloudera-agent一键卸载脚本

/bin/bash#停止CDHAgent服务echo"停止CDHAgent服务..."
远方有海，小样不乖·2023-12-23 06:20

在自己电脑配置cdh 版 hadoop 提交mr job客户端

image.png1.首先下载与我们cdhhadoop集群对应的hadoop安装文件hadoop-2.6.0-cdh5.14.2.tar.gz链接:https://pan.baidu.com/s/1iHm5M-gGZRWLKbzVjbYJmA
Helen_Cat·2023-12-23 04:51

79.Sentry实现Hive/Impala数据脱敏

79.1演示环境介绍CM和CDH版本：5.13.1已启用Kerberos已启用Sentry79.2操作演示测试数据[root@ip-186-31-16-68datamasking]#vimemployees.csv1
大勇任卷舒·2023-12-22 21:55

Spark在云原生时代的发展

前言在ABC(AI,BigData,Cloud)时代，传统的大数据解决方案和厂商(Cloudera,Hortonworks)略显颓势，而云厂商(AWS,Azure,GCP)和云原生解决方案(DatabricksCloud
Apache Spark中国社区·2023-12-22 07:18

Comparison and Differences beteen Powershell and Linux

thesame1.1)functionsonPowershellandLinuxII）differencepoints2.1)CD:changedirectory2.1.1)Powershell：commandcdhasnoeffect
DADIAN_GONG·2023-12-21 07:11

Impala优化基本方案

本文源自cloudera官网上的Impala文档，原名为《ImpalaPerformanceGuidelinesandBestPractices》。
撸码小丑·2023-12-20 17:25

ROS笔记Day02----使用vscode开发&launch文件

1.新建工作空间并编译mkdir-phelloworld_ws2/srccdhelloworld_ws2catkin_make2.进入工作空间目录下打开vscodecdhelloworld_wc2code
w沉默味道w·2023-12-20 10:21

Cloudera Manager大数据平台|Cloudera Manager视频教程

1GHMEiOVolk2ZFefuX5SExA提取码:ax5d备用地址（腾讯微云）：https://share.weiyun.com/5izjs5M密码：kfpixg课程目标对已经从事相关大数据工作的学员可以精通ClouderaManager
爱笑小哥·2023-12-19 15:29

消息队列kafka详解：Kafka原理分析总结

目前越来越多的开源分布式处理系统如Cloudera、ApacheStorm、Spark等都支持与Kafka集成。
码农小旋风·2023-12-19 11:43

Hadoop相关安装包上传到目录并完成安装

1.指定一个安装的目录/usr/local/自己的名字(mkdircdhong、rm-rf*)[root@cdhong01~]#cd/usr/local/[root@cdhong01local]#rm-rf
余生跟他走·2023-12-19 00:59

Laravel Homestead笔记

Homestead安装文档：https://xlswriter-docs.viest.me/zh-cn/an-zhuang/pecl-tui-jia让我们开始启动Homestead：cdHomestead
不二周助Rex·2023-12-17 18:17

SecureCRT远提示Key exchange failed，No compatible key exchange method. The server supports these methods

Keyexchangefailed.Nocompatiblekeyexchangemethod.Theserversupportsthesemethods:curve25519-sha256,[email protected],ecdh-sha2
二当家的素材网·2023-12-17 15:46

在 idea 中以 yarn-client 远程提交 Spark 作业

示例代码RemoteSubmitApp主类packagecom.clouderaimportorg.apache.kafka.clients.consumer.ConsumerConfigimportorg.apache.kafka.common.serialization.StringDeserializerimportorg.apache.log4j.Loggerimportorg.apach
lei_charles·2023-12-17 13:41

Hive学习笔记

修改配置文件/etc/profile（添加exportHIVE_HOME=/usr/local/hive-0.9.0-binexportHADOOP_HOME=/usr/local/hadoop-0.20.2-cdh3u5
weixin_30470857·2023-12-17 05:32

java操作cdh得hadoop出现java.io.IOException: Failed on local exception: com.google.protobuf.InvalidProt...

这个问题是，java得操作Hadoop得api得版本跟haodoop得不一致导致得在hadoop中运行/bin/hadoopversion查看hadoop得版本之后将java得api中得jar包版本对应更换
PunkP·2023-12-17 03:21

ERROR sqoop.Sqoop: Got exception running Sqoop: java.lang.RuntimeException: Could not load db driver

java.lang.RuntimeException:Couldnotloaddbdriver问题产生原因缺少oracle驱动解决方案#需要在安装sqoopserver的节点上放oracle的驱动包cpojdbc6.jar/opt/cloudera
即墨澈·2023-12-16 05:19

pyspark on yarn

如果是搭建的CDH或者CDP可以直接从管理界面下载配置文件。直接下载hive组件的客户端配置就可以，它里面包含了hdfs和yarn的配置。
骑着蜗牛向前跑·2023-12-16 03:34

hue的安装和hadoop集群整合

一、Hue概述HUE（HadoopUserExperience）是一个开源的ApacheHadoopUI系统，由ClouderaDesktop演化而来，最后Cloudera公司将其贡献给Apache基金会的
五块兰州拉面·2023-12-16 00:15

Hue安装部署

1Hue简介1.1Hue介绍Hue是一个开源的ApacheHadoopUI系统，最早是由ClouderaDesktop演化而来，由Cloudera贡献给开源社区，它是基于PythonWeb框架Django
chenlouzhen1603·2023-12-16 00:43

大数据各组件安装笔记汇总

/bin/bashecho"-----------------cdh01-------------------------"/opt/apps/jdk1.8.0_45/bin/jpsecho""for(
ZGFAgf·2023-12-16 00:11

sparkStreaming与kafka整合案例

pom文件4.0.0com.cllday011.0-SNAPSHOTaliyunhttp://maven.aliyun.com/nexus/content/groups/public/clouderahttps
古城的风cll·2023-12-15 22:08

kafka 常用命令【学习笔记】

Kafka环境变量配置exportKAFKA_HOME=/opt/cloudera/parcels/CDH-6.3.2-1.cdh6.3.2.p0.1605554/lib/kafkaexportPATH
专注代码七年·2023-12-15 21:24

大数据基础知识

Hadoop、Hbase、Spark、Flink、Flume、Kafka、Sqoop、HDFS、Hive、Mapreduce、Impala、Spark-Sql、Elasticsearch、Yarn、Hue、ClouderaManager
偶余杭·2023-12-15 17:22

kudu由来、架构、数据存储结构、注意事项

一、kudu背景介绍Kudu是Cloudera开源的新型列式存储系统，是ApacheHadoop生态圈的成员之一(incubating)，专门为了对快速变化的数据进行快速的分析，填补了以往Hadoop存储层的空缺
AllenGd·2023-12-15 13:32

大数据组件sqoop部署安装与测试练习

环境说明10.176.2.101master10.176.2.103zjx0310.176.2.105zjx05cent-os6.5zookeepercdh3.4.5hadoopapache2.7.7mysql5.17jdk1.8.191sqoop1.4.7
zwb_jianshu·2023-12-15 06:05

大数据篇|Hadoop发展史及介绍

文章目录一、Hadoop介绍1.1、Hadoop是什么二、Hadoop发展史2.1、创始人2.2、Hadoop发展历史/起源2.3、Hadoop三大发行版本2.3.1、ApacheHadoop2.3.2、ClouderaHadoop2.3.3
五月天的尾巴·2023-12-15 03:56

2.CENTOS安装CDH和Kudu-1

版本：CENTOS7.2CDH5.10Kudu1.22.1概述本文CENTOS7.2操作系统部署CDH企业版的过程。
大勇任卷舒·2023-12-15 01:40

Ambari和ClouderManager分析对比

ambari和clouderaManager这两个系统，目的就是简化hadoop生态集群的安装、配置，同时提高hadoop运维效率，以及对hadoop集群进行监控。
weixin_30481087·2023-12-14 20:42

用fabric-sdk-java调用Fabcar链码

一、启动fabcar1、设置go代理goenv-wGOPROXY=https://goproxy.io,directgoenv-wGO111MODULE=on2、启动fabcar测试网络cdhyperleger
小青蛙呱呱跳·2023-12-14 16:13

物联网架构之CDH

1、常规初始化操作三个节点都需要执行hostnamectlset-hostnamecdhmasteryum-yinstallvimlrzsznet-toolscat>>/etc/hosts>/etc/profile
叮咚网工·2023-12-14 14:58

Beyond Compare 3密钥序列号分享及密钥被撤销的解决办法

BeyondCompare3密钥：---BEGINLICENSEKEY---mv1nPlXAywBDCdhxFc9QOVv6TBcQHLAXBQUAKTh3ie4fqSEOnWrPsnVkFyt0wAkJHweoExRJWWVwwCniKNROSdJzJXE6YVapYW7f
nanke_yh·2023-12-07 00:15

巨量引擎APK

/keytool-printcert-fileE:\AndroidStudioProject\dcdhTT\android_studio\app\release\zip\META-INF\CERT.RSA
小春熙子·2023-12-06 14:37

数据仓库安全框架Sentry调研

CDH版本的Hadoop在对数据安全上的处理通常采用Kerberos+Sentry的结构。其中，Kerberos主要负责平台用户的权限管理，Sentry则负责数据的权限管理。
大数据faner·2023-12-06 02:47

termux配置python安装kali_termux安装kali Nethunter(无需root)

如果您不在主目录中，请在终端中使用cdhome命令更改目录。设备上需要安装一些软件包和git才能使kaliLinux正常工作。
weixin_40004051·2023-12-06 00:55

HTTP 和 HTTPS的区别

2.默认端口号：4433.TCP三次握手即可+SSL/TTL四次握手(RSA算法和ECDHE算法)4.采用对称加密和非对称加密结合的「混合加密」方式：在通信建立前采用非对称加密的方式交换
_OLi_·2023-12-05 08:29

CDH6下线DataNode节点

CDH6下线DataNode节点1.版本说明2.找到HDFS的实例3.解除授权4.重启集群5.注意事项1.版本说明我这里使用的是CDH6,更高版本请参考https://www.dandelioncloud.cn
真香IT·2023-12-05 04:01

一个大数据架构师应该掌握的技能

1.行业平台1）大平台谷歌云亚马逊云阿里云腾讯云网易云华为云2）小平台国云国双青云勤思3）专业工具平台海致BDP永洪易观4）APP分析平台mixpanelgrowingIO神策诸葛IO2.技术选型1）CDH2
潘永青·2023-12-05 02:13

Spark读写Oracle性能深度调优

1、环境准备  在本次测试环境中，用6台机器搭建了CDH的Hadoop平台，Spark2.2版本搭配Yarn进行资
weixin_43370502·2023-12-04 21:16

04数据平台Flume

Flume是Cloudera提供的高可用，高可靠性，分布式的海量日志采集、聚合和传输的系统工具。
kk_io·2023-12-04 04:20

Flume

FlumeFlume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的软件。
felix521·2023-12-04 01:41

初始化 Clouder Manager 数据库报错Unable to find JDBC driver for database type: MySQL

CDH部署初始化ClouderManager数据库报错。
Appreciate(欣赏)·2023-12-03 23:17

一劳永逸办法 Intellij idea 报错：Error : java 不支持发行版本5

在settings中找到FileandCodeTemplates在找到Mavenimage.png在pom.xml中添加此配置UTF-8UTF-89cdh5.5.299UTF-82.102.10.4添加这个配置
落雪无尘V·2023-12-03 21:42

Centos7源码安装Apache(httpd-2.4.53)及问题解决

编写测试网页参考出错解决安装HTTPD下载地址.wgethttps://dlcdn.apache.org/httpd/httpd-2.4.53.tar.gz#下载tar-zxvfhttpd-2.4.53.tar.gz#解压缩cdhttpd
Noneofmine·2023-12-03 18:53

大数据技术之Oozie

一个基于工作流引擎的开源框架，由Cloudera公司贡献给Apache，提供对HadoopMapReduce、PigJobs的任务调度与协调。Oozie需要部署到JavaServlet容器中运行。
星川皆无恙·2023-12-03 13:00

大数据技术之Flume（超级详细）

大数据技术之Flume（超级详细）第1章概述1.1Flume定义Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构，灵活简单。
星川皆无恙·2023-12-03 13:58

修改 Python 的 JA3 ， 突破反爬虫指纹

而requests里面默认的加密算法如下：ECDH+AESGCM:DH+AESGCM:ECDH+AES256:DH+AES256:ECDH+AES128:DH+AES:ECDH+HIGH:DH+HIGH
___n·2023-12-03 11:21

决策 Diffie-Hellman DDH 和 CDH

密码学中的Diffie-Hellman问题有几种变体：计算问题(CDH)和决策问题(DDH)。这篇文章将解释两者，并举例说明前者如何困难而后者如何简单。
vvoennvv·2023-12-03 04:59

大数据技术学习笔记之hive框架基础3-sqoop工具的使用及具体业务分析

一、CDH版本的介绍及环境部署-》Hadoop的三大发行版本-》ApacheHadoop-》clouderaHadoop：CDH-》Hortonworks:HDP-》选用CDH版本的好处-》解决每个框架之间的兼容性问题
黄剑锋1996·2023-12-02 19:50

Kubernetes集群部署—部署etcd集群（二）

文章目录1准备cfssl证书生成工具2生成Etcd证书2.1自签证书颁发机构（CA）2.2使用自签CA签发EtcdHTTPS证书3从Github下载etcd二进制文件4部署Etcd集群4.1创建工作目录并解压二进制包
杰哥的技术杂货铺·2023-12-02 09:43

混合云案例：利用 Databend Cloud 高效加速私有 Databend 的策略与实施

目前，Databend在多个用户场景中得到广泛应用，包括：新媒体行业数据分析及大屏数据展示云上CDH替代以减少本地磁盘和资源占用性能明显提升的云上Greenplum替代方案降低用户管理复杂度的云上Clickhouse
Databend·2023-12-01 20:58
上一页 2 3 4 5 6 7 8 9 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他