Cloudera(CDH)

关于Cloudera Hadoop的安装（CentOS）- 官文标注（待完成）

CDH5andClouderaManager5RequirementsandSupportedVersionsInanenterprisedatahub,ClouderaManagerandCDHinteractwithseveralproductssuchasApacheAccumulo
DazzlingTiger·2024-01-03 21:15

Linux集群组件启停查脚本

大数据平台中涉及很多集群，如果你使用的不是CDH、Ambari等集成版工具，而是自己去部署的源生组件集群，那可能需要简单的脚本去启动、停止、查看状态。这里以zookeeper为例，起一个简单的。
碼小白·2024-01-03 13:31

HBASE基础

hbase的逻辑结构是由行与列族构成的，其中的行是由rowkey（行键唯一确定），列族是由多个列构成的6、hbase中的数据都是以字节的形式存储7、伪分布式安装Hbase:(1)将hbase-1.2.0-cdh5.14
xinxinyydss·2024-01-03 12:25

Trino兼容Hive SQL方案探索

应用场景公司的经营分析使用的数据仓库是基于开源CDH5.12.6自带的Hive（1.1.6版本）实现的。数据仓库的开发平台使用的是数澜科技的数栖平台（4.8.4版本）。
DawsonSally·2024-01-03 11:15

大数据实时项目必备技能二：kafka有话说

导读：Kafka是由LinkedIn开发并开源的分布式消息系统，因其分布式及高吞吐率而被广泛使用，现已与ClouderaHadoop，ApacheStorm，ApacheSpark集成。
栀子花_ef39·2024-01-03 11:05

Flume基础知识（一）：Flume组成原理与架构

1.Flume定义Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构，灵活简单。
依晴无旧·2024-01-03 07:18

Hive(二)之bash群起脚本

集群的启动启动HDFS启动namenode$/opt/modules/cdh/hadoop-2.5.0-cdh5.3.6/sbin/hadoop-daemon.shstartnamenode2.启动datanode
DarrenmondZhang·2024-01-02 07:45

Linux Hadoop安装

Hadoop下载地址：http://archive.cloudera.com/cdh5/cdh/5/hadoop-2.6.0-cdh5.7.0.tar.gz
神游御风·2024-01-01 14:08

CDH 6.3.2集成flink 1.18 zookeeper版本不匹配Flink-yarn启动失败

CDH6.3.2集成flink1.18zookeeper版本不匹配Flink-yarn不能正常启动，而在CHDWeb页面，flink日志报错提示不明确，不能定位具体错误。
qq_21480329·2024-01-01 10:05

CDH5到CDH6都更新了些什么？

发现最近很多人关注CDH版本更新的问题，CDH6更新有一年多的时间了，2019年2月19日，迭代的版本为CDH6.1.1，现在CDH最新的版本已经到CDH6.3.3了。
ClouderaHadoop·2023-12-30 14:18

23.Kudu表插入中文字符

测试环境：CDH5.12.0Kudu1.4.0ImpalaJDBC41_2.5.35使用ImpalaJDBC代码进行测试，测试代码staticStringJDBC_DRIVER="com.cloudera.impala.jdbc41
大勇任卷舒·2023-12-29 09:17

seatunnel同步oracle到clickhouse问题

Thereasonisthattheversionofhttpclient.jarthatcomeswiththeCDHversio
lin502·2023-12-29 09:58

如何判断https使用了哪个版本的TLS？

安全连接使用TLS1.2具有P-384的ECDHE和AES_256_GCM进行加密和身份验证。再使用360浏览器检查一个安装有国密SSL证书的网站举个例子。我们可以看到安全连接使用SSLVPN1.1、
陕西CA数字证书认证中心·2023-12-29 04:33

虚拟机共享目录位置

进入根目录2.在进入mnt目录3.然后看一下这个文件夹下是否有东西ls，若没有，新建文件夹hgfsmkdirhgfs创建此文件4.执行vmhgfs-fuse/mnt/hgfs5.此时，在进入hgfs文件夹，cdhgfs6
qq_25427995·2023-12-29 02:28

linux基础之--系统配置文件

etc/sysconfig/network-scripts/ifcfg-eth0网卡配置文件TYPE=Ethernet#网络类型以太网BOOTPROTO=none#配置IP地址的方式nonestaticdhcpNAME
hcvc·2023-12-28 22:12

spark 应用编写时5个最需要避免的错误

https://www.slideshare.net/cloudera/top-5-mistakes-to-avoid-when-writing-apache-spark-applications
Bitson·2023-12-28 18:24

org.apache.flink.client.deployment.ClusterDeploymentException: Could not deploy Yarn job cluster.

在cdh集群上，通过如下命令，提交flink任务到yarn集群中：flinkrun-myarn-cluster-d-ynmmy_flink_jobxxx.jar报错，信息如下：org.apache.flink.client.program.ProgramInvocationException
赶路人儿·2023-12-28 13:42

springboot远程连接HDFS-hadoop3.0

一.hadoop前置环境:hadoop3.0+CDH6.1这里默认已经在linux环境配置好;如何安装hodoop不在本次范围内;注意：此时集群没有开启Kerberos认证我的环境:win10+IDEA2019.3
尚云峰·2023-12-28 13:33

hadoop面试问题

1当前你们公司使用的Hadoop版本是什么Hadoopcdh-5.7.6/hadoop-2.6.02HDFS常见的数据压缩格式有哪些，介绍其中一种详细的实现方式Gzip优点是压缩率高，速度快。
code学习社·2023-12-28 13:31

R语言4.3.0安装及使用教程(非常详细)，从零基础入门到精通，看完这一篇就够了（附安装包））

77.74M安装环境：Win7及以上版本，64位操作系统硬件要求：[email protected]内存@4G(或更高）下载通道①百度网盘丨64位下载链接：https://pan.baidu.com/s/1RuQKDCdhNrTTPVmkFmRBkQ
教IT的无语强·2023-12-28 06:29

大数据开发之Sqoop详细介绍

测试环境CDH6.3.1Sqoop1.4.7一.Sqoop概述ApacheSqoop（SQL-to-Hadoop）项目旨在协助RDBMS与Hadoop之间进行高效的大数据交流。
lcz-2000·2023-12-27 23:31

大数据库分析

ElasticSearch和impala首先，对于两个数据库作出说明，有hive查询比较慢，hbase会针对于列的查询不太友好，所以CDH推出了impala搜索引擎，都是基于HDFS的。
靈08_1024·2023-12-27 19:00

Hadoop真的要死了吗？

10月3日，Hortonworks宣布将与其主要竞争对手Cloudera合作创建一家年收入约为7.3亿美元、拥有2,500名客户、市场估值达52亿美元的公司，这令很多人感到意外。
伯雅之英·2023-12-27 11:23

达梦数据库DPI接口常用句柄、宏、返回值信息

达梦DPI包含以下句柄：句柄说明宏定义dhenv环境句柄DSQL_HANDLE_ENVdhcon连接句柄DSQL_HANDLE_DBCdhstmt语句句柄DSQL_HANDLE_STMTdhdesc描述符句柄
Bussy-Lake·2023-12-27 07:16

Hadoop-Hbase集群搭建

1.下载http://archive.cloudera.com/cdh5/cdh/5/hbase-1.2.0-cdh5.7.0.tar.gz2.解压#解压到指定的文件夹tarxzvfhbase-1.2.0
GuangHui·2023-12-27 07:17

CDH安装

https://www.linuxidc.com/Linux/2018-03/151491.htmCentOS7下ClouderaManager及CDH5.14.0安装过程详解1.系统环境搭建1.1下载
Hanson_Huang·2023-12-27 00:03

从零开始学Flume：这个大数据框架学习网站让你快速上手！

介绍：Flume是一个分布式、高可用、高可靠的海量日志采集、聚合和传输的系统，最初Flume是一个分布式、高可用、高可靠的海量日志采集、聚合和传输的系统，最初由Cloudera开发并现在广泛应用于数据采集流式处理
知识分享小能手·2023-12-26 20:42

CDH框架搭建【小白易上手】

CDH框架搭建Vmware安装CentOS虚拟机java环境搭建mysql环境搭建CDH集群搭建遇到的问题1.磁盘空间不够2.centOS版本过低3.连接虚拟机ip失败4.node0节点无法加入集群Vmware
刀锋0001·2023-12-26 02:14

java.io.IOException: Key exchange was not finished, connection is closed.Cannot negotiate, proposa

diffie-hellman-group14-sha1,diffie-hellman-group-exchange-sha1,diffie-hellman-group-exchange-sha256,ecdh-sha2
zhaofuqiangmycomm·2023-12-25 23:39

centos 7.6源码编译DPDK 19.11.14

yum-yinstallgccgcc-c++libstdc++-develmakenet-toolspciutilssudo下载匹配的kernel、kernel-devel、kernel-headersrpm包[root@cdh1kernel
dongsongz·2023-12-25 22:34

Shell Tools of Missing Semester（二）

foo=barecho"$foo"#打印barecho'$foo'#打印$foobash同样支持函数：mcd(){mkdir-p"$1"cd"$1"}输入：mcdhello由于hello是函数的第一个参数
瑜陀·2023-12-24 15:47

hadoop 3.3.3集群安装部署

前言大数据开发涉及的组件和方向比较多，由于之前项目使用的都是成熟的大数据产品CDH或者HDP，里面封装了多个大数据组件，对于企业而言，无论是体验还是维护都比较友好，但对于开发人员来说，太过于集成，反而不太好了解各个组件具体的配置细节
以茉萱·2023-12-24 02:18

千亿级工业大数据的最优方案！智光电气的时序数据库应用

小T导读：此前，智光电气（股票代码：002169）子公司智光研究院在工业项目中使用基于ApacheHadoop的CDH集群来做时序业务数据的处理，但由于数据量级太大，处理占用了大量资源，导致集群有发生崩溃的风险
涛思数据（TDengine）·2023-12-24 01:25

[强网杯2023] 只作了几个小题

Enterastring(shouldbelessthan10bytes):abcdHereisyourcodecoverage:000000000Pleasetryagain.Ifyoucanre
石氏是时试·2023-12-23 13:22

cloudera-agent一键卸载脚本

/bin/bash#停止CDHAgent服务echo"停止CDHAgent服务..."
远方有海，小样不乖·2023-12-23 06:20

在自己电脑配置cdh 版 hadoop 提交mr job客户端

image.png1.首先下载与我们cdhhadoop集群对应的hadoop安装文件hadoop-2.6.0-cdh5.14.2.tar.gz链接:https://pan.baidu.com/s/1iHm5M-gGZRWLKbzVjbYJmA
Helen_Cat·2023-12-23 04:51

79.Sentry实现Hive/Impala数据脱敏

79.1演示环境介绍CM和CDH版本：5.13.1已启用Kerberos已启用Sentry79.2操作演示测试数据[root@ip-186-31-16-68datamasking]#vimemployees.csv1
大勇任卷舒·2023-12-22 21:55

Spark在云原生时代的发展

前言在ABC(AI,BigData,Cloud)时代，传统的大数据解决方案和厂商(Cloudera,Hortonworks)略显颓势，而云厂商(AWS,Azure,GCP)和云原生解决方案(DatabricksCloud
Apache Spark中国社区·2023-12-22 07:18

Comparison and Differences beteen Powershell and Linux

thesame1.1)functionsonPowershellandLinuxII）differencepoints2.1)CD:changedirectory2.1.1)Powershell：commandcdhasnoeffect
DADIAN_GONG·2023-12-21 07:11

Impala优化基本方案

本文源自cloudera官网上的Impala文档，原名为《ImpalaPerformanceGuidelinesandBestPractices》。
撸码小丑·2023-12-20 17:25

ROS笔记Day02----使用vscode开发&launch文件

1.新建工作空间并编译mkdir-phelloworld_ws2/srccdhelloworld_ws2catkin_make2.进入工作空间目录下打开vscodecdhelloworld_wc2code
w沉默味道w·2023-12-20 10:21

Cloudera Manager大数据平台|Cloudera Manager视频教程

1GHMEiOVolk2ZFefuX5SExA提取码:ax5d备用地址（腾讯微云）：https://share.weiyun.com/5izjs5M密码：kfpixg课程目标对已经从事相关大数据工作的学员可以精通ClouderaManager
爱笑小哥·2023-12-19 15:29

消息队列kafka详解：Kafka原理分析总结

目前越来越多的开源分布式处理系统如Cloudera、ApacheStorm、Spark等都支持与Kafka集成。
码农小旋风·2023-12-19 11:43

Hadoop相关安装包上传到目录并完成安装

1.指定一个安装的目录/usr/local/自己的名字(mkdircdhong、rm-rf*)[root@cdhong01~]#cd/usr/local/[root@cdhong01local]#rm-rf
余生跟他走·2023-12-19 00:59

Laravel Homestead笔记

Homestead安装文档：https://xlswriter-docs.viest.me/zh-cn/an-zhuang/pecl-tui-jia让我们开始启动Homestead：cdHomestead
不二周助Rex·2023-12-17 18:17

SecureCRT远提示Key exchange failed，No compatible key exchange method. The server supports these methods

Keyexchangefailed.Nocompatiblekeyexchangemethod.Theserversupportsthesemethods:curve25519-sha256,[email protected],ecdh-sha2
二当家的素材网·2023-12-17 15:46

在 idea 中以 yarn-client 远程提交 Spark 作业

示例代码RemoteSubmitApp主类packagecom.clouderaimportorg.apache.kafka.clients.consumer.ConsumerConfigimportorg.apache.kafka.common.serialization.StringDeserializerimportorg.apache.log4j.Loggerimportorg.apach
lei_charles·2023-12-17 13:41

Hive学习笔记

修改配置文件/etc/profile（添加exportHIVE_HOME=/usr/local/hive-0.9.0-binexportHADOOP_HOME=/usr/local/hadoop-0.20.2-cdh3u5
weixin_30470857·2023-12-17 05:32

java操作cdh得hadoop出现java.io.IOException: Failed on local exception: com.google.protobuf.InvalidProt...

这个问题是，java得操作Hadoop得api得版本跟haodoop得不一致导致得在hadoop中运行/bin/hadoopversion查看hadoop得版本之后将java得api中得jar包版本对应更换
PunkP·2023-12-17 03:21

ERROR sqoop.Sqoop: Got exception running Sqoop: java.lang.RuntimeException: Could not load db driver

java.lang.RuntimeException:Couldnotloaddbdriver问题产生原因缺少oracle驱动解决方案#需要在安装sqoopserver的节点上放oracle的驱动包cpojdbc6.jar/opt/cloudera
即墨澈·2023-12-16 05:19
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他