E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
CDH
maven插件学习(maven-shade-plugin和maven-antrun-plugin插件)
整合spark3.3.x和hive2.1.1-
cdh
6.3.2碰到个问题,就是spark官方支持的hive是2.3.x,但是
cdh
中的hive确是2.1.x的,项目中又计划用spark-thrift-server
catcher92
·
2025-02-15 08:00
java
maven
maven
学习
大数据
加密套件以及E
CDH
1、加密套件:密码,算法以及安全设置http://wemedia.ifeng.com/30498593/wemedia.shtml2、E
CDH
密钥协商算法E
CDH
密钥协商算法-OrcHome3、e
cdh
追梦-北极星
·
2025-02-14 13:33
Wifi
linux
Flink--初识 DataStream Connector Kafka
创建Topic2.2Code3.使用Kafka作为Sink3.1CodeFlink作为比较适合流式处理的计算框架,在流式处理当中,比较搭配的消息中间件为Kafka本次使用的Kafka版本为2.1.0-
cdh
6.2.0Flink
XK&RM
·
2025-02-11 01:30
Flink
flink
kafka
scala
架构第二十九章:haproxy
tar-xvfhaproxy-2.6.6.tar.gz
cdh
aproxy-2.6.6makeTARGET=linux31#centos7.x是linux31、centos6.x是linux26sudomakeinst
琴剑诗酒
·
2025-02-07 19:49
架构
CDH
+Kylin三部曲之三:Kylin官方demo
《
CDH
+Kylin三部曲之二:部署和设置》:完成
CDH
和Kylin部署,并在管理页面做好相关的设置;现在Hadoop、Kylin都就绪了,接下来实践Kylin的官方demo;Yarn参数设置Yarn的内存参数设置之后一定要重启
2401_89740692
·
2025-02-07 00:07
kylin
大数据
Hadoop1.0和2.0的主要区别
Hadoop1.0指的是版本为ApacheHadoop0.20.x、1.x或者
CDH
3系列的Hadoop,组件主要由HDFS和MapReduce两个系统组成,HDFS是一个分布式文件存储系统,MapReduce
web_15534274656
·
2025-02-06 03:43
java
hadoop
大数据
hdfs
dubbo
java-zookeeper
CDH
/HDP国产替换之路
原企业版用户企业版不再更新Cloudera和Hortonworks合并后推出了新一代大数据平台CDP,
CDH
6和H
yumgpkpm
·
2025-02-05 09:59
hadoop
hive
hbase
hdfs
为什么我的
CDH
不用Hue,改用Scriptis了?
理性谈谈Hue的优缺点平时做数据开发用的比较多的是
CDH
的Hue,Hue提供了对接Hadoop平台的UI界面,可以对Hbase数据进行直接操作,执行Mapreducer任务时有可视化的执行界面,进行数据报表和
兔子那么可爱
·
2025-02-05 09:58
大数据
UI
开源
数据分析
中间件
CDH
角色迁移和硬盘扩容
1.概述生产
CDH
集群硬盘不足,HDFSdatanode节点数据不平衡,历史管理角色安装混乱,全部节点需要硬盘扩容。
专注大数据的Lyer
·
2025-02-05 09:56
java
大数据
hadoop
hive
hdfs
SpringBoot+Implala常见问题:[Cloudera][ImpalaJDBCDriver](500605) 错误
问题描述Causedby:java.sql.SQLException:[Cloudera]ImpalaJDBCDriver问题分析:当
CDH
机器配置了LDAP验证的时候,Dbeaver或者其他链接工具或者
平凡君
·
2025-02-04 18:12
笔记
Hive
Impala
SpringBoot
一次bilibili的漏洞扫描
以下是对该SSL/TLS扫描结果的深技术分析及安全加固建议:1.协议与加密套件分析观察结果markdown复制-协议版本:TLSv1.2(100%)-支持加密套件:*E
CDH
E-RSA-AES256-GCM-SHA384
完全之人
·
2025-02-04 12:56
技巧
安全
kylin linux 安装教程,Apache Kylin | 安装指南
1.2.1+HBase:1.1+Spark2.1.1+JDK:1.7+OS:Linuxonly,CentOS6.5+orUbuntu16.0.4+用HortonworksHDP2.2-2.6,Cloudera
CDH
5.7
社本
·
2025-02-03 07:26
kylin
linux
安装教程
hbase无法建表:org.apache.hadoop.hbase.PleaseHoldException: Master is initializing
1.环境:
cdh
6.2.12.现象:hbaseshell进去后,list命令执行正常,执行建表语句后报错:ERROR:org.apache.hadoop.hbase.PleaseHoldException
magicchu
·
2025-02-02 09:18
CDH
HBASE
大数据
CDH
_6.3.2的搭建
一站式搭建大数据的应用1、前提条件和准备工作hostnamectlset-hostname
cdh
01hostnamectlset-hostname
cdh
02hostnamectlset-hostname
cdh
032
我的K8409
·
2025-02-01 17:22
Flink
linux
大数据
分布式
spark2如何集成到
cdh
里
集成到集群里了我安装的是最新版本的下载spark2安装包wgethttp://archive.cloudera.com/beta/spark2/parcels/latest/SPARK2-2.0.0.cloudera.beta2-1.
cdh
5
蘑菇丁
·
2025-01-27 16:55
经验
hadoop
大数据+机器学习+oracle
kafka开启kerberos
例如:注意有几台机器创建几个kadmin.local-q"addprinc-randkeyzookeeper/dshield
cdh
01@HADOOP139.COM"kadmin.local-q"addprinc-rand
蘑菇丁
·
2025-01-27 16:55
debian
运维
python链接hbase模块_Python连接Hbase
hbaseimporthappybase#注意protocol和transport这两个参数,需要和hbase启动命令中的相同,否则会报错connection=happybase.Connection('qa-
cdh
weixin_40001395
·
2025-01-26 19:03
python链接hbase模块
华为OD机试E卷 --连续字母长度--24年OD统一考试(Java & JS & Python & C & C++)
用例输入AAAAHHHBB
CDH
HHH3输出
飞码创造者
·
2025-01-25 11:49
最新华为OD机试题库2024
java
python
华为od
javascript
c语言
CDH
大数据平台
CDH
概念
CDH
(ClouderaDistributionIncludingApacheHadoop)是由Cloudera公司提供的一个集成了ApacheHadoop以及相关生态系统的发行版本。
梦龙zmc
·
2025-01-25 06:44
大数据
大数据
CDH
日志清理
备注:
CDH
版本:6.3.1背景
CDH
集群运行了2个多月了,根目录磁盘使用率接近80%了,需要清理
CDH
日志。一.查看问题
CDH
的日志文件一般在如下几个目录,可以通过如下代码进行查看。
只是甲
·
2025-01-24 14:13
#
CDH大数据平台
大数据和数据仓库
Cloudera
日志清理
hadoop
【网络协议】【http】【https】E
CDH
E-TLS1.2
【网络协议】【http】【https】E
CDH
E-TLS1.2E
CDH
E算法1.客户端和服务器端事先确定好使用哪种椭圆曲线,和曲线上的基点G,这两个参数都是公开的,双方各自随机生成一个随机数作为私钥d,
钟离墨笺
·
2025-01-23 11:21
网络协议
网络协议
http
https
【网络协议】【http】【https】TLS解决了HTTP存在的问题-加密通信+摘要,数字签名+CA证书
TLS前期发送的密码套件里面主要就是约定:密钥交换算法,签名算法,对称加密算法,摘要算法1加密通信一般选择非对称加密交换密钥对称加密进行后续通信解决了信息泄露问题1.1密钥交换算法(非对称加密)RAS,E
CDH
E
钟离墨笺
·
2025-01-19 21:38
网络协议
网络协议
http
https
docker-ubuntu-24.04安装openresty1.21.4.3全过程
apt-get为阿里云镜像sed-i's@archive.ubuntu.com/@/mirrors.aliyun.com/@g'/etc/apt/sources.list&&apt-getupdate创建目录
cdh
ome
司江龙
·
2025-01-18 12:43
ubuntu
linux
运维
架构师反向代理Haproxy+压力测试 - 学习笔记
usr/local/src/wgethttp://archive.apache.org/dist/httpd/httpd-2.4.18.tar.gztar-zxvfhttpd-2.4.18.tar.gz
cdh
t
无影V随风
·
2025-01-18 10:25
学习笔记
linux相关
采用海豚调度器+Doris开发数仓保姆级教程(满满是踩坑干货细节,持续更新)
目录一、采用海豚调度器+Doris开发平替
CDH
Hdfs+Yarn+Hive+Oozie的理由。
大模型大数据攻城狮
·
2025-01-17 19:56
海豚调度器从入门到精通
doris
海豚调度器
离线数仓
实时数仓
国产代替
信创大数据
flink数仓
2023 下半年信息安全工程师考试真题答案
信息安全管理员应当负责为顾客编写安全应用程序D.信息安全管理员应当对安全设备进行优化配置国家密码管理局于2023年公布了“无线局域网产品须使用旳系列密码算法”,其中规定密钥协商算法应使用旳是()A.DHB.ECDSAC.E
CDH
D.CPK
rockmelodies
·
2024-09-09 23:29
安全
网络安全
kafka消费者重复消费同一个topic
由于是使用的
cdh
集成的kafka,不知道
cdh
里的zookeeper管理kafka的数据存在了
小琳ai
·
2024-09-05 10:06
大数据
kafka
重复消费
consumer
Django HelloWorld 部署
mkdirdjango//创建一个文件夹命名为djangocddjango//进入django文件夹django-adminstartprojectHelloWorld//创建一个Project命名为HelloWorld
cdH
elloWorld
SkTj
·
2024-09-04 04:30
hue升级文档
首先,确定我们的两个安装包:hue.zip(这个包也可以从我们的git仓库下载,具体链接我会发给你)huetool.zip然后,在
CDH
的管理界面停止hue的服务:1,进入hue2,选择实例3,选择HueServer4
101之歌
·
2024-09-02 02:17
实训day37(8.27)
一、dockerfile应用[root@docker~]#mkdirhttp0[root@docker~]#
cdh
ttp0/[root@dockerhttp0]#vimabc.sh[root@dockerhttp0
Tʀᴜsᴛ⁴¹⁷487
·
2024-08-29 02:24
linux
CDH
之 hive 数据迁移
当你想切换了集群想把hive迁移至新集群,两个集群之间又互不相通,一个最简单快捷的方法,就是批量导出元数据信息,同时把数据文件下载上传至新服务器的数据文件存放目录下1.导出元数据信息#database即是数据库名称hive-e"use;showtables;"|xargs-I'{}'sh-c'hive-e"use;showcreatetable'{}';"'>tables.sql2.将原服务器中h
啊 这
·
2024-08-27 13:18
CDH
hive
hadoop
大数据
迁移学习
Gitlab CI/CD 配置
CI/
CDh
ttps://gitlab.com/gitlab-examplesGitlab(仓库)->GitlabRunner(持续集成/部署)->Remotehost(远程部署主机)11.5.1.远程服务器配置为远程服务器创建
netkiller-
·
2024-08-27 10:26
运维手札
编程手札
gitlab
ci/cd
git
在linux机器中安装配置hadoop
(我们可以看到红色字体的hadoop包已经上传成功)2.进行解压,运用命令:tar-zxvfhadoop-2.6.0-
cdh
5.7.6.tar.gz进行解压,解压后
BigData_C
·
2024-08-26 14:40
linux
hadoop
天猫超市优惠获取渠道,天猫超市内部优惠劵领取方法使用教程
戳>(CZ9185Zat
cdh
NADlJ
氧惠全网优惠
·
2024-03-29 13:50
CDH
启停使用HiveServer2
翻译:https://www.cloudera.com/documentation/enterprise/latest/topics/
cdh
_ig_hiveserver2_start_stop.html
金刚_30bf
·
2024-03-26 23:41
大数据开源框架技术汇总
目录系统平台(Hadoop、
CDH
、HDP)监控管理(CM、Hue、Ambari、Dr.Elephant、Ganglia、Zabbix、Eagle)文件系统(HDFS、GPFS、Ceph、Gluster
浪尖聊大数据-浪尖
·
2024-03-08 20:48
数据仓库
hive
flume
分布式
scipy
makefile
crm
lighttpd
【python】密码字典生成器
二、安装确保已安装gitgitclonehttps://gitee.com/harryxiaocn/harry-passwd-dict-creator.git
cdh
ar
HarryXYC
·
2024-03-05 03:54
我的Python朋友
python
网络安全
密码字典生成
开源大数据管理平台选型
随着
CDH
和HDP的闭源,还有国内信创需求,经过前期调研和后期实践,目前主要有两个产品满足要求:apachebigtop和DataSophon符合要求。因为这两个产品都是完全开源的,自助可控。
大数据AI
·
2024-02-25 02:41
大数据从入门到精通
大数据
16.用Hadoop命令向
CDH
集群提交MR作业
16.1实验环境介绍内容概述环境准备Kerberos环境和非Kerberos集群测试环境Kerberos集群
CDH
5.11.2,OS为Redhat7.2非Kerberos集群
CDH
5.13,OS为CentOS6.5
大勇任卷舒
·
2024-02-20 19:27
[
CDH
] Spark 属性、内存、CPU相关知识梳理
version:2.4.0-
cdh
6.3.0文章目录sparkproperties常用配置sparktasksparktask使用的cpu核数sparkarchitecturesparkmemorysparkonyarn
枪枪枪
·
2024-02-20 15:24
Spark
spark
scala
big
data
大数据分析学习第十五课 自建云服务器集群离线安装Ambari2.7.5和HDP3.1.5(一)
之前了解了很多关于大数据平台一站式部署管理的工具,比如ApacheAmbari和
CDH
,目前最新的
CDH
已经没有了社区版,也就是说以后使用新版本的ClouderaManager和
CDH
都是要收费的,这对于很多小公司来说
猫头鹰数据分析
·
2024-02-20 08:29
大数据
Java
Hive
hadoop
ambari
大数据
centos
hdfs
生产环境下,应用模式部署flink任务,通过hdfs提交
前言 通过通过yarn.provided.lib.dirs配置选项指定位置,将flink的依赖上传到hdfs文件管理系统1.实践 (1)生产集群为
cdh
集群,从cm上下载配置文件,设置环境exportHADOOP_CONF_DIR
但行益事莫问前程
·
2024-02-20 07:04
flink
flink
Apache DolphinScheduler中ZooKeeper
CDH
不兼容问题的解决方案
背景看到ApacheDolphinScheduler社区群有很多用户反馈和讨论这块问题,针对不兼容的问题,不仅需要自己重新编译各一个新包,而且因为默认是使用zk-3.8的配置,所以会出现不兼容问题。使用zk-3.4配置即可适配3.4.x解决办法(一)#切换到项目源码的根路径中执行mvncleanpackage-T1C-Prelease'-Dmaven.test.skip=true''-Dcheck
DolphinScheduler社区
·
2024-02-19 16:44
大数据
linux7软件选择最小,[CentOS7] - 最小化安装CentOS7后可以选择安装的软件
2.连接网络如果要连接无线网络使用以下步骤:ipaddrshow--列出网卡信息,找到你的无线网卡wpa_supplicant-B-i无线网卡名称-
cdh
client无线网卡名称--获取动态ip如果要使用静态
weixin_39946429
·
2024-02-19 15:44
linux7软件选择最小
最小化安装centos7配置ip_最小化安装CentOS7后的步骤
2.连接网络如果要连接无线网络使用以下步骤:ipaddrshow--列出网卡信息,找到你的无线网卡wpa_supplicant-B-i无线网卡名称-
cdh
client无线网卡名称--获取动态ip如果要使用静态
h8liu
·
2024-02-19 15:44
Apache DolphinScheduler中ZooKeeper
CDH
不兼容问题的解决方案
背景看到ApacheDolphinScheduler社区群有很多用户反馈和讨论这块问题,针对不兼容的问题,不仅需要自己重新编译各一个新包,而且因为默认是使用zk-3.8的配置,所以会出现不兼容问题。使用zk-3.4配置即可适配3.4.x解决办法(一)切换到项目源码的根路径中执行mvncleanpackage-T1C-Prelease'-Dmaven.test.skip=true''-Dchecks
·
2024-02-19 10:36
数据库
大数据开发之Sqoop详细介绍
备注:测试环境
CDH
6.3.1Sqoop1.4.7一.Sqoop概述ApacheSqoop(SQL-to-Hadoop)项目旨在协助RDBMS与Hadoop之间进行高效的大数据交流。
只是甲
·
2024-02-14 01:17
华为OD机试】连续字母长度-python
若子串中只包含同一个字母的子串数小于k;则输出-1.输入描述:第一行有一个字符串:只包含大写字母第二行有一个数字:表示k的值输出描述:输出连续出现次数第k多的字母的次数示例1:输入AAAAHHHBB
CDH
HHH3
小念念不唠叨
·
2024-02-12 19:55
华为od
python
开发语言
FPGA_工程_基于rom的vga显示
parameterV_lcd=12'd150,parameterLCD_SIZE=15'd10_000)(inputwireclk,inputwirerst_n,inputwire[11:0]lcd_xpos,//l
cdh
o
哈呀_fpga
·
2024-02-12 18:44
fpga开发
fpga
图像处理
学习
信号处理
系统架构
2022-04-13--SecureCRT SSH 失败 Key exchange failed 解决方法
Nocompatiblekey-exchangemethod.Theserversupportsthesemethods:curve25519-sha256,curve25519-sha256@libssh.org,e
cdh
-sha2
lyx_lyx
·
2024-02-12 16:52
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他