大数据平台CDH 第16页

CDH基于Kerberos开启身份验证实践总结

CDH基于Kerberos开启身份验证实践总结前言简介Kerberos是什么Kerberos解决什么问题Kerberos基本概念Kerberos认证流程Kerberos基本配置principalkeytabkrb5

Charles Yan·2023-10-09 14:57

Nginx官方文档(三十四)【ngx_http_ssl_module】

sslssl_buffer_sizessl_certificatessl_certificate_keyssl_ciphersssl_client_certificatessl_crlssl_dhparamssl_early_datassl_ecdh_curvessl_password_filessl_prefer_server_ciphersss

风神.NET·2023-10-09 09:33

大公司都在做的大数据平台，为你精选这一份书单

image/gif;base64,R0lGODlhAQABAPABAP///wAAACH5BAEKAAAALAAAAAABAAEAAAICRAEAOw=="点击并拖拽以移动")现如今每个公司都有自己的大数据平台和大数据团队

程序员黄小斜·2023-10-09 04:40

Hadoop2.x安全：hadoop集群之kerberos认证(一、原理+安装配置)

请公众号留言;如果您觉得“大数据开发运维架构”对你有帮助，欢迎转发朋友圈从微信公众号拷贝过来，格式有些错乱，建议直接去公众号阅读一、为什么启用Kerberos安全认证大家都知道，Hadoop1.0.0或者CDH3

大数据开发运维架构·2023-10-08 15:16

万字解读｜怎样激活 TDengine 最高性价比？

自2022年下旬发布以来，经过我们不断地打磨优化之后，TDengine3.0在性能、功能、稳定性各个方面均有大幅提升，已经从一款时序数据库蜕变成为高性能、云原生、分布式的物联网、工业大数据平台。

涛思数据（TDengine）·2023-10-08 04:11

善用产业大数据平台，赋能产业数字化转型升级

所谓产业大数据平台是指集产业数据获取、存储、管理、分析为一体，以多源数据为核心，以数字技术为支撑，以产业服务为导向，以产业发展为目标的服务型网络平台。

五度易链-产业大数据服务解决方案提供商·2023-10-07 12:17

那些在CDH5中是bug，到了CDH6版本就修复了的问题

盘点那些在CDH5中是bug，到了CDH6版本就修复了的问题。

ClouderaHadoop·2023-10-07 11:09

Spark集群环境搭建

Hadoop和JAVA的开发环境-1.上传Spark和Scala压缩包（到~/software文件夹中）-2.解压压缩包$tar-zxvf~/software/spark-1.6.1-bin-2.5.0-cdh5.3.6cdh

kuntoria·2023-10-07 03:20

Day-08 基于 Docker安装 Nginx 镜像-负载均衡

凉生阿新·2023-10-07 01:10

hadoop系列安装小记

cdh独立下载hadoop各个组件再安装比较繁琐(hdfs+yarn+hbsae+zk+hive)，没有选好版本可能会冲突，CDH的版本都是选定好的，安装和升级文档齐全,非常方便5.1.0各版本信息5.1.0

陈涛_滴滴·2023-10-06 10:26

大数据平台

大数据平台定义1.大数据平台，顾名思义就是整合网站应用和大数据系统之间的差异，将应用程序产生的数据导入到大数据系统，经过处理计算后再导出给应用程序使用。

Movle·2023-10-06 07:46

智慧校园云平台源码，专门针对中小学校园研发，服务近百所学校，系统运行稳定

“智慧校园电子班牌系统”主要针对中小学校园研发，为校园管理提供智慧管理方案，提供校园智慧管理平台，在大数据平台下，对应用系统进行统一、集中管理，囊括校园管理全方面，实现对校园、班级、教师、学生的管理，让管理更多面

淘源码A·2023-10-05 18:11

rust cargo

运行以下命令：$cargonewhello_cargo$cdhello_cargocargonew命令新建了名为hello_

int8·2023-10-05 07:40

连接到会话 XXX 失败:Key exchange failed.No compatible key exchange method. The server supports t

修改服务器，兼容老系统的算法vi/etc/ssh/sshd_config#加入下面的文本[email protected],ecdh-sha2-nistp256

程序课代表·2023-10-05 00:10

构建大数据平台（七）Storm集群搭建

一、前提：（1）storm服务，是基于zookeeper的。（2）storm使用稳定版本：apache-storm-1.2.1.tar.gz；（3）可在master上安装后，scp到其他slave机器上。（4）Storm需要安装依赖库：JDK7+、Python2.6.6（如不需要运行Python程序，可不安装）二、配置storm：首先要注意在生产环境中目录结构要定义好，防止在项目过多的时候找不到所

Mr_ZhaiDK·2023-10-04 19:08

为什么腾讯监控的大数据平台选择了这款数据库？

导读：本文带你了解一个开源的、高性能的时序型数据库——InfluxDB。作者：韩健来源：大数据DT（ID：hzdashuju）00为什么QQ要选择InfluxDB？从2016年起，笔者在腾讯公司负责QQ后台的海量服务分布式组件的架构设计和研发工作，如微服务开发框架、名字路由、名字服务、配置中心等，做了大量分布式架构、高性能架构、海量服务、过载保护、柔性可用、负载均衡、容灾、水平扩展等方面的工作，以

hzbooks·2023-10-04 05:58

CDH的卸载

master节点：1、通过ClouderaManager停止集群和ClouderaManager服务2、卸载ClouderaManagerServer如果用cloudera-manager-installer.bin方式安装，通过如下卸载：sudo/usr/share/cmf/uninstall-cloudera-manager.shslave节点：删除下面的目录：如果有的删除不掉，需要我们重启机

101之歌·2023-10-03 09:09

JavaSE及数据结构---初识Java

目录一、工作领域企业级系统Web开发领域android平台应用大数据平台开发二、语言特性1.简单性2.面相对象3.分布式(微服务)4.健壮性5.安全性6.体系结构中立7.可移植性8.解释性9.高性能10

茶虹·2023-10-02 12:18

【月白拆解文章训练营】《杨天真对琪仔的评价太客观了，她有一千个缺点，都可以用这个优点弥补》

《杨天真对琪仔的评价太客观了，她有一千个缺点，都可以用这个优点弥补》作者：汤小小链接：https://mp.weixin.qq.com/s/8Hya91nDgoCdhiSXCHyOtA文章拆解：标题：运用了名人

盛夏光年_宝林·2023-10-01 17:54

openssl版本升级解决 cipher 加密的问题

------------------------------------------------EDH-RSA-DES-CBC3-SHA0x00,0x16DHRSA3DES-CBC(168)SHA1ECDHE-RSA-DES-CBC3

shenghuiping2001·2023-10-01 16:08

CDH6.2.0安装、踩坑实录

写在前面官方资料ClouderaManager下载地址https://archive.cloudera.com/cm6/6.2.0/redhat7/yum/RPMS/x86_64/](https://upload-images.jianshu.io/upload_images/7709824-a95da7371c9c0130?imageMogr2/auto-orient/strip%7Cimage

NikolasNull·2023-10-01 05:01

数据中台实战(00)-大数据的尽头是数据中台吗？

从2018年末开始，原先市场上各种关于大数据平台的招标突然不见了，取而代之的是数据中台项目，建设数据中台俨然成为传统企业数字化转型的首选，甚至不少大数据领域的专家都认为，数据中台是大数据下一站。

JavaEdge.·2023-10-01 03:18

协议-SSL协议-基础概念01-SSL位置-协议套件-握手和加密过程-对比ipsec

密钥交换算法：保证对称密钥的交换是安全的，典型算法包括DHE、ECDHE。身份验证和签名算法：确认服务端的身份，其实就是对证书的验证，非对称算法就用在这里。典型算法包括RS

洽-洽·2023-10-01 00:53

spark sql操作数据

编程方式定义Schema4、spark操作mysql数据库在windows操作5、spark操作Hive数据出现bug1无法访问/export/servers/spark-2.2.0-bin-2.6.0-cdh5.14.0

侬本多情。·2023-09-30 20:31

企业发展思考

物联网工具、线上线下管理系统、社交媒体、大数据平台、调研平台工具替代传

探索与践行丰盛的旅程·2023-09-30 07:40

Kali 安装浩劫（Havoc Command and Control Framework）

拉取github上的项目到本地进入Havoc目录gitclonehttps://github.com/HavocFramework/Havoc.gitcdHavoc下载基于Kali的一系列软件sudoaptinstall-ygitbuild-essentialapt-utilscmakelibfontconfig1libglu1

Flying ladybird·2023-09-30 05:34

CDH 集群离线部署、大数据组件安装与扩容详细步骤(cdh-6.3.1)

一、环境准备1、服务器配置和角色规划IP地址主机名硬件配置操作系统安装步骤10.168.168.1cm-server8C16GCentos7新建10.168.168.2agent018C16GCentos7新建10.168.168.3agent028C16GCentos7新建10.168.168.4agent038C16GCentos7新建10.168.168.5agent048C16GCento

可乐大数据·2023-09-30 01:26

【kafka】Kafka 可视化工具Kafka Eagle安装和使用

因此，大数据平台上需要一套Kafka的管理监控系统，Kafka-Eagle。KafkaEagle是一个用于监控和管理kafka的开源组件，可以同时监控多个kafka集群。

HunterMichaelG·2023-09-29 21:17

如何快速让自己成为一个优秀的架构师，而不是码农

我所从事的工作我目前从事分布式服务架构的设计与开发工作，在阿里的大数据平台上进行应用程序开发。

茵茵Java学习·2023-09-29 12:10

计算机竞赛深度学习大数据物流平台 python

文章目录0前言1课题背景2物流大数据平台的架构与设计3智能车货匹配推荐算法的实现**1\.问题陈述****2\.算法模型**3\.模型构建总览**4司机标签体系的搭建及算法****1\.冷启动**2\.

Mr.D学长·2023-09-29 02:47

浅谈ECC&ECDH&ECDSA

域参数我们的椭圆曲线算法是基于有限域上椭圆曲线的循环子群，所以一般需要以下参数：素数ppp定义有限域的小。椭圆曲线方程的系数a和b。生成循环子群的基点GGG。子群的阶nnn。子群的协因子hhh。注意：当p=hnp=hnp=hn时（即当有限域的阶等于椭圆曲线的阶的时候），曲线易受到Smart的攻击，这个攻击可以在传统计算机上在多项式时间内解决离散对数问题。ECC私钥：从1,...,n−1{1,.

qq_33182722·2023-09-28 13:22

Flink基础系列8-Flink on yarn运行wordcount程序

文章目录环境介绍一.Maven配置二.Java代码编写三.Maven打包并上传四.运行jar文件五.运行其它的class文件参考环境介绍测试服务器CDH6.3.1版本安装Flink1.9版本。

只是甲·2023-09-28 11:10

实时数仓Hologres：推出计算组实例/支持JSON数据/向量计算+大模型等新能力

DataWorks、Hologres为核心，致力于解决用户多元化数据的计算需求问题，实现存储、调度、元数据管理上的一体化架构融合，支撑交通、金融、科研、等多场景数据的高效处理，是目前国内最早自研、应用最为广泛的一体化大数据平台

阿里云云栖号·2023-09-28 10:34

DataWorks 全新发布：增强分析/数据建模个人版等新能力

DataWorks、Hologres为核心，致力于解决用户多元化数据的计算需求问题，实现存储、调度、元数据管理上的一体化架构融合，支撑交通、金融、科研、等多场景数据的高效处理，是目前国内最早自研、应用最为广泛的一体化大数据平台

阿里云云栖号·2023-09-28 10:32

记录Elasticsearch circuit_breaking_exception异常解决

业务场景：Flink消费Kafka数据写入ES组件版本：CDH：6.3.0Flink：1.12.1Elasticsearch:7.7.0异常明细Causedby:ElasticsearchStatusException

csdn_chshuai·2023-09-28 10:58

golang工程——grpc TLS配置

TLS配置非对称加密流程TLS流程这是单向TLS流程ECDHE握手过程（图片来自透视Http协议课程）浏览器发送ClientHello消息客户端向服务器打招呼，消息中包含客户端生成的随机数C，客户单的TLS

咚伢·2023-09-28 09:49

Hive-命令行CDH访问开启kerberos的hive

1.通过hive用户访问切换用户为hive[root@slaveconf]#su-hive上一次登录：五4月1213:59:19CST2019pts/1上[hive@slave~]$命令行直接输入hive就可以进入hive[hive@slave~]$hivelog4j:WARNNosuchproperty[maxFileSize]inorg.apache.log4j.DailyRollingFil

小蜗牛的路·2023-09-28 09:16

CDH 6.3.2升级Flink到1.17.1版本

CDH：6.3.2原来的Flink：1.12要升级的Flink：1.17.1操作系统：CentOSLinux7一、Flink1.17编译build.sh文件：#!

梦痕长情·2023-09-28 07:19

-大数据入门-1-Hadoop-hdfs伪分布式部署

Hadoop大象广义:以apachehadoop软件为主的生态圈(hivesqoopsparkflink…)狭义:apachehadoop软件官网APAche:www.apache.orgCDH:http

吾..二..二·2023-09-28 02:19

secp256k1的结构——ECDH密钥交换

2021SC@SDUSCsecp256k1的结构——ECDH密钥交换ECDH地址共享密钥ECDH在加密通信过程中可以使用DiffieHellman密钥交换来进行密钥分发，经过密钥交换之后相当于通信双方都有了相同的密钥

yyDrifter·2023-09-27 20:00

HTTPS的ECDHE算法

id=124371HTTPS常用的密钥交换算法有两种，分别是RSA和ECDHE算法。其中，RSA是比较传统的密钥交换算法，它不具备前向安全的性质，因此现在很少服务器使用的。

爱健身的兔子·2023-09-27 15:15

CDH-pyspark-xgboost TypeError: ‘JavaPackage‘ object is not callable

使用CDH版本的pyspark进行xgboost训练时，一直报一个错误“TypeError:‘JavaPackage’objectisnotcallable”。

一个魁梧的中年男人·2023-09-27 09:47

技术选型之Docker容器引擎

来源：r6d.cn/DW7k1.Docker出现的背景在平常的研发和项目场景中，以下情况普遍存在：个人开发环境为了做大数据相关项目，需要安装一套CDH集群，常见的做法是在自己电脑里搭建3台与CDH版本对应的虚拟机

公众号:肉眼品世界·2023-09-27 09:33

相伴六年，Smartbi与荣耀共建数据化运营新生态

——荣耀 大数据平台产品经理赵黄起随着中国科技企业迅速发展，越来越多科技企业开始意识到自主研发和创新的重要性，为了摆脱

明月说数据·2023-09-27 01:33

Centos7单机部署Flink13.6及测试FinkCDC同步MySQL

一、背景公司CDH6.3.2里面的版本是Flink1.12.0。而因为FlinkCDC2.0.0只支持Flink1.13.0以后，版本不匹配，所以只能升级版本。

梦痕长情·2023-09-27 00:00

CDH6.3.2 的pyspark读取excel表格数据写入hive中的问题汇总

需求：内网通过Excel文件将数据同步到外网的CDH服务器中，将CDH中的文件数据写入hive中。

梦痕长情·2023-09-27 00:57

今日脑洞-私域分享农业

大数据平台会每天记录农作物的生长情

花老板不吃闸机·2023-09-26 21:59

如何访问TDH中Inceptor 底层的元数据库TxSQL

在星环的大数据平台TDH中，在功能上对应开源HIVE的服务是Inceptor，Inceptor底层是基于开源的HIVE和Spark整合开发而来的，其中：InceptorServer对应HIVE的查询

明哥的IT随笔·2023-09-26 12:42

pxe无人值守安装centos8

方案一：搭建dhcp，tftp，http服务器1.dhcp安装安装dhcp-server.x86_64:ProvidestheISCDHCPserver配置vim/etc/dhcp/dhcpd.conf

XUPT-BDAL-LAB-ML&OP·2023-09-26 12:51

从容器化到资源池化，数栈云原生技术实践探索之路

导读：近些年随着云计算和云原生应用的兴起，容器技术可以很好地解决许多问题，所以将大数据平台容器化是一种理想的方案。

袋鼠云数栈·2023-09-26 12:20

推荐频道

大数据平台CDH