CDH

Flink 与 Hive 的磨合期

回顾在上篇文章中，笔者使用的CDH版本为5.16.2，其中Hive版本为1.1.0（CDH5.x系列Hive版本都不高于1.1.0，是不是不可理解），Flink源代码本身对Hive1.1.0版本兼容性不好
阿里云云栖号·2021-04-18 23:13

Apache Ranger 部署文档

服务用于数据静态加密（HDFS透明加密/ORC格式列加密），hadoop原生基于javakeystore的KMS方案在生产环境并不可靠，列了几种可能的方案：使用内部自建的KMS，实现hadoopprovider使用CDH
breeze_lsw·2021-04-18 07:40

Apache Flink 基于 CDH-6.3.2 源码编译

修改maven的仓库地址[root@node01cloudera]#cat/usr/share/maven/conf/settings.xml...alimavenaliyunmavenhttp://maven.aliyun.com/nexus/content/groups/public/central...下载解压Flink-1.9.2源码，并查看flink-shaded版本[root@node
lei_charles·2021-04-17 20:53

Apache sqoop

最新稳定版：1.4.6下载sqoop安装包http://archive.cloudera.com/cdh5/cdh
八爪鱼下水·2021-04-17 20:24

视线估计Gaze-Estimation PFLD实现

整个项目源码:https://github.com/ycdhqzhiai/Gaze-PFLD1.数据集使用这个数据集：TEyeD:Over20millionreal-worldeyeimageswithPupil
yang_njupt·2021-04-16 10:08

大数据技术体系分类

一、一、目录系统平台（Hadoop、CDH、HDP）监控管理（CM、Hue、Ambari、Dr.Elephant、Ganglia、Zabbix、Eagle）文件系统（HDFS、GPFS、Ceph、GlusterFS
七_seven·2021-04-14 23:35

编译 flink 1.10.1 for cdh 6.3.1

由于众所周知的原因，flink的版本不支持CDH，所以CDH环境下flinkonyarn的方法需要自己编译。
akka9·2021-04-14 21:07

CDH 5.10 搭建

【直接从word拷贝出来的，格式有点混乱，以后我调整】一．环境准备（centos7，以下内容酌情考虑，根据实际情况配置）yuminstallhttpdcreaterepoopenssh-clientswgetbind-utils-yrpm-ivhjdk-8u131-linux-x64.rpmjava-version时钟同步sed-i's/server0/#server0/g'/etc/ntp.co
张志_koen_zhang·2021-04-14 03:21

spark编译

但是在实际生产环境中使用的hadoop一般是cdh或hdp，与spark预编译版本可能会有兼容性的问题，所以要编译针对特定hadoop版本的spark。
风起云端·2021-04-14 00:33

数据仓库：数据仓库技术选型及方案设计

大数据技术生态体系图大数据技术生态体系.png1.2.数据流程图未命名文件(1).png1.3.大数据框架Apache--使用最广泛的框架；--需要专业的运维人员；--组件兼容性需要仔细调研（Hivev2.3+）；CDH
猎户座_alpha·2021-04-13 14:34

linux 安装Java环境

[root@iZwz95n2hxcdh4x6vicjmgZ~]#cat/etc/redhat-releaseCentOSLinuxrelease7.8.2003(Core)一：查看java版本java-version
大脸猫大脸猫爱吃鱼_1444·2021-04-02 09:59

Hadoop组件sqoop部署

1.安装sqoop#解压并改名[root@masterapp]#tar-zxvfsqoop-1.4.6-cdh5.5.2.tar-C/app/[root@masterapp]#mvsqoop-1.4.6
Mumuko_·2021-03-12 20:03

Swift基础语法-字典--对比OC

1.定义字典//OC:NSDictionary*dict=[NSDictionarydictionaryWithObject:@"CDH"forKey:@"name"];NSLog(@"%@",dict
DwightChan·2021-03-11 11:34

限制CDH中Apache HUE的结果下载条数

需要到CDH的ClouderaManager中进入HUE配置hue_safety_valve.ini的Hue服务高级配置代码段（安全阀）配置项然后加入[beeswax]download_row_limit
gregocean·2021-03-11 04:32

vapor3 swift server

webserver库GettingStarted通过VaporToolbox安装brewinstallvapor/tap/vapor//通过vapor-cli创建hello工程vapornewhellocdHello
alex_zn·2021-03-10 21:26

ubuntu

tar-cvfDreamCamera2.tarDreamCamera2给权限chmod777DreamCamera2.tarcp-rfDreamCamera2.tar/mnt/hgfs/pc_share_ubuntu/sycn编译源码cdhome
CocOYesICan·2021-03-10 19:04

Caused by: java.lang.ClassNotFoundException: org.apache.hadoop.fs.FSDataInputStream

Causedby:java.lang.ClassNotFoundException:org.apache.hadoop.fs.FSDataInputStreamCDH5.16.2执行spark-submit
怒上王者·2021-03-09 15:03

CDH文件权限问题

Hive执行语句的时候提示/user权限不够hive>>selectcount(*)fromfact_sale;QueryID=root_20201119152619_16f496b5-2482-4efb-a26c-e18117b2f10cTotaljobs=1LaunchingJob1outof1Numberofreducetasksdeterminedatcompiletime:1Inorde
只是甲·2021-03-09 14:42

解决https redirect 后变 http 的问题

error_page404403500502503504/404.html;ssl_certificate;ssl_certificate_key;ssl_session_timeout5m;ssl_ciphersECDHE-RSA-AES128
BrandonLeaf·2021-03-04 18:16

CDH5安装包下载(含CM5.16.2rpm包)

由于最近Cloudera收费之后，各个网上博客中写cdh的下载网址已经无法下载，例如：http://archive.cloudera.com/cdh5/cdh/5/下边给出我自己存到网盘上的下载地址！！
怒上王者·2021-02-24 11:00

CDH开始收费之后，下载方法！

最近自己安装CDH5.X版本时发现，CM包和parcels包无法下载了。
怒上王者·2021-02-20 18:01

手动导包和maven导包发生冲突

作为开发环境1.出现问题这次问题出现在修改开源项目上，拿来开源项目运行是没有问题的，但是后来要在原有的项目添加hive和impala的数据源导入数据，所以我们导入了下面的这个包：hive-jdbc-1.1.0-cdh5.13.2
天吻蓝了海海染蓝了天_6e66·2021-02-19 17:48

CDH 5.16.2 部署

部署初始化集群4.部署JDK5.部署Mysql6.部署ClouderaManager6.1部署ClouderaManager前置条件6.2部署ClouderaManagerCloudera官网本次我们部署环境为CDH5.16.2
XK&RM·2021-02-10 14:04

项目中java连接cdh中的kafka报错java.io.IOException: Can‘t resolve address: node0X:9092的解决方案

问题docker容器日志报java.io.IOException:Can'tresolveaddress:node04:9092atjava.lang.Thread.run(Thread.java:748)[na:1.8.0_272]Causedby:java.nio.channels.UnresolvedAddressException:nullatsun.nio.ch.Net.checkAdd
阿啄debugIT·2021-02-07 18:47

Dbeaver连接Hive

这里只说明Hive是在CDH搭建且在CDH做的kerberos认证参考链接：https://www.cnblogs.com/fivedays/p/12808488.html参考链接：https://www.cnblogs.com
guoqing2017·2021-02-05 15:13

浅谈数据管理工具Cloudera Navigator

cdh版本5.16.2，navigator版本2.15.21.介绍whatClouderaNavigator也是CDH企业版的工具之一，定位为一个数据管理工具。目前随着CDP版本的推广，该组件已开源。
Bianca21·2021-01-29 15:41

Hadoop和hive-exec-3.1.2的Guava的版本冲突导致Flink任务启动异常

一、背景1、出现异常公司准备从CDH迁回社区版Hadoop集群，直接把Hadoop升级为比较新的3.30版本，Hive升级为3.12版本。
FishMAN__·2021-01-28 16:40

java.io.FileNotFoundException: File does not exist: hdfs://xxx

一、产生问题背景我们公司正在准备从cdh迁回社区版hadoop集群，启动flink任务的时候，还未运行就直接报错：Causedby:org.apache.flink.yarn.YarnClusterDescriptor
FishMAN_已存在·2021-01-27 11:59

Hadoop和hive-exec-3.1.2的Guava的版本冲突导致Flink任务启动异常

一、背景1、出现异常公司准备从CDH迁回社区版Hadoop集群，直接把Hadoop升级为比较新的3.30版本，Hive升级为3.12版本。
FishMAN_已存在·2021-01-27 11:23

Impala详解

是CDH平台首选的PB级大数据实时查询分析引擎。1.2Impala的优缺点1.3Impala的组成1.4Impala的运行原理Impala执行查询的具体过程：1）当用户提交查询前
·2021-01-26 14:52

为了搞懂 HTTPS，我把大学的数学书拿了出来。。。

HTTPS常用的密钥交换算法有两种，分别是RSA和ECDHE算法。其中，RSA是比较传统的密钥交换算法，它不具备前向安全的性质，因此现在很少服务器使用的。而ECDHE算法具有前向安全，所以被广泛使用。
小林coding·2021-01-23 17:49

windows 环境 labelImg 安装

labelImg2、windows环境(base)C:\Users\Administrator>condaactivatepytorch(pytorch)C:\Users\Administrator>cdH
whqcfp·2021-01-23 09:22

【快速入门大数据】hadoop和它的hdfs、yarn、mapreduce

概述核心组件HDFS分布式文件系统资源调度系统YARNMapReduce优势发展史生态系统发行版本选择企业应用案例第3章分布式文件系统HDFS设计分布式文件系统架构副本机制环境搭建Mac上的仿xshellCDH
瑞 新·2021-01-15 13:43

hound + Alfred 打造快速搜代码流程

step1mkdirhoundstep2cdhoundstep3echo'{"max-concurrent-indexers":2,"dbpath":"data","title":"Hound","health-check-uri
西西爸de札记·2021-01-15 09:12

[运维日记 - 2][踩坑记录] 使用阿里云效作为Maven私有仓库

前言最近学院搭服务器集群供大数据学习使用，平台上的Hadoop全家桶使用CDH来搭建，由于国内没有CDH版本的Maven依赖，负责搭集群的大佬在国外镜像拉了依赖下来，但是整个仓库打包又太麻烦，于是我来协助建一个私有仓库
Yuc0114·2021-01-12 02:38

CDH安装手册（自整理）

文章目录前言1.组件版本2.集群规划（三台服务器为例）3.配置linux静态IP4.修改hosts文件，并实现免密登录5.创建集群分发脚本6.关闭防火墙和SELINUX（所有节点）7.配置NTP时钟同步8.安装jdk和mysql9.搭建本地yum源并安装10.在数据库中建库11.启动服务12.访问网页及集群操作总结前言Cloudera’sDistributionIncludingApacheHad
LeiKe_·2021-01-09 14:59

CDH5.16.2三节点安装部署

最小化安装vm设置好虚拟网络之后，先去电脑网络设置，将vmnet8的属性中Ipv4协议进行更改dns设置为先前设置的网关192.168.253.2配置好后进行虚拟机安装安装好后在hosts下配置映射二.安装cdh
酒伴果粒橙·2021-01-09 12:44

CDH 6 安装教程

环境情况IP10.1.1.2110.1.1.2210.1.1.23系统Centos7.9x64Centos7.9x64Centos7.9x64HostNamecdh01cdh02cdh03内存24G8G8G
YasinZhu·2021-01-08 23:36

再次运行hadoop碰到的坑——重启时需要格式化

下的文件（非必须步骤，该路径为core-site.xml文件中Hadoop.tmp.dir路径）3、随后格式化namenodehadoopnamenode-format4、最后再启动hdfs和yarncdhadoop
yimengtianya1·2021-01-07 14:34

yum安装部署ansible，和深入学习ansible的各个模块及组件及实际生产中使用案例详解

ansible其中经典应用，请详见，采用KubeSphere的kk，部署安装多节点服务的kubernetes-v1.18.6和kubesphere-v3.0.0的踩坑过程记录，及反思；ansible安装部署CDH
阿啄debugIT·2021-01-07 13:01

CDH环境搭建及部署

CDH环境搭建及部署一、概述Cloudera版本（Cloudera’sDistributionIncludingApacheHadoop，简称“CDH”），基于Web的用户界面,支持大多数Hadoop组件
这是方方方·2021-01-07 12:29

Hue--集成Hive与Impala

hue.ini：1000-1061行hive_server_host=node-03hive_server_port=10000hive_conf_dir=/export/servers/hive-1.1.0-cdh5.14
韩家小志·2021-01-04 03:44

使用SQL Server分析2020全国大学生数学竞赛河南赛区结果

3)将SQL查询结果导出为Excel最后本次所使用的数据链接：https://pan.baidu.com/s/1Dv3MdMWX2Zr58q96JcDhgQ提取码：zhk7背景昨天，也就是2
泰勒Peano·2021-01-01 15:27

2020-12-31

~~~xml格式报文请求后端1.这里本人使用postman来请求java后端，在postman中的设置2017-07-0615:47:3000920170627091902001test1234@abcdHXJK0000000000000002009TBA101110
破碎的拾荒者·2020-12-31 22:44

vue-cli4+vant+rem+sass+vuex+axios封装+webpack搭建移动端项目

wedpack4+vantui+sass+rem适调方案+axios封装，构架手机端模板手脚架启动项目gitclonehttps://github.com/teach-tian/h5-vue-cli4.gitcdh5
weixin_45948566·2020-12-31 07:00

rust入门篇-hello world

或者使用：cargo命令来新建一个项目cargonewhello_cargo$cdhello_cargo$cargobuildCompilinghello_carg
憨少·2020-12-30 01:23

CDH5.16.2离线安装（详细）

目录01CouderaManager02环境准备03CM安装01CouderaManager概念：拥有集群自动化安装、中心化管理、集群监控、报警功能的一个工具，使集群安装从几天时间缩短到几个小时，运维人员从几十人降低到几人，极大的提高集群管理的效率功能管理，对集群进行管理，如添加节点、删除节点监控，监控集群的健康情况，对设置的各种指标和系统运行情况进行全面监控诊断，对集群出现的问题进行诊断，对出现
Bingmous·2020-12-29 18:29

电商数仓描述_笔记-尚硅谷大数据项目数据仓库-电商数仓V1.2新版

CDH：国内使用最多，不开源，已开始收费。老版本不再进行组件后续兼容性的更新。HDP：开源，不稳定，已被CDH收购，合并为CDP。
VC-Sawa·2020-12-29 02:23

node.js通过Sequelize 连接MySQL的方法

在终端输入：$npminstall-gkoa-generator1.2使用koa-generator生成koa2项目$koa2HelloKoa2成功创建项目后，进入项目目录，并执行npminstall命令$cdHelloKoa2
·2020-12-28 14:33

vue-cli4+vant+rem+sass+vuex+axios封装+webpack搭建移动端项目

webpack4+vantui+sass+rem适配方案+axios封装，构建手机端模板脚手架启动项目gitclonehttps://github.com/teach-tian/h5-vue-cli4.gitcdh5
星空之火@田兴·2020-12-25 17:04
上一页 23 24 25 26 27 28 29 30 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他