CDH

大数据技术原理与应用Hadoop篇-初始hadoop

hadoop发行版本1.apachehadoophttp://hadoop.apache.org/2.clouderahadoop(CDH)https://www.cloudera.com/3.hortonworkshadoop
诺特兰德·2023-03-30 23:50

centos离线安装CDH（3.2）:安装apache http

阿里巴巴淘系技术部招聘大数据研发、数据分析、数据挖掘同学（P6-P8）。微信:18520269913备注:阿里巴巴淘系技术部-大数据Master机器上安装apachehttp安装http服务是为了配置parcel文件从内网下载，节省安装的时间。sudoyuminstall-yhttpd配置mime_modulesudovim/etc/httpd/conf/httpd.conf增加或者修改成:Add
丁华0301·2023-03-30 19:34

【大数据架构】-- 开源框架技术汇总

1.系统平台Hadoop、CDH、HDP、BigTop2.监控管理CM、Hue、Ambari、Dr.Elephant、Ganglia、Zabbix、Eagle3.文件系统HDFS、GPFS、Ceph、GlusterFS
high2011·2023-03-30 18:07

lamp环境搭建，Discuz、wordpress、Ecshop安装。

groupaddheheuseraddzzw-ghehepasswdzzw123456useraddhehecicipasswdhehecici123456cd/rootmkdir-phehe/hahalscdhehe
月半。·2023-03-30 18:34

2022-04-19

NatureCancer|CDH17-CART细胞特异抑制神经内分泌肿瘤和胃肠道癌症原创图灵基因图灵基因2022-04-1909:14收录于话题#前沿分子生物学机制嵌合抗原受体（CAR）疗法表明，它们可以治疗血癌
图灵基因·2023-03-30 10:29

求助

拜托1我的目的是构建一种含有CDH16-GFPreporter的人成纤维细胞系，即如果细胞表达cdh16这个蛋白，就会出现荧光，CDH16是一种肾脏上皮的特异性蛋白。
Dcam·2023-03-30 04:24

yum install报错 cyrus-sasl-devel-2.1.26-23.el7.x86 64 was supposed to be installed but is not!

问题：  自制的yum源，在一台服务器上安装cdh客户端时，执行yuminstallcyrus-sasl-plaincyrus-sasl-develcyrus-sasl-gssapi报错，yumlistinstalled
但行益事莫问前程·2023-03-30 04:21

Spark3每个job之间任务间隔过长

Spark3比CDH的hiveonspark2.4.0要快不少。AQE和CBO真的挺强的。但是使用中发现了一个很奇怪的事情。这个问题在网上搜过，并没有实际解决。
黑眼圈@~@·2023-03-30 02:28

CDH6.3.2防止被攻击,打补丁(未授权漏洞)

参考：CDH6.3.2Hadoop默认配置下存在未授权漏洞，禁止匿名访问-民宿-博客园这段时间公司的运维大佬扫描安全漏洞的时候，发现有漏洞会被攻击，原因是没有新增用户校验，允许匿名去访问。这样的话。
黑眼圈@~@·2023-03-30 02:27

如何编译Spark

tgz源码jdk-8u144-linux-x64.tar.gz   JDK1.8以上  apache-maven-3.3.9-bin.tar.gzscala-2.11.8.tgzhadoop-2.6.0-cdh5.15.1
mm_ren·2023-03-30 01:19

cdh hbase启动master报: failed on connection exception: org.apache.hbase.thirdparty.io.netty.channel

今天在cdh装hbase时，本来以为几分钟就完事了，结果，，，装完后，hmaster启动不起来，看日志报如下错误：ERRORorg.apache.hadoop.hbase.master.HMaster:
sujins5288·2023-03-30 00:40

CentOS7下安装CDH6.1

在CentOS7下安装CDH6.1环境CentOS7.8CDH6.1PostgreSQL安装步骤1.CentOS7配置1.1设置hostname，reboot重启之后即能显示（注意：不使用大写字符作为主机名
王顼·2023-03-30 00:16

HBase集群搭建

1.下载相应的jar包所有关于CDH版本的软件包下载地址如下http://archive.cloudera.com/cdh5/cdh/5/HBase对应的版本下载地址如下http://archive.cloudera.com
大数据老哥·2023-03-30 00:33

1.9CDH搭建Hadoop集群（二）

总目录:https://www.jianshu.com/p/e406a9bc93a9Hadoop-子目录：https://www.jianshu.com/p/9428e443b7fd解压cloudera-managermkdir-p/usr/hdk/module/cloudera-managertar-zxvfcloudera-manager-centos7-cm5.12.1_x86_64.tar
寒暄_HX·2023-03-29 23:46

hadoop版本演化

一、第一代hadoop：hadoop1.01、包括三大版本，分别是0.20.x,0.21.x,0.22.x和CDH32、0.20.x最后演化成1.0.x,成为稳定版本3、0.21.x和0.22.x则增加
afahan·2023-03-29 20:56

flink学笔记-flink重新编译、flink架构模型、部署运行模式

1：Flink重新编译由于实际生产环境当中，我们一般都是使用基于CDH的大数据软件组件，因此我们Flink也会选择基于CDH的软件组件，但是由于CDH版本的软件并没有对应的Flink这个软件安装包，所以我们可以对开源的
陈同学：·2023-03-29 19:26

kafka 基础架构和环境搭建

参考：Kafka、RocketMQ、RabbitMQ的比较CDH常用端口汇总kafkadocument配置参数消息队列的概念消息队列应用场景异步处理，将一些比较耗时的操作放在其他系统中，通过消息队列将需要进行处理的消息进行存储
zhojiew·2023-03-29 08:13

HBase RegionServer动态感知过程

本文基于hbase-1.2.0-cdh5.7.2版本进行讲述，不能的版本存在细微的差别，大体一致。
凡尔Issac·2023-03-29 07:30

基于Ambari的大数据平台搭建

同CDH部署类似，步骤分为ambari的部署和hdp的部署，先以1台为例(内存>6G，磁盘划分/至少40G，/data/10G)，后续节点可以通过扩容方式加入集群，可参考：https://blog.csdn.net
数据社·2023-03-28 23:35

ECCDH原理

Alice：，是一个点的坐标，通常为形式Bob：，是一个点的坐标，通常为形式所以，Alice的公钥为，私钥为，Bob的公钥为，私钥为Alice的dh_shared_key为的X坐标，bob同理。
Otis4631·2023-03-28 22:53

spark消费kafka(cdh启用kerberos)

不生产博客，只是别人博客的裁缝一入kerberos深似海，从此节操是个玩意儿之前写过一篇spark消费kafka问题记录(cdh5.16.2)，主要记录了安装spark2后，spark的问题，和本地可以执行
hadoop程序猿·2023-03-28 22:10

WIFI密码破解

1.安装xcode,macport安装aircrack-ngsudoportinstallaircrack-ng安装Hashcat,cdhashcat//进入目录sudomakesudomakeinstall
淡然z·2023-03-28 20:30

阿里巴巴认证_Android开发规范

spm=5176.8764728.aliyun-edu-course-header.10.63ac57daCDHAkr#sku=yuncode2012000001阿里巴巴Android开发手册地址：https
小马哒哒001·2023-03-28 18:13

一、CDH6.2大数据平台安装手册

一、集群规划实际工作中搭建CDH集群的话，原则上来说，机子越多越好，如果资源有限的话，建议前期最好4台机子，4台机子的话，针对hadoop集群而言可以设置为1主3从，如果考虑到HA的话，就需要最少5台机子
阿靖哦·2023-03-28 16:25

大数据之CDH5.16.1集成Tez0.9.2

上两篇中，我们介绍完了CDH环境的基本搭建。在这篇中，我们讲述对hive的一个优化措施之一：执行引擎tez。
LearnBigData·2023-03-28 12:50

CDH平台-Hue集成Oracle报错:no oracle client library found on host:…

在Hue的编辑器中可以集成Oralce进行查询，集成过程中报错：nooracleclientlibraryfoundonhost:…可以通过以下方法解决:解决方法：在Hue服务的服务器上安装以下对应版本Oracle包：oracle-instantclient11.2-basic-11.2.0.4.0-1.x86_64.rpmoracle-instantclient11.2-devel-11.2.0
jay1122·2023-03-27 17:55

关于后台启动spark-submit的操作

主机环境：Centos7.33台hadoop版本：hadoop-2.6.0-cdh5.7.0hbase版本：hbase-1.2.0-cdh5.7.0spark版本：spark-2.2.0-bin-2.6.0
Hiwes·2023-03-27 05:44

nginx配置https证书后，ie8无法访问

查阅大量资料后，发现一位大佬表明ie8使用CBC3算法,找不到原文链接了，如果作者有看到，请联系我，本文仅做记录serverssl配置ssl_ciphersssl_ciphersEECDH+AESGCM
上下而求索·2023-03-26 20:56

大数据随记 —— Hadoop 概述

大数据系列文章：目录文章目录一、Hadoop概述二、Hadoop组件介绍三、Hadoop版本介绍①ApacheHadoop②ClouderaHadoop（CDH）③HortonWorksHadoop（HDP
繁依Fanyi·2023-03-26 18:11

java.io.FileNotFoundException: File does not exist: hdfs://xxx

一、产生问题背景我们公司正在准备从cdh迁回社区版hadoop集群，启动flink任务的时候，还未运行就直接报错：Causedby:org.apache.flink.yarn.YarnClusterDescriptor
FishMAN__·2023-03-26 11:39

Hue 入门

2安装部署2.1、帮助文档http://archive.cloudera.com/cdh5/cdh/5/hue-
djm猿·2023-03-26 01:24

CDH6.3.1在谷歌云的搭建

这两个礼拜，我分别试出了CDH在谷歌云和本地的搭建方法，堪称血泪史啊，话不多说，直接整活。1.为什么要用CDH官方回答：利用业界领先的现代数据管理平台CDH，可以最大程度地利用数据。
两只cows·2023-03-25 23:19

CDH环境Kafka Manager安装配置

一、下载安装包下载地址：https://github.com/yahoo/kafka-managerkafka-manager-master.zip二、解压到指定目录unzipkafka-manager-master.zip–d/opt/kafka-monitor-tools/kafka-manager三、修改配置文件1.修改KafkaManager配置文件vi/opt/kafka-monitor
枫棱·2023-03-25 21:03

使用parquet-tools工具查看parquet文件

cdh默认安装了。
代码足迹·2023-03-24 17:21

CDH5.13.x文档翻译SQL Differences Between Impala and Hive

https://www.cloudera.com/documentation/enterprise/5-13-x/topics/impala_langref_unsupported.html#langref_hiveql_deltaImpala的SQL语法遵循SQL-92标准，还包括了很多业界扩展比如内置函数。查看PortingSQLfromOtherDatabaseSystemstoImpala
gregocean·2023-03-24 07:10

关于CRT连接kali 2020 报错Key exchange failed问题

www.cnblogs.com/xjcn/p/13470254.html/etc/ssh/sshd_config最后一行写上：KexAlgorithmscurve25519-sha256@libssh.org,ecdh-sha2
3hua·2023-03-24 07:25

如何使用JMX_Expoter+Prometheus+Grafana监控Hadoop集群

JMX_Expoter监控因为目前CDH以及HDP后续要合并闭源，公司打算花时间自研一个类似的平台，我也对集群监控这块下了点功夫。
Mengkai Liu·2023-03-23 20:32

vue项目的搭建

vueinitwebpackhello-vue2.然后我们需要安装依赖，依次安装你所需要的依赖，这里我们需要下载的有vue-router,element-ui,sass-loader和node-sass四个插件cdhello-vue
MrH_永无BUG·2023-03-22 05:05

Cloudera Hadoop（cdh5.1.0）平台搭建2

选择免费的版本，因为免费的版本功能足够使用节点IP一般连续，采用图中的模式会比较好，然后搜索后目前有两个阶节点，选中，继续选择Parcel（离线）安装，但是CDH版本是5.3.0，我们安装的是5.1.0
鹰击长空123·2023-03-21 19:00

正确使用Impala的invalidate metadata与refresh语句

在CDH中默认是MySQL，我们可以通过showtablesinhive语句清晰地看到HiveM
LittleMagic·2023-03-21 13:13

Hbase三节点集群搭建

Hadoop集群以及Zookeeper集群Hadoop集群的搭建参考：Hadoop三节点集群搭建Zookeeper集群的搭建参考：Zookeeper三节点集群搭建安装中用到的软件包hbase-1.2.0-cdh5.14.2
HideOnStream·2023-03-20 17:30

CDH6.3.1 hue 配置hbase

对于hbase的可视化界面，目前比较好用的就是hue的了，刚好cdh自带了hue所以配置器来比较方便，这里记录一下配置步骤按照这篇文章的配置已经后还需要进行HBaseThriftServer的配置https
胖子捏肚子·2023-03-20 16:20

CDH 5.13 集群有2台服务器，发生自动重启，有报错

报错的日志如下，求解决的方法。2018-08-0610:28:21,732ERRORParcelUpdateService:com.cloudera.parcel.components.ParcelDownloaderImpl:(1skipped)Unabletoretrieveremoteparcelrepositorymanifestjava.util.concurrent.Execution
秦记·2023-03-20 03:47

CDH 6.3.1 rpm+http安装部署

一、准备工作1.离线部署主要分为三块:a.MySQL离线部署b.CM离线部署c.Parcel⽂件离线源部署2.规划节点MySQL部署组件Parcel文件离线源CM进程大数据组件cdh001ParcelActivityMonitorNNRMDNNMcdh002MySqlAlertPublisherEventServerDNNMcdh003HostMonitorServiceMonitorDNNM3
吃货大米饭·2023-03-19 20:02

Flink-cdc写入hudi并使用hive和spark-sql查询(基于flink1.13.5和hudi0.10.0，flink-cdc2.1.1)

一、环境准备flink1.13.5flink-cdc2.1.1hudi-0.10.0spark-3.1.2、hadoop-2.6.5、hive-1.1.0(cdh5.16版本)jar包:hudi-spark3
小三你妹·2023-03-19 11:32

Flink CDC + Hudi + Hive + Presto构建实时数据湖最佳实践

1.测试过程环境版本说明Flink1.13.1Scala2.11CDH6.2.0Hadoop3.0.0Hive2.1.1Hudi0.10(master)PrestoDB0.256Mysql5.72.集群服务器基础环境
大数据技术架构·2023-03-19 11:26

【Apache Phoenix简介、存储结构、基本操作、安装】

ApachePhoenix简介、存储结构、基本操作、安装（附安装包）1.简介、概述1.1phoenix特点1.2存储结构1.3Phoenix与Hbase之间的表映射关系1.4Phoenix数据类型2.基于CDH6.3.2
yuhh_·2023-03-19 11:45

CDH-离线安装 记录

vim/etc/hosts172.16.13.129129.master172.16.13.130130.slave172.16.13.131131.slave永久修改服务器namehostnamectlset-hostnameyourhostname服务器设置systemctlstopfirewalld关闭防火墙systemctldisablefirewalld禁止防火墙开机自启vim/etc/
帅帅的大同人·2023-03-19 10:47

MAC OS程序的签名问题

如果出现如下错误:notvalidforuseinprocessusingLibraryValidation:mappedfilehasnocdhash,completelyunsigned?
dotphoenix·2023-03-17 14:19

completely unsigned? Code has to be at least ad-hoc signed

notvalidforuseinprocessusingLibraryValidation:mappedfilehasnocdhash,completelyunsigned?
Sico2Sico·2023-03-17 14:48
上一页 14 15 16 17 18 19 20 21 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他