大数据平台CDH 第24页

白羊座和大数据——台湾大数据平台对白羊座的总结

DailyView网路温度计是台湾的一家关注时事网络大数据平台，他们在2017年5月到2018年5月期间根据观测上万个网站和各大讨论区关于“白羊座”相关的搜索讨论进行了分析，根据分析的结果，他们发现了一些关于白羊座特点的最高呼声

我不是二是善良·2023-07-26 06:38

【大数据平台】从Hadoop到Spark安装配置教程

这里建议将后面的工具安装完成后，再配置此步骤，否则会非常痛苦）7.Hbase及其单机模式的安装HBase单机模式配置8.Hive的安装9.Scala的安装10.sbt的安装11.Spark的安装在此篇文章中，将会按以下顺序配置大数据平台的相关工具

奕隆·2023-07-26 06:24

CDH5.16.1安装kafka

CDH5.16.1安装kafka1.简介:CDH的parcel包中是没有kafka的，需要从新下载parcel包安装。或者在线安装，但是在线安装都很慢，这里使用下载parcel包离线安装的方式。

丿灬逐风·2023-07-26 06:35

HBase数仓架构

业务平台的表可能有两三百个，大数据平台的计算可能只需要100多个，可以添加白

丿灬逐风·2023-07-26 06:35

大厂案例 - 实时分析引擎

基于大数据平台，通过流式实时分析技术可以对全局网络空间进行实时的分析和异常检测，解决单点很难发现和处理的安全问题。

小小工匠·2023-07-25 23:35

Wzideng·2023-07-25 20:04

可观测之调用链Skywalking

无需大数据平台，和大量的服务器资源。模块化。UI、存储、集群管理都有多

萌兰三太子·2023-07-25 16:34

工作流调度器azkaban

一、准备安装VMware15虚拟化软件安装CentOS7虚拟机3个安装3节点的hadoop-2.6.0-cdh5.14.2集群安装了hive安装了zookeeper集群安装了hbase集群二、主题azkaban

JN冰·2023-07-25 16:33

Hadoop安装（CentOS7版）

2）ClouderaHadoop(Cloudera’sDistributionIncludingApacheHadoop，简称：CDH)3）HortonworksHadoop(Hortonworks

Stackflowed·2023-07-25 14:59

如何在RELS8.4上安装CDP-PvC Base 7.1.8并启用Auto-TLS

文档编写目的CDPPVCBASE7.1.8是Cloudera与Hortonworks合并后，第一个融合CDH和HDP所有组件的on-premise并且可用于生产环境的新功能版本，CDPPvCBase主要由

大数据杂货铺·2023-07-25 14:28

HDP安装教程笔记

HDP安装教程，ambari安装教程，大数据平台安装教程1.环境准备1.安装centos7系统1.使用vmware安装centos系统，略HDP环境安装配置HDP:HortonworksDataPlatformCDH

weixin_42781936·2023-07-25 14:57

Centos7.9安全部署_防火墙配置_端口配置_协议配置_IP配置_全部亲测---记录022_大数据工作笔记0182

在我们平时搭建大数据平台的时候,由于防火墙的限制,会让搭建集群的时候,报各种错误,但是,有些网络环境要求比较严格的地方,防火墙又要求必须要放开,尤其是..有些网络环境会安全组进行定时扫描,说实话,我们用的很多开源软件

脑瓜凉·2023-07-25 14:22

【转】2万字揭秘阿里巴巴数据治理平台建设经验

在大数据平台的建设过程中，我们经常遇到一些数据治理的问题，例如：数据稳定性不足任务调度随着规模增大经常挂掉，不稳定

小金子的夏天·2023-07-25 13:49

基于Greenplum+Kafka的实时数据处理

流数据处理能力已成为衡量大数据平台计算实力的一个重要指标。

Greenplum中文社区·2023-07-25 11:29

2022年全国职业院校技能大赛(高职组)

2022年全国职业院校技能大赛(高职组)目录2022年全国职业院校技能大赛(高职组)模块A：大数据平台搭建（容器环境）（15分）任务一：Hadoop完全分布式安装配置任务二：SparkonYarn安装配置任务三

-starshine丨·2023-07-25 04:10

Hbase库亿级大数据性能测试

测试环境配置信息Ambari+HDP大数据平台，5个节点服务器CPU配置：16核Intel2.20GHz操作系统：CentOS7.7/Linuxx86_64HDFS空间：4TBHDFS文件备份数：3节点

tomalun·2023-07-25 03:02

HBase 统计表中数据量

启动hbaseshell进去hbase客户端所在服务器，cdhbase客户端路径cd/usr/local/services/hbase/alihbase-2.0.0启动hbaseshell.

蔡的一批·2023-07-25 03:58

2020.1.7

同时把易客选大数据平台嫁接到实体店，又易客选规则带来的锁客引流威力，配合上社区新零售，

332720127·2023-07-24 22:43

HBase 源码编译部署包

1.版本Java版本:1.8.0_201HBase版本:hbase-2.5.52.打包gitclonehttps://github.com/apache/hbase.gitcdhbasegitcheckoutbranch

bigdata-余建新·2023-07-24 17:03

Centos7+安装Impala

Impala下载地址下载所有文件Impala工具下载地址下载：bigtop-utils-0.7.0+cdh5.9.0+0-1.cdh5.9.0.p0.30.el7.noarch.rpm安装Impala的其他依赖

IT_小白·2023-07-24 17:41

信创-大数据平台CPU架构支持

一、CDH和HDP、CDPCDP数据中心类似于CDH和HDP,直接安装在硬件服务器上,目前支持市面上主流的X86服务器,包括国内海光服务器，CDH不支持ARM以上两种大数据平台都仅支持x86架构，早在几年期

四月天03·2023-07-24 07:46

Spark Sql日志分析项目实战

项目简介统计主站最受欢迎的课程TopN访问次数按地市统计主站最受欢迎的TopN课程按流量统计主站最受欢迎的TopN课程环境安装CDH相关软件下载地址Spark环境搭建Spark源码编译（以spark2.1.0

kangapp·2023-07-24 06:17

04Hadoop分布式文件系统HDFS(入门)

2006Cloudera内部集成了很多大数据框架，对应产品CDH。2008Hortonworks文档较好，对应产品HDP。2011Horton

香帅_WQW·2023-07-23 14:13

Hadoop大数据平台入门——HDFS和MapReduce

随着硬件水平的不断提高，需要处理数据的大小也越来越大。大家都知道，现在大数据有多火爆，都认为21世纪是大数据的世纪。当然我也想打上时代的便车。所以今天来学习一下大数据存储和处理。随着数据的不断变大，数据的处理就出现了瓶颈：存储容量，读写速率，计算效率等等。google不愧是走在世界前列的大公司，为了处理大数据，google提出了大数据技术，MapReduce，BigTable和GFS。这个技术给大

yoku酱·2023-07-23 14:39

人工智能时代职教教师能力提升的路径

政府及企业要发挥主导作用，建立大数据平台，对教师职业能力进行监测，提供对职业教育教师职业能力评估的数据支撑；组织人工智能专家，对职业

英腾云课堂·2023-07-23 09:12

git第一上传代码到远程仓库

一、如果你想新建一个远程仓库1、在合适的位置右键打开gitbash2、创建一个版本库：（这里假设我的文件名是html）mkdirhtmlcdhtmlpwd3、通过gitinit命令吧这个目录编程git可以管理的仓库

keyuan0214·2023-07-22 23:00

hadoop 3.1.3单机版安装教程

引言公司有搭建大数据平台，为了让java能访问大数据平台，本人先在测试环境上自行搭建了一个单机版的hadoop，研究java和hbase之间的jdbc连接。

YukunWen·2023-07-22 20:23

解决配置完kerberos后，HDFS、YARN的web页面无法访问

HDFSWebUI浏览器认证我们设置CDH支持kerberos后会出现下图所示的情况：这是因为权限问题，按照下面的方式可完美解决1.浏览器配置（Firefox）1.打开火狐浏览器，在地址栏输入：about

fanbuer·2023-07-22 15:15

第五届字节跳动青训营(寒假) - 后端练习题&官方答案

A.增长方向B.空间大小C.分配方式D.管理方式1、D；2、ABCDH

我发在否·2023-07-22 08:45

Linux_NTP 网络同步 -> ntpd / CDH6

参考文章：解决CentOS7下用ntpdate同步时间问题https://blog.csdn.net/qq_27754983/article/details/69386408Linux配置ntp时间服务器（全）https://www.cnblogs.com/quchunhui/p/7658853.htmlCloudera建议使用NTP使Hadoop群集实现时间同步http://www.cnblog

高达一号·2023-07-22 08:08

大数据之就业岗位

数据部门的组织架构运维组1.负责分析大数据平台各个组件运行状态，负责大数据平台运行故障的分析，定位和解决，并根据业务场景进行定制优化2.负责业务集群日常问题的解答、汇总整理、跟踪解决等；3.参与大数据集群自动化运维工具的设计与实施

（YSY_YSY）·2023-07-22 06:20

字节跳动云原生大数据平台运维管理实践

云原生大数据是大数据平台新一代架构和运行形态。

字节跳动云原生计算·2023-07-22 04:11

[Hive]创建UDF不重启集群解决方案

clouderahttps://repository.cloudera.com/artifactory/cloudera-repos/org.apache.hadoophadoop-common2.6.0-cdh5.14.2

帅可儿妞·2023-07-22 00:52

大数据之Hadoop 安装（macOS Mojave）

本教程采用CDH版，以避免版本依赖冲突导致错误，本教程同样适用于Linux（推荐CentOS）;本教程Hadoop使用伪分布式模式Hadoop运行模式本地模式（单机模式）Hadoop默认模式为非分布式模式

etrols·2023-07-22 00:45

腾讯数据中台项目集管理实战分享︱腾讯高级项目经理张嵎桐

腾讯PCG大数据平台部高级项目经理张嵎桐先生受邀为由PMO评论主办的2023第十二届中国PMO大会演讲嘉宾，演讲议题：腾讯数据中台项目集管理实战分享。大会将于8月12-13日在北京举办，敬请关注！

中国pmo大会·2023-07-21 23:44

搭建本地YUM源服务

2、一个集群中，只需要一个节点部署yum源服务，其他节点作为客户端，使用该服务即可；3、此文分为两部分，先是搭建yum源服务（一台节点执行），然后配置yum服务（其他节点执行）4、安装HDP大数据平台，

玄慈·2023-07-21 14:38

移动通信网络规划：面、线、点覆盖规划

1、城区城区的5G覆盖规划主要考虑以下三个方面：①综合大数据平台分析、测试、投诉数据等，精准覆盖补点，进一步加强市区、县城的深度覆盖，对高价

知识世界·2023-07-21 09:46

hadoop,spark中使用lzo

一、环境准备hadoop-2.6.0-cdh5.15.1并支持压缩(参考:hadoop安装文档)lzojar包(下载地址:lzojar下载地址)lzo安装包(下载地址:lzo下载地址)lzop安装包(下载地址

吃货大米饭·2023-07-20 16:02

大数据------安装错误集锦（详细解决教程）

https://www.acfun.cn/a/ac10294589（免费教程）这里是实际项目CDH安装过程中的一部分错误，如果大家也有类似的问题，可以查阅。

ItStar·2023-07-20 10:36

【系统】VMware安装 centos 6.5 详细教程

26741933/article/details/114858201系统:CentOS-6.5-x86_64-minimal链接：https://pan.baidu.com/s/1lbKrWc0XP65jspq5CDHU

上官、·2023-07-20 05:30

linux相关面试问题

目前常见的大数据平台都是基于Linux系统的，比如Hadoo

婷子1921·2023-07-19 17:17

CDH-6.3.2从零到一的详细安装教程&hive on Spark性能测试教程

目录一、集群部署规划二、部署前准备1、安装JDK（五台）1.1在hadoop101的/opt目录下创建module1.2上传oracle-j2sdk1.8-1.8.0+update181-1.x86_64.rpm并安装1.3分发2、安装MySQL2.1安装包准备2.2安装MySQL服务器2.3安装MySQL客户端2.4MySQL中user表中主机配置3、CM安装部署3.1MySQL中建库3.2CM

小雏菊的成长·2023-07-19 15:43

seatunnel-2.3.2 doris数据同步到hive(cdh-6.3.2)首次运行踩坑记录

seatunnel-2.3.2doris数据同步到hive(cdh-6.3.2)首次运行报错解决，解决的报错如下：1、java.lang.NoClassDefFoundError:org/apache/

小雏菊的成长·2023-07-19 15:13

安装 CDH执行scm_prepare_database.sh报错，java.sql.SQLException: Access denied for user ‘scm‘@‘localhost‘

1、安装CDH报错CDH是ClouderaDistributionforHadoop的缩写，是一套由Cloudera提供的面向企业的开源Hadoop生态系统解决方案。

申子辰林·2023-07-19 02:40

windows Server 2012修复(CVE-2016-2183)(CVE-2013-2566)(CVE-2015-2808)

TLS_ECDHE_ECDSA_WITH_AES_128_GCM_SHA256_P256,TLS_ECDHE_ECDSA_WITH_AES_128_GCM_SHA256_P384,TLS_ECDHE_ECDSA_WITH_AES

乐大师·2023-07-19 02:26

大数据平台测试-白盒测试静态方法解析（我奶奶都能看懂）

软件测试从某种维度上分为黑盒测试和白盒测试，黑盒测试更多的是增啥改查，也就是功能测试，关于功能测试参考这里：增删改查测试场景（菜市场的大妈都能看懂）关于白盒测试的资料参考这里：白盒测试案例设计（我爷爷都能看懂）注意并不是说白盒测试一定就是要写代码的，因为有些白盒测试是不需要写代码的。比如本篇文章说的静态测试方法。白盒测试方法分为静态方法和动态方法静态设计方法桌面检查代码审查代码走查代码扫描工具下面

软件测试李同学·2023-07-18 10:47

大数据平台测试-某 SDK 缓存存储支持COS

遇到过这个测试需求没，一起了解下吧。一、客户端存储方式COSCOS（CloudObjectStorage）是腾讯云提供的一种对象存储服务，类似于其他云服务商的对象存储服务（如AWSS3、阿里云OSS等），用于存储和管理大规模的非结构化数据。在客户端中使用COS存储方式，可以通过以下步骤进行操作：注册腾讯云账号并创建COS存储桶：首先，需要注册一个腾讯云账号，并在腾讯云控制台中创建一个COS存储桶。

软件测试李同学·2023-07-18 10:46

大数据平台测试-git常用操作（白盒测试基础）

一、前言学习Git是非常有价值和重要的，无论是一个个人开发者还是在团队中进行协作开发。以下是一些学习Git的原因：版本控制：Git是目前最流行的分布式版本控制系统，可以帮助你跟踪、管理和控制代码的版本。你可以轻松地回退到先前的版本、比较不同版本之间的差异、解决代码冲突等。版本控制使你能够更安全地进行代码更改和实验，同时提供了一种备份机制，以防止代码丢失。团队协作：在多人协作开发的项目中，Git提供

软件测试李同学·2023-07-18 10:13

HBase探索篇 _ OpenJdk15编译并部署CDH版HBase

但是我们线上在用的HBase的版本是cdh6.3.2-hbase2.1.0，CDH组装的大数据组件与原生版本相

大猿小猿向前冲·2023-07-18 10:06

大数据调度平台oozie、azkaban、dolphinscheduler对比

DolphinSchedulerAzkabanOozie定位解决数据处理流程中错综复杂的依赖关系为了解决Hadoop的任务依赖关系问题管理Hdoop作业（job）的工作流程调度管理系统任务类型支持支持传统的shell任务，同时支持大数据平台任务调度

老姜的数据江湖·2023-07-18 07:41

推荐频道

大数据平台CDH