大数据平台CDH 第7页

HBase 超大表迁移、备份、还原、同步演练手册：全量快照 + 实时同步（Snapshot + Replication）不停机迁移方案

博主历时三年精心创作的《大数据平台架构与原型实现：数据中台建设实战》一书现已由知名IT图书品牌电子工业出版社博文视点出版发行，点击《重磅推荐：建大数据平台太难了！给我发个工程原型吧！》

　Laurence·2023-12-26 10:34

小区物业大数据监控服务平台（PSD文件资料）

现分享简约物业大数据平台页面、小区物业大数据监控服务平台模版的UI源文件，供设计师们快速获取PS源文件完成工作。

77探索AI·2023-12-26 07:31

09-为Java开疆拓土的ZGC深度剖析

文章目录引言ZGC出现背景STW带来的问题手机系统(Android)显示卡顿证券交易系统实时性要求大数据平台(Hadoop集群性能)垃圾回收器的发展ZGC介绍ZGC中JVM内存布局和设计为什么这么设计？

月球程序猿·2023-12-26 04:15

CDH框架搭建【小白易上手】

CDH框架搭建Vmware安装CentOS虚拟机java环境搭建mysql环境搭建CDH集群搭建遇到的问题1.磁盘空间不够2.centOS版本过低3.连接虚拟机ip失败4.node0节点无法加入集群Vmware

刀锋0001·2023-12-26 02:14

java.io.IOException: Key exchange was not finished, connection is closed.Cannot negotiate, proposa

diffie-hellman-group14-sha1,diffie-hellman-group-exchange-sha1,diffie-hellman-group-exchange-sha256,ecdh-sha2

zhaofuqiangmycomm·2023-12-25 23:39

centos 7.6源码编译DPDK 19.11.14

yum-yinstallgccgcc-c++libstdc++-develmakenet-toolspciutilssudo下载匹配的kernel、kernel-devel、kernel-headersrpm包[root@cdh1kernel

dongsongz·2023-12-25 22:34

企业级大数据平台应具备的基本能力

近年来，很多企业建设内部统一的大数据平台，利用集群架构去整合资源与服务，从而发挥企业诸如资源共享、数据共享和服务共享等优势。那么，企业级大数据平台应具备什么样的基本能

皮皮杂谈·2023-12-25 09:45

Shell Tools of Missing Semester（二）

foo=barecho"$foo"#打印barecho'$foo'#打印$foobash同样支持函数：mcd(){mkdir-p"$1"cd"$1"}输入：mcdhello由于hello是函数的第一个参数

瑜陀·2023-12-24 15:47

什么是大数据平台？

大数据开发培训大数据开发专业需要学习的内容包括三大部分，分别是大数据基础知识、大数据平台知识、大数据场景知识。大数据基础知识：有三个主要部分，分别是数学、统计学和计算机等学科。

金光闪闪耶·2023-12-24 14:49

IP数据在大数据行业的创新应用

第一部分：IP数据在用户行为分析中的应用1.1案例一：电商平台用户行为分析一家电商巨头通过大数据平台收集了大量的用户行为数据，其中包括用户的IP地址、浏览历史、购物车操作等信息。

IP数据云ip定位查询·2023-12-24 11:27

hadoop 3.3.3集群安装部署

前言大数据开发涉及的组件和方向比较多，由于之前项目使用的都是成熟的大数据产品CDH或者HDP，里面封装了多个大数据组件，对于企业而言，无论是体验还是维护都比较友好，但对于开发人员来说，太过于集成，反而不太好了解各个组件具体的配置细节

以茉萱·2023-12-24 02:18

千亿级工业大数据的最优方案！智光电气的时序数据库应用

小T导读：此前，智光电气（股票代码：002169）子公司智光研究院在工业项目中使用基于ApacheHadoop的CDH集群来做时序业务数据的处理，但由于数据量级太大，处理占用了大量资源，导致集群有发生崩溃的风险

涛思数据（TDengine）·2023-12-24 01:25

[强网杯2023] 只作了几个小题

Enterastring(shouldbelessthan10bytes):abcdHereisyourcodecoverage:000000000Pleasetryagain.Ifyoucanre

石氏是时试·2023-12-23 13:22

cloudera-agent一键卸载脚本

/bin/bash#停止CDHAgent服务echo"停止CDHAgent服务..."

远方有海，小样不乖·2023-12-23 06:20

在自己电脑配置cdh 版 hadoop 提交mr job客户端

image.png1.首先下载与我们cdhhadoop集群对应的hadoop安装文件hadoop-2.6.0-cdh5.14.2.tar.gz链接:https://pan.baidu.com/s/1iHm5M-gGZRWLKbzVjbYJmA

Helen_Cat·2023-12-23 04:51

79.Sentry实现Hive/Impala数据脱敏

79.1演示环境介绍CM和CDH版本：5.13.1已启用Kerberos已启用Sentry79.2操作演示测试数据[root@ip-186-31-16-68datamasking]#vimemployees.csv1

大勇任卷舒·2023-12-22 21:55

2023大数据应用开发赛题02套

目录2023年全国职业院校技能大赛赛题第02套任务A：大数据平台搭建（容器环境）（15分）子任务一：Hadoop完全分布式安装配置子任务二：Flume安装配置子任务三：FlinkonYarn安装配置任务

长风有续X·2023-12-21 17:54

2023大数据应用开发赛题03套

目录任务A：大数据平台搭建（容器环境）（15分）子任务一：HadoopHA安装配置子任务二：Hive安装配置子任务三：Kafka安装配置任务B：离线数据处理（25分）子任务一：数据抽取子任务二：数据清洗子任务三

长风有续X·2023-12-21 17:52

Elasticsearch集群腾讯云迁移到线下机房（无感迁移）

背景要求：公司原有大数据平台基于公有云构建，由于种种原因，现在需要迁移到自建机房，Elasticsearch集群承担了大数据平台主要的对外查询需求，也有部分实时计算需求基于Elasticsearch实现

小孟多·2023-12-21 09:58

实时化与 Serverless 是开源大数据 3.0 时代的必然选择

核心组件全面Serverless化在大会上，阿里云开源大数据平台负责人王峰，回顾了阿里

阿里云大数据AI技术·2023-12-21 08:00

Comparison and Differences beteen Powershell and Linux

thesame1.1)functionsonPowershellandLinuxII）differencepoints2.1)CD:changedirectory2.1.1)Powershell：commandcdhasnoeffect

DADIAN_GONG·2023-12-21 07:11

ROS笔记Day02----使用vscode开发&launch文件

1.新建工作空间并编译mkdir-phelloworld_ws2/srccdhelloworld_ws2catkin_make2.进入工作空间目录下打开vscodecdhelloworld_wc2code

w沉默味道w·2023-12-20 10:21

Cloudera Manager大数据平台|Cloudera Manager视频教程

网盘地址：https://pan.baidu.com/s/1GHMEiOVolk2ZFefuX5SExA提取码:ax5d备用地址（腾讯微云）：https://share.weiyun.com/5izjs5M密码：kfpixg课程目标对已经从事相关大数据工作的学员可以精通ClouderaManager适用人群零基础学员，大数据爱好者课程特色：1、阐述了ClouderaManager的产生背景和应用场

爱笑小哥·2023-12-19 15:29

助力 Shopee 重构系统发布 ETL 功能，SeaTunnel 在电商巨头的实践经验

Shopee一直致力于构建大数据平台，为业务提供数据支持。我们提供了涵盖数据开发整个生命周期的多种工具。

大数据技术架构·2023-12-19 14:55

我对大数据的理解

在这种大环境下，部分企业或政府建立的大数据平台，并且在此之上建立了数据湖、数据仓库、数据中台。相关概念或定义如下：大数据平台是一个以处

王永翔·2023-12-19 07:54

Hadoop相关安装包上传到目录并完成安装

1.指定一个安装的目录/usr/local/自己的名字(mkdircdhong、rm-rf*)[root@cdhong01~]#cd/usr/local/[root@cdhong01local]#rm-rf

余生跟他走·2023-12-19 00:59

大数据平台架构（Lambda、Kappa、SMACK）

大数据平台的架构和企业级应用的架构是很不一样的，使用的技术也不同。经过多年的发展，业界已孕育出了一些较为成熟的架构模式，如Lambda架构、Kappa架构及Smack架构。

高国才·2023-12-18 22:35

物业、消防大数据平台页面，小区物业大数据监控服务平台（PS资料）

现分享消防可视化大数据大屏网页界面、简约物业大数据平台页面、小区物业大数据监控服务平台模版的UI源文件，供UI设计师们快速获取PSD源文件完成工作。

77探索AI·2023-12-18 22:50

DKhadoop大数据平台基础框架方案概述

yoku酱·2023-12-18 14:57

Laravel Homestead笔记

Homestead安装文档：https://xlswriter-docs.viest.me/zh-cn/an-zhuang/pecl-tui-jia让我们开始启动Homestead：cdHomestead

不二周助Rex·2023-12-17 18:17

SecureCRT远提示Key exchange failed，No compatible key exchange method. The server supports these methods

Keyexchangefailed.Nocompatiblekeyexchangemethod.Theserversupportsthesemethods:curve25519-sha256,[email protected],ecdh-sha2

二当家的素材网·2023-12-17 15:46

2w字详解数据湖：概念、特征、架构与案例

数据湖和大数据平台有什么不同？带着这些问题，我们尝试写了这样一篇文章，希望能抛砖引玉，引起大家一些思考和共鸣。

公众号:肉眼品世界·2023-12-17 15:33

大规模数据可视化（纯文字干货科普）

目录大规模数据可视化的挑战数据量问题性能考量实时数据数据可视化的关键技术数据预处理高效的数据结构前端技术工具和框架商业工具开源工具大数据平台集成案例研究和实际应用行业案例分析教训和见解未来趋势和发展方向人工智能在数据可视化中的应用交互式和沉浸式体验声明

昊昊该干饭了·2023-12-17 07:34

基于Hadoop的铁路货运大数据平台设计与应用

完整下载：基于Hadoop的铁路货运大数据平台设计与应用基于Hadoop的铁路货运大数据平台设计与应用DesignandApplicationofRailwayFreightBigDataPlatformbasedonHadoop

wusp1994·2023-12-17 06:24

Hive学习笔记

修改配置文件/etc/profile（添加exportHIVE_HOME=/usr/local/hive-0.9.0-binexportHADOOP_HOME=/usr/local/hadoop-0.20.2-cdh3u5

weixin_30470857·2023-12-17 05:32

企业大数据平台技术体系架构

如何利用大数据技术构建企业大数据平台，以充分体现大数据的价值，是各行

皮皮杂谈·2023-12-17 05:50

java操作cdh得hadoop出现java.io.IOException: Failed on local exception: com.google.protobuf.InvalidProt...

这个问题是，java得操作Hadoop得api得版本跟haodoop得不一致导致得在hadoop中运行/bin/hadoopversion查看hadoop得版本之后将java得api中得jar包版本对应更换

PunkP·2023-12-17 03:21

“橙信通”赣南脐橙果品加工企业“入网入云”工作启动会圆满召开！

赣州市果业局市场科副科长黄传龙、安远县政府副县长陈建伟、安远县农业农村局相关领导、安远县电商办负责人、橙信通大数据平台执行总裁闫行、江西顺丰速运有限公司代表、赣州万吉物流有限公司代表，信丰县、会昌县、崇义县

橙信通大数据平台·2023-12-16 18:38

ERROR sqoop.Sqoop: Got exception running Sqoop: java.lang.RuntimeException: Could not load db driver

Couldnotloaddbdriver问题产生原因缺少oracle驱动解决方案#需要在安装sqoopserver的节点上放oracle的驱动包cpojdbc6.jar/opt/cloudera/parcels/CDH

即墨澈·2023-12-16 05:19

pyspark on yarn

如果是搭建的CDH或者CDP可以直接从管理界面下载配置文件。直接下载hive组件的客户端配置就可以，它里面包含了hdfs和yarn的配置。

骑着蜗牛向前跑·2023-12-16 03:34

金融大模型再进化，奇富科技大数据平台全面升级

在长达数十年的时间里，金融机构都将数据视为待挖的金矿，希望通过打造数据平台来赋能业务。然而，为何业内人士却一直认为这是一项艰巨的任务呢？答案在于，虽然金融机构渴望将数据平台转化为业务的真正价值和生产力，但却缺乏关键的生产工具。这导致很多数据相关的工作仍然依赖繁琐的人工操作，例如制作繁杂的报表、构建指标、建立决策体系等，整体效率低下。正是在这个看似沉重的任务背后，隐藏着无限的潜力和创新。奇富科技的毓

CSDN云计算·2023-12-16 00:15

大数据各组件安装笔记汇总

/bin/bashecho"-----------------cdh01-------------------------"/opt/apps/jdk1.8.0_45/bin/jpsecho""for(

ZGFAgf·2023-12-16 00:11

kafka 常用命令【学习笔记】

Kafka环境变量配置exportKAFKA_HOME=/opt/cloudera/parcels/CDH-6.3.2-1.cdh6.3.2.p0.1605554/lib/kafkaexportPATH

专注代码七年·2023-12-15 21:24

大数据组件sqoop部署安装与测试练习

环境说明10.176.2.101master10.176.2.103zjx0310.176.2.105zjx05cent-os6.5zookeepercdh3.4.5hadoopapache2.7.7mysql5.17jdk1.8.191sqoop1.4.7

zwb_jianshu·2023-12-15 06:05

2.CENTOS安装CDH和Kudu-1

版本：CENTOS7.2CDH5.10Kudu1.22.1概述本文CENTOS7.2操作系统部署CDH企业版的过程。

大勇任卷舒·2023-12-15 01:40

统一系统脆弱性管理平台：漏洞分析和修补的“绝佳工具”

国联统一系统脆弱性管理平台是由国联易安研究团队自主研发的新一代漏洞扫描管理系统，涵盖了网络空间资产探测、系统漏洞扫描、虚拟机漏洞扫描、WEB漏洞扫描、网站安全监测、数据库安全扫描、安全基线核查、工控漏洞扫描、WIFI安全检测、APP安全扫描、大数据平台漏洞扫描

焦点快讯·2023-12-15 00:44

用fabric-sdk-java调用Fabcar链码

一、启动fabcar1、设置go代理goenv-wGOPROXY=https://goproxy.io,directgoenv-wGO111MODULE=on2、启动fabcar测试网络cdhyperleger

小青蛙呱呱跳·2023-12-14 16:13

物联网架构之CDH

1、常规初始化操作三个节点都需要执行hostnamectlset-hostnamecdhmasteryum-yinstallvimlrzsznet-toolscat>>/etc/hosts>/etc/profile

叮咚网工·2023-12-14 14:58

空气污染大屏，UI可视化大屏设计（PSD源文件）

现分享科技空气污染大数据、空气污染大数据平台、大气环境信息资源中心、大气检测大数据中心、环境信息资源中心界面的大屏Photoshop源文件，开箱即用！

77探索AI·2023-12-14 13:07

Flume+Kafka双剑合璧玩转大数据平台日志采集

概述大数据平台每天会产生大量的日志，处理这些日志需要特定的日志系统。

java菜·2023-12-07 00:17

推荐频道

大数据平台CDH