大数据平台CDH

hadoop_exporter+prometheus监控HDFS

很伤心)2.下载hadoop_exportercd/usr/local/prom/exportergitclonehttps://github.com/Datatamer/hadoop_exportercdhadoop_exporterglideinstallgogetgithub.com
weixin_40689822·2023-06-13 17:45

永洪BI到底有多好用？知乎大V用3000字力荐

经哥做数据分析师6年多，自己使用过很多BI工具，既有"非常贵”的Tableau,也有完全开源的superset，以及公司内部基于其他开源数据工具开放定制的大数据平台，对于高效的数据分析工具
永洪科技·2023-06-13 16:35

数据孤岛下的新破局 Real Time DaaS：面向 AP+TP 业务的数据平台架构

从传统数仓，到大数据平台，再到数据中台和湖仓一体新数据平台，在日益加重的数据孤岛困扰下，面向AP场景的解决方案可谓浩如烟海。
·2023-06-13 12:49

腾讯安全SOC+荣获“鑫智奖”，助力金融业数智化转型

腾讯安全申报的“SOC+基于新一代安全日志大数据平台架构的高级威胁安全治理解决方案”获评“鑫智奖·网络信息安全创新优秀解决方案”。
腾讯安全·2023-06-13 10:53

作业四 : CentOS 7 下 Oozie-4.0.0-cdh5.3.6 安装及WordCount示例

安装准备oozie-4.0.0-cdh5.3.6http://archive.cloudera.com/cdh5/cdh/5/oozie-4.0.0-cdh5.3.6.tar.gzext-2.2.ziphttp
V1cttor·2023-06-13 06:26

python flink kafka_Flink读取Kafka数据，进行汇总

我这边是用的CDH环境，kafka跟zookeeper都安装完毕，并测试可以正常使用第二步：用kafka创建一个生产者进行消息生产.
weixin_39984201·2023-06-13 05:02

hadoop hdfs 性能调优

一直在做fullgc,此时hdfs基本处于不可用状态,此时系统可用内存又不足,而且cpu负载很高.由于这个环境第一次接手维护.这篇文章主要总结下如何做的优化.环境:hadoop版本:Hadoop2.6.0-cdh5.5.0
oo_思维天空·2023-06-13 04:23

房地产大数据分析软件_房地产大数据公司案例

比如，房地产企业内部的数据非常的复杂繁多，是否有这样一款大数据分析软件可以把这些数据整合起来制造一个有效的大数据平台呢？
思迈特Smartbi·2023-06-13 02:11

数据仓库ods层是啥意思_一文读懂大数据仓库建设

文章标签：数据仓库ods层是啥意思版权从传统数仓到大数据平台，MPP数据集市，Hadoop集群，还有混合架构数仓，一直在不断演进，但是万变不离其宗，大框架和方法论终归是那一套。
zxfBdd·2023-06-12 20:10

腾讯安全SOC+荣获“鑫智奖”，助力金融业数智化转型

腾讯安全申报的“SOC+基于新一代安全日志大数据平台架构的高级威胁安全治理解决方案”获评“鑫智奖·网络信息安全创新优秀解决方案”。
·2023-06-12 15:34

SAP 查看操作日志

VL22N(显示改变的交货凭证)输入已删除的交货单号，执行2、查看用户操作日志事务码：STAD3、工作负载和性能统计事务码：ST03N4、查看系统日志事务码：SM215、数据库表查看删除的销售/交货订单表：CDHDR
阿达hi·2023-06-12 12:52

CDH 5.10.2 添加Hive HiveMetastore不能启动的坑

今天用CDH5.10.2版本添加Hive组件的时候，持续报错，不得不说这个版本真能锻炼人…首先报的是驱动类找不到的异常，将mysql的jdbc包放到/usr/share/java目录下，注意去掉版本名称
綮地·2023-06-12 12:47

CDH(Cloudera DataHub 6.2.1)部署（centos6、7）、常用组件（zookeeper、hive、hdfs、yarn、oozie、hue、impala、hbase）安装及验证

本文介绍了CDH的基础环境部署、cdh的server服务部署和相关组件的部署及验证。具体的组件使用，请参考本人的相关专栏内容。
一瓢一瓢的饮 alanchan·2023-06-12 12:41

2、设置非root用户的sudo权限

本文是为后续部署CDH组件准备的，因为CDH部署时必须root用户或具备root权限的免密登录。
一瓢一瓢的饮 alanchan·2023-06-12 12:35

Flink 在顺丰的应用实践

▼关注「Flink中文社区」，获取更多技术干货▼摘要：本⽂由社区志愿者苗文婷整理，内容源⾃顺丰科技大数据平台研发工程师龙逸尘在FlinkForwardAsia2020分享的《Flink在顺丰的应用实践》
Apache Flink·2023-06-12 06:49

爱奇艺大数据加速：从Hive到Spark SQL

随着数据规模的不断增长和计算复杂度的增加，如何快速挖掘数据的潜在价值，给大数据平台带来了巨大挑战。针对海量数据的实时分析需求，大数据团队从2020年开始发起大数据加速项目，基于大数据技术加速爱奇艺数
爱奇艺技术产品团队·2023-06-11 11:43

开源大数据平台 E-MapReduce Serverless StarRocks 产品介绍

摘要：本文将分享阿里云与StarRocks社区合作打造的云上StarRocks极速湖仓的云原生产品实践。主要包括四个部分，第一部分介绍StarRocks全托管形态，以及免运维服务的OLAP云产品；第二部分介绍StarRocksManager的实例管理、诊断分析、元数据管理、安全中心等功能；第三部分介绍在社交、在线教育、电商等场景的使用案例；最后是对产品的长短期规划：1.StarRocks产品介绍2
阿里云云栖号·2023-06-10 23:18

简单的数据平台笔记

首先是网易的产品矩阵，很典型的大数据平台架构比较有亮点的是指标中台指标中台定义的核心要点：1、一次定义多次复用2、自动计算3、集中管理4、指标服务主要解决的问题就是：指标口径不一致（业务口径or数据源不统一
小菜菜1223·2023-06-10 21:32

我所经历的大数据平台发展史（四）：互联网时代 • 下篇

编者按：本文是松子（李博源）的大数据平台发展史系列文章的第四篇（共四篇），本系列以独特的视角，比较了非互联网和互联网两个时代以及传统行业与非传统行业。
松子无核·2023-06-10 20:10

Hive之HPLSQL安装手册

软件版本信息：CDH：cdh5.14.0Hive:1.1.0Impala：2.11.0一：下载地址Hplsql官网：http:www.hplsql.org/download下载的是：hplsql-0.3.31
脸ル粉嘟嘟·2023-06-10 14:17

flume学习与总结记录

agent的设计官方文档，http://flume.apache.org/FlumeUserGuide.html2.flume环境的搭建下载地址：http://archive.cloudera.com/cdh5
嘿嘿海海·2023-06-10 09:47

Linux系统（CentOS、Ubuntu）离线安装gcc环境

如果执行gcc–version出现以下信息，表示已经安装过gcc，可以跳过该步骤：[boco@CDH-143spark_job_monitor]$gcc--versiongcc(GCC)4.8.520150623
白云DA·2023-06-10 03:44

【数据治理】数据治理领域最容易混淆的16组术语概念辨析

信息化(IT)、工业运营技术（OT）、数字化转型（DT）二、2个I差异（商业智能（BI）、生产运营智能（OI））与工业互联网三、多个数据平台差异（数据仓库、大数据平、数据湖、数据中台、数据底座、湖仓一体化大数据平台
强heaven·2023-06-09 13:37

基于CDH环境下的Hive数仓配置及优化

文章目录YARN的基础配置NodeManagerCPU配置NodeManager内存配置NodeManager本地目录MapReduce内存配置HDFS副本数配置Hive配置及优化HiveServer2的Java堆栈Hive动态生成分区的线程数Hive监听输入文件线程数压缩配置Map输出压缩Reduce结果压缩Hive多个Map-Reduce中间数据压缩Hive最终结果压缩YARN的基础配置Nod
蜜桃上的小叮当·2023-06-09 10:15

打破数据孤岛，Apache Doris 助力纵腾集团快速构建流批一体数仓架构｜最佳实践

作者｜纵腾集团数据技术架构师张彬华随着纵腾集团业务的快速发展，各产品线提出的数据需求越发严格，而早期基于多套CDH
hf200012·2023-06-09 10:04

Apache Hadoop UI 系统 Hue 安装 版本4.1.0

文章目录介绍下载hue源码包安装需要的依赖因为cdh的仓库不能用的原因，所以编译时需要修改maven仓库的依赖地址安装pip2编译修改mysql配置创建数据库，导表及数据启动介绍Hue是一个开源的ApacheHadoopUI
红桃∩·2023-06-09 10:56

Hadoop 环境搭建 单机伪分布式

前期准备虚拟机镜像：CentOS-7-x86_64-DVD-1708【选择了GNOME和XWindow兼容、开发环境，内存8G以上】hadoop版本：hadoop-2.6.0-cdh5.7.0.tar.gzjdk
歌哥居士·2023-06-09 06:12

基于数据湖的流批一体：flink1.15.3与Hudi0.12.1集成，并配置基于CDH6.3.2的hive catalog

前言：为实现基于数据湖的流批一体，采用业内主流技术栈hudi、flink、CDH（hive、spark）。
吴培洪·2023-06-09 02:49

1. Hadoop 入门

它们大而复杂的数据集大数据面临的两大问题：针对海量数据的存储、计算大数据的特性：容量大、种类多、速度快、价值高大数据部门的一般业务流程：项目经理提出需求，例如统计日活、周活、月活、年度账单等大数据部门的大数据平台或系统
程序员胖五·2023-06-08 19:38

大数据架构

1.1如何构建大数据平台？
添柴少年yyds·2023-06-08 18:55

CDH--彻底解决问题----时钟异常

第1章.NTP服务器安装及客户机配置配置之前要确定时间和现实时间一致，手动配置时间命令sudodate-s"2018-04-1814:50:02"配置时区https://www.cnblogs.com/dyj0201/p/6440632.html如果已有NTP服务器，则使用已有NTP服务器，不使用集群内部重新搭建的NTP服务器。已有NTP服务器地址为：10.131.11.48，端口为123。lso
每天进步一点点...._____·2023-06-08 17:55

智慧农业大数据平台的“智慧”体现在哪些方面？

所以，山东仁科智慧农业大数据平台不仅可以应用于种植业，也可以用于林业、畜牧业、渔业、副业。智慧农业大数据平台“智慧”体现在哪些地方？
山东仁科·2023-06-08 13:53

原生apache hadoop3.3.1集群安装配置Kerberos

下面直接开始配置hadoopCDH配置Kerberos和Sentry详解_cdhkerberos配置_Mumunu-的博客-CSDN博客部署好了kerberos之后，首先添加用户和生成认证文件在KDC中添加需要认证的用户具体用户看情况而定
Mumunu-·2023-06-08 12:05

linux常用命令整理

如：cd/home进入根目录下面的home目录cdhome
孟章豪·2023-06-08 08:37

常见Dos命令

准备通过Windows命令行进入一个文件，结果输了半天没进去，记录一下cdH:\xxx\qtcanpool-develop\qtcanpool-develop\demos\fancydemoh:其他常见
疯狂java杰尼龟·2023-06-08 01:29

创业 4 年获近 7000 万美元融资，53 岁老程序员 all in 开源

尽管作为初创企业，涛思数据每次重大发布均引起业内关注：核心产品物联网大数据平台TDengine开源两年获1.7万+Star。2019年，TDengine1.0十万行代码开源后，霸
CSDN云计算·2023-06-08 01:54

10.Hadoop:Hive环境搭建

Hive环境搭建1.系统环境：OS：CentOSLinuxrelease7.5.1804(Core)CPU：2核心Memory：1GB运行用户：rootJDK版本：1.8.0_252Hadoop版本：cdh5.16.22
負笈在线·2023-06-07 18:23

浅谈数据治理

随着大数据平台和工业互联网兴起，数据治理平台主要采用数据中台技术和微服务架构初步替代传统架构，面向大数据架构下，为数据资源中心与外部数据系统提供数据服务。那么，数据治理到底治什么？
产品经理自我修养·2023-06-07 15:37

16.1 hue

一、介绍image.png二、下载到cdh网站下载,下载版本为hue-3.7-cdh5.3.6版本过高可能与hive版本不兼容,高版本的hue需要和高版本的hive配合使用三、解压放到第三台机器上。
6cc89d7ec09f·2023-06-07 15:56

Linux系统基本语法

Linux系统基本语法Linux系统基本语法最高权限账户为rootLinux中没有输出就说明正确重启系统或者关闭系统，首先要运行sync命令，把内存中数据写到磁盘中cd/返回根目录cd…返回上一级目录cdhome
qq_51127361·2023-06-07 12:59

Sci Adv揭秘“蚂蚁王国”生殖角色转变中大脑解剖学和基因表达调控变化

此项研究的转录组数据已存储于国家基因库生命大数据平台（C
尐尐呅·2023-06-07 12:12

构建煤矿物联网大数据平台思路(1)

现在的趋势是构建物联网大数据平台。但是现有系统是基于传统的EF5+PSpa
qq_43479892·2023-06-07 10:34

Hadoop教程第一章之Hadoop简介

2006年Cloudera内部集成了很多大数据框架，对应产品CDH,2008年Hortonworks文
爱吃糖的靓仔·2023-06-07 02:16

【数据中台】00丨开篇词丨数据中台，是陷阱？还是金钥匙？

转自：https://time.geekbang.org/column/article/216440我在网易主要负责大数据平台团队，对内服务于网易各个业务线（包括网易云音乐、严选、有道、新闻，以及已经离开网易大家庭的考拉
菜鸟蜀黍·2023-04-21 22:03

大数据技术之CM安装------2（含大数据学习教程）

1.1内存分配将3台虚拟机分配好内存建议8G、4G、4G1.2本次安装需要的jar包#注意：必须是OracleJDK、不要使用OpenJDK1.jdk-8u144-linux-x64.tar.gz2.CDH
ItStar·2023-04-21 21:56

CDH环境下Kylin集群模式安装部署

二、安装前准备软件版本：1.apache-kylin-2.5.2-bin-cdh60.tar.gz2.CDH6.0.03.JDK_1.8.0_141安装机器：
枫棱·2023-04-21 21:35

详解大数据平台架构

目录：什么是大数据Hadoop介绍-HDFS、MR、Hbase大数据平台应用举例-腾讯公司的大数据平台架构“就像望远镜让我们能够感受宇宙，显微镜让我们能够观测微生物一样，大数据正在改变我们的生活以及理解世界的方式
yoku酱·2023-04-21 17:46

CDH6.2.0详细安装步骤

CDH6.2.0版本安装指南1.准备集群本文档使用的是三台虚拟机，IP和主机名自行修改，三台虚拟机需要能联网，并且能够免密登录，这些网上都能找到详细的教程，有问题也可以底部留言交流。
此木Y·2023-04-21 17:39

CDH中的MySQL升级（RPM包方式）

CDH中的MySQL升级（RPM包方式）1.下载官网的5.7中最新的版本，地址：MySQL5.7.41rpm下载地址2.解压下载的tar包：tar-xvfmysql-5.7.41-1.el7.x86_64
此木Y·2023-04-21 17:07

【大数据平台】基于Spark的美国新冠肺炎疫情数据分析及预测

（本实验系中国地质大学（武汉）2022年秋期大数据平台及应用课程设计）一、选题背景新型冠状病毒疫情是由严重急性呼吸系统综合征冠状病毒2（SARS-CoV-2）导致的2019冠状病毒病（COVID-19）
弓长纟隹为·2023-04-21 16:06
上一页 23 24 25 26 27 28 29 30 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他