大数据平台CDH

linux常用命令整理

如：cd/home进入根目录下面的home目录cdhome
孟章豪·2023-06-08 08:37

常见Dos命令

准备通过Windows命令行进入一个文件，结果输了半天没进去，记录一下cdH:\xxx\qtcanpool-develop\qtcanpool-develop\demos\fancydemoh:其他常见
疯狂java杰尼龟·2023-06-08 01:29

创业 4 年获近 7000 万美元融资，53 岁老程序员 all in 开源

尽管作为初创企业，涛思数据每次重大发布均引起业内关注：核心产品物联网大数据平台TDengine开源两年获1.7万+Star。2019年，TDengine1.0十万行代码开源后，霸
CSDN云计算·2023-06-08 01:54

10.Hadoop:Hive环境搭建

Hive环境搭建1.系统环境：OS：CentOSLinuxrelease7.5.1804(Core)CPU：2核心Memory：1GB运行用户：rootJDK版本：1.8.0_252Hadoop版本：cdh5.16.22
負笈在线·2023-06-07 18:23

浅谈数据治理

随着大数据平台和工业互联网兴起，数据治理平台主要采用数据中台技术和微服务架构初步替代传统架构，面向大数据架构下，为数据资源中心与外部数据系统提供数据服务。那么，数据治理到底治什么？
产品经理自我修养·2023-06-07 15:37

16.1 hue

一、介绍image.png二、下载到cdh网站下载,下载版本为hue-3.7-cdh5.3.6版本过高可能与hive版本不兼容,高版本的hue需要和高版本的hive配合使用三、解压放到第三台机器上。
6cc89d7ec09f·2023-06-07 15:56

Linux系统基本语法

Linux系统基本语法Linux系统基本语法最高权限账户为rootLinux中没有输出就说明正确重启系统或者关闭系统，首先要运行sync命令，把内存中数据写到磁盘中cd/返回根目录cd…返回上一级目录cdhome
qq_51127361·2023-06-07 12:59

Sci Adv揭秘“蚂蚁王国”生殖角色转变中大脑解剖学和基因表达调控变化

此项研究的转录组数据已存储于国家基因库生命大数据平台（C
尐尐呅·2023-06-07 12:12

构建煤矿物联网大数据平台思路(1)

现在的趋势是构建物联网大数据平台。但是现有系统是基于传统的EF5+PSpa
qq_43479892·2023-06-07 10:34

Hadoop教程第一章之Hadoop简介

2006年Cloudera内部集成了很多大数据框架，对应产品CDH,2008年Hortonworks文
爱吃糖的靓仔·2023-06-07 02:16

【数据中台】00丨开篇词丨数据中台，是陷阱？还是金钥匙？

转自：https://time.geekbang.org/column/article/216440我在网易主要负责大数据平台团队，对内服务于网易各个业务线（包括网易云音乐、严选、有道、新闻，以及已经离开网易大家庭的考拉
菜鸟蜀黍·2023-04-21 22:03

大数据技术之CM安装------2（含大数据学习教程）

1.1内存分配将3台虚拟机分配好内存建议8G、4G、4G1.2本次安装需要的jar包#注意：必须是OracleJDK、不要使用OpenJDK1.jdk-8u144-linux-x64.tar.gz2.CDH
ItStar·2023-04-21 21:56

CDH环境下Kylin集群模式安装部署

二、安装前准备软件版本：1.apache-kylin-2.5.2-bin-cdh60.tar.gz2.CDH6.0.03.JDK_1.8.0_141安装机器：
枫棱·2023-04-21 21:35

详解大数据平台架构

目录：什么是大数据Hadoop介绍-HDFS、MR、Hbase大数据平台应用举例-腾讯公司的大数据平台架构“就像望远镜让我们能够感受宇宙，显微镜让我们能够观测微生物一样，大数据正在改变我们的生活以及理解世界的方式
yoku酱·2023-04-21 17:46

CDH6.2.0详细安装步骤

CDH6.2.0版本安装指南1.准备集群本文档使用的是三台虚拟机，IP和主机名自行修改，三台虚拟机需要能联网，并且能够免密登录，这些网上都能找到详细的教程，有问题也可以底部留言交流。
此木Y·2023-04-21 17:39

CDH中的MySQL升级（RPM包方式）

CDH中的MySQL升级（RPM包方式）1.下载官网的5.7中最新的版本，地址：MySQL5.7.41rpm下载地址2.解压下载的tar包：tar-xvfmysql-5.7.41-1.el7.x86_64
此木Y·2023-04-21 17:07

【大数据平台】基于Spark的美国新冠肺炎疫情数据分析及预测

（本实验系中国地质大学（武汉）2022年秋期大数据平台及应用课程设计）一、选题背景新型冠状病毒疫情是由严重急性呼吸系统综合征冠状病毒2（SARS-CoV-2）导致的2019冠状病毒病（COVID-19）
弓长纟隹为·2023-04-21 16:06

spark提交命令中的jars设置方式

此方法是在大数据平台架构与原型实现：数据中台建设实战这本书上看到的之前我们使用的方式是将所有jar的名字加入到配置文件中，提取为jars参数1.脚本目录下创建lib文件夹2.将依赖jar包存放至lib下
春_·2023-04-21 12:15

基于 Flink ML 搭建的智能运维算法服务及应用

本篇内容主要分为五个部分：1.阿里云大数据平台的智能运维2.智能运维算法服务应用场景3.传统算法工程链路的局限性4.使用FlinkML搭建智能运维算法服务5.总结和开源计划一、阿里云大数据平台的智能运维阿里云计算平台提供了多个非常核心的大数据计算和人工智能相关的产品
·2023-04-21 10:27

CDH 集成 Flink-1.14.3 过程与踩坑记录

一、资源准备与配置1.1项目文件下载与配置#下载flink-parcel项目文件[root@hadoop105~]#gitclonehttps://github.com/pkeropen/flink-parcel.git[root@hadoop105~]#cdflink-parcel/#编辑下载地址，看自己需求哪个版本[root@hadoop105flink-parcel]#viflink-par
啊 这·2023-04-20 14:13

大数据初识

用户行为分析医疗领域流行病预测,病情分析视屏领域用户标签系统,视频分析,广告分析金融领域风控系统,欺诈分析学习方法自主学习能力,动手能力系统了解大数据生态系统技术框架找到学习切入点,不断拓展知识结构的广度大数据平台开发
BlackChen·2023-04-20 14:44

运行react native android

1、react-nativeinitHelloProject2、cdHelloProject3、react-nativerun-android
Solang·2023-04-20 14:38

大数据平台 虚拟机还是物理机_信服云承载恒生O32实测：性能较物理架构高40%以上，响应速度提升100%...

信服云已经为超过10000家用户提供了数字化转型的服务，特别在金融行业，信服云已经为海通期货、邢台银行、上海联合产权交易所、深圳农商行等众多用户提供了提供了丰富的数据中心云化解决方案。为了让用户更加直观的了解信服云在具体金融业务场景中的性能表现，信服云整理了恒生O32近一年的运行实测方案，希望相关的数据和验证结论可以为金融行业的用户提供参考。核心结论1.恒生O32在信服云上运行良好，性能指标较物理
RNC-IsYouz·2023-04-20 13:03

24.永久删除Topic—Kafka

24.1问题情况登录Kafka集群所在的服务器，创建一个test的topic[root@cdh1~]#kafka-topics--create--zookeeperip-172-31-
大勇若怯任卷舒·2023-04-20 06:23

CDH-CM资源下载!!免费!!!

CDH-CM各版本免费下载所有资源免费下载!!!不收费!!!不收费!!!不收费!!!
zhumingye·2023-04-20 05:07

Iceberg +Flink+CDH+Trino+Hive

Iceberg+Flink+CDH+Trino+Hive集群环境名称版本描述flink1.3.2开源版本cdh6.3.2开源版本hive2.1.1-cdh6.3.2cdh6.3.2中版本hadoop3.0.0
我去探险了·2023-04-20 05:37

CDH6.3.2集成flink1.13

目录一、编译条件二、制作parcel三、进行编译四、cdh6.3.2集成flink五、解决4个报错一、编译条件jdk1.8maven3.8.1parcel制作工具(注：如果需要编译好的包(34条消息)CDH6.3.2
陆尼·2023-04-20 05:06

编译flink1.12.2以适配cdh6.3.2并制作其parcel

前言一步一步地实践已成熟的flink1.12以parcel方式部署cdh6.x，并测试flink-sql的kafka、upsert-kafka（含数据过期log.retention.minutes）、jdbc
benpaodexiaowoniu·2023-04-20 05:35

CDH6.3.2大数据集群生产环境安装(九)之部署flink1.13.2客户端

添加flink用户（可选，这里是因为公司需要这个参数所以才添加；所有节点都添加上，省事）29.1.添加useraddflink部署flink客户端选择一个集群节点作为客户端部署节点，这里选择zcpt-prd-bigdata-worker-01节点30.1.上传资源flink-1.13.2-bin-scala_2.12.tgz30.2.解压并改名文件夹为flink，并授权flink用户chown-R
日复一日伐树的熊哥·2023-04-20 05:05

智能营销服务性能提升2倍关键秘诀？就是亚马逊云科技

但企业在获得更精准、更智能营销服务的同时，也不得不面临来自海量数据的搜寻以及数据实时更新等方面的压力，因此选择一个高效的大数据平台，就显得尤其重要。
静观事态·2023-04-20 05:52

加密算法(三:AES算法)

进行保护是一种区块加密技术，把原文分成128位每块的数据，对每块单独进行加密https传输中的加密:密钥交换算法，用于决定客户端与服务器之间在握手的过程中如何认证，用到的算法包括RSA，Diffie-Hellman，ECDH
腊鸡程序员·2023-04-20 03:32

2020-04-29

为自己服务；二是玩游戏，游戏对智力以及反应能力的培养是有很大好处的，但是如今游戏的逼真与刺激，非常容易让人沉迷而欲罢不能，这就会影响正常的工作学习；三是网上聊天，QQ、微信、微博等都是非常热门的聊天工具；四是大数据平台购物
飘雪的天堂·2023-04-19 19:18

cdh Hue集成sentry的权限管理详细步骤

hue登录hue的第一个用户要用hue用户创建，默认hue为超级用户，hue用户页面的权限可以管理很多用户操作，比如查看hdfs目录，使用其他组件，授权功能等等一.hive的配置1.关闭模拟，开启sentry2.添加配置(注意配置的位置)sentry.hive.testing.modetrue二.HDFS配置1.开启hdfs的acl访问控制三.hue登录1.登录hue页面一定要用hue用户，不然没
远方有海，小样不乖·2023-04-19 16:29

编译后的hue 替换cdh默认版本hue步骤

基于hue源码编译的hue进行替换cdh6.x.x默认带的hue版本，主要解决hue滚动条拉的时候，一下就到末尾的bug，通过源码编译githu上的hue解决问题一.拷贝编译好的hue到cdh目录替换原来
远方有海，小样不乖·2023-04-19 16:56

免费版CDH环境搭建(附带免费下载地址)

clouderamanagecdh6.3.3即以后的版本已经收费(下面附带cdh6.3.2免费版下载地址)一docker搭建二安装包搭建(附带下载地址)一.docker单节点安装1.下载dockerclouderamanage
派大星`·2023-04-19 12:30

搭建CDH流程记录

搭建CDH流程记录如何搭建本地yum源1.配置yum源这里使用阿里源http://mirrors.aliyun.com/repo/Centos-7.repowgethttp://mirrors.aliyun.com
禾几头·2023-04-19 12:24

内蒙农信携手星环科技建设农信大数据平台，激活金融业务创新

2021年该社启动了大数据平台项目，与星环科技合作，经过一年多的努力，在金融云上部署了20个节点的大数据处理集群。
星环科技·2023-04-19 12:19

内蒙农信携手星环科技建设农信大数据平台，激活金融业务创新

2021年该社启动了大数据平台项目，与星环科技合作，经过一年多的努力，在金融云上部署了20个节点的大数据处理集群。
·2023-04-19 11:54

详解数据仓库数据湖及湖仓一体

有人说数据湖是下一代大数据平台，各大云厂商也在纷纷的提出自己的数据湖解决方案，一些云数仓产品也增加了和数据湖联动的特性。但是数据仓库和数据湖的区别到底是什么，是技术路线之争？是数据管理方式之争？
weixin_38754337·2023-04-19 11:42

数据湖VS数据仓库？湖仓一体了解一下

有人说数据湖是下一代大数据平台，各大云厂商也在纷纷的提出自己的数据湖解决方案，一些云数仓产品也增加了和数据湖联动的特性。但是数据仓库和数据湖的区别到底是什么，是技术路线之争？是数据管理方式之争？
浪尖聊大数据-浪尖·2023-04-19 11:12

内蒙农信携手星环科技建设农信大数据平台，激活金融业务创新

2021年该社启动了大数据平台项目，与星环科技合作，经过一年多的努力，在金融云上部署了20个节点的大数据处理集群。
·2023-04-19 11:07

六大主流大数据采集平台架构分析

今天为大家介绍几款数据采集平台：ApacheFlumeFluentdLogstashChukwaScribeSplunkForwarder大数据平台与数据采集任
带着希望活下去·2023-04-19 06:27

大数据高级架构师-王明龙-KYLIN-DAY01-概述

ApacheKylin概述ApacheKylin是Hadoop大数据平台上的一个开源OLAP引擎。它采用多维立方体预计算技术，可以将大数据的SQL查询速度提升到亚秒级别。
IT灵魂摆渡者·2023-04-19 03:11

CDH的配置

配置步骤有node1、node2、node3三台机器，node1是server、agent，node2、node3是agent一、网络环境的配置1、新建虚拟机2、配置网络，能ping通外网3、配置ip和主机名的映射二、配置主节点到从节点的免密登录1、ssh-keygen-tdsa-P''-f~/.ssh/id_dsa2、cat~/.ssh/id_dsa.pub>>~/.ssh/authorized
程序媛啊·2023-04-19 01:48

大数据技术(入门篇) --- 使用 Spring Boot 操作 CDH6.2.0 Hadoop

springboot，目前并未使用spring-data-hadoop依赖，因为这个依赖已经在2019年终止了，可以点击查看，所以我这里使用的是自己找的依赖，声明：此依赖可能和你使用的不兼容，我这个适用于我自己的CDH
北漂的菜小白·2023-04-18 22:31

大数据技术（入门篇）--- 使用Spring Boot 操作 CDH6.2.0 Spark SQL进行离线计算

前言CDH6.2.0搭建的环境，并不能直接使用spark相关资源，需要对此服务端环境进行一些修改Spark目前仅支持JDK1.8,Java项目运行环境只能使用JDK1.8我这里使用的是CDH6.2.0集群
北漂的菜小白·2023-04-18 22:28

关于HTTPS的TSL握手

目录TLS握手-流程基于RSA算法ExtraSummaryRSA和ECDHE算法区别ExtraQuestion前向保密是啥？RSA为什么没有前向保密性？ECDHE怎么做到前向保密？
·2023-04-18 19:52

20230417 -- 处理 多个VHH sanger测序序列

文件没有配对文件，有些.seq文件是多行输出结果，有些是单行输出结果#信号肽：#ig恒定区：mkdir{HC,LC}unzip-dHChight_chain.zipunzip-dLClight_chain.zipcdHC
All_Will_Be_Fine噻·2023-04-18 13:26

业务重要？还是技术重要？

有一个粉丝问过这样一个问题：群主，向你请教一个困扰我很久的问题，从毕业到现在，我一直从事大数据平台开发d的工作，主要是搭建CDH周边产品，并在基础上开发一些BI产品和内部的分析系统。
数据社·2023-04-18 10:33

CDHtmlDialog 获取cookie信息

页面跳转的时候，我们有时候需要获取最终的cookie里卖弄记录字段的信息，此时，我们可以通过一下的事件获取voidCMFCApplication1Dlg::OnDocumentComplete(LPDISPATCHpDisp,LPCTSTRszUrl){IHTMLDocument2*spHtmlDoc=nullptr;GetDHtmlDocument(&spHtmlDoc);BSTRbstr=::
春蕾夏荷_728297725·2023-04-18 08:46
上一页 24 25 26 27 28 29 30 31 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他