E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
CDH大数据平台
如何优雅地使用 java 连接 HBase 客户端
放弃不难,但坚持很酷~HBase版本:1.2.0-
cdh
5.7.0一、客户端的长短连接java远程连接HBase客户端,大体分为两种方式。一种是长连接,一种是短连接。
create17
·
2023-11-23 20:37
java
hive
设计模式
redis
epoll
CDH
之HIVE-ON-SPARK、Spark配置
原:
CDH
之HIVE-ON-SPARK、Spark配置_小基基o_O的博客-CSDN博客_
cdh
hiveonsparkHIVEONSPARK配置
CDH
6.3.2的HIVE版本为:2.1.1+
cdh
6.3.2HIVE
javastart
·
2023-11-23 12:00
hadoop
spark
hive
大数据
spark
一文流:hive使用 bulk load 批量导入数据到 hbase
本文主要参考了hbase和hive官方文档的说明,并结合
cdh
和hdp的一些教程以及个人在生产中的实践进行记录。
if200
·
2023-11-23 09:31
大数据
hbase
hive
bulkload
bulk
导入数据
3D线上展示vr全景企业展馆新优势
展厅的形象和特殊的优势,采用定制和商迪3d自制的引擎,实现3d线上展厅数字化、企业vr展馆可视化等3D线上展厅的全景预览和功能,从而实现3D线上展厅企业数字化、三维数据可视化、三维虚拟现实化以及企业发
大数据平台
的建设
商迪3D的勺子
·
2023-11-22 13:50
python:excel导入hive
现需要将这些excel数据导入到
大数据平台
,供其他部门使用。本程序提供一个web页面,实现在web页面上传指定格式的excel文件,程序自动将该文件的数据导入到hive中。
没有文化,啥也不会
·
2023-11-22 12:29
python
架构师们,怎么走着走着就变“烟囱”了呢? | 文末含福利
作者|耿立超来源|《
大数据平台
架构与原型实现:数据中台建设实战》*文末有福利这两年,随着中台概念的兴起,一种IT过去的常态,现在的明星反面教材——“烟囱式架构”被反复提及并为大家所熟知。
csdn业界要闻
·
2023-11-22 10:16
大数据
编程语言
java
hadoop
数据库
CDH
6.2.1 集群在线安装kafka 和 brokerid报错 以及 连接超时报错 总结
进入clouderamanager点击添加服选择kafka然后点击选择主机本教程选择了三台机器点击继续进入ReviewChanges页面配置zookeeper的目录配置JavaHelpSizeofBroker(一定要大于512)点击继续,运行完成后安装成功(如果是首次安装)因为不是首次安装所以就出现了报错此时我们点击角色日志查看报错日志通过日志可以看出是brokerid不匹配的问题这个时候我们有两
安心做个小废物
·
2023-11-22 09:35
hadoop
python
kafka
python
kafka
大数据
linux
java
阿里云 E-MapReduce 全面开启 Serverless 时代
作者:李钰-阿里云资深技术专家、EMR负责人EMR2.0平台阿里云正式发布云原生开源
大数据平台
EMR2.0已历经一年时间,如今EMR2.0全新平台在生产上已经全面落地,资源占比超过60%。
阿里云大数据AI技术
·
2023-11-22 08:11
阿里云
mapreduce
serverless
大数据平台
红蓝对抗 - 磨利刃,淬精兵! | 京东云技术团队
随着平台业务越来越复杂,红蓝对抗的作用愈来愈明显,下面将详细介绍
大数据平台
在本次11.11大促备战工作中是如何开展红蓝对抗的。
京东云技术团队
·
2023-11-22 08:54
测试
安全
大数据
京东云
网络
红蓝对抗
混沌工程
数据湖学习笔记No.03(数据仓库)
数据存储有瓶颈数据计算有瓶颈实时场景计算有瓶颈数据挖掘有瓶颈构建
大数据平台
基础知识数据库三范式:1、第一范式(1NF):原子性,字段不可分2、第二范式(2NF):唯一性,有主键,非主键字段
SEUsmith
·
2023-11-21 22:34
大数据学习
数据仓库
学习
数据库
万字详解大数据架构新概念
有人说数据湖是下一代
大数据平台
,各大云厂商也在纷纷的提出自己的数据湖解决方案,一些云数仓产品也增加了和数据湖联动的特性。但是数据仓库和数据湖的区别到底是什么,是技术路线之争?是数据管理方式之争?
于连林_
·
2023-11-21 22:53
大数据
架构
log4j2发送消息至Kafka
title:自定义log4j2发送日志到Kafkatags:log4j2,kafka为了给公司的
大数据平台
提供各项目组的日志,而又使各项目组在改动上无感知。
Java大生
·
2023-11-21 14:55
里程碑 | WeDataSphere 一站式开源
大数据平台
套件全面升级
国家2035远景规划提出要加快全面数字化转型的步伐,而“
大数据平台
”是数字化转型的基础技术之一。
康月牙
·
2023-11-21 09:53
GBase数据库产品介绍
南大通用专注于国产数据库的自主研发、销售和服务,是产品线最全的国产数据库厂商,包括分析型数据库GBase8a、交易型数据库GBase8s、目录数据库GBase8d、金融级分布式交易型数据库GBase8c,以及
大数据平台
wangzhejijie
·
2023-11-21 05:38
数据库
hugegraph图数据库环境搭建
centos7版本:1.4.0server和studio:https://pan.baidu.com/s/1nMvbaXcAHHcUvZDok-upkg提取码:71t9修改hugegraph-0.10.4配置文件
cdh
ugegraph
11111kgd
·
2023-11-21 03:46
知识图谱
数据库
linux
知识图谱
kafka_consumer不消费数据的问题排查
背景:初始的时候,在
cdh
中部署了kafka集群后来方案改为kafka消息平台和
cdh
中的hive,spark等计算平台分离由于之前的kafka部署配置,污染到后面的apache的kafka集群,使得其消费不到消息我们查看
都教授2000
·
2023-11-20 23:32
大数据
kafka
zookeeper
个人感想
最近要做
大数据平台
,找到的一片文章。内容非常的好,无整体布局,效果,颜色,排版,数据维度等多个方面给出建议。非常不错。浏览网页很多了,很少有文章能让自己看三四遍,感触良多。学无止境。
James007007
·
2023-11-20 16:41
用HTML+CSS做一个漂亮简单的音乐网站
获取更多优质源码】web前端期末大作业:【毕设项目精品实战案例(1000套)】程序员有趣的告白方式:【HTML七夕情人节表白网页制作(110套)】超炫酷的Echarts大屏可视化源码:【Echarts大屏展示
大数据平台
可视化
web网站建设
·
2023-11-20 05:21
网页设计与制作
dreamweaver
html静态网页
web前端
html期末大作业
web课程与设计
Hive参数与性能企业级调优(建议收藏)
Hive作为
大数据平台
举足轻重的框架,以其稳定性和简单易用性也成为当前构建企业级数据仓库时使用最多的框架之一。
坨坨的大数据
·
2023-11-19 23:58
2011-2022年高职大数据竞赛-赛题任务剖析
,内容分别为:第一部分赛题内容第二部分任务剖析第三部分赛题模拟实现-离线数据抽取第四部分赛题模拟实现-离线数据统计第五部分赛题模拟实现-数据采集与实时计算第六部分赛题模拟实现-数据可视化(一)任务一:
大数据平台
环境搭建具体内容按照大数据分析平台需求
xlw2003
·
2023-11-19 21:54
Spark
Flink
hadoop
spark
flume
kafka
flink
argocd
部署argo
cdh
ttps://github.com/argoproj/argo-cd/releaseskubectlcreatenamespaceargocdkubectlapply-nargocd-fhttps
inner222
·
2023-11-19 19:19
argocd
大数据和智能数据应用架构系列教程之:大数据架构设计与部署
如何构建出高效、可靠、可伸缩的
大数据平台
架构,将决定数据科学家在工作中面临的最大挑战。
禅与计算机程序设计艺术
·
2023-11-19 19:28
AI大模型应用实战
大数据AI人工智能
大数据
人工智能
语言模型
Java
Python
架构设计
融云出海:跟着「花少 · 丝路季」去沙特,为什么现在是出海中东最好时机?
首期观看量达到了1.9亿,登顶各
大数据平台
综艺热榜。不同于真人秀巅峰《花少2》的全员疯批人设,这一季全员情绪稳定的表现十分拉好感。东北含量超高的主角团脱离了“宫斗”向“囧途”靠近,抓马不再,搞笑居多。
融云
·
2023-11-19 19:22
互联网
IM
出海
信息与通信
即时通讯
出海
edge
HDFS 使用Hadoop 中自带的词频统计程序,对数据集进行词频统计
一、准备工作:1.按
CDH
环境说明文档配置相对目录转到/user/hdfs,那么新创建的用户文件夹bigdata***就在/user/hdfs目录之下。
码猿小菜鸡
·
2023-11-19 16:28
大数据
人工智能
hadoop
big
data
词频统计
hdfs
里程碑 | WeDataSphere 一站式开源
大数据平台
套件全面升级
国家2035远景规划提出要加快全面数字化转型的步伐,而“
大数据平台
”是数字化转型的基础技术之一。
微众开源
·
2023-11-19 14:22
大数据
开源
大数据
数据库
java
CDH
6.3.2集成Apache Flink1.12.0
目录一、编译Flink1下载flink源码2增加maven镜像3执行编译命令二、编译parcel1下载flink-parcel2修改参数3复制安装包4编译parcel5编译csd6上传文件三、
CDH
集成
终回首
·
2023-11-19 14:19
大数据
#
Apache
Flink
apache
flink
大数据
CDH
3.Apache Hive 查询报错 FAILED: org.apache.hadoop.hive.ql.exec.mr.MapredLocalTask
版本
CDH
6.2.0Hive2.1.1-
cdh
6.2.0一、问题执行查询视图的sql报错:FAILED:ExecutionError,returncode3fromorg.apache.hadoop.hive.ql.exec.mr.MapredLocalTask
终回首
·
2023-11-19 14:18
大数据
#
Apache
Hive
hive
大数据
构建数据湖上低延迟数据 Pipeline 的实践
讲师介绍杨华,T3出行
大数据平台
负责人。ApacheHudiCo
DolphinScheduler社区
·
2023-11-19 14:39
大数据
分布式
java
kubernetes
hadoop
Apache Hive源码阅读环境搭建
前置软件:JDK1.8Maven3.3.91下载源码#下载源码gitclonehttps://github.com/apache/hive.git
cdh
ive#查看标签gittag#切换到要阅读的指定版本的
终回首
·
2023-11-19 14:08
#
Apache
Hive
大数据
apache
hive
hadoop
BarleyVarDB:首个大麦遗传变异库 | 数据库推荐
该论文第一作者谈聪博士现在就职于深圳国家基因库(CNGB),主要负责生命
大数据平台
(CNGBdb)在线计算平台CODEPLOT的设计与开发,以及生命多组学数据分析挖掘等工作。
尐尐呅
·
2023-11-19 10:51
大数据平台
搭建之hive连接mysql
1、mysql的基本介绍MySQL是一种广泛使用的开源关系型数据库管理系统(RDBMS),由瑞典公司MySQLAB开发并维护,目前由Oracle公司负责开发和支持。MySQL是一种功能强大、性能优越的关系型数据库管理系统,适用于各种规模的应用程序和系统。以下是MySQL的一些基本特点和功能:关系型数据库:MySQL是一种关系型数据库,使用表格来存储数据,支持SQL语言进行数据操作。可扩展性:MyS
bigdata从入门到放弃
·
2023-11-19 03:39
hive
数据仓库
大数据
hive
mysql
数据仓库
linux
开源大数据组件
utm_source=alading&utm_campaign=repoBI报表:DataEasehttps://github.com/dataease/dataease集群管理HDP/
CDH
/CDP–Todo
刘金宝_Arvin
·
2023-11-19 01:33
大数据
开源软件
Hive在SQL标准权限模式下创建UDF失败的问题排查
环境:
CDH
5.16Hive1.1.0已开启KerberosHive授权使用SQLStandardsBasedAuthorization模式(以下简称SSBA模式)症状表现:在编译好UDF的jar包之后
咕噜咕噜大数据
·
2023-11-19 00:48
大数据安全
Hive
CDH
大数据
hive
阿里云云原生一体化数仓 - 数据安全能力解读
MaxCompute产品简介MaxCompute是一款多功能、低成本、高性能、高可靠、易于使用的数据仓库和支持全部数据湖能力的
大数据平台
,支持超大规模、serverless和完善的多租户能力,内建企业级安全能力和管理功能
阿里云云栖号
·
2023-11-18 21:28
大数据
云计算
阿里云
首次揭秘云原生Hologres存储引擎
概要:刚刚结束的2020天猫双11中,MaxCompute交互式分析(Hologres)+实时计算Flink搭建的云原生实时数仓首次在核心数据场景落地,为
大数据平台
创下一项新纪录。
阿里云技术
·
2023-11-17 14:09
数据库
大数据
《网易-数据中台》学习笔记
《网易-数据中台》学习笔记1.大数据发展历程1.1数据仓库1.2Hadoop-数据湖1.3
大数据平台
1.4数据中台1.5Next:大数据+人工智能2.数据仓库2.1数据仓库建模2.1.1E-R模型2.1.2
杰克jk船长
·
2023-11-17 07:15
数据治理
学习
笔记
数据仓库
大数据
大数据毕业设计选题推荐-机房信息
大数据平台
-Hadoop-Spark-Hive
✨作者主页:IT研究室✨个人简介:曾从事计算机专业培训教学,擅长Java、Python、微信小程序、Golang、安卓Android等项目实战。接项目定制开发、代码讲解、答辩教学、文档编写、降重等。☑文末获取源码☑精彩专栏推荐⬇⬇⬇Java项目Python项目安卓项目微信小程序项目文章目录一、前言二、开发环境三、系统界面展示四、代码参考五、论文参考六、系统视频结语一、前言随着信息技术的飞速发展,机
IT研究室
·
2023-11-17 06:59
大数据项目
大数据
hadoop
课程设计
【2023云栖】刘一鸣:Data+AI时代
大数据平台
建设的思考与发布
简介:本文根据2023云栖大会演讲实录整理而成,演讲信息如下:演讲人:刘一鸣|阿里云自研大数据产品负责人演讲主题:Data+AI时代
大数据平台
应该如何建设今天分享的主题是Data+AI时代
大数据平台
应该如何建设
阿里云大数据AI技术
·
2023-11-17 06:56
serverless
云原生
大数据平台
搭建之hive本地模式安装
1、什么是hive?Hive是一个开源的数据仓库基础设施,用于查询和分析大规模数据集。它建立在Hadoop上,并提供了类似于传统数据库的查询和分析功能。Hive使用HiveQL(类似于SQL)作为查询语言,允许用户通过类SQL的语法编写查询语句,这些查询语句会被转换为MapReduce任务在Hadoop集群上执行。Hive的主要优势之一是它的可扩展性和容错性。它能够处理各种类型和格式的数据,并且能
bigdata从入门到放弃
·
2023-11-17 03:58
hive
大数据
hive
hadoop
linux
服务器
数据仓库
cdh
不在 sudoers 文件中。此事将被报告。
之前重装linuxcentos系统后,建立用户
cdh
。在进行sudoyuminstallXXX时,报如下错误。
cdh
不在sudoers文件中。此事将被报告。
DSP_G
·
2023-11-17 03:46
问题集合
经验分享
yum
权限
sudo
centos
大数据平台
(数据中心)建设方案
1.1.大数据中心建设需求描述建设大数据管理中台,按照统一的数据规范和标准体系,构建统一数据采集-治理-共享标准、统一技术开发体系、统一接口API,实现数据采集、平台治理,业务应用三层解耦,并按照统一标准格式提供高效的数据支撑服务,保证上层业务应用系统能够更加专注于业务流与数据流的梳理和重构,从而释放数据压力,节约系统开发周期,提升系统建设效率,满足企业、政府数据精细治理、分类组织、精准服务、安全
打码人的日常分享
·
2023-11-16 17:34
源码
大数据
【云栖2023】姜伟华:Hologres Serverless之路——揭秘弹性计算组
云栖大会演讲实录整理而成,演讲信息如下:演讲人:姜伟华|阿里云计算平台事业部资深技术专家、阿里云实时数仓Hologres研发负责人演讲主题:HologresServerless之路——揭秘弹性计算组实时化成为了
大数据平台
的核心演进趋势
阿里云大数据AI技术
·
2023-11-16 12:29
serverless
云原生
HTML期末学生大作业-使用HTML+CSS技术仿传智博客网站
获取更多优质源码】web前端期末大作业:【毕设项目精品实战案例(1000套)】程序员有趣的告白方式:【HTML七夕情人节表白网页制作(110套)】超炫酷的Echarts大屏可视化源码:【Echarts大屏展示
大数据平台
可视化
STU网页设计与制作
·
2023-11-16 11:28
网页建设
web课程设计
web前端
web前端期末大作业
网页设计与制作
学生网页作业
【KeyarchOS】安装部署CM5.13.0和
CDH
5.13.0实践
目录1概述2安装准备2.1操作系统环境2.2CM版本3安装3.1安装CM5.13.04运行CM安装
CDH
4.1启动CM服务4.2初始化CM并安装
CDH
5.13.01概述浪潮信息KOS是浪潮信息基于LinuxKernel
KeyarchOS
·
2023-11-16 10:03
软件兼容性
linux
【论文】基于Hadoop的铁路货运
大数据平台
设计与应用
点我完整下载:基于Hadoop的铁路货运
大数据平台
设计与应用.docx基于Hadoop的铁路货运
大数据平台
设计与应用DesignandApplicationofRailwayFreightBigDataPlatformbasedonHadoop
wusp1994
·
2023-11-16 06:45
大数据
hadoop
分布式
ZooKeeper安装部署和客户端连接
安装zookeeper的注意事项:安装前需要安装好jdk检测集群时间是否同步检测防火墙是否关闭检测主机ip映射有没有配置##下载安装包、解压下载地址:
CDH
版本:http://archive.cloudera.com
a大数据yyds
·
2023-11-15 21:35
ZooKeeper
企业入门实战--k8s之helm图形化
图形化helm图形化添加仓库并拉取helmrepoaddapphubhttps://apphub.aliyuncs.comhelmsearchrepokubeapps拉取bitnami/kubeapps
cdh
elm
鱼子酱048
·
2023-11-15 19:00
企业入门实战
helm
运维
k8s
FBTFT驱动移植
移植fbtft到荔枝派Nano1.3inchL
CDH
ATfbtft的官方wikiFBTFTdriverSt7789vLCD移植简介基于AM335X和Linux的LCDLM6069驱动移植Liunx驱动学习
zm.sun
·
2023-11-15 19:11
软件
大数据平台
作业调度系统详解-理论篇
大数据开发平台的核心组件之一:作业调度系统。作业调度系统是一个相对复杂的系统,涉及的内容繁杂,针对的场景多种多样,实现的方案千差万别,是一个需要理论和实践并重的系统。本文先从大的场景划分的角度对市面上的各种调度系统进行分类讨论,然后再针对具体的作业调度系统,探讨一下各自的架构流派和实现方案,并简单分析一下各自的优缺点。希望能让大家对作业调度系统要做什么,该怎么做,有一个大致的了解。1、那些调度系统
javastart
·
2023-11-14 20:27
大数据
大数据
java
数据库
TDengine 与煤科院五大系统实现兼容性互认,助力煤矿智能化安全体系搭建
近日,涛思数据与煤炭科学技术研究院(以下简称煤科院)已完成数个产品兼容互认证工作,经双方共同严格测试,涛思数据旗下物联网、工业
大数据平台
TDengineV3.X与煤炭科学技术研究院旗下煤矿复合灾害监测监控预警系统
涛思数据(TDengine)
·
2023-11-13 19:54
新闻
tdengine
安全
大数据
上一页
6
7
8
9
10
11
12
13
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他