E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
maxcompute
10月18日,德国法兰克福,阿里云
MaxCompute
2.0,全面布局AI人工智能
摘要:在2017年杭州云栖大会上,阿里云宣布大数据计算服务
MaxCompute
将于10月18日在德国法兰克福正式开服。
肆虐的悲傷
·
2019-11-01 01:03
混合云模式下
MaxCompute
+ Hadoop 混搭大数据架构实践
摘要:2019杭州云栖大会大数据企业级服务专场,由斗鱼大数据高级专家张龙带来以“混合云模式下
MaxCompute
+Hadoop混搭大数据架构实践”为题的演讲。
阿里云云栖社区
·
2019-10-31 15:30
数据处理
架构
大数据
hadoop
MaxCompute
问答整理之9月
本文是基于本人对
MaxCompute
产品的学习进度,再结合开发者社区里面的一些问题,进而整理成文。希望对大家有所帮助。问题一、如何查看information_schema的tables?
大涛学长
·
2019-10-23 19:26
sql
使用阿里云
maxcompute
sql随机从查询数据中抽取n条样本
使用sql进行数据分析时有个常用的组件叫HIVE,而阿里云则提供了类似HIVE功能的商业云服务,称为
maxcompute
。今天记录一下使用maxcomputesql从数据中随机抽取n条样本的方法。
笔墨留年
·
2019-09-27 14:07
杂七杂八
阿里巴巴大数据产品最新特性介绍--机器学习PAI
PAI可支持
MaxCompute
、OSS、HDFS和NAS等多种数据资源。在数据资源和多种计算框架基础之上,诞生出了PAI的最早形态:PAI-Studio——可视
大涛学长
·
2019-09-23 06:41
工作
阿里巴巴大数据产品最新特性介绍--机器学习PAI
PAI可支持
MaxCompute
、OSS、HDFS和NAS等多种数据资源。在数据资源和多种计算框架基础之上,诞
大涛学长
·
2019-09-18 14:00
阿里巴巴
算法
框架
金融
阿里巴巴大数据产品最新特性介绍--机器学习PAI
PAI可支持
MaxCompute
、OSS、HDFS和NAS等多种数据资源。在数据资源和多种计算框架基础之上,诞
大涛学长
·
2019-09-18 14:00
阿里巴巴
算法
框架
金融
阿里巴巴大数据产品最新特性介绍--机器学习PAI
PAI可支持
MaxCompute
、OSS、HDFS和NAS等多种数据资源。在数据资源和多种计算框架基础之上,诞
大涛学长
·
2019-09-18 14:00
阿里巴巴
算法
框架
金融
阿里巴巴飞天大数据架构体系与Hadoop生态系统
很多人问阿里的飞天大数据平台、云梯2、
MaxCompute
、实时计算到底是什么,和自建Hadoop平台有什么区别。先说Hadoop什么是Hadoop?
阿里云云栖社区
·
2019-09-12 14:34
分布式文件系统
Mapreduce
架构
阿里巴巴飞天大数据架构体系与Hadoop生态系统
很多人问阿里的飞天大数据平台、云梯2、
MaxCompute
、实时计算到底是什么,和自建Hadoop平台有什么区别。先说Hadoop什么是Hadoop?
阿里云云栖社区
·
2019-09-12 00:00
数据仓库
hdfs
架构
大数据
hadoop
MaxCompute
问答整理之8月
原文链接:https://my.oschina.net/u/1464083/blog/3102887本文是基于对
MaxCompute
产品的学习进度,再结合开发者社区里面的一些问题,进而整理成文。
chikuai9995
·
2019-09-06 14:00
关于通过java调用datax,返回任务执行的方法
DATAXDataX是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、
MaxCompute
沉梦杨志
·
2019-08-28 10:49
在
MaxCompute
中利用bitmap进行数据处理
很多数据开发者使用bitmap技术对用户数据进行编码和压缩,然后利用bitmap的与/或/非的极速处理速度,实现类似用户画像标签的人群筛选、运营分析的7日活跃等分析。本文给出了一个使用MaxComputeMapReduce开发一个对不同日期活跃用户ID进行bitmap编码和计算的样例。供感兴趣的用户进一步了解、分析,并应用在自己的场景下。importcom.aliyun.odps.OdpsExce
阿里云云栖社区
·
2019-08-05 00:00
数据处理
大数据
java
MaxCompute
助力衣二三构建智能化运营工具
原文链接:https://my.oschina.net/u/1464083/blog/3080562摘要:本文由衣二三CTO程异丁为大家讲解了如何基于
MaxCompute
构建智能化运营工具。
chikuai9995
·
2019-07-29 15:00
MaxCompute
技术人背后的故事:从ApacheORC到AliORC
本文整理自阿里巴巴计算平台事业部高级技术专家吴刚的专访,将为大家介绍ApacheORC开源项目、主流的开源列存格式ORC和Parquet的区别以及
MaxCompute
选择ORC的原因。
阿里云云栖社区
·
2019-07-25 00:00
apache
程序员
大数据
springboot——Spring下动态选择接口实现类(以多方式动态查询
maxcompute
为例)
注:本文以postgresql和
maxcompute
官方SDK两种查询方式查询
maxcompute
为例正文
东天里的冬天
·
2019-07-24 14:49
Spring
Boot
Springboot干货系列
使用 DataX 增量同步数据
DataXDataX是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、
MaxCompute
郭龙_Jack
·
2019-07-18 11:29
大数据
大规模离线计算产品的调研
文章目录Background资源调度产品形态1传统计算集群1.1腾讯云-弹性MapReduce1.2腾讯云-云数据仓库套件Sparkling1.3阿里云-大数据计算服务
MaxCompute
1.4阿里云-
runzhliu
·
2019-07-16 19:24
笔记
云计算
案例精选 | 面对千亿级的数据难题,优酷工程师怎么解决?
阅读更多导读:优酷一天的日志量会达到千亿级别,面对如此大的数据样本,2017年5月,优酷完成了从Hadoop迁移到阿里云
MaxCompute
,实现计算消耗和储存的消耗呈下降趋势,得到了非常大的收益。
壹佰案例
·
2019-07-14 11:00
MaxCompute
hadoop
大数据
案例精选 | 面对千亿级的数据难题,优酷工程师怎么解决?
阅读更多导读:优酷一天的日志量会达到千亿级别,面对如此大的数据样本,2017年5月,优酷完成了从Hadoop迁移到阿里云
MaxCompute
,实现计算消耗和储存的消耗呈下降趋势,得到了非常大的收益。
壹佰案例
·
2019-07-14 11:00
MaxCompute
hadoop
大数据
千亿级的数据难题,优酷工程师怎么解决?
阿里妹导读:优酷一天的日志量会达到千亿级别,面对如此大的数据样本,2017年5月,优酷完成了从Hadoop迁移到阿里云
MaxCompute
,实现计算消耗和储存的消耗呈下降趋势,得到了非常大的收益。
阿里云云栖社区
·
2019-07-10 00:00
架构
hadoop
集群
算法
大数据
MaxCompute
项目子账号做权限管理
场景:一个企业使用多款阿里云产品,
MaxCompute
是其中一个产品,用的是同个主账号,主账号不是由使用
MaxCompute
的大数据同学管理,大数据同学使用的是子账号。
阿里云云栖社区
·
2019-07-04 00:00
解决方案
权限
大数据
MaxCompute
费用暴涨之新增SQL分区裁剪失败
现象:因业务需求新增了SQL任务,这SQL扫描的表为分区表,且SQL条件里表只指定了一个分区,按指定的分区来看数据量并不大,但是SQL的费用非常高。费用比预想的结果相差几倍甚至10倍以上。若只知道总体费用暴涨,但是没明确是什么任务暴涨,可以可以参考查看账单详情-使用记录文档,找出费用异常的记录。分析:我们先明确MaxComputeSQL后付费的计费公式:一条SQL执行的费用=扫描输入量️SQL复杂
阿里云云栖社区
·
2019-06-27 00:00
函数
sql
大数据
coalesce函数
coalesce函数在
Maxcompute
里面的官方解释如下:具体怎么用呢?上面的函数说明通俗来说coalesce()的作用是:返回传入的参数中第一个非null的值。
lingaixuexi
·
2019-06-24 15:24
MySQL
优酷背后的大数据秘密
原文链接:https://my.oschina.net/u/1464083/blog/3061035在本文中优酷数据中台的数据技术专家门德亮分享了优酷从Hadoop迁移到阿里云
MaxCompute
后对业务及平台的价值
chikuai9995
·
2019-06-12 11:00
优酷背后的大数据秘密
在本文中优酷数据中台的数据技术专家门德亮分享了优酷从Hadoop迁移到阿里云
MaxCompute
后对业务及平台的价值。本文内容根据演讲视频以及PPT整理而成。
阿里云云栖社区
·
2019-06-12 00:00
数据存储
hadoop
算法
架构
大数据
DataX操作指南
DataXDataX是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、
MaxCompute
Rest探路者
·
2019-05-15 17:00
阿里云大数据计算服务 -
MaxCompute
(原名 ODPS)
MaxCompute
是阿里EB级计算平台,经过十年磨砺,它成为阿里巴巴集团数据中台的计算核心和阿里云大数据的基础服务。去年
MaxCompute
做了哪些工作,这些工作背后的原因是什么?
BarryW
·
2019-04-20 08:00
阿里靠什么支撑 EB 级计算力?
阿里妹导读:
MaxCompute
是阿里EB级计算平台,经过十年磨砺,它成为阿里巴巴集团数据中台的计算核心和阿里云大数据的基础服务。去年
MaxCompute
做了哪些工作,这些工作背后的原因是什么?
阿里云云栖社区
·
2019-04-18 00:00
数据安全
数据存储
数据仓库
安全
大数据
阿里云ACP认证考试细则须知与考题内容学习方法分享
-AlibabaCloudCertificationProfessional)是面向使用阿里云大数据产品的架构、开发、运维类人员的专业技术认证,主要涉及阿里云大数据类的几款核心产品,包括大数据计算服务
MaxCompute
xtyly1
·
2019-04-15 11:06
云计算
十年磨一剑,王坚自研的
MaxCompute
如何解决世界级算力难题
大数据时代,随着企业数据规模的急剧增长,传统软件已无法承载,这也推动了大数据技术的发展,Google、AWS、微软等硅谷巨头纷纷投入大数据技术的研发;而在国内,王坚也在十年前带领阿里云团队研发
MaxCompute
阿里云云栖社区
·
2019-04-12 10:23
大数据
Oracle
MaxCompute
基于
MaxCompute
的数仓数据质量管理
本文针对
MaxCompute
数仓建设过程中如何
阿里云云栖社区
·
2019-04-12 00:00
数据管理
数据仓库
配置
监控
十年磨一剑,王坚自研的
MaxCompute
如何解决世界级算力难题
王坚带队,目标是自研大数据计算平台
MaxCompute
统一阿里巴巴内部的数据和大数据计算体系。
阿里云云栖社区
·
2019-04-12 00:00
数据库
oracle
集群
安全
大数据
通过DataWorks数据集成归档日志服务数据至
MaxCompute
进行离线分析
通过DataWorks归档日志服务数据至
MaxCompute
官方指导文档:https://help.aliyun.com/document_detail/68322.html但是会遇到大家在分区上或者DataWorks
阿里云云栖社区
·
2019-04-02 00:00
分析
数据同步
日志
测试
消息队列
IntelliJ中配置连接
MaxCompute
项目空间Access Id、Access Key、Project Name填写
spm=a2c4g.11186623.2.16.42e42b17Lupy0u#concept-zrp-lyz-5db在IntelliJ中配置连接
MaxCompute
项目空间时,有一步配置有点坑,记录在这里
wisdom_power
·
2019-03-16 12:47
大数据相关
如何制作可以在
MaxCompute
上使用的 crcmod
对于二进制包而言,
MaxCompute
要求使用包名包含cp27-cp27m的Wheel包。但对于部分长时间未更新的包,例如oss2依赖的crcmod,PyPI并未提供Wheel包,因而需要自行打包。
阿里云云栖社区
·
2019-03-01 00:00
github
函数
镜像
docker
python
使用DataV制作实时销售数据可视化大屏(考试篇)
考试说明阿里云大学ApsaraClouder大数据专项技能认证——使用
MaxCompute
进行数据质量核查认证考试。本考试应用了防作弊系统,请遵守考试秩序。
SunnyRivers
·
2019-02-20 23:10
使用DataV制作实时销售数据可视化大屏(考试篇)
考试说明阿里云大学ApsaraClouder大数据专项技能认证——使用
MaxCompute
进行数据质量核查认证考试。本考试应用了防作弊系统,请遵守考试秩序。
SunnyRivers
·
2019-02-20 23:10
阿里云
MaxCompute
2019-1月刊
原文链接:https://yq.aliyun.com/articles/690859亲爱的开发者们,
MaxCompute
2019.1月刊为您带来产品最新动态和丰富的产品技术内容,欢迎阅读。
串行并jjjjj
·
2019-02-20 14:03
图(关系网络)数据分析及阿里应用
摘要:2019年1月18日,由阿里巴巴
MaxCompute
开发者社区和阿里云栖社区联合主办的“阿里云栖开发者沙龙大数据技术专场”走近北京联合大学,本次技术沙龙上,阿里巴巴资深技术专家钱正平为大家分享了大数据技术背景下图数据的应用前景
阿里云云栖社区
·
2019-02-18 00:00
序列化
知识图谱
数据分析
算法
大数据
MaxCompute
studio与权限那些事儿
背景知识
MaxCompute
拥有一套强大的安全体系,来保护项目空间里的数据安全。
阿里云云栖社区
·
2019-01-24 00:00
html
解决方案
sql
数据安全
函数
互联网下半场的角逐,玩转轻资产的大数据服务 | 阿里云栖开发者沙龙大数据专场(北京站)干货集锦
2019年1月18日下午,一个晴冷的冬日,由阿里巴巴
MaxCompute
开发者社区和阿里云栖社区联合主办的“阿里云栖开发者沙龙大数据技术专场”走近北京联合大学。
阿里云云栖社区
·
2019-01-22 00:00
开发者
大数据
阿里重磅开源首款自研科学计算引擎Mars,揭秘超大规模科学计算
摘要:由阿里巴巴统一大数据计算平台
MaxCompute
研发团队,历经1年多研发,打破大数据、科学计算领域边界,完成第一个版本并开源。Mars,一个基于张量的统一分布式计算框架。
阿里云云栖社区
·
2019-01-17 00:00
多线程
集群
深度学习
分布式
大数据
datax使用说明
DataX是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、
MaxCompute
SmartNewSexy
·
2019-01-14 11:34
阿里云大数据ACP认证知识点梳理9——产品特点(DATA WORKS)
DataWorks(数据工场)基于
MaxCompute
作为核心的计算、存储引擎,提供了海量数据的离线加工分析、数据挖掘的能力.使用DataWorks(数据工场),可对数据进行数据传输、数据转换等相关操作
haotian1685
·
2018-12-22 14:48
大数据
基于阿里云数加构建企业级数据分析平台(实验篇)
实验描述实验概述本实验主要聚焦于如何使用大数据计算服务
MaxCompute
构建企业级数据分析平台,如何对业务数据进行分析并将分析的结果用丰富的图表展示出来。
SunnyRivers
·
2018-12-20 17:06
基于阿里云数加构建企业级数据分析平台(实验篇)
实验描述实验概述本实验主要聚焦于如何使用大数据计算服务
MaxCompute
构建企业级数据分析平台,如何对业务数据进行分析并将分析的结果用丰富的图表展示出来。
SunnyRivers
·
2018-12-20 17:06
使用
MaxCompute
进行数据质量核查(考试篇)
考试说明阿里云大学ApsaraClouder大数据专项技能认证——使用
MaxCompute
进行数据质量核查认证考试。本考试应用了防作弊系统,请遵守考试秩序。
SunnyRivers
·
2018-12-20 12:08
使用
MaxCompute
进行数据质量核查(考试篇)
考试说明阿里云大学ApsaraClouder大数据专项技能认证——使用
MaxCompute
进行数据质量核查认证考试。本考试应用了防作弊系统,请遵守考试秩序。
SunnyRivers
·
2018-12-20 12:08
使用
MaxCompute
进行数据质量核查(理论篇)
课程目标1.影响数据质量的因素、数据质量问题类型2.了解
MaxCompute
(DataIDE)产品3.通过DataIDE设计数据质量监控流程4.独立解决常见的数据质量监控要求目录数据质量相关概念数据质量影响因素数据质量问题类型
SunnyRivers
·
2018-12-19 20:20
上一页
12
13
14
15
16
17
18
19
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他