E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
maxcompute
基于
MaxCompute
的拉链表设计
阅读更多摘要:简单的拉链表设计背景信息:在数据仓库的数据模型设计过程中,经常会遇到这样的需求:1.数据量比较大;2.表中的部分字段会被update,如用户的地址,产品的描述信息,订单的状态、手机号码等等;3.需要查看某一个时间点或者时间段的历史快照信息。(比如,查看某一个订单在历史某一个时间点的状态,比如,查看某一个用户在过去某一段时间内,更新过几次等等)4.变化的比例和频率不是很大,比如,总共有
猫耳呀
·
2018-03-21 14:00
数据
配置
基于
MaxCompute
的拉链表设计
阅读更多摘要:简单的拉链表设计背景信息:在数据仓库的数据模型设计过程中,经常会遇到这样的需求:1.数据量比较大;2.表中的部分字段会被update,如用户的地址,产品的描述信息,订单的状态、手机号码等等;3.需要查看某一个时间点或者时间段的历史快照信息。(比如,查看某一个订单在历史某一个时间点的状态,比如,查看某一个用户在过去某一段时间内,更新过几次等等)4.变化的比例和频率不是很大,比如,总共有
猫耳呀
·
2018-03-21 14:00
数据
配置
基于
MaxCompute
的拉链表设计
摘要:简单的拉链表设计背景信息:在数据仓库的数据模型设计过程中,经常会遇到这样的需求:数据量比较大;表中的部分字段会被update,如用户的地址,产品的描述信息,订单的状态、手机号码等等;需要查看某一个时间点或者时间段的历史快照信息。(比如,查看某一个订单在历史某一个时间点的状态,比如,查看某一个用户在过去某一段时间内,更新过几次等等)变化的比例和频率不是很大,比如,总共有1000万的会员,每天新
猫耳
·
2018-03-21 00:00
数据
配置管理
MaxCompute
2.0助力众安保险快速成长
阅读更多摘要:2017云栖大会阿里云大数据计算服务(
MaxCompute
)专场,众安保险数据总监王超群带来
MaxCompute
助力众安保险方面的演讲。
猫耳呀
·
2018-03-19 11:00
云计算
大数据
MaxCompute
2.0助力众安保险快速成长
阅读更多摘要:2017云栖大会阿里云大数据计算服务(
MaxCompute
)专场,众安保险数据总监王超群带来
MaxCompute
助力众安保险方面的演讲。
猫耳呀
·
2018-03-19 11:00
云计算
大数据
MaxCompute
助力ofo实现精细化运营:日订单超3200万、整体运行效率提升76%
阅读更多摘要:ofo小黄车大数据BI系统负责人龙利民为大家分享了ofo的上云体验,重点分享了
MaxCompute
的应用实践,最后对阿里云提出了自己的建议需求。
猫耳呀
·
2018-03-16 16:00
数据库
大数据
MaxCompute
JOIN优化小结
阅读更多摘要:Join是
MaxCompute
中最基本的语法,但由于数据量和倾斜问题,非常容易出现性能问题。
猫耳呀
·
2018-03-15 13:00
日志
性能
MaxCompute
JOIN优化小结
阅读更多摘要:Join是
MaxCompute
中最基本的语法,但由于数据量和倾斜问题,非常容易出现性能问题。
猫耳呀
·
2018-03-15 13:00
日志
性能
如何通过Dataworks禁止
MaxCompute
子账号跨Project访问
阅读更多摘要:之前有很多DataWorks用户问
MaxCompute
访问权限问题,比如子账号为什么可以增删查别人在别的项目创建的表,即使这个子账号并没有加入那个项目。
猫耳呀
·
2018-03-15 11:00
测试
如何通过Dataworks禁止
MaxCompute
子账号跨Project访问
阅读更多摘要:之前有很多DataWorks用户问
MaxCompute
访问权限问题,比如子账号为什么可以增删查别人在别的项目创建的表,即使这个子账号并没有加入那个项目。
猫耳呀
·
2018-03-15 11:00
测试
基于阿里云
MaxCompute
实现游戏数据运营
摘要:一、总览一个游戏/系统的业务数据分析,总体可以分为图示的几个关键步骤:1、数据采集:通过SDK埋点或者服务端的方式获取业务数据,并通过分布式日志收集系统,将各个服务器中的数据收集起来并送到指定的地方去,比如HDFS等;(注:本文Demo中,使用flume,也可选用logstash、Flue.一、总览一个游戏/系统的业务数据分析,总体可以分为图示的几个关键步骤:1、数据采集:通过SDK埋点或者
阿里云云栖社区
·
2018-02-26 13:15
开源大数据周刊-第44期
E-MapReduce中Spark2.x读写
MaxCompute
数据最新的aliyun-emapreduce-sdk将
MaxCompute
数据以DataSource的方式接入Spark2.x,用户可以使用类似
aliyun32183
·
2018-01-31 15:45
云栖社区开源大数据周刊
关于
MaxCompute
的基本了解
大数据计算服务(
MaxCompute
,原名ODPS)是一种快速、完全托管的GB/TB/PB级数据仓库解决方案。
开发者社区小百科
·
2018-01-31 15:49
大数据
阿里云大学
从MapReduce的执行来看如何优化
MaxCompute
(原ODPS) SQL
摘要:SQL基础有这些操作(按照执行顺序来排列):fromjoin(leftjoin,rightjoin,innerjoin,outerjoin,semijoin)wheregroupbyselectsumdistinctcountorderby如果我们能理解mapreduce是怎么实现这些SQL中的基本操作的,那么我们将很容易理解怎么优化SQL写法。点此查看原文:http://click.ali
猫耳
·
2018-01-31 00:00
优化
sql
阿里云大数据
MaxCompute
计算资源分布以及LogView分析优化
摘要:
MaxCompute
(原ODPS)的概念海量数据处理平台,服务于批量结构化数据的存储和计算,提供海量数据仓库的解决方案以及针对大数据的分析建模服务.
猫耳
·
2018-01-31 00:00
优化
sql
数据库
阿里云大数据利器
Maxcompute
-使用mapjoin优化查询
阅读更多大数据计算服务(
MaxCompute
,原名ODPS)是一种快速、完全托管的GB/TB/PB级数据仓库解决方案。
jewel0516
·
2018-01-23 18:00
阿里云大数据利器
Maxcompute
学习之-假如你使用过hive
阅读更多如果您是一个大数据开发工程师并且使用过hadoop的hive框架,那么恭喜您,阿里云的大数据计算服务-
Maxcompute
,您已经会了90%。
jewel0516
·
2018-01-23 18:00
大数据;云计算
阿里云大数据利器之-RDS迁移到
Maxcompute
实现动态分区
当数据量非常大的时候,此时传统关系型数据库会显得有些吃力,那么会经常有将mysql数据库的数据迁移到[大数据处理平台-大数据计算服务(
Maxcompute
,原ODPS)(https://www.aliyun.com
jewel0516
·
2018-01-23 17:00
大数据;云计算;数据库;
MaxCompute
Studio使用心得系列6——一个工具完成整个Python UDF开发
摘要:2017/12/20北京云栖大会上阿里云
MaxCompute
发布了最新的功能PythonUDF,万众期待的功能终于支持啦,我怎么能不一试为快,今天就分享如何通过Studio进行Pythonudf开发
阿里云云栖社区
·
2018-01-22 17:55
MaxCompute
Studio使用心得系列6——一个工具完成整个Python UDF开发
阅读更多2017/12/20北京云栖大会上阿里云
MaxCompute
发布了最新的功能PythonUDF,万众期待的功能终于支持啦,我怎么能不一试为快,今天就分享如何通过Studio进行Pythonudf
jewel0516
·
2018-01-22 16:00
阿里云
MaxCompute
印度开服,加速大数据产业升级
阅读更多2017/12/20北京云栖大会上阿里云
MaxCompute
发布了最新的功能PythonUDF,万众期待的功能终于支持啦,我怎么能不一试为快,今天就分享如何通过Studio进行Pythonudf
jewel0516
·
2018-01-22 16:00
阿里云
MaxCompute
,用计算力让数据发声
阿里云大数据计算服务
MaxCompute
以技术驱动产品,用计算力让数据发声。阿里云大数据计算服务
MaxCompute
原名ODPS,是阿里巴巴的主力计算平台。
jewel0516
·
2018-01-22 16:00
阿里巴巴
云计算
阿里云
MaxCompute
,用计算力让数据发声
阿里云大数据计算服务
MaxCompute
以技术驱动产品,用计算力让数据发声。阿里云大数据计算服务
MaxCompute
原名ODPS,是阿里巴巴的主力计算平台。
jewel0516
·
2018-01-22 16:00
阿里巴巴
云计算
阿里ETL工具datax学习(一)
阅读更多阿里云开源离线同步工具DataX3.0介绍一.DataX3.0概览DataX是一个异构数据源离线同步工具,致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、
MaxCompute
柳絮飞祭奠
·
2017-12-22 14:00
阿里巴巴
oracle
jdbc
xdata
阿里ETL工具datax学习(一)
阅读更多阿里云开源离线同步工具DataX3.0介绍一.DataX3.0概览DataX是一个异构数据源离线同步工具,致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、
MaxCompute
柳絮飞祭奠
·
2017-12-22 14:00
阿里巴巴
oracle
jdbc
xdata
阿里ETL工具datax学习(一)
阅读更多阿里云开源离线同步工具DataX3.0介绍一.DataX3.0概览DataX是一个异构数据源离线同步工具,致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、
MaxCompute
柳絮飞祭奠
·
2017-12-22 14:00
阿里巴巴
oracle
jdbc
xdata
【广州云栖大数据/人工智能会场信息】全新一代人工智能引擎
MaxCompute
惊艳全场
11月22日在广州举办的2017年云栖大会·广东分会今天拉开序幕,小编已经深深感受到了华南地区小伙伴们的热情,针对大家好奇的问题,如本届广东分会阿里云会有什么亮点?邀请了哪些嘉宾?展台会有什么活动等等问题,小编在这里为大家做个现场报道吧!本次大会名称为广东省大数据开发者大会暨2017云栖大会·广东分会,于2017年11月22日在广州香格里拉酒店举办,届时无法到达现场的小伙伴可以通过线上直播观看大会
倔强_beaf
·
2017-11-23 16:49
Odps(
MaxCompute
)使用时一些问题
odps官方文档之给出了jdbc最原始的查询。我们当然不会直接用jdbc,不然工作量太大。因为查询出来的都是列,需要自己封装成对象。因此考虑到odps本身也是数据库,那么我们依旧可以使用mybatis来查询odps。唯一需要更改的就是DataSource。odps需要jar包:odps_datasource.xml:(这里使用的DruidDataSource,换成C3P0也行)因为odps不支持事
补刀小次郎
·
2017-11-04 09:25
其他
阿里云
MaxCompute
加速全球化布局 11月1日北京、马来西亚两地开服
11月1日,阿里云宣布大数据计算服务
MaxCompute
在北京和马来西亚同日开服。
dicyt
·
2017-11-02 16:04
MaxCompute
Studio使用心得系列2——编译SQL脚本
摘要:Console客户端、大数据开发套件的SQL编辑器目前都没有脚本编译功能,每次需要执行SQL脚本,只能提交执行后若有语法错误,执行结果失败返回失败信息才发现,影响开发效率又浪费资源。今天我就来分享在MaxComputeSQL提交运行前就可以进行脚本编译的方法。开发人员写好代码,对代码进行语法编译是很常见的操作,但是目前常用的MaxComputesql开发工具(大数据开发套件和console客
肆虐的悲傷
·
2017-11-01 14:54
MaxCompute
Studio使用心得系列2——编译SQL脚本
摘要:Console客户端、大数据开发套件的SQL编辑器目前都没有脚本编译功能,每次需要执行SQL脚本,只能提交执行后若有语法错误,执行结果失败返回失败信息才发现,影响开发效率又浪费资源。今天我就来分享在MaxComputeSQL提交运行前就可以进行脚本编译的方法。开发人员写好代码,对代码进行语法编译是很常见的操作,但是目前常用的MaxComputesql开发工具(大数据开发套件和console客
肆虐的悲傷
·
2017-11-01 14:54
MaxCompute
常用语句汇总(更新ing)
大数据计算服务(
MaxCompute
,原名ODPS,产品地址:https://www.aliyun.com/product/odps)是一种快速、完全托管的TB/PB级数据仓库解决方案。
猫饭先生
·
2017-10-11 15:52
MaxCompute
常用语句汇总(更新ing)
点击查看全文大数据计算服务(
MaxCompute
,原名ODPS,产品地址:https://www.aliyun.com/product/odps)是一种快速、完全托管的TB/PB级数据仓库解决方案。
Mc顽固份子
·
2017-10-11 11:36
大数据
阿里云
数据库
BigBench on
MaxCompute
基准测试套件简明安装与运行指南
点击查看全文先决条件注册阿里云账户
MaxCompute
客户端软件(推荐使用0.27.0或以上版本),详情请见:安装并配置客户端Java1.7(Oracle/OpenJDK)或以上版本(推荐使用64位版本
Mc顽固份子
·
2017-09-29 14:55
大数据
阿里云
阿里云
MaxCompute
澳大利亚开服,“领跑”人工智能市场
点击查看全文9月27日,阿里云宣布大数据计算服务
MaxCompute
将于10月10日在澳大利亚正式开服。
Mc顽固份子
·
2017-09-28 14:26
操作系统
大数据
人工智能
阿里云
分布式计算
大数据
阿里云
从未停止进化的
MaxCompute
提到阿里巴巴、阿里云大家都会想到大数据、科技,也会联想到阿里巴巴自研的大数据平台
MaxCompute
。
MaxCompute
从诞生至今也已经
Mc顽固份子
·
2017-09-26 15:11
大数据
阿里云
道旅鬼谷子分享:如何打好业务监控的组合拳
MaxCompute
我们以前用过MaxCom
肆虐的悲傷
·
2017-09-25 14:34
阿里巴巴
MaxCompute
亮相VLDB2017
阿里巴巴在本届VLDB展区重点展示了
MaxCompute
、ApsaraDB、AliSQL、AnalyticDB和POLARDB等数据库和数据处理技术,引起现场与行业专家学者的注意和交流探讨。
Mc顽固份子
·
2017-09-11 15:07
大数据
阿里云
美柚与
MaxCompute
数据同步架构说明
点击查看全文大美柚与
MaxCompute
数据同步架构说明2017/8/10九戒本文涉及到的重要概念:
MaxCompute
:简单可以理解为开源的hadoop集群,可提供我们常用的MapReduce和SQL
Mc顽固份子
·
2017-09-05 15:47
大数据
阿里云
创建UDF的简单介绍
阅读原文请点击摘要:UDF(UserDefinedFunction),
MaxCompute
(原ODPS)里的东西,之前经常听到开发同学讲,自己一直没有去接触,最近因为项目需要,调研了一下UDF,本文简单地介绍了一下如何新建工程
qq_35267530
·
2017-08-16 14:33
MaxCompute
UDF系列之身份证校验及15位身份证号码转换成18位
阅读原文请点击摘要:为了验证一些老证件上的身份证号码到底是不是本人,今天为大家提供一个15位身份证号码转换成18位的
MaxCompute
的UDF,下载地址见附件。
阿里云_云栖社区
·
2017-08-14 14:05
odps是什么?
click.aliyun.com/m/27095/ODPS(OpenDataProcessingService),是阿里巴巴通用计算平台提供的一种快速、完全托管的GB/TB/PB级数据仓库解决方案,现在已更名为
MaxCompute
爱哭的小魔女
·
2017-07-31 14:00
阿里巴巴
框架
java
MaxCompute
和DataIDE权限体系介绍
产品关系
MaxCompute
是阿里云自主研发的大数据计算引擎。通过
MaxCompute
,可以使用SQL、MapReduce和Graph的计算模型处理海量数据。
爱哭的小魔女
·
2017-07-31 14:00
sql
json
MaxCompute
和DataIDE权限体系介绍
产品关系
MaxCompute
是阿里云自主研发的大数据计算引擎。通过
MaxCompute
,可以使用SQL、MapReduce和Graph的计算模型处理海量数据。
爱哭的小魔女
·
2017-07-31 14:00
sql
json
应用
MaxCompute
实现变压器局部放电相位分析
阅读更多原文链接:http://click.aliyun.com/m/26737/摘要:应用
MaxCompute
实现变压器局部放电相位分析1引言随着智能电网建设的不断推进,智能化电力一次设备和常规电力设备的在线监测都得到了较大发展并成为趋势
爱哭的小魔女
·
2017-07-26 14:00
云计算
框架
应用
MaxCompute
实现变压器局部放电相位分析
阅读更多原文链接:http://click.aliyun.com/m/26737/摘要:应用
MaxCompute
实现变压器局部放电相位分析1引言随着智能电网建设的不断推进,智能化电力一次设备和常规电力设备的在线监测都得到了较大发展并成为趋势
爱哭的小魔女
·
2017-07-26 14:00
云计算
框架
如何去选择最适合自己的云服务器的视频
让网络更加独立04:11课时3:阿里云云存储(OSS\TableStore\NAS)+CDN产品:更快速度,更低成本04:38课时4:阿里云容器服务:最原生的集成Docker和云服务04:09课时5:阿里云
MaxCompute
乱蓬头199302
·
2017-07-25 14:56
一个教大家如何去选择最适合自己的云服务器的视频,除了买域名升值,云上还能做什么?网页,博客,数据分析原来都能搞定,这次真的涨姿势了
让网络更加独立04:11课时3:阿里云云存储(OSS\TableStore\NAS)+CDN产品:更快速度,更低成本04:38课时4:阿里云容器服务:最原生的集成Docker和云服务04:09课时5:阿里云
MaxCompute
乱蓬头199303
·
2017-07-25 14:00
最近看了阿里云出的一个教大家如何去选择最适合自己的云服务器的视频,除了买域名升值,云上还能做什么?网页,博客,数据分析原来都能搞定,这次真的涨姿势了~~
让网络更加独立04:11课时3:阿里云云存储(OSS\TableStore\NAS)+CDN产品:更快速度,更低成本04:38课时4:阿里云容器服务:最原生的集成Docker和云服务04:09课时5:阿里云
MaxCompute
乱蓬头199303
·
2017-07-24 16:00
大数据全攻略:10年老兵带你看尽
MaxCompute
大数据运算挑战与实践
大数据计算服务(
MaxCompute
,原名ODPS)是一种快速、完全托管的TB/PB级数据仓库解决方案。
dicyt
·
2017-07-24 14:58
阿里巴巴
上一页
12
13
14
15
16
17
18
19
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他