E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
maxcompute
连载:阿里巴巴大数据实践—数据开发平台
简介:介绍
MaxCompute
和阿里巴巴内部基于
MaxCompute
的大数据开发套件,并对在数据开发过程中经常遇到的问题和相关解决方案进行介绍。
阿里技术官方号
·
2020-08-14 04:01
架构从零搭建003-golang架构规划
restful风格的API登陆token验证,本打算使用JWT,但我还是喜欢自建数据库操作使用ORM缓存使用redis日志服务使用elaticsearch数据缓冲kafka消息推送:米推短信推送:阿里云数据仓库:
maxcompute
人月神话
·
2020-08-14 04:20
服务架构调研
MaxCompute
实现增量数据推送(全量比对增量逻辑)
简介:
MaxCompute
(ODPS2.0)-试用新的集合操作命令EXCEPT&增量识别ODPS2.0支持了很多新的集合命令(专有云升级到3版本后陆续支持),简化了日常工作中求集合操作的繁琐程度。
南笙5539
·
2020-08-13 20:51
互联网
灵活运用DataWorks参数配置
阅读全文请点击数据工场DataWorks(原大数据开发套件DataIDE)是基于
MaxCompute
作为计算和存储引擎的,并用于工作流可视化开发和托管调度运维的海量数据离线分析平台。
a52654
·
2020-08-12 10:59
用Spark分析Amazon的8000万商品评价(内含数据集、代码、论文)
更多精彩内容参见云栖社区大数据频道https://yq.aliyun.com/big-data;此外,通过
Maxcompute
及其配套产品,低廉的大数据分析仅需几步,详情访问https://www.aliyun.com
weixin_34232744
·
2020-08-11 23:19
连载:阿里巴巴大数据实践—数据开发平台
阿里数据人都在用的内部技术经验关注数智化转型俱乐部,数智化不迷路摘要介绍
MaxCompute
和阿里巴巴内部基于
MaxCompute
的大数据开发套件,并对在数据开发过程中经常遇到的问题和相关解决方案进行介绍
数据社
·
2020-08-11 20:54
算法
大数据
hadoop
java
人工智能
连载:阿里巴巴大数据实践—数据开发平台
面对海量的数据和复杂的计算,阿里巴巴的数据计算层包括两大体系:数据存储及计算平台(离线计算平台
MaxCompute
和实时计算平台StreamCompute)、数据整合及管理体系(OneData)。
阿里云云栖号
·
2020-08-11 19:45
javascript
阿里云数据工厂DataWorks
DataWorks(数据工场)基于
MaxCompute
作为核心的计算、存储引擎,提供了海量数据的离线加工分析、数据挖掘的能力。DataWorks和
MaxCompute
关系紧密,DataWorks为M
云特快
·
2020-08-10 04:33
数加:从数据工程师到CDO的七次升职路
本文引入一个数据工程师到首席数据官的七次升职过程,阐述了阿里大数据的进化史,其中包括QuickBI、DataV、PAI、公众趋势分析、
MaxCompute
&DataIDE以及推荐引擎等都进行了详细的解析
weixin_34204057
·
2020-08-10 03:05
关于从MongoDB读取数据到
MaxCompute
的一些注意点
从MongoDB读取数据到
MaxCompute
的实践主要步骤请参考以下几篇阿里云的操作手册,这里主要突出一些容易翻车的地方。
渊云
·
2020-08-09 11:23
MaxCompute
SaaS 模式云数据仓库
MaxCompute
数据安全最佳实践
简介:
MaxCompute
作为企业级SaaS模式云数据仓库,正在为客户业务及其数据提供持续的安全保护。
阿里技术官方号
·
2020-08-06 10:11
存储
分布式计算
DataWorks
安全
容灾
大数据
数据处理
MaxCompute
数据安全/隐私保护
数据中心
SaaS 模式云数据仓库
MaxCompute
数据安全最佳实践
简介:
MaxCompute
作为企业级SaaS模式云数据仓库,正在为客户业务及其数据提供持续的安全保护。
阿里技术
·
2020-08-06 00:57
saas
阿里云大数据ACP认证学习笔记之——————Dataworks
基本概念产品服务数据集成数据开发数据地图数据质量数据服务计算和存储引擎服务离线计算
MaxCompute
开源大数据引擎E-MapReduce实时计算(基于Flink)机器学习PAI图计算服务GraphCompute
江凌
·
2020-08-05 17:51
大数据
阿里云
大数据
ACP认证
SaaS 模式云数据仓库
MaxCompute
数据安全最佳实践
什么是
MaxCompute
?
MaxCompute
是一款云原生、高效能的SaaS模式企业级数据仓库服务,被广泛用于构建现代化企业数据平台,开展BI分析、数据化运营、画像及推荐、智能预测等应用场景。
我是代码派
·
2020-08-05 12:53
数据
SaaS模式云数据仓库
MaxCompute
安全能力升级—持续定义云原生,有效提升企业数据安全管理
当数字化转型成为企业的必经之路,大数据已然成为业务发展的重要驱动力,数据成为资产的同时正在面临诸多风险。近年来不乏和数据安全有关的用户隐私数据泄露、环境和数据受到网络威胁以及核心数据遭到恶意破坏等重大事件,企业大数据的安全能力正在面临挑战。大数据平台正在往基于云实现服务化交付的模式演进,全托管大数据平台内建完善的安全管理能力,将有效提升企业安全管理水平。2020年8月5日,SaaS模式云数据仓库M
我是代码派
·
2020-08-05 11:32
数据安全
MaxCompute
- ODPS重装上阵 第二弹 - 新的基本数据类型与内建函数
摘要:
MaxCompute
(原ODPS)是阿里云自主研发的具有业界领先水平的分布式大数据处理平台,尤其在集团内部得到广泛应用,支撑了多个BU的核心业务。
阿里云云栖号
·
2020-08-04 22:57
timestamp
系统
select
int
分区
【大数据干货】数据进入阿里云数加-大数据计算服务
MaxCompute
(原ODPS)的N种方式...
免费开通大数据服务:https://www.aliyun.com/product/odps想用阿里云大数据计算服务(
MaxCompute
),对于大多数人首先碰到的问题就是数据如何迁移到
MaxCompute
weixin_34409703
·
2020-08-04 20:31
阿里云odps介绍
MaxCompute
向用户提供了完善的数据导入方案以及多种经典的分布式计算模型,能够更快速的解决用户海量数据计算问题,有效降低企业成本,并保障数据安全
MaxCompute
主要服务于批量结构化数据的存储和计算
weixin_33739541
·
2020-08-04 20:48
阿里云大数据计算服务
MaxCompute
(远ODPS)
阿里云大数据计算服务
MaxCompute
(原ODPS)概要使用场景海量数据,实时性要求不高,不具备数据库的特征,如事务、主键约束、索引等保留字sql语句的关键字分区表创建表的时候创建分区列,提高sql效率类型转换显式转换和隐式转换显式转换
nkym61
·
2020-08-04 16:04
MaxCompute
(原ODPS)开发入门指南——数据上云篇
阅读全文
MaxCompute
(原ODPS)开发入门指南——数据上云篇写在最前面>>>进入了解更多>>>阿里云数加·
MaxCompute
大数据计算服务.根据《
MaxCompute
(原ODPS)开发入门指南
chuhan3075
·
2020-08-04 13:05
阿里云大数据平台的实操:ODPS的SQL语句
大数据计算服务(
MaxCompute
,原名ODPS)是一种快速、完全托管的TB/PB级数据仓库解决方案。
民谣书生
·
2020-08-04 12:52
ODPS
每个人都应该知道的25个大数据术语
让我们开始吧:1.
MaxCompute
(原名ODPS)。
weixin_34067102
·
2020-08-04 05:36
大数据
数据库
r语言
datax的安装与使用
DataXDataX是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、
MaxCompute
小段大帅
·
2020-08-04 02:19
MaxCompute
常用语句汇总
一、MaxComputeMaxCompute:大数据计算服务(
MaxCompute
,原名ODPS)是一种快速、完全托管的EB级数据仓库解决方案。
热腾腾的Java
·
2020-08-02 23:22
MaxCompute
Dataworks
工作总结
大数据Clouder专项技能认证课程:Quick BI企业报表制作
第1步:数据集成多数据源支持:1、来自云数据源:RDS、HybridDB(Greenplum)、
MaxCompute
(ODPS)、AnalyticDB(ADS)等2、来自ECS自建数据库:Mysql、SqlServer
阿里云大学百科
·
2020-08-01 13:26
阿里云大数据计算服务
MaxCompute
(下篇)
关于阿里云大数据计算服务
MaxCompute
的详细内容:阿里云大数据计算服务
MaxCompute
使用教程(
MaxCompute
(原ODPS)是一项大数据计算服务,它能提供快速、完全托管的PB级数据仓库解决方案
云计算小百科
·
2020-08-01 10:23
9月1日云栖精选夜读:阿里云数据库掌门人褚霸:骑行与数据人生
热点热议阿里云数据库掌门人褚霸:骑行与数据人生作者:场景研读数据智能需求旺盛阿里云
MaxCompute
2.0华南区开服作者:隐林发表在:阿里巴巴大数据—玩家社区浅谈物联网用户体验目标的变化作者:场景研读发表在
weixin_34357267
·
2020-08-01 04:42
阿里云数据库资深专家林伟:大规模计算平台研究与实战
https://yq.aliyun.com/activity/112峰会统一报名链接:http://yq.aliyun.com/webinar/join/49议题名称:《大规模计算平台研究与实战》议题简介:
MaxCompute
weixin_34329187
·
2020-08-01 04:02
首次公开!单日600PB的计算力--阿里巴巴EB级大数据平台的进击
作者:阿里巴巴计算平台高级技术专家迎辉
MaxCompute
作为阿里巴巴的主力计算平台,在2018年的双11中,再次不负众望,经受住了双11期间海量数据和高并发量的考验。
weixin_33721344
·
2020-08-01 03:27
Severless SQL on OSS 实验(DataLakeAnalytics on OSS)
摘要:数据存储在OSS后,可以有多种方式查询分析OSS数据,如自建Spark/Presto/Impala(阿里云EMR以及Hadoop社区官方已支持OSS),使用
MaxCompute
、DataLakeAnalytics
猫耳呀
·
2020-08-01 02:45
阿里云大数据计算服务
MaxCompute
(上篇)
关于阿里云大数据计算服务
MaxCompute
的详细内容:阿里云大数据计算服务
MaxCompute
使用教程(
MaxCompute
(原ODPS)是一项大数据计算服务,它能提供快速、完全托管的PB级数据仓库解决方案
云计算小百科
·
2020-07-31 23:35
Quick BI企业报表制作
第1步:数据集成多数据源支持:1、来自云数据源:RDS、HybridDB(Greenplum)、
MaxCompute
(ODPS)、AnalyticDB(ADS)等2、来自ECS自建数据库:Mysql、SqlServer
阿里云大学百科
·
2020-07-31 21:46
4月9日云栖精选夜读 | 神秘的“阿里星”是怎样一群年轻人? ...
作者:技术小能手发表在:云栖人物志文一西路969号的阿里巴巴三代工程师作者:技术小能手发表在:云栖人物志
MaxCompute
图计算用户手册(上)作者:云花发表在:阿里巴巴大数据—玩家社区知识整理租用虚拟主机应注意什么
客服小羊
·
2020-07-31 16:06
阿里靠什么支撑 EB 级计算力?
阿里妹导读:
MaxCompute
是阿里EB级计算平台,经过十年磨砺,它成为阿里巴巴集团数据中台的计算核心和阿里云大数据的基础服务。去年
MaxCompute
做了哪些工作,这些工作背后的原因是什么?
阿里技术_
·
2020-07-31 15:03
阿里巴巴如何打造“EB级计算平台存储引擎”?
阿里妹导读:
MaxCompute
是阿里EB级计算平台,经过十年磨砺,它成为阿里巴巴集团数据中台的计算核心和阿里云大数据的基础服务。
阿里技术_
·
2020-07-31 11:46
SQL优化器原理 - 查询优化器综述
这是
MaxCompute
有关SQL优化器原理的系列文章之一。我们会陆续推出SQL优化器有关优化规则和框架的其他文章。添加钉钉群“关系代数优化技术”(群号11719083)可以获取最新文章发布动态。
weixin_34148456
·
2020-07-31 10:46
MaxCompute
(原ODPS) MapReduce常见问题解答
本文用到的阿里云数加-大数据计算服务
MaxCompute
产品地址:https://www.aliyun.com/product/odps1.作业出现ClassNotFoundException和NoClassDefFoundError
weixin_34321753
·
2020-07-30 17:44
【干货分享】大数据计算服务
MaxCompute
使用教程
MaxCompute
简介大数据计算服务(
MaxCompute
,原名ODPS)是一种快速、完全托管的TB/PB级数据仓库解决方案。
云计算小百科
·
2020-07-30 14:40
【报告分享】交通运输行业:2019年度中国主要城市交通分析报告.pdf(附下载链接)...
今天给大家分享的报告是高德地图于2020年3月发布的《2019年度中国主要城市交通分析报告.pdf》,该报告以高德交通大数据发布平台、大数据开放平台、阿里云
MaxCompute
及相关数据挖掘方法为支撑基础
m0_37586850
·
2020-07-30 12:22
阿里云 x 蒙牛 | 打通数据孤岛,基于
MaxCompute
实现产销协同的智慧运营
每一个公司转型的背后都有着不为人知的秘密今天,让我们一起探秘内蒙古蒙牛乳业(集团)股份有限公司是中国发展速度最快的乳品企业之一,2017年实现收入601.56亿元,位列全球乳业第10位,与2016年同比收入增长12%。随着业务的迅速发展,如何改善内部运营效率、降低经营成本,是蒙牛目前面临的重要挑战之一。转型原因乳品快消行业销量波动频繁、保鲜要求度高、产线供给复杂、物流网络庞大,因而内部成本控制的复
阿里云云栖号
·
2020-07-30 06:39
MaxCompute
助力北斗大数据,千寻位置3秒实现厘米级定位
无人机、无人车……随着智能无人技术的兴起,背后的核心技术越加受到业界的关注。近日,全球最大地基增强系统运营商千寻位置成功研发出全球首个支持A-北斗的辅助定位平台FindNow,大大缩短定位时间;结合使用阿里云大计算力量的千寻云踪-位置数据接入服务,为全国智能产业提供厘米级乃至毫米级高精度位置定位,快速+精准定位,为汽车导航、精准农业、防灾减灾等行业正迎来新的机遇。3秒“中国速度”:如何突破?千寻位
weixin_34357436
·
2020-07-30 03:09
【大数据】什么是大数据开发套件DataIDE
大数据开发套件基于
MaxCompute
作为核心的计算、存储引擎,提供了海量数据的离线加工分析、数据挖掘的能力。
开发者社区小百科
·
2020-07-29 20:10
阿里云大学
大数据计算
案例精选 | 面对千亿级的数据难题,优酷工程师怎么解决?
导读:优酷一天的日志量会达到千亿级别,面对如此大的数据样本,2017年5月,优酷完成了从Hadoop迁移到阿里云
MaxCompute
,实现计算消耗和储存的消耗呈下降趋势,得到了非常大的收益。
Top100case-msup
·
2020-07-29 18:09
skill
transfer
颤抖吧! 阿里黑科技亮相巴黎科技展, 老外们纷纷赞叹不止
并宣布年内在欧洲节点部署
MaxCompute
服务,为同类技术出海之最!ET城市大脑、ET工业大脑、ET医疗大脑和ET环境大脑这些人工智能领域的新案例,老外问的问题差点答不完!
科技时尚季
·
2020-07-29 17:06
开源、开创、开心是软件开发界的核心发展趋势
2020年,贾扬清入职阿里已经一年,成为阿里开源技术委员会负责人,也取得了巨大的成功:2019年5月,自研大数据计算平台
MaxCompute
荣获浙江省科技进步一等奖。
软件开发不求人
·
2020-07-29 03:58
互联网
人工智能
软件开发
odps基础积累-创建表
由于互联网产品更新迭代非常快,记录的知识可能只适合当下一段时间,所以,官网www.aliyun.com有最新最权威文档.1.概念ODPS(OpenDataProcessingService),是阿里云分析处理海量数据的产品.
MaxCompute
zhangbeizhen18
·
2020-07-29 02:34
数据库
三分钟教你学会分析
MaxCompute
消费明细
点击有惊喜很多用户经常被
MaxCompute
收费所困扰,比如执行了一条selectxxxfromyyy然后扣费1元,使用了机器学习后扣了1分钱,不知道如何查询到明细,也无法做优化。
云栖精选
·
2020-07-29 02:32
读懂这本书,才算读懂阿里大数据
今年双11,阿里巴巴
MaxCompute
大数据云数仓服务,单日数据吞吐量接近EB级别,任务数达到千万级,而我们所有重保高优先级任务,却都做到了按时产出;同时,我们还通过在离线混部,
阿里云云栖号
·
2020-07-29 02:57
MaxCompute
导入数据
spm=a2c4g.11186623.6.590.709b5791JljgYi具体过程如下:odps@YITIAN_BJ_MC>tunnelupload/Users/yitian/Documents/
MaxCompute
一天_pika
·
2020-07-29 01:36
MaxCompute
MaxCompute
数据开发快速入门
MaxCompute
数据开发快速入门该快速入门演示一个使用
MaxCompute
对银行贷款购房人员进行分析的完整过程。
一天_pika
·
2020-07-29 01:36
MaxCompute
上一页
6
7
8
9
10
11
12
13
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他