E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
云梯
使用阿里云ODPS之点滴
趁着这次做网聚宝搜索服务化这个项目,体验了一下阿里云的重量级云产品ODPS,也就是传说中的
云梯
2。
mozhenghua
·
2014-10-07 03:00
阿里
点滴
odps
阿里云大数据产品ODPS正式商用
\目前正在运行的ODPS是阿里云团队自主实现的一套大数据处理平台(即第二代
云梯
。此前的第一代
云梯
基于Hadoop,已经
昵称4
·
2014-07-08 03:00
阿里云大数据产品ODPS正式商用
目前正在运行的ODPS是阿里云团队自主实现的一套大数据处理平台(即第二代
云梯
。此前的第一代
云梯
基于Hadoop,已经于今年上半
杨赛
·
2014-07-08 00:00
微信公众平台开发php源码
php /* *
云梯
数据 * (c)2014 www.iyunti.com All Rights Reserved */ define("TOKEN",
runthu
·
2014-03-19 18:00
微信公众平台开发php源码
个性化离线实时分析系统pora(转自taobao)
在淘宝,用户属性分析是通过每天在
云梯
上定时运行的mapreducejob来完成的,产出结果导入我们的在线kv存储
wbj0110
·
2014-03-15 20:00
架构
taobao
个性化离线实时分析系统pora
个性化离线实时分析系统pora(转自taobao)
在淘宝,用户属性分析是通过每天在
云梯
上定时运行的mapreducejob来完成的,产出结果导入我们的在线kv存储
wbj0110
·
2014-03-15 20:00
架构
taobao
个性化离线实时分析系统pora
个性化离线实时分析系统pora(转自taobao)
在淘宝,用户属性分析是通过每天在
云梯
上定时运行的mapreducejob来完成的,产出结果导入我们的在线kv存储
wbj0110
·
2014-03-15 20:00
架构
taobao
个性化离线实时分析系统pora
领导让写大数据库时代,切身实际的总结。。。。
罗马不是一天建成的,不论是GOOGLE利用大数据处理基础设施,还是淘宝的
云梯
。都是通过不断积累和实践而成。一、大数据?
滔哥
·
2014-03-07 11:00
让你提前认识软件开发(2):软件开发工程师常用的工具软件
成千上万的共产党战士搭起
云梯
,想攻破一座城池。但是城楼上面的敌人负隅顽抗,拼了命地阻击我军的进攻。双方的伤亡都很惨重,但城就是攻不下来。
zhouzxi
·
2014-03-05 20:00
构建海量数据平台-
云梯
生态系统
云梯
系统为阿里已经服务了将近5年了,其上存储着数十PB的数据,每日运行数十万的job,节点数已经逼近1
z_l_l_m
·
2014-02-18 14:00
基于Yarn的淘宝海量数据服务平台
目前的
云梯
现状 • YARN的介绍 • YARN在
云梯
的应用 • 未来展望 http://www.infoq.com/cn/presentations/hadoop2-application-of-massive-data-services-platform-based-on-yarn-taobao
coolsunchen
·
2014-02-17 10:00
海量数据
Hadoop2.0应用 - 基于Yarn的淘宝海量数据服务平台
作为其中最大的计算
云梯
平台,尝试解决目前面临单节点扩展性瓶颈及多个计算平台的资源浪费问题,在考察多个平台后引入了YARN平台。本议题介绍YARN及阿里巴巴
云梯
集群在YARN方面的尝试及目前的状态。
曹龙
·
2014-02-15 00:00
Linux免密码登录配置,sshd配置免密码登录
Linux免密码登录配置ssh配置免密码登录目的在搭建Linux集群服务的时候,主服务器需要启动从服务器的服务,如果通过手动启动,集群内服务器几台还好,要是像阿里1000台的
云梯
hadoop集群的话,轨迹启动一次集群就得几个工程师一两天时间
chwshuang
·
2014-02-12 12:00
Linux免登录配置
sshd配置免密码登录
Linux免密码登录配置
Linux免密码登录配置,sshd配置免密码登录
Linux免密码登录配置ssh配置免密码登录目的在搭建Linux集群服务的时候,主服务器需要启动从服务器的服务,如果通过手动启动,集群内服务器几台还好,要是像阿里1000台的
云梯
hadoop集群的话,轨迹启动一次集群就得几个工程师一两天时间
chwshuang
·
2014-02-12 12:00
Linux免登录配置
Linux免密码登录配置
sshd配置免密码登录
云梯
的多NameNode和跨机房之路
云梯
的多NameNode和跨机房之路发表于2014-01-1617:20| 次阅读|来源《程序员》| 1 条评论|作者罗李《程序员》杂志2013年12月刊hadoop集群namenode分布式计算摘要:
ly131420
·
2014-01-25 14:00
深入剖析阿里巴巴
云梯
YARN集群
本文将详细介绍阿里巴巴如何充分利用YARN的新特性来构建和完善其多功能分布式集群——
云梯
YARN集群。阿里巴巴作为国内使用Hadoop最早的公司之一,已开启了ApacheHadoop2.0时代。
xiyf2046
·
2013-12-11 10:00
看完阿里云的haddop
云梯
集群设计思路有感
上次去hadoop大会,听了互联网的专场,对于阿里的
云梯
这个主题颇有些印象,但是由于对hadoop纯属概念党,所以听的也不是太懂,今天在网上查了下这个
云梯
,其实网关于这个上面的还是挺多的,所以特别看了下
marvelyu
·
2013-11-28 20:08
hadoop
云梯
集群设计思路
大数据平台与技术闲话
1.阿里集团处理海量数据储存与计算系统有: a)
云梯
1系统 这个系统是基于Hadoop的。
wangjianno2
·
2013-11-21 20:00
云梯
1跨机房测试整体解决方案
云梯
1跨机房测试整体解决方案阅读本文前建议先阅读
云梯
跨机房方案介绍,了解
云梯
跨机房项目背景,难点以及解决方案。
qileilove
·
2013-11-08 14:00
binlog增量数据代替Dump DB增量解决方案
全量模块通过Tsearch基于评价以及IC的
云梯
表,join做的全量dump。因为增量通过sql的增量方式,会给DB造成很大的压力,尤其是在gmt_modified没有索引的情况,并且数量级百亿的数
A221133
·
2013-11-08 11:00
大数据
海量数据
阿里云计算资深总监唐洪谈飞天现状以及5K项目发展
2013年8月,历时4个月,阿里集团涵括
云梯
1空间优化与跨机房集群扩展、以及
云梯
2单集群规模从1500台升级到5000台,同时实现跨集群扩展的5K项目顺利取得阶段性成果。
水羽哲
·
2013-11-01 00:00
阿里云计算资深总监唐洪谈飞天现状以及5K项目发展
2013年8月,历时4个月,阿里集团涵括
云梯
1空间优化与跨机房集群扩展、以及
云梯
2单集群规模从1500台升级到5000台,同时实现跨集群扩展的5K项目顺利取得阶段性成果。
水羽哲
·
2013-11-01 00:00
阿里集团
云梯
分布式平台
概要阿里集团和淘宝网在分布式领域有非常多的积累和经验。面对的问题和数据的规模在整个业内的比较都处在经验积累的比较多的位置。从各种大规模的数据存储,各个业务线的计算,到各种数据产品的问世,过程中面临这非常多非常复杂的业务场景和系统问题,这些问题都是在小规模数据量,小规模集群和计算中无法出现的场景,这些经验,对同样将来可能面临的同行和公司可能都有借鉴的意义。演讲内容主要包括:阿里集团的分布式技术概况,
罗李
·
2013-09-23 00:00
淘宝离线日志分析、实时日志分析系统架构端倪
在淘宝,用户属性分析是通过每天在
云梯
上定时运行的mapreducejob来完成的,产出结果导入我们的在线kv存储
a221133
·
2013-09-22 09:39
日志监控
日志收集
日志统计
js
淘宝离线日志分析、实时日志分析系统架构端倪
在淘宝,用户属性分析是通过每天在
云梯
上定时运行的mapreducejob来完成的,产出结果导入我们的在线kv存储
A221133
·
2013-09-22 09:00
日志统计
日志收集
日志监控
hive表中字段显示为NULL时,HDFS文件中存储为\N
今天遇到个问题:利用java程序从
云梯
上读文件,解析出来的内容,会出现null,和\N。1.字符串null是因为,当字段=‘’时,存储为null。
cuidiwhere
·
2013-09-11 22:03
大数据
hive表中字段显示为NULL时,HDFS文件中存储为\N
今天遇到个问题: 利用java程序从
云梯
上读文件,解析出来的内容,会出现null,和\N。1.字符串null是因为,当字段=‘’时,存储为null。
cuidiwhere
·
2013-09-11 22:00
tlog数据存储
Tlog采用了hbase+
云梯
的存储方案,分别对应实时和离线的数据服务,它们在tlog中的场景描述为:实时服务—如查看近2分钟某应用的服务调用情况;检索一笔彩票订单目前的流程状态。
luoshi0801
·
2013-09-08 21:00
数据存储
Spark on Mesos: 搭建Mesos的一些问题
了解资源管理系统的话,可以先参看以下几篇文章:浅谈Borg/YARN/Mesos/Torca/Corona一类系统 多集群下资源共享方案介绍 统一资源管理与调度平台(系统)介绍 淘宝借助自己的第二代集群——
云梯
系统
zbf8441372
·
2013-08-29 21:00
spark
mesos
解决Android开发中的ADB Server didn't ACK / adb server is out of date的问题
网上很多人在说HTC sync会存在这个问题,而我的本机是安装了Bambook的
云梯
导致的。这里给一个通用的解决方法。 下载TCPView,使用管理员权限打开,找到
Heis
·
2013-06-23 22:00
Android开发
阿里集团
云梯
分布式平台:基于Hadoop的内部海量数据服务平台
阿里集团
云梯
分布式平台:基于Hadoop的内部海量数据服务平台 该文档重点讲解阿里大数据发展历程,
云梯
Hadoop服务集群,结合淘宝数据平台介绍一些案例以及未来展望。对其内容详细阅读
李航421
·
2013-05-14 09:00
hadoop
海量数据
阿里集团
分布式平台
基于Hadoop的内部海量数据服务平台
基于Hadoop的内部海量数据服务平台 该文档重点讲解阿里大数据发展历程,
云梯
Hadoop服务集群,同时讲解一些问题和挑战。对其内容详细阅读
李航421
·
2013-05-10 09:00
淘宝“
云梯
”的前世今生
对了,它还有一个很美丽的名字:“
云梯
”。近日,《网络世界》记者有幸采访到了阿里集团技术共享平台核心系统研发部海量数据技术专家罗李。作为淘宝
macyang
·
2013-02-07 22:00
欲善其事,必利其器
成千上万的共产党战士搭起
云梯
,想攻破一座城池。但是城楼上面的敌人负隅顽抗,拼了命地阻击我军的进攻。双方的伤亡都很惨重,但城就是攻不下来。
zhouzxi
·
2012-12-26 22:00
Hadoop小试牛刀之dump数据
各位好,最近小弟接到一个需求,需要dump数据从
云梯
(淘宝的hadoop环境)到TAIR(淘宝的缓存系统)。
iwinit
·
2012-12-24 15:00
hadoop
dump
Hadoop小试牛刀之dump数据
阅读更多各位好,最近小弟接到一个需求,需要dump数据从
云梯
(淘宝的hadoop环境)到TAIR(淘宝的缓存系统)。
iwinit
·
2012-12-24 15:00
hadoop
dump
Hadoop小试牛刀之dump数据
阅读更多各位好,最近小弟接到一个需求,需要dump数据从
云梯
(淘宝的hadoop环境)到TAIR(淘宝的缓存系统)。
iwinit
·
2012-12-24 15:00
hadoop
dump
个性化离线实时分析系统pora
在淘宝,用户属性分析是通过每天在
云梯
上定时运行的mapreducejob来完成的,产出结果导入我们的在线kv存储
悟时
·
2012-11-26 01:00
storm
hbase
ups
个性化搜索
分布式技术
货运软件
国内货运运输管理系统产品概述深圳市
云梯
科技有限公司《路路通货运物流软件》主要适用于各类大中小型货运物流公司,它可快捷方便地处理各货运网点之间的收发货单据及收付款往来帐,实现收货开单、车辆调度、配载发货、
yuntisoft
·
2012-10-06 16:00
云梯
货运软件
物流软件
快递软件
国际快递物流管理系统产品概述《
云梯
国际快递物流管理系统》主要适用于主营业务为国际快递、空运的中小型物流公司,为这类公司规范业务管理、精确财务管理、提升效率、扩大利润。
yuntisoft
·
2012-10-06 16:00
物流软件
快递软件
云梯软件
深圳市
云梯
科技有限公司简介
深圳市
云梯
科技有限公司(www.yuntisoft.com)是一家专业从事物流软件产品研发与服务的高科技企业,致力于为客户提供全面的物流解决方案及专业服务。
yuntisoft
·
2012-10-06 16:00
软件开发
网站建设
企业邮箱
云梯
物流软件
一个功能简单而又极具挑战的需求,这就是alibaba业务的特点。
25亿条数据,近600g,由
云梯
计算生成,大约每三天生成一次,而要入库,提供多维查询的接口和用户操作界面,最终数据估计达100亿。简单就是把
云梯
生成的文本信息入库,提供查询。
axman
·
2012-09-30 06:00
数据库
存储
timeTunnel的学习
采集数据(通过TT的client API): APP直接写 tailfile dbsync dfswriter向HDFS写数据--向
云梯
写数据格式固定,sequence file,基于
jianchen
·
2012-09-25 19:00
time
timeTunnel的学习
阅读更多采集数据(通过TT的clientAPI):APP直接写tailfiledbsyncdfswriter向HDFS写数据--向
云梯
写数据格式固定,sequencefile,基于key-valuestorm
jianchen
·
2012-09-25 19:00
Big Data系统架构
FaceBook目前采用了Hadoop+Hive的架构,Sina也是Linkedin采用了Hadoop,Kafka(messagebus)等技术淘宝:
云梯
解剖Twitter:Twitter系统架构设计分析
zhxue123
·
2012-09-14 18:00
职场新人七个不成熟额标志
标志3、甘当
云梯
默默无闻
cqkiller
·
2012-09-13 08:21
职场
新人
标志
不成熟
盛大Bambook原生支持epub的喜与忧
云梯
0.98在传输epub时会转换为snb格式,丢掉格式,只剩下纯文本和图片。升级后的0.98b版本会直接传输epub到bambook中,由bambook解析。
xdoc
·
2012-05-19 16:00
OO
提取各大类目下分享量top500的用户的需求总结
终于把这个提取靠谱数据的复杂规则需求搞定了,现在对做这次需求做一些总结: ①、接到需求时是三周以前,当时改需求的优先级并不高,所以先忙于其他淘单的优化点,之后的一周里我把提取数据的hive和会调用的接口都已经整理好,但是一直没有开始在
云梯
上执行
Yinny
·
2012-04-27 14:00
hive
HBase在淘宝的应用和优化小结
由于淘宝拥有也许是国内最大的单一Hadoop集群(
云梯
),因此对Hadoop系列的产品有比较深入的了解,也就自然
wws5201985
·
2012-04-06 17:09
优化
Google
Facebook
淘宝
实际应用
[转]hadoop的安装和使用
由于公司
云梯
用的是0.19.2版本的,所以下面就以这个版本为例,而没有采用目前最新的0.21版本。 hadoop官方网站地址:http://hadoop.apache.org 可以用以下三种支
jsczxy2
·
2012-01-05 01:00
hadoop
上一页
15
16
17
18
19
20
21
22
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他