E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
mesos
从kubernetes看如何设计超大规模资源调度系统
熟悉各种开源IaaS平台,如CloudStack,OpenStack;熟悉各种资源管理及调度框架,如Kubernetes,
Mesos
,YARN,Borg等。
horsefoot
·
2016-06-03 11:00
云计算
设计
docker
容器
云管理平台
上交所业务系统的Docker化实践
基于Docker+
Mesos
,数人云致力于打造最轻量化的PaaS平台。以下为黄成的分享,略经编辑:黄成:今天我跟大家分享一下上交所作为一个传统金融企业对Docker新技术的
cloudtechtime
·
2016-06-01 15:00
云计算
docker
red
hat
容器云
docker有哪些web管理工具比较好用
FlockerRancherOSDockerSwarm(*)Kubernetes【推荐】Docker集中化web界面管理平台shipyard【推荐】PanamaxDocker的Web管理系统:dockerweb使用
Mesos
天府云创
·
2016-05-30 18:58
docker有哪些web管理工具比较好用
FlockerRancherOSDockerSwarm(*)Kubernetes【推荐】Docker集中化web界面管理平台shipyard【推荐】PanamaxDocker的Web管理系统:dockerweb使用
Mesos
English0523
·
2016-05-30 18:00
修改CentOs7 上Docker默认文件系统DeviceMapper为OverlayFS
最近一直在研究
Mesos
,Marathon跟Docker结合的容器云平台,
Mesos
框架已经搭好,并且Marathon也可以实现简单的Docker应用管理了,然后今天尝试搭建一下
mesos
phere公司的
shanker
·
2016-05-27 19:39
docker
AUFS
DeviceMapper
修改CentOs7 上Docker默认文件系统DeviceMapper为OverlayFS
最近一直在研究
Mesos
,Marathon跟Docker结合的容器云平台,
Mesos
框架已经搭好,并且Marathon也可以实现简单的Docker应用管理了,然后今天尝试搭建一下
mesos
phere公司的
shanker
·
2016-05-27 19:39
Docker
Aufs
Devicemapper
Docker
+
Mesos
巅峰对决之Swarm、Kubernetes、
Mesos
转载自:http://dockone.io/article/1138感谢作者和编者的分享【编者的话】这篇文章对比了三大主流调度框架:Swarm、Kubernetes和
Mesos
。
古木___
·
2016-05-26 13:04
距离QCon纽约还有3个礼拜:新的演讲、播客节目和研讨会
有些最近的确认,其中包括许多思想领袖,例如:JessieFrazelle(
Mesos
phere的安全管理者,曾经的Docker维护
Wesley Reisz
·
2016-05-26 00:00
Spark
对于外部资源调度框架的支持,包括
Mesos
模式,以及HadoopYARN模式。
kimibob
·
2016-05-25 15:54
docker公开课记录
Docker的集群管理---Apache
Mesos
Docker的集群管理---GoogleKubernetesk8s
Mesos
和Kubernetes的对比:Docker与资源控制:Cgroup控制cpu
zxm790336647
·
2016-05-21 14:48
Google
资源
docker
Spark standalone下的运行过程
Spark的ClusterManager可以有以下几种部署方式:1.standalone2.
Mesos
3.YARN4.EC25.Local其中standalone方式是spark自带的部署方式,下面我们分别对没有
wangxiaotongfan
·
2016-05-18 11:00
spark
基于云平台的容器方案实践指南
同时,为了解决容器相关的资源调度、配置管理、服务发现、网络通信等问题,除了Docker公司自身在开源生态体系中的不懈努力,开源社区还涌现出了以
Mesos
和Kubernetes为代表的多种第三方方案,而AWS
代闻
·
2016-05-18 00:00
大数据索引
bigdataplatformandenginesparkhadooptezapex-coreapex-malharstreamingspark-streamingflinkstrommqkafkanosqlhbasehivecassandraphoenixkuduresourcemanager
mesos
yarnindexsolrelasticsearchserverfindzookeeperjo
cjuexuan
·
2016-05-17 00:00
nosql
scala
搜索引擎
Big Data Reference
id=2742788
mesos
http://
mesos
.apache.org/aurorahttp://aurora.apache.org/stratahttp://conferences.oreilly.com
Bryan
·
2016-05-16 20:00
Spark的三种分布式部署
目前ApacheSpark支持三种分布式部署方式:分别是standalone、sparkon
mesos
和sparkonYARN,其中,第一种类似于MapReduce1.0所采用的模式,内部实现了容错性和资源管理
u012965373
·
2016-05-16 18:00
Spark系统运行内幕机制循环流程
给底层调度器的时候是面向接口TaskScheduler的,这符合面向对象中依赖抽象而不依赖的原则,带来底层资源调度器的可插拔性,导致Spark可以运行的众多资源调度器模式上,例如Standalone、Yarn、
Mesos
sundujing
·
2016-05-15 21:00
spark
大数据工程师技能图谱(转)
大数据工程师技能图谱大数据通用处理平台 Spark Flink Hadoop分布式存储 HDFS资源调度 Yarn
Mesos
数据分析/数据仓库(SQL类) Pig Hive kylin
zhuyuping
·
2016-05-09 19:00
spark
大数据
Spark 集群与数据集RDD
四种运行模式:本地单机模式:所有spark进程都运行在同一个JVM中集群单机模式:使用spark内置的任务调度框架基于
Mesos
:
Mesos
是一个流行的开源集群计算框架基于Yarn:hadoop2,一个与
myy1012010626
·
2016-05-06 16:00
hadoop
spark
架构师特刊:Hadoop十年回顾
有人说近来Hadoop核心社区活跃度下降,又面临如Spark和
Mesos
的强大挑战。Hadoop的现状如何,未来又会怎样?说到Hadoop,有狭义和广义两种理解。
InfoQ中文站
·
2016-05-05 00:00
mesos
/apache aurora实战-安装手记
环境centos7.2
mesos
pherezookeeper安装包(最新版本)
mesos
0.28使用
mesos
pherecent安装包aurora0.13自己编译rpm包
mesos
配置文件读取顺序:/etc
qingchezhanlandetian
·
2016-05-04 15:00
mesos
Aurora
35.Spark系统运行内幕机制循环流程
给底层调度器的时候是面向接口TaskScheduler的,这符合面向对象中依赖抽象而不依赖的原则,带来底层资源调度器的可插拔性,导致Spark可以运行的众多的资源调度器模式上,例如Standalone、Yarn、
Mesos
zhou_yuefei
·
2016-05-04 11:26
spark
资源
调度
任务
TaskScheduler
35.Spark系统运行内幕机制循环流程
给底层调度器的时候是面向接口TaskScheduler的,这符合面向对象中依赖抽象而不依赖的原则,带来底层资源调度器的可插拔性,导致Spark可以运行的众多的资源调度器模式上,例如Standalone、Yarn、
Mesos
zhou_yuefei
·
2016-05-03 10:00
spark
TaskScheduler
调度
任务
资源
35.Spark系统运行内幕机制循环流程
给底层调度器的时候是面向接口TaskScheduler的,这符合面向对象中依赖抽象而不依赖的原则,带来底层资源调度器的可插拔性,导致Spark可以运行的众多的资源调度器模式上,例如Standalone、Yarn、
Mesos
zhou_yuefei
·
2016-05-03 10:00
spark
TaskScheduler
调度
任务
资源
kubernetes调度详解
熟悉各种开源IaaS平台,如CloudStack,OpenStack;熟悉各种资源管理及调度框架,如Kubernetes,
Mesos
,YARN,Borg等。
容器技术爱好者
·
2016-04-27 18:29
容器
kubernetes调度详解
熟悉各种开源IaaS平台,如CloudStack,OpenStack;熟悉各种资源管理及调度框架,如Kubernetes,
Mesos
,YARN,Borg等。
horsefoot
·
2016-04-27 18:00
源代码
云计算
docker
容器
KUBERNETES
Spark:Yarn-cluster和Yarn-client区别与联系
Spark支持可插拔的集群管理模式(Standalone、
Mesos
以及YARN),集群管理负责启动executor进程,编写Sparkapplication的人根本不需要知道Spark用的是什么集群管理
光于前裕于后
·
2016-04-26 21:18
Spark
Spark:Yarn-cluster和Yarn-client区别与联系
Spark支持可插拔的集群管理模式(Standalone、
Mesos
以及YARN),集群管理负责启动executor进程,编写Sparkapplication的人根本不需要知道Spark用的是什么集群管理
Dr_Guo
·
2016-04-26 21:00
Apache的
Mesos
和Google的Kubernetes 有什么区别?
摘要:本文来自StackOverFlow上的一个问题,主要讨论
Mesos
和Kubernetes的区别,相信我们很多人也有同意的疑问。
tantexian
·
2016-04-26 17:00
Mesos
shuffle service unusable in Spark1.6
报错提示:WARNTaskSetManager:Losttask132.0instage2.0(TID5951,spark047207):java.io.FileNotFoundException:/data1/spark/tmp/blockmgr-5363024d-29a4-4f6f-bf87-127b95669c7c/1c/temp_shuffle_7dad1a33-286f-47d2-850
breeze_lsw
·
2016-04-25 22:09
spark排错
Mesos
shuffle service unusable in Spark1.6
报错提示:WARNTaskSetManager:Losttask132.0instage2.0(TID5951,spark047207):java.io.FileNotFoundException:/data1/spark/tmp/blockmgr-5363024d-29a4-4f6f-bf87-127b95669c7c/1c/temp_shuffle_7dad1a33-286f-47d2-850
lsshlsw
·
2016-04-25 22:00
spark
spark排错
Spark Standalone完全分布模式
红字部分来源于:董的博客目前ApacheSpark支持三种分布式部署方式,分别是standalone、sparkon
mesos
和sparkonYARN,其中,第一种类似于MapReduce1.0所采用的模式
光于前裕于后
·
2016-04-24 20:31
Spark
大数据动物园
Spark Standalone完全分布模式
红字部分来源于:董的博客目前ApacheSpark支持三种分布式部署方式,分别是standalone、sparkon
mesos
和sparkonYARN,其中,第一种类似于MapReduce1.0所采用的模式
光于前裕于后
·
2016-04-24 20:31
Spark
大数据动物园
Spark Standalone完全分布模式
红字部分来源于:董的博客目前ApacheSpark支持三种分布式部署方式,分别是standalone、sparkon
mesos
和sparkon YARN,其中,第一种类似于MapReduce1.0所采用的模式
Dr_Guo
·
2016-04-24 20:00
Spark本地模式与Spark Standalone伪分布模式
红字部分来源于:董的博客目前ApacheSpark支持三种分布式部署方式,分别是standalone、sparkon
mesos
和sparkonYARN,其中,第一种类似于MapReduce1.0所采用的模式
光于前裕于后
·
2016-04-23 21:53
Spark
大数据动物园
Spark本地模式与Spark Standalone伪分布模式
红字部分来源于:董的博客目前ApacheSpark支持三种分布式部署方式,分别是standalone、sparkon
mesos
和sparkonYARN,其中,第一种类似于MapReduce1.0所采用的模式
光于前裕于后
·
2016-04-23 21:53
Spark
大数据动物园
Spark本地模式与Spark Standalone伪分布模式
红字部分来源于:董的博客目前ApacheSpark支持三种分布式部署方式,分别是standalone、sparkon
mesos
和sparkon YARN,其中,第一种类似于MapReduce1.0所采用的模式
Dr_Guo
·
2016-04-23 21:00
实录分享 | IBM马达:Kubernetes/Swarm on
Mesos
4月17日,
Mesos
爱好者在北京P2联合创业办公社迎来了第四次
Mesos
UserGroup约会,下面是来自IBM马达的分享实录。
优云数智
·
2016-04-22 00:00
swarm
ibm
mesos
如何用curl 来访问
MESOS
Scheduler HTTP API
2016年5月13日-15日,由CSDN重磅打造的2016中国云计算技术大会(CCTC2016)将于5月13日-15日在北京举办,今年大会特设“中国Spark技术峰会”、“Container技术峰会”、“OpenStack技术峰会”、“大数据核心技术与应用实战峰会”四大技术主题峰会,以及“云计算核心技术架构”、“云计算平台构建与实践”等专场技术论坛。大会讲师阵容囊括Intel、微软、IBM、AWS
少数pai
·
2016-04-21 09:23
Spark集群配置-
Mesos
phere方案
:HostnameIpMasterxd-ui192.168.1.5Slave1Xd-1192.168.1.6Slave2Xd-2192.168.1.7Slave3Xd-3192.168.1.8 #安装
mesos
_Joy
·
2016-04-15 12:00
spark
BigData
mesos
Spark简介
1.1Spark生态系统(BDAS生态系统)
Mesos
:类似于YARN的功能1.2 Spark计算模型数据处理流水线: -输入与构造RDD(ResilientDistribute
MyArrow
·
2016-04-15 08:00
基于
Mesos
和Docker的分布式计算平台
基于
Mesos
和Docker的分布式计算平台Docker圈里人针对“互联网+”时代的业务增长、变化速度及大规模计算的需求,廉价的、高可扩展的分布式x86集群已成为标准解决方案,如Google已经在几千万台服务器上部署分布式系统
mysee1989
·
2016-04-13 09:00
mesos
make install
1)先安装官方的文档说的要求执行 http://
mesos
.apache.org/gettingstarted/2)安装zlib http://zlib.net/zlib-1.2.8.tar.gz3
testwork
·
2016-04-08 17:00
实测Kubernetes和
Mesos
在高并发下的网络性能
原文出自【听云技术博客】:http://blog.tingyun.com/web/article/detail/406 随着公司业务的不断增长,我们的应用数量也有了爆发式增长。伴随着应用爆发式的增长,管理的难度也随之加大。如何在业务爆发增长的同时快速完成扩容成了很大的挑战。Docker的横空出世恰巧解决了我们的问题。利用Docker我们可以快速完成扩容缩容,且配置统一,不易出错。 在
听云APM
·
2016-04-08 11:00
docker
DCOS之
Mesos
-DNS介绍
DCOS的
Mesos
-DNS它主要提供域名解析服务,
Mesos
-DNS在DCOS框架中支持服务发现,允许应用程序和服务通过域名系统(DNS)来相互定位。
u012798391
·
2016-04-07 19:00
docker
mesos
Dcos
我所知道的云计算
新名词一个接着一个让人应接不暇,从虚拟化开始,VMware、HyperV、KVM,到云管理平台VSphere、SystemCenter、OpenStack,再到容器领域的Docker、Kubernetes、
Mesos
huangbo929
·
2016-04-05 14:15
VMware
HyperV
KVM
Op
云计算
我所知道的云计算
新名词一个接着一个让人应接不暇,从虚拟化开始,VMware、HyperV、KVM,到云管理平台VSphere、SystemCenter、OpenStack,再到容器领域的Docker、Kubernetes、
Mesos
huangbo929
·
2016-04-05 14:15
vmware
kvm
openstack
HYPERV
SystemCenter
我所知道的大数据技术
今天看到一篇有关云计算技术文章,把虚拟化和虚机集群管理OpenStack、容器Docker和容器集群管理Kubernetes、通用资源调度管理器
Mesos
和大数据处理调度管理器YARN、容器隔离微服务和
david_lv
·
2016-04-04 17:17
Spark Python 快速体验
Spark技术栈如上图所示,Spark的技术栈包括了这些模块:核心模块:SparkCore集群管理 StandaloneSchedulerYARN
Mesos
SparkSQLSpark流StreamingSpark
naughty
·
2016-04-04 14:00
mesos
集群清理(9)
###############################################################
mesos
集群清理#############################
无锋剑
·
2016-04-03 14:19
清理
Mesos
mesos
集群基础功能测试(8)
################################################
mesos
kjh2007abc
·
2016-04-03 14:57
测试
功能
mesos
上一页
23
24
25
26
27
28
29
30
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他