E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
mesos
Gitlab 部署在
Mesos
容器云平台 存储采用ceph 变成无状态容器实践
从单台虚拟机启动一个gitlab服务器是很容易的事情,GITLAB_HOME=pwd/data/gitlabdockerrun-d–hostnamegitlab–publish8443:443--publish80:80--publish2222:22–namegitlab–restartalways–volume$GITLAB_HOME/config:/etc/gitlab–volume$GIT
开心自由天使
·
2019-02-20 10:11
docker
mesos
Marathon
云计算
rexray
mesos
入门
Mesos
是Apache下的开源分布式资源管理框架,它被称为是分布式系统的内核。
任嘉平生愿
·
2019-02-14 09:56
SpringCloud
mesos
+Marathon 上部署经验总结
marathon+
mesos
上SpringCloud云端部署微服务经验总结:如果采用SDN+
mesos
-dns动态域名解析,配置变得非常灵活有效,因为每个docker实例有唯一IP,所以端口都可以设置一样的
开心自由天使
·
2019-02-13 10:21
Spring
Cloud
微服务
『高级篇』docker之
Mesos
微服务部署(26)
原文链接地址:『高级篇』docker之
Mesos
微服务部署(26)因本人的mac本才8g,无法同时启动4个虚拟机来完成,3个server,1个harbor。
IT人故事
·
2019-02-13 00:07
docker
mesos
容器
『高级篇』docker之服务编排了解
Mesos
(22)
原文链接地址:『高级篇』docker之服务编排了解
Mesos
(22)
Mesos
是Apache下的开源分布式资源管理框架,它被称为是分布式系统的内核。
IT人故事
·
2019-02-07 22:30
docker
容器
微服务
spark 相关总结
spark部署有几种模式spark可分为单机模式和集群模式集群模式又可分为standalone独立集群模式,yarn集群模式和
mesos
集群模式图为spark集群架构图:image.pngspark集群特点
Ivan_030c
·
2019-01-31 09:49
刚柔并济的开源分布式事务解决方案
擅长以java为主分布式架构以及以Kubernetes和
Mesos
为主的云平台方向,推崇优雅代码,对如何写出具有展现力的代码有较多研究。目前主要精力投入在将ShardingSphere打造为业
ShardingSphere
·
2019-01-25 08:00
【Spark】Spark Local 及 Spark On Standalone 环境搭建
1.6.1Spark运行模式:Local:本地运行Standalone:使用Spark自带的资源管理框架,运行Spark的应用Yarn:将Spark应用类似MapReduce一样,提交到Yarn上运行
Mesos
魏晓蕾
·
2019-01-24 11:44
BigData
云计算大数据学习分享与沉淀
大数据计算框架Flink入门
flink可以与常见的集群资源管理器进行集成(HadoopYarn,Apache
Mesos
做一个勤劳的码农
·
2019-01-19 00:00
大数据
业界docker实现的技术
Centos6.6==>K8s+Docker+Flannel+Neutron+OVS+DPDK+JFS某个容器失效,自动触发RC(保持IP丌变“迁移”)OVS-VLAN知乎Git+Jenkins(CI/CD)+
mesos
leo恒动力
·
2019-01-13 22:33
docker
架构
Docker
国外设计团队的高频设计工具与协作工具
在
Mesos
phere做设计
Mesos
phere成立至今已有5年。我们的创造了:
Mesos
phereDC/OS。
Susurratescape
·
2019-01-03 17:16
Marathon安装
环境要求Apache
Mesos
1.0.1+ApacheZooKeeperJDK1.8+DefaultJVMsettoJava8安装
Mesos
Marathon在Apache
Mesos
上运行。
王勇1024
·
2019-01-03 16:53
设置
Mesos
开机启动
系统版本:CentOSLinuxrelease7.2.1511(Core)
Mesos
版本:1.7.0
Mesos
Master1.创建文件/etc/
mesos
/
mesos
-master,在里面填写
Mesos
master
Will_4110
·
2018-12-28 17:57
spark-submit提交任务的相关参数
##参数名称##含义--clusterc3prc-hadoop#--masterMASTER_URL#可以是spark://host:port,
mesos
://host:port,yarn,yarn-cluster
liuzx32
·
2018-12-28 15:09
MLSQL平台执行python代码示例
2、可运行在EC2,HadoopYARN,
Mesos
,Kubernetes。3、可操作HDFS,Alluxio,Cassandra,HBase,Hive等多种数据。
天降攻城狮
·
2018-12-28 11:48
Mesos
安装
系统版本:CentOSLinuxrelease7.2.1511(Core)
Mesos
版本:1.7.0获取
Mesos
从Apache官网下载最新稳定版本$wgethttp://www.apache.org/
王勇1024
·
2018-12-27 10:28
京东云Kubernetes集群+Traefik实战
它支持多种后台(Kubernetes,Docker,Swarm,Marathon,
Mesos
,Consul,Etcd,Zookeeper等)。
bingli7
·
2018-12-21 18:14
Kubernetes
京东云Kubernetes集群+Traefik实战
它支持多种后台(Kubernetes,Docker,Swarm,Marathon,
Mesos
,Consul,Etcd,Zookeeper等)。
bingli7
·
2018-12-21 18:14
Kubernetes
Spark 运行架构
总体介绍三种角色Spark有本地运行模式,standalone模式,集群模式,yarn模式,
mesos
模式等多种模式。
fate_killer_liu_jie
·
2018-12-18 23:06
Spark
traefik(一) kubernetes 部署 traefik
它支持多种后台(Docker,Swarm,Kubernetes,Marathon,
Mesos
,Consul,Etcd,Zookeeper,BoltDB,RestAPI,file…)来自动化、动态的应用它的配置文件设置
喵来个鱼
·
2018-12-11 15:20
traefik
kubernetes
kubernetes
如何成为一个大数据开发工程师?
大数据通用处理平台1.Spark2.Flink3.Hadoop分布式存储HDFS资源调度Yarn
Mesos
机器学习工具Mahout1
qq_43713878
·
2018-12-01 13:25
大数据
大数据学习
大数据分析
大数据开发
Linux
Hadoop
spark
数据挖掘
Mesos
和Marathon简介和浅析
一、
Mesos
和Marathon是什么1.1
Mesos
是什么
Mesos
是什么呢,可以用这样一个例子进行说明。
polo2044
·
2018-11-28 14:10
Java后端知识
Spark运行在yarn集群上的两种提交方式
yarn集群的两种提交方式client执行原理执行流程cluster提交命令(两种)执行原理执行流程Spark集群简单介绍如前面几篇博客介绍的Spark集群分为四种:localstandaloneyarn
mesos
Hellomdk
·
2018-11-24 16:32
大数据学习笔记
Docker 批量清理 技巧
第一部分,清理那些内容第二部分,选型方案第一部分容器在docker应用生态中,容器的生成和销毁是很频繁的,不过手动去开启容器,还是利用第三方资源调度工具来开启(比如k8s、
mesos
)。
jeorch
·
2018-11-23 16:52
Docker
容器编排介绍
文章目录IaaS:PaaScloudFoundry如何被docker取代dockerswarm
mesos
kubernetesranchercoreos容器应用devopsIaaS:当今最火的技术一定是容器技术
游荡斑马
·
2018-11-08 10:02
devops
Spark集群的搭建
Spark集群介绍Spark的运行模式分为:local(本地模式)SparkonStandaloneSparkonyarnSparkon
mesos
。
PowerBlogger
·
2018-11-05 19:11
大数据学习
分布式任务框架--Elastic-job
Elastic-job-Lite和Elastic-Job-cloud组成;Elastic-Job-Lite定位为轻量级无中心化解决方案,使用jar包的形式提供分布式任务的协调服务;Elastic-Job-Cloud采用当当网自研
Mesos
Framework
格式化浅忆
·
2018-11-01 16:06
技术分享
作为大数据开发中最重要技术,spark需要掌握哪些技能呢
它可以与Hadoop和Apache
Mesos
一起使用,也可以独立使用。欢迎小伙伴们评论、转发和收藏,了解更多大数据知识可以点击“了解更多”作为大数据开
qianfeng_dashuju
·
2018-10-19 16:28
个人技术分享
flink docker 运行在
mesos
之上的部署分享
从官方网站docker镜像启动flink是比较容易的,如下:dockerrun--nameflink_jobmanager-d-tflink:1.6.1-hadoop28-scala_2.11-alpinejobmanager dockerrun--nameflink_jobmanager-d-tflink:1.6.1-hadoop28-scala_2.11-alpinetaskmanager
开心自由天使
·
2018-10-16 00:00
mesos
Marathon
大数据工程师
于是就百度汇总了一下可以学习的东西,比较全面了,包括数据分析与可视化,机器学习可以根据自己的喜好来选择大数据通用处理平台:1.Spark2.Flink3.Hadoop分布式存储:HDFS资源调度:Yarn
Mesos
S_Running_snail
·
2018-10-11 10:42
大数据学习
Kubernetes与大数据之一:使用Kubernetes scheduler运行Spark
一、前言从版本2.3.0起,Spark开始支持使用Kubernetes作为native的资源调度器,现在Spark一共支持如下四种资源调度方式:StandaloneDeployModeApache
Mesos
HadoopYARNKubernetes
cloudvtech
·
2018-10-02 09:44
kubernetes
Spark
大数据
大数据与Kubernetes
docker构建PaaS平台理论知识
mesos
集群资源管理框架(以集群的形式出现,主决定资源的分配,从负责执行executor),分配资源,提供offer给framework,不负责调度资源,千言万语都在这里了
mesos
的设计结构。
Richardlygo
·
2018-09-23 10:20
linux
Docker
Kubernetes 学习总结(1) Synopsis
同类产品dockercompose、dockerswarm、dockermachine、
mesos
、marathonKubernetes项目地址https://github.com/kubernetes
Meteor_hy
·
2018-09-20 18:37
kubernetes
synopsis
k8s
DC/OS高级安装
开始前完成DC/OS部署前准备链接:https://www.jianshu.com/p/38bcc98258fbboot节点上操作生成genconf目录#mkidr/opt/
mesos
phere/genconf
003003
·
2018-09-19 17:11
关于spark on yarn
自带的,如果一个集群是Standalone的话,那么就需要在多台机器上同时部署Spark环境3)YARN:建议大家在生产上使用该模式,统一使用YARN进行整个集群作业(MR、Spark)的资源调度4)
Mesos
Yagami_
·
2018-09-18 06:45
Docker
Dockerdocker相关技术栈:Swam、Compose、Machine、
Mesos
、k8s、Jenkins...docker是什么?
Messifan
·
2018-09-15 18:01
智领云与
Mesos
phere公司达成战略合作伙伴关系
原文链接:https://my.oschina.net/u/3859368/blog/2051825智领云与
Mesos
phere公司达成战略合作伙伴关系byLinkTimeCloud2018-08-21
chunba4694
·
2018-09-15 17:00
Kubernetes 集群中ingress使用Traefik反向代理
它支持多种后台(Docker、Swarm、Kubernetes、
Mesos
、Consul、Etcd…)来自动、动态的刷新配置文件,以实现快速地服务发现。
菲宇
·
2018-09-09 14:37
Kubernetes
docker搭建简单的nginx下载服务器
--file-store--dir---spark--dir---package--dir---cfg--dir---task--dir---personal--dir---kafka--dir---
mesos
思考的猩猩
·
2018-09-05 21:53
Spark的工作机制
4、Yarn,
Mesos
,通用的统一资源管理机制,可以在上面运行多种计算框架。Spark主要包括调度与任务分配、I/O模块、通信控制模块、容错模块、Shuffle模块。Spark按照①应用applic
Alien_lily
·
2018-08-27 10:40
3.spark运行模式
spark支持的运行模式:本地模式、本地集群模式、standalone模式、yarn模式及
mesos
模式。本地模式local、local[N]或local[N,maxRetries]。
菲立思教育
·
2018-08-25 23:44
spark
运行模式
本地模式
Kubernetes Kubernetes的四种用户部署场景
http://dockone.io/article/2359【深入浅出学习etcd】etcd为分布式系统提供可靠、高效的配置管理服务,在Docker、Kubernetes、
Mesos
等平台中扮演了越来越重要的角色
Michaelwubo
·
2018-08-24 15:11
基于Zookeeper+
Mesos
+Marathon搭建Docker集群管理平台
Mesos
概述Apache
Mesos
是一款基于多资源(内存、CPU、磁盘、端口等)调度的开源集群管理套件,能使容错和分布式系统更加容易使用。
小樱桃Cherry
·
2018-08-24 01:39
mesos
marathon
docker集群
Docker容器与虚拟化技术
使用
Mesos
管理Docker(
Mesos
+Marathon+Docker)
Apache
Mesos
是一个集群管理器,可跨分布式应用程序或框架提供有效的资源隔离和共享。它位于应用程序层和操作系统之间,可以更加轻松地在大规模集群环境中更有效地部署和管理应用程序。
cchenyz
·
2018-08-22 16:09
mesos
marathon
docker
Docker
Yum安装
mesos
+zookeeper+marathon管理docker集群
Yum安装
mesos
+zookeeper+marathon管理docker集群Apache-
Mesos
简介Apache-
Mesos
是一款基于多资源(内存、CPU、磁盘、端口等)调度的开源集群管理套件,能使容错和分布式系统更加容易使用
漂移的兔子
·
2018-08-21 08:06
mesos
marathon
zookeeper
虚拟化技术
Marathon+
Mesos
+Docker实战
Marathon+
Mesos
+Docker实战Apache
Mesos
概述Apache
Mesos
是一款基于多资源调度的开源集群管理套件,使容错和分布式系统更加容易使用实现,采用Master/Slave结构简化设计
J丶先生
·
2018-08-21 00:35
Marathon
Mesos
Docker
【Docker篇四】
Mesos
+Zookeeper+Marathon+Docker群集管理平台
Apache
Mesos
概述不同的分布式运算框架(spark,hadoop,ES,MPI,Cassandra,etc.)中的不同任务往往需要的资源(内存,CPU,网络IO等)不同,它们运行在同一个集群中,
Matbe
·
2018-08-20 21:38
mesos
zookeeper
marathon
Docker
配置多
mesos
-master环境实战
Apache
Mesos
概述Apache
Mesos
是一款基于多资源调度的开源集群管理套件,使容错和分布式系统更加容易使用实现,采用Master/Slave结构简化设计,将Master尽可能轻量级,进保存了
徐星月月月
·
2018-08-20 18:38
linux
mesos
zookeeper
Marathon+
Mesos
+Docker部署
Marathon马拉松是一个生产级的容器编排平台,用于中间层的数据中心操作系统(DC/OS)和Apache
Mesos
.为部署提供提供RESTAPI服务,有授权和SSL、配置约束,通过HAProxy实现服务发现和负载平衡
回忆总想哭
·
2018-08-18 16:33
Mesos
Docker
部署
Docker容器与虚拟化
在CentOS7上配置Marathon+
Mesos
+Docker实战
配置多台
Mesos
-master环境生产环境中ZooKeeper是以宕机个数过半来让整个集群宕机的。
何以重见
·
2018-08-18 09:24
Docker容器
上一页
16
17
18
19
20
21
22
23
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他