E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
mesos
104.Kubernetes实现微服务和RPC服务支持
1.背景目前公司的paas平台由
mesos
的方案逐步想k8s转移,对于以前跑在
mesos
上的应用大致可以分为几类:单纯的负载均衡应用有明显Master和Slave之分的中间件:如redis,dubbo角色可转换的应用
doublegao
·
2020-08-01 00:43
spark2.2.0搭建standalone集群环境
1.spark的几种运行模式主要分为单机模式和集群模式,其中,集群模式支持standalone,Apache
Mesos
,HadoopYarn等模式。standalone模式是sp
meepomiracle
·
2020-07-31 20:49
spark
系列文章:云原生Kubernetes日志落地方案
前言第一次听到Kubernetes的名字是在16年,那个时候Kubernetes还处于和DockerSwarm、
Mesos
方案的“三国鼎立时代”,Kubernetes由于一系列优势(可扩展、声明式接口、
Ta oo
·
2020-07-31 11:36
Flink若干认识和基础功能
一、能力支持流批处理基于Event-Time事件处理的支持exactly-once一致性语义的保证高可用性支持多种资源管理框架:Yarn、
Mesos
、Kubernetes、Stand-alone运行应用的规模上来讲
初心江湖路
·
2020-07-30 18:22
Flink
大数据
Docker Swarm集群初探
目前涉及Docker集群的三个主要的技术无外乎Swarm、Kubernetes、
Mesos
三种。从本文开始作者将会一一实践这几种主要的Docker集群技术,话不多说,现在开始。注意:作者
weixin_34284188
·
2020-07-30 17:08
Mesos
+Marathon搭建部署
实验环境主机名IP地址运行服务安装组件
mesos
1172.16.138.201zookeeper
mesos
-mastermarathon
mesos
marathon
mesos
phere-zookeeper
mesos
2172.16.138.202zookeeper
mesos
-mastermarathon
mesos
marathon
mesos
phere-zookeeper
mesos
3172.16.138
snipercai
·
2020-07-30 16:37
Docker
spark-submit工具参数说明
执行时需要传入的参数说明Usage:spark-submit[options][appoptions]参数名称含义--masterMASTER_URL可以是spark://host:port,
mesos
selectgoodboy
·
2020-07-30 16:36
spark
Flink1.10从0到1:(三)安装和部署
集群模式包含:StandaloneFlinkonYarn
Mesos
DockerKubernetesAWSGooleComputeEngine目前在企业中使用最多的是FlinkonYarn模式。
joshua_qi
·
2020-07-30 15:30
Flink
prometheus+grafana
Prometheus是使用Golang开发的开源监控系统,被人称为下一代监控系统,是为数不多的适合Docker、
Mesos
、Kubernetes环境的监控系统之一。
zy1207757535
·
2020-07-30 11:01
运维
docker
mesos
编排(三):Marathon-lb发布application
说明:marathon-lb介入后,独占了一个从节点,所以我又添加了一个从节点slave03,不过不添加也不会影响最后的结果主节点master:10.122.163.241从节点slave01:10.122.163.247从节点slave02:10.122.163.245从节点slave03:10.122.163.2461、CreateApplication(创建之前要保证从节点上已经存在对应的d
姜小姜小
·
2020-07-30 11:49
Rancher部署Traefik实现微服务的快速发现
它支持多种后台(Rancher、Docker、Swarm、Kubernetes、Marathon、
Mesos
、Consul、Etcd、Zookeeper、BoltDB、RestAPI、file…)来自动
weixin_34179762
·
2020-07-30 10:38
DC/OS 无法获取PUBLIC_IP
或者执行某些命令的时候提示:图2或者访问接口的时候PUBLIC_IPV4是空的:图3这时候可以检查一下是否安装的时候有把public-ip配置正确,在每一个节点上包括master节点检查:cat/opt/
mesos
phere
Carltony
·
2020-07-30 09:29
新反向代理与负载均衡工具 traefik 安装配置部署详解
目前支持:Docker,Swarm,
Mesos
/Marathon,
Mesos
,Kubernetes,Consul,Etcd,Zookeeper,BoltDB,RestAPI等等后端模
kjh2007abc
·
2020-07-30 08:41
基于OpenStack和Kubernetes构建组合云平台——网络集成方案综述
在主流的容器编排管理系统Kubernetes、
Mesos
和Swarm中,Kubernetes以它活跃的社区,完整强大
腾讯开发者
·
2020-07-30 08:08
【kubernetes/k8s概念】CNI详解
现在容器平台:docker,kubernetes,
mesos
,容器网络解决方案:flannel,calico,weave。
张忠琳
·
2020-07-30 07:41
kubernetes
CNI
网络
分享Docker监控体系(Kubernetes
Mesos
监控)
PS:监控系统是整个运维环节,乃至整个产品生命周期中最重要的一环。监控的价值与体系在运维体系中,监控是非常重要的组成部分。通过监控可以实时掌握系统运行的状态,对故障的提前预警,历史状态的回放等,还可以通过监控数据为系统的容量规划提供辅助决策,为系统性能优化提供真实的用户行为和体验。这几年互联网业务的迅速发展,用户对系统的要求也越来越高,而做好监控成能为系统保驾护航,能有效提高系统的可靠性,可用性及
xiaomin_____
·
2020-07-30 05:29
dubbo
mesos
k8s集群搭建指南
一、简介AnsibleDockerDockercompose,dockerswarm,dockermachine
Mesos
,marathonKubernetes(占据80%的市场)DevOps:Devops
weixin_30505751
·
2020-07-30 02:35
运维
devops
java
CloudFoundry + OpenStack: Your Own Platform - Preview
Mesos
ontopofOpenStack、K8SontopofOpenStack
jiangytcn
·
2020-07-29 19:41
paas
[
Mesos
]框架开发手册(Framework Development Guide)
[
Mesos
]框架开发手册(FrameworkDevelopmentGuide)原文:http://
mesos
.apache.org/documentation/latest/app-framework-development-guide
hail100
·
2020-07-29 19:36
data
Flink学习笔记(基本概念)
Flink集成了所有常见的集群资源管理器,例如HadoopYARN、Apache
Mesos
和Kubernetes,但同时也可以作为独立集群运行。
里子of*
·
2020-07-29 16:00
DC/OS很难理解吗?
作者简介Ben是
Mesos
phere亚太区技术总监。
Mesos
phere一家美国的创业公司,专注于给企业带来原生云助推引擎。
科技峰行者
·
2020-07-29 11:36
cpu gpu混合集群搭建
centos7cpu-》cenos7gpu-》ubuntu1、master安装systemctlstopfirewalld&&systemctldisablefirewalldrpm-Uvhhttp://repos.
mesos
phere.io
benjen
·
2020-07-29 07:40
ELK 为什么这么流行?| GIAC 访谈
GIAC于2016年12月成功举办了第一届,今年的GIAC已经有腾讯、阿里巴巴、百度、平安、饿了么、携程、七牛、蚂蚁金服、罗辑思维、摩拜、唯品会,LinkedIn,Pivotal,
Mesos
phere,
高可用架构
·
2020-07-29 07:30
Spark命令笔录(4)-运行模式
Spark程序运行需要资源调度的框架,比较常见的有Yarn、Standalone、
Mesos
等,Yarn是基于Hadoop的资源管理器,Standalone是Spark自带的资源调度框架,
Mesos
是Apache
AI-FGQ
·
2020-07-28 20:42
BigData
Spark Log查看
(2)如果是
Mesos
模式,我们同样可以通过
Mesos
的MasterUI界面上看到相关应用程序的日志,这些日志是存
weixin_34296641
·
2020-07-28 19:12
OpenStack支持哪些容器编排引擎?
OpenStackMagnum模型——用于容器的OpenStackAPI,它支持三种主要容器编排引擎:Docker、谷歌Kubernetes和Apache
Mesos
。
weixin_33755557
·
2020-07-28 17:59
数人云|PaaS Innovation 2017开幕在即,共襄技术演进与商业碰撞盛宴
PaaS作为云计算领域新“变量”,伴随容器、
Mesos
、Kubernetes、DevOps、微服务等开源技术和概念重塑PaaS领域,PaaS正打破桎梏不断革新,为传统企业和商业继续积蓄能量。
shurenyun
·
2020-07-28 11:02
基于Chronos和Docker的任务调度系统
相关背景
Mesos
Mesos
是一个开源的分布式弹性资源管理系统。目前,Twitter、Apple等公司在大量使用
Mesos
管理集群资源。国内也有一些公司在使用
Mesos
,比如豆瓣、爱奇艺等。
Maslino
·
2020-07-28 09:14
06 Contarner Orchestration
容器编排DockerSwarmKubernetes
Mesos
NomadbyHashicorpAmazonECSGoogleContainerEngineAzureContainerService本人最喜欢的是
nick19860328
·
2020-07-28 04:55
Cloud
Infrastructure
DRF算法
背景在
Mesos
和YARN中,都用到了dominantresourcefairness算法(DRF),它不同于hadoop基于slot-based实现的fairscheduler和capacityscheduler
iteye_13202
·
2020-07-28 00:47
Kubernetes K8S 基本概述、设计架构和设计理念
在所有的容器编排工具中(类似的还有dockerswarm/
mesos
等),K
踏歌行的专栏
·
2020-07-28 00:00
Kubernetes K8S 基本概述、设计架构和设计理念
在所有的容器编排工具中(类似的还有dockerswarm/
mesos
等),K
踏歌行666
·
2020-07-28 00:00
数人云PaaS Innovation 2017,重新定义PaaS进化
它同时给传统的IT架构提出了新的挑战,新一代PaaS勇敢地接过接力棒,Docker、Kubernetes、微服务架构、DevOps理念、
Mesos
、服务网格等新的开源技术和理念层出不穷,不断革新,打破了传统
优云数智
·
2020-07-27 23:29
Spark 2.1.0的运行模式
Spark2.1.0原生支持三种集群:Spark原生提供的Standalone集群,以及外部资源调度框架Apache
Mesos
和HadoopYarn。
远太狼
·
2020-07-27 22:52
Spark
2019前端必备技能_2019年必备的软件开发人员技能,技术和语言
Flutter.io,MongoDBAtlas,Apache
Mesos
…这些技术都是什么?他们真的有必要在2019年学习吗?答案是……这取决于。
dfsgwe1231
·
2020-07-27 21:40
2019年必备的软件开发人员技能,技术和语言
Flutter.io,MongoDBAtlas,Apache
Mesos
…这些技术都是什么?他们真的有必要在2019年学习吗?答案是……这取决于。
dfsgwe1231
·
2020-07-27 21:09
设计思路.Thinking.基于Python构建一个可扩展的运维自动化平台?
热衷开源技术的研究,包括系统架构、运维开发、负载均衡、缓存技术、数据库、NOSQL、分布式存储、消息中间件、大数据及云计算、
Mesos
、Docker、DevOps等领域。
chunnidong6528
·
2020-07-27 20:13
Demo 示例:如何原生的在 K8s 上运行 Flink?
如果大家对Yarn、
Mesos
熟悉,假设给定一批裸的物理机,将资源管理系统部署上去之后,可以在此之上基于它的API或者SDK开发一些分布式软件或者应用程序。例如可以在Yarn上开发传统的Ma
ApacheFlink
·
2020-07-27 17:04
flink
DC/OS-学习地址汇总
一,官方地址类(1)安装包下载地址:dcos.io/releases/(2)github地址:github.com/dcos(3)jira地址:jira.
mesos
phere.com/projects/
gl328518397
·
2020-07-27 16:11
智领云与
Mesos
phere达成战略合作伙伴关系
近日,智领云(LinkTimeCloud)与
Mesos
phere(中国)公司正式签订了战略合作协议。双方将在企业级云计算和大数据领域展开合作,为中国的企业提供先进的技术解决方案和服务。
LinkTime_Cloud
·
2020-07-27 16:01
公司新闻
大数据
云计算
Mesosphere
智领云
战
智领云发布BDOS大数据操作系统V2.0版本,BDOS Online版本同步上线
2018年09月10日,智领云发布BDOS大数据操作系统V2.0最新企业版,通过领先的技术,提供性能稳定的大数据平台(大数据运维,数据流水线,机器学习,人工智能,流数据处理,大数据组件集成),基于
Mesos
LinkTime_Cloud
·
2020-07-27 16:01
公司新闻
大数据操作系统
大数据平台解决方案
智领云
BD
Google集群管理系统Omega详细解读
在Omega出现之前我们知道有两个典型的资源管理和调度框架,分别是YARN和
Mesos
,这两个系统虽然是两层的调度系统,但是其master节点仍然是集群进行大规模扩展的瓶颈,如果集群规模很大,那么对于某些请求将不能及时作出回应
Shao Kaiyang
·
2020-07-27 16:55
资源管理与任务调度
0900 Deploying
转载请注明出处,谢谢合作~部署的子模块暂时只提供Standalone和Yarn,k8s我不会,
Mesos
没用过集群部署集群模式概览本文档对Spark如何在集群上运行作一个简单的介绍,来帮助理解其中所包含的各个组件
Whaatfor
·
2020-07-26 15:28
深入理解spark的工作机制,spark任务提交和执行流程
SparkContext向资源管理器(可以是Standalone,
Mesos
,Yarn)申请运行Executor资源,并启动StandaloneExecutorbackend,Executor向SparkContext
有风微冷
·
2020-07-16 06:26
spark
Machine Learning With Spark--读书笔记
-基于
Mesos
:
Mesos
是一个流行的开源集群计算框架。-基于YARN:即Hadoop2,它是一个与Hadoop关联的集群计算和资源调度框架。1.1Spark的本地安装与配置推荐阅读Spark
L.Jeremy
·
2020-07-16 05:30
【云星数据---
mesos
实战系列003】:marathon实战003--marathon部署一套最简单的Nginx环境
marathon部署一套Nginx环境要求:Marathon有自己的RESTAPI,我们通过API的方式来创建一个Nginx的Docker容器。方案:首先创建如下的配置文件nginx.jsoncatnginx.json{"id":"nginx","cpus":0.2,"mem":32.0,"instances":1,"constraints":[["hostname","UNIQUE",""]],
云星数据-大数据团队
·
2020-07-16 02:13
mesos
bigdata
cloudcomputing
Docker基础 1.Docker简介
1.1docker发展方向方向语言框架等JavaEEjavaSpringMVC/SpringBoot/MybatisDockerGoSwarm/Compose/Machine/
mesos
/k8s/—-CI
GardenerHan
·
2020-07-15 23:47
docker
Spark1.0.0 运行架构基本概念
SparkApplication一般都是在集群中运行,比如SparkStandalone、YARN、
mesos
,这些集群给SparkApplicaiton提供了计算资源和这些资源管理,这些资源既可以给executor
mmicky20110730
·
2020-07-15 20:23
spark1.0.0
spark-submit spark应用程序提交和运行
用于提交sparkjarUsage:spark-submit[option][appoption]Options:--masterMaster_URLspark://host:port,
mesos
://
a627082796
·
2020-07-15 19:25
Spark学习
Spark 的执行过程
Spark支持Standalone、Yarn、
Mesos
、Kubernetes等多种部署方案,几种部署方案的原理也都一样,只是不同组件角色命名不同,但核心功能和运行流程差不多。
stone-zhu
·
2020-07-15 19:00
BigData
上一页
7
8
9
10
11
12
13
14
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他