E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
mesos
Kubernetes + Spring Cloud 集成链路追踪 SkyWalking
分布式系统的应用程序性能监视工具,专为微服务、云原生架构和基于容器(Docker、K8s、
Mesos
)架构而设计。提供分布式追踪、服务网格遥测分析、度量聚合和可视化一体化解决方案。
7DGroup
·
2022-06-23 18:05
功能测试
性能测试
其他
springcloud-链路追踪skwalking
简介skywalking是分布式系统的应用程序性能监视工具,专为微服务、云原生架构和基于容器(Docker、K8s、
Mesos
)架构而设计。发起者是吴晟,现在是Apache项目。
gentlezuo
·
2022-06-23 18:58
java
springcloud
springcloud
skwalking
SkyWalking分布式应用监控与链路追踪
ElasticSearch2.1.2安装Agent2.2Windows安装三、启动服务四、告警附件文档SkyWalking是一个应用性能监控系统,特别为微服务、云原生和基于容器(Docker,Kubernetes,
Mesos
爱是与世界平行
·
2022-06-23 18:56
Skywarking
▷微服务框架
java
分布式
linux
大数据
如何在生产环境中使用 Docker Swarm 调度容器?
Swarm的前生今世2014年Docker在容器界越来越火,这时容器的编排工具
Mesos
和Kubernetes也开始崭露头角。此时,Docker公司也开始筹划容器的编排和集群管理工具,推出了自己的
MyySophia
·
2022-06-11 09:11
#
Docker
docker
容器
运维
最详细的 K8S 学习笔记总结
那么在这样一个百花齐放的容器时代涌现出了很多解决方案,比如
Mesos
、Swarm、Kubernetes等等,其中谷歌开源的Kubernetes是作为老大哥的存在。
霍小毛
·
2022-05-28 02:51
大数据
k8s
使用 Cilium 作为网络插件部署 K8s + KubeSphere
Cilium被集成到常见的容器编排框架中,如Kubernetes和
Mesos
。Cilium的底
米开朗基杨
·
2022-04-11 15:43
运维
kubernetes
java
docker
大数据
Kubernetes基础自学系列 | Kubernetes组件介绍
附上汇总贴:Kubernetes基础自学系列|汇总_COCOgsta的博客-CSDN博客发展经历IAAS:OpenStackPAAS:曾经三足鼎立,DockerSwam、Apache
Mesos
、Kubernetets2019
COCOgsta
·
2022-04-11 14:54
视频学习笔记
kubernetes
从容器到容器云,什么才是 K8S 的本质?
这两年,Kubernetes击败了Swarm和
Mesos
,几乎成为容器编排的事实标准,BAT、滴滴、京东、头条等大厂,都争相把容器和K8S项目作为技术重心。
张晋涛-MoeLove
·
2022-04-01 07:22
运维
kubernetes
java
编程语言
docker
从容器到容器云,什么才是 Kubernetes 的本质?
这两年,Kubernetes击败了Swarm和
Mesos
,几乎成为容器编排的事实标准,BAT、滴滴、京东、头条等大厂,都争相把容器和K8S项目作为技术重心。
qcrao
·
2022-04-01 07:21
运维
java
kubernetes
编程语言
docker
【干货-K8S系列】Kubernetes调度核心解密:从Google Borg说起
目前三大主流的容器平台Swarm,
Mesos
和Kubernetes具有不同的容器调度系统。Swarm的特点是直接调度Docker容器,并且提供和标准DockerAPI一致的
weixin_33775582
·
2022-03-25 09:33
运维
系统架构
Spark学习记录
4)
Mesos
:国内很少使用。Sp
SpringStrong
·
2022-03-01 17:00
三, Spark 四种运行环境配置总结
三,Spark运行环境Spark的运行模式有Local(也称单节点模式),Standalone(集群模式),SparkonYarn(运行在Yarn上),
Mesos
以及K8s,Windows模式等常用模式
菜菜的大数据开发之路
·
2022-02-28 10:42
#
Spark
spark
hadoop
大数据
docker
/bin/start--masterzk://localhost:2181/
mesos
--zk_hostslocalhost:21813.在线教程https://open.
mesos
phere.com/
乔伊斯
·
2022-02-21 15:14
“绞杀者模式”实现任务从
Mesos
向K8s迁移
背景我们机器学习平台上的任务最初是通过Marathon启动在
Mesos
集群上的,分布式训练框架是ps-lite。
王勇1024
·
2022-02-21 08:32
DC/OS 升级
注意:升级前一定要看一下[官方文档](https://docs.
mesos
phere.com/1.11/installing/oss/upgrading/)
Carltony
·
2022-02-20 19:40
Spark的运行模式
Spark有四种运行模式:1.Local2.Standalone3.
Mesos
(细粒度:动态的调整分配资源。)(支持细粒度/粗粒度)4.YARN(粗粒度:分配固定的资源)
_ant
·
2022-02-19 05:57
Yarn与
Mesos
本篇记录下学习资源分配与任务调度的一些内容。为什么会有Yarn?Yarn是Hadoop2的产物。提到这个问题就不得不说下Hadoop1与Hadoop2的差别。详细的内容可参考博客:https://blog.csdn.net/jiangheng0535/article/details/12946529。Hadoop1的架构是:多个Application-->JobTracker-->多个TaskTr
YG_9013
·
2022-02-17 15:55
分布式计算:Hadoop,Storm,Spark,Flink,
MeSoS
扫盲
分布式计算的核心思想在没有包裹业务之前并不复杂,简单而言,如果有一个任务(可以是查询,排序,搜索)可以被拆分为互不影响的若干个重复的小任务,那么我们就可以使用多台计算机并行的执行这些小任务。任务执行必然需要对各种资源进行调用,例如硬件,数据,网络等,这些资源的调用会形成至少3个问题:数据的一致性,如果某一个子任务对数据进行了修改,需要有策略保证其他子任务访问这块数据时得到及时更新。任务执行的时序,
凌峰
·
2022-02-16 03:34
使用docker安装spark2.4.3
spark也与hadoop有关联,但是要理解spark仅仅用到hadoop的库,并不依赖hadoop程序,它不需要安装hadoop,spark仅依赖jdk.spark有四大集群模式:standalone,
mesos
阿亚2011
·
2022-02-14 14:00
【Docker实践精粹】Yelp | 构建一个Production-Ready的PaaS平台
译文概述作为当下最火的新科技,Docker以其『一次构建,处处运行』的特性,解锁了
Mesos
与Kubernetes等用于集群界的调度工具。
灵雀云
·
2022-02-09 11:21
Spark四种分布式部署方式比较
ApacheSpark支持四种分布式部署方式,分别是standalone、sparkon
mesos
和sparkonYARN,Kubernetes其中,第一种类似于MapReduce1.0所采用的模式,内部实现了容错性和资源管理
昵称得改
·
2022-02-03 14:33
Elastic-Job使用及原理
Elastic-Job-Lite定位为轻量级无中心化解决方案,使用jar包的形式提供分布式任务的协调服务,外部仅依赖Zookeeper;Elastic-Job-Cloud采用自研
Mesos
Framework
GuangHui
·
2022-02-03 07:15
Spark -- 工作流程图
工作流程图spark工作流程图.png文字版工作流程:构建SparkApplication的运行环境(启动SparkContext),SparkContext向资源管理器(可以是Standalone、
Mesos
李小李的路
·
2022-02-02 22:57
15.kubernetes笔记 CNI网络插件(一) Flannel
现在容器平台:docker,kubernetes,
mesos
,容器网络解决
Bigyong
·
2021-12-23 07:36
【文献阅读笔记】
MESOS
CALE CONVECTIVE SYSTEMS
Title:
MESOS
CALECONVECTIVESYSTEMSJournal:ReviewsofGeophysics;Authors:RobertA.HouzeJr.Doi:10.1029/2004RG000150.1
Ytlu
·
2021-12-21 18:56
Apache Skywalking操作指南
仪表盘说明五、链路追踪六、告警配置七、插件一、简介SkyWalking是针对分布式系统的APM(应用性能监控)系统,特别针对微服务、cloudnative和容器化(Docker,Kubernetes,
Mesos
莫失莫忘X3
·
2021-11-30 14:52
第十四章 kubernetes 核心技术-调度器
目前三大主流的容器平台Swarm,
Mesos
和Kubernetes具有不同的容器调度系统。1.Swarm的特点是直接调度Docker容器,并且提供和标准Docker
年少纵马且长歌
·
2021-11-26 13:00
Spark记录(一):Spark全景概述
集群模式需要用到集群管理器,三个核心的集群管理器为:Spark自带的独立集群管理器、Yarn、
Mesos
。集群模式运行时,单个Spark任务的架构图为:其中集群管理器负责分配/回收服务器资源和监
淡墨痕
·
2021-11-06 23:00
15.kubernetes笔记 CNI网络插件(一) Flannel
现在容器平台:docker,kubernetes,
mesos
,容器网络解决方案:flannel,calico,weave。
·
2021-10-26 19:10
大数据开发之Spark 基础入门学习
指的是在集群上获取资源的外部服务,为每个sparkapplication在集群中调度和分配资源的组件,目前有三种类型:•Standalone:Spark原生的资源管理,由Master负责资源的分配•Apache
Mesos
·
2021-10-26 11:59
大数据spark
大数据开发之Spark入门
·Spark是UCBerkeleyAMPLab开发的是一种计算框架,分布式资源工作交由集群管理软件(
Mesos
、YARN)。·Spark是处理海量数据的快速通用引擎大数据培训。
·
2021-10-25 12:04
大数据spark
12.kubernetes笔记 CNI网络插件(一) Flannel
现在容器平台:docker,kubernetes,
mesos
,容器网络解决方案:flannel,calico,weave。
·
2021-10-19 19:31
Python中使用定时调度任务(Schedule Jobs)的5种方式
Kubernetes和Apache
Mesos
等使用自动伸缩扩容技术(Auto-scaling)的软件需要检查部署的应用程序的状态,为此它们使用定期运行的存活探针(LivenessProbe)。
ReganYue
·
2021-10-10 09:11
Python
python
redis
数据库
找分布式工作复习学习系列---市面分布式框架解析之Ray(四)
一、背景Ray的设计目标是比Spark、MapReduce数据流更灵活,比Orleans等Actor模型多了faulttolerance和exactly-once,比
Mesos
的两层调度更高效,比Tensorflow
加油11dd23
·
2021-10-06 10:43
5种Python使用定时调度任务的方式
Kubernetes和Apache
Mesos
等使用自动伸缩扩容技术(Auto-s
·
2021-09-23 18:40
Skywalking-01:Skywalking介绍
Applicationperformancemonitortoolfordistributedsystems,especiallydesignedformicroservices,cloudnativeandcontainer-based(Docker,Kubernetes,
Mesos
·
2021-07-28 09:00
java
枚举类型的json序列化
packagecom.qingqing.live.bean.enums;importcom.google.common.collect.ImmutableList;importjava.util.List;publicenum
Mesos
Constraint
smlrole
·
2021-06-27 18:16
2019 三月 MLFlow 社区的各种数据
继Apache
Mesos
和ApacheSpark,MLFlow做为一个Matei大神最新的开源项目。。。社区反应相当强烈,一个月都高达42万下载量!!!欢迎大家使用和贡献代码!
smilegator
·
2021-06-27 06:09
浅谈实时计算框架Flink集群搭建与运行机制
Flink不仅可以运行在包括YARN、
Mesos
、Kubernetes在内的多种资源管理框架上,还支持在裸机集群上独立部署。在启用高可用选项的情况下,它不存在单点失效问题。
·
2021-06-23 18:15
译:Flink---应用场景
除此之外,Flink可以运行在多种资源提供者上,例如YARN,Apache
Mesos
和Kubernetes,也可以以stand-alone集群方式运行在裸机之上。配置为高可用,Flink没有单点故障。
雪味伦调
·
2021-06-23 16:55
史上最全SpringCloud整合skywalking
FROMhttp://skywalking.apache.org/分布式系统的应用程序性能监视工具,专为微服务、云原生架构和基于容器(Docker、K8s、
Mesos
)架构而设计。
·
2021-06-22 21:27
Java程序员一年一次的行业盛事:GIAC 2017全球互联网架构大会
GIAC于2016年12月成功举办了第一届,而今年的GIAC已经有腾讯、阿里巴巴、百度、平安、饿了么、携程、七牛、蚂蚁金服、罗辑思维、摩拜、唯品会,LinkedIn,Pivotal,
Mesos
phere
Java架构
·
2021-06-22 17:59
入坑不亏!我们最终决定将 70w+ 核心代码全部开源
作者|一啸来源|尔达Erda公众号背景故事2017年初,我们基于DC/OS(
mesos
+marathon)开始构建端点自己的PaaS平台,核心任务就是解决公司的软件开发和部署交付效率问题,建设公司的研发效能
·
2021-06-21 20:45
Spark--spark工作模式详解(local/standalone/yarn)
Spark运行模式分类本地模式;standalone模式;sparkonyarn模式,又分未yarn-client和yarn-cluster;sparkon
mesos
模式(暂时没有了解)本地模式-localSpark
李小李的路
·
2021-06-21 15:17
Mesos
+marathon(Mac VirtualBox)搭建
49BC-AA2B-C4F582757F80.png安装Zookeeper在主机上安装Zookeeper暴露端口出来dockerrun-itd-p2181:2181--name=zookeeperzookeeper:latest安装
Mesos
-Ma
Anson_hyq
·
2021-06-19 23:59
基于K8s的机器学习平台搭建(一)
之前底层资源管理一直是基于
Mesos
+Marathon的,但随着业务的发展,
Mesos
+Marathon组合由于功能有限已经不能满足业务需求,所以我们决定对底层技术进行升级。
王勇1024
·
2021-06-19 05:53
搭建Prometheus+Grafana的云平台监控系统
现在最常见的Docker、
Mesos
、Kubernetes容器管理系统中,通常会搭配Prometheus进行监控。Prometheus[prəˈmiθju:s]普罗米修斯Prometheus基本原理是
·
2021-06-18 22:33
实时计算框架:Flink集群搭建与运行机制
Flink不仅可以运行在包括YARN、
Mesos
、Kubernetes在内的多种资源管理框架上,还支持在裸机集群上独立部署。在启
·
2021-06-18 21:57
flink大数据spark
2021-03-14 Kubernetes核心概念
企业需求:为提高业务并发和高可用,会使用多台服务器•多容器跨主机提供服务•多容器分布节点部署•多容器怎么升级•高效管理这些容器image.png容器编排系统:•Kubernetes•Swarm•
Mesos
Marathonimage.png2
阿丧小威
·
2021-06-15 01:45
史上最全!大数据开源框架技术扫盲
Ambari、Dr.Elephant、Ganglia、Zabbix、Eagle)文件系统(HDFS、GPFS、Ceph、GlusterFS、Swift、BeeGFS、Alluxio)资源调度(YARN、
Mesos
华矩数诊台
·
2021-06-12 19:11
上一页
2
3
4
5
6
7
8
9
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他