mesos

Spark 集群与数据集RDD

四种运行模式：本地单机模式：所有spark进程都运行在同一个JVM中集群单机模式：使用spark内置的任务调度框架基于Mesos:Mesos是一个流行的开源集群计算框架基于Yarn:hadoop2，一个与
光脚丫丫·2020-07-02 13:00

spark集群部署模式概览

运行图SparkContext可以连接不同的集群管理器（Spark的standaloneclustermanager/Mesos/YARN），这层抽象使得spark可以利用不同的底层设施。
pcz·2020-07-02 08:27

大数据系列八：Flink实时流计算-时间窗口（Kafka to MySQL）

二.概念Flink的集群部署模式：Standalone(最简单,缺点资源隔离做的不太好，存在deployjob不均衡),YARN（比较成熟，常用于生成环境）,Mesos,Docker。
henry.zhu·2020-07-01 23:33

Mesos配置

ApacheMesosMesos和Yarn一样，是一个资源统一管理与调度平台一、Mesos基本术语1.master->负责framework和slave，并将slave上的资源分给framework2.
一只小青鸟·2020-06-30 22:27

分布式作业调度框架——Elastic-Job

Elastic-Job分为lite和cloud两个相对独立的版本，lite版为轻量级去中心化的版本，cloud版则是基于Mesos+Docker方案提供了资源治理、应用分发和服务隔离的功能。
zuhizo·2020-06-30 19:22

marathon 订阅事件

参考:https://mesosphere.github.io/marathon/docs/event-bus.html启用marathon订阅功能./bin/start--master...
wangqiaoshi·2020-06-30 14:34

Spark的四种运行模式(1.2.1)

SparkonMesos模式Spark客户端直接连接Mesos。不需要额外构建Spark集群
zhangxinrun_业余erlang·2020-06-30 14:44

spark的优点与理论

一方面，感谢Scala语言的简洁和丰富表达力；另一方面，Spark很好地利用了Hadoop和Mesos（伯克利另一个进入孵化器的项目，主攻集群的动态资源管理）的基础设施。
磊子-许·2020-06-30 04:00

kubernetes和Swarm，你站哪一队？

背景当前主流的容器集群管理技术，包括了Docker官方的DockerSwarm、Twitter背书的Mesos和Google背书的Kubernetes。由
_JasonWang_·2020-06-29 19:50

Flink 1.10 细粒度资源管理解析

相信不少读者在开发Flink应用时或多或少会遇到在内存调优方面的问题，比如在我们生产环境中遇到最多的TaskManager在容器化环境下占用超出容器限制的内存而被YARN/Mesoskill掉[1]，再比如使用
Ververica·2020-06-29 14:18

学习笔记——大数据——待了解的问题

以下为摘抄：现如今，为了应对大数据的这几个特点，开源的大数据框架越来越多，越来越强，先列举一些常见的：文件存储：N、Mesos日志收集：Flume、Scribe、Logstash、Kibana消息系统：
weixin_42583286·2020-06-29 05:07

MesoNet: a Compact Facial Video Forgery Detection Network 论文阅读

主要思想是基于中层的语义进行检测，MesoNet是mesoscopicnetwork，mesoscopic是细观、介观的意思，在原文中有对这一点进行说明Weproposetodetectforgedvideosoffacesbyplacingourm
独孤天·2020-06-28 22:17

Kubernetes Meetup杭州站：核心Maintainer、容器服务老司机带你刷新K8S技能库

目前来看，不论从社区关注度还是实践案例角度，Kubernetes都已经超越Mesos和DockerSwarm，成为最受欢迎的容器编排技术。
网易云基础服务·2020-06-28 21:10

Python项目容器化实践 - 编排方案: Mesos+Marathon

在生产环境中不用DockerCompose如果想在生产中使用容器，应该选择21云盒子來部署为什么呐？其实也蛮好理解的:DockerCompose是单机版的开发套件，类似于容器环境下的Systemd。在实际的生产环境中即便是初创公司往往也有多台服务器(物理机)，需要运行少则几百多则几万的容器，这面临非常多的问题，举几个例子:跨越多台服宿主机对容器管理(增删改查)。不同服务器上的容器之间的通信问题。C
tobyglei·2020-06-28 19:00

Apache Kylin Spark Cubing on Kubernetes 初探

背景介绍相信凡是关注容器生态圈的人都不会否认，Kubernetes已经成为容器编排调度的实际标准，不论Docker官方还是Mesos都已经支持了Kubernetes。
weixin_34405332·2020-06-28 18:23

头条云计算

跟进业界发展趋势，参与开源社区，持续改进优化云计算相关开源组件职位要求：1、本科及以上学历，计算机、通信等相关专业2、熟悉Openstack、Docker、Swarm、Kubernetes，CoreoS、Mesos
持续成长的mage·2020-06-28 18:46

Kubernetes性能测试实践

市场上有各种各样的容器编排工具，如Docker原生的Swarm、Mesos、Kubernetes等，其中Google开发的Kubernetes因为业界各大巨头的加入和开源社区的全力支撑，成为了容器编排的首选
weixin_34198762·2020-06-28 13:35

istio 服务发现和负载平衡（理论）

像Kubernetes，Mesos这样的平台已经为基于容器的应用程序提供了这样的功能。基于VM的应用程序存在大量解决方案。服务发现：Pilot消费
weixin_34163741·2020-06-28 12:19

kubernetes实践指南（一）

swarm、machinedockercompose：适用于单机，容器编排定义dockerswarm：对所有Docker宿主机资源整合，集群管理dockermachine：初始化Docker环境，跨平台支持mesos
weixin_34097242·2020-06-28 11:33

SparkContex源码解读（一）

SparkContext（简称sc）是Spark程序的主入口，代表一个连接到Spark集群（Standalone、YARN、Mesos三种集群部署模式）的连接，能被用来在集群上创建RDDs、计数器（accumulators
lehi·2020-06-28 10:10

深入玩转K8S之如何访问业务应用（Traefik-ingress篇）

它支持多种后台(Docker,Swarm,Kubernetes,Marathon,Mesos,Consul,Etcd,Zooke
weixin_33955681·2020-06-28 08:58

当当网Docker应用实践

本次分享主要介绍当当网个性化推荐组应用Docker进行应用部署以及小团队试水Docker的的若干经验，分享主要包括以下几点：现有应用Docker化的过程Docker化的过程结合Jenkins的自动化构建使用Mesos
weixin_33834075·2020-06-28 06:20

Kubernetes的四种用户部署场景

【深入浅出学习etcd】etcd为分布式系统提供可靠、高效的配置管理服务，在Docker、Kubernetes、Mesos等平台中扮演了越来越重要的角色。
weixin_33759269·2020-06-28 04:55

Rancher集群化docker管理平台部署、特性及破坏性测试。

rancher是一个docker集群化管理平台，相对于mesos和k8s架构，rancher的部署管理非常简单方便。并且功能丰富。如下为本人绘制的逻辑架构图。
??yy·2020-06-28 04:41

docker和k8s的概念-IaaS、PaaS、SaaS 的区别

Kubernetes概述openstack，docker，mesos，k8s什么关系？
weixin_30917213·2020-06-28 02:04

《动物农场》-乔治・奥威尔【原创】

GlobalFarm—Reviewonasastartwesterndevelopmentmuseum——@晓声默Everysinglestorydepictedwithananimalperspectiveseemsridiculous.Forinstance,thecatinNatsumeSoseki'swork
晓声默·2020-06-28 02:48

新闻网大数据实时分析可视化系统项目——16、Spark2.X集群运行模式

1.几种运行模式介绍Spark几种运行模式：1）Local2）Standalone3）Yarn4）Mesos下载IDEA并安装，可以百度一下免费文档。
weixin_30709061·2020-06-27 23:01

k8s学习笔记-架构和安装

docker编排dockercompose单机dockerswarm集群dockermachine预处理工具mesos资源分配工具，不能直接运行容器marathon运行容器框架kubernetes(k8s
weixin_30627341·2020-06-27 22:58

CDN边缘节点容器调度实践（上）

过去，又拍云数据中心用的是基于Mesos的容器调度平台。它把数据中心的CPU、内存、磁盘等抽象成一个资源池，Me
weixin_30493321·2020-06-27 20:49

Docker stack实践

stacks1.可以在docker-compose.yml中增加多个servicesdockerengine1.12新特性1.内置服务编排机制：目前有DockerSwarm、Kubernetes以及Mesos
Superwind20·2020-06-27 12:47

Flink的部署方式概述

随着运维模式的发展变化，docker和kubernetes成为新时代的事实标准，基于Mesos的部署方式会变少。下面对自己部署的情况概述下，说明下什么情况使用什么模式。
vkingnew·2020-06-27 11:48

Hadoop学习笔记（六）（Spark + Flink + Beam）

spark:计算框架（速度，易用，通用性）Mapreduce是进程级别的，Spark是线程级别的Spark生态系统：DBAS（BerkeleyDataAnalyticsStack）Mesos，HDFS，
无影风Victorz·2020-06-27 11:02

Mesos---分布式资源管理框架

“Mesos是Apache下的开源分布式资源管理框架，它被称为是分布式系统的内核。Mesos最初是由加州大学伯克利分校的AMPLab开发的，后在Twitter得到广泛使用”------百度百科。
行者小朱·2020-06-27 02:21

Swarm、Fleet、Kubernetes、Mesos - 编排工具的对比分析

【编者的话】此篇文章是《UsingDocker》一书的作者AdrianMouat编写，详细对比分析了Swarm、Fleet、K8s以及Mesos的区别。
LarryHai6·2020-06-27 01:53

Kubernetes(一) - Docker管理工具

Kubernetes(一)-Docker管理工具虽然Docker已经很强大了,但是在实际使用上还是有诸多不便,比如集群管理,资源调度文件管理等等,那么在这样一个百花齐放的容器时代涌现出了很多解决方案,比如Swarm,Mesos
文振熙·2020-06-27 00:45

Spark Scheduler内部原理剖析

SparkScheduler内部原理剖析分布式运行框架Spark可以部署在多种资源管理平台，例如Yarn、Mesos等，Spark本身也实现了一个简易的资源管理机制，称之为Standalone模式。
yanzhelee·2020-06-26 22:46

谈谈我对Harbor认识

Harbor是什么第一次听到这个名字应该是2016年初的时候，那是在容器技术已经兴起的，各个容器管理平台正处于群雄逐鹿的时候，mesos、kubernetes、swarm等被国内外各个厂商用来作为容器的管理系统
u010278923·2020-06-26 22:54

Apache Flink 1.10 TaskManager 内存管理优化

这些最近引入的更改做到了对内存消耗提供了严格的控制，使得Flink在各种部署环境（例如Kubernetes，Yarn，Mesos）更具有适应能力，在本文中，我们将介绍Flink1.10中的内存模型、如何设置和管理
zhisheng_blog·2020-06-26 21:39

【CCTC 2017】CSDN独家专访Mesosphere联合创始人兼CTO Tobias Gunter Knaup

其中，Keynote演讲嘉宾，CSDN内容战略合作伙伴Mesosphere联合创始人兼CTOTobiasGunterKnaup（以下简称Tobi）应邀首次来华，
科技峰行者·2020-06-26 15:26

CSI: 一个更通用的标准化容器存储接口

作者简介BenjaminHindman,美国Mesosphere公司创始人，首席架构师，CNCF技术委员会委员。ApacheMesos项目管理委员会主席，项目的创造者之一。
科技峰行者·2020-06-26 15:26

自动化配置管理工具Puppet,Chef, Ansible等

,Chef,Ansible之间选择https://blog.csdn.net/bvboca/article/details/53374244今天我们可能会用到很多部署工具，DockerCompose，Mesos
sun007700·2020-06-26 15:27

dcos下rexray服务的配置

在dcos环境下，rexray服务的默认配置文件为/opt/mesosphere/etc/rexray.conf，而其服务文件则是/etc/systemd/system/dcos-rexray.service
styshoo·2020-06-26 15:08

为什么我要选择使用Yarn来做Docker的调度引擎

Mesos和Yarn都是非常优秀的资源调度框架，社区也有很多的人分析二者的区别以及使用场景。之前InfoQ也有发问聊过二者的关系。
刘星石·2020-06-26 14:55

大数据工程师技能图谱

TeamStuQ/skill-map/blob/master/data/map-BigDataEngineer.md），仅供参考大数据通用处理平台SparkFlinkHadoop分布式存储HDFS资源调度YarnMesos
乐姐·2020-06-26 14:49

大数据工程师技能图谱

大数据通用处理平台SparkFlinkHadoop分布式存储HDFS资源调度YarnMesos机器学习工具MahoutSparkMlibTensorFlow(Google系)AmazonMachineLearningDMTK
唐大麦·2020-06-26 14:22

常见大数据框架

HadoopMapReduce、Spark流式、实时计算：Storm、SparkStreaming、S4、HeronK-V、NOSQL数据库：HBase、Redis、MongoDB资源管理：YARN、Mesos
小学生ing·2020-06-26 11:37

为docker ps命令添加服务名称

/bin/bashforMESOS_CONTAINER_NAMEin`dockerps|awk-F'''{print$NF}'`doserverid=`ps-ef|grep$MESOS_CONTAINER_NAME
这个昵称很纠结·2020-06-26 07:44

生产环境的开源容器管理平台--Rancher入门教程(1): Environment

Rancher是一个用于部署和管理生产环境的容器的开源平台,它与Kubernetes/Mesos/DockerSwarm进行集成使得在任何硬件环境上容器化应用变得触手可及.在这个系列的教程中我们将会学习如何使用
蒋光明123·2020-06-26 07:36

rancher跟k8s有那些不同

2、支持多种调度器：通过环境模板，很容易地创建和部署Cattle、Swarm、K8S、Mesos容器集群管理调度平台。
s2421458535·2020-06-26 06:38

Rancher跟k8s有那些不同

2、支持多种调度器：通过环境模板，很容易地创建和部署Cattle、Swarm、K8S、Mesos容器集群管理调度平台。
圈可点·2020-06-26 03:19
上一页 10 11 12 13 14 15 16 17 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他