Federation

EF Support Relying Parties

layout:docs-defaultEntityFrameworkSupportforRelyingPartiesIdentityServerWS-Federation插件的EF支持请看IdentityServer3
灭蒙鸟·2019-11-03 14:27

Hadoop进行HA 配置后再配置Federation

因此，Hadoop又引入了Federation机制！如果你在你的Hadoop集群上搭建了HBase集群，那么第一个想拆分的Nam
虾米在海飘·2019-11-01 03:38

RabbitMQ的Federation和Shovel的使用

一、跨越集群的界限RabbitMQ可以通过3种方式实现分布式部署：集群、Federation、Shovel。
生出来，我养！·2019-10-29 16:54

K8S 生态周报| etcd v3.4.0 带来众多更新

CoreDNSv1.6.3发布federation将在1.7.0中被完全
张晋涛·2019-09-02 00:00

rabbitMQ Shovel与Federation

Shovelshovel是rabbitMQ的一个插件可以把源节点消息发送到目标节点。优点松耦合:Shovel可以在不同的Broker和集群上传递消息，源节点和目标节点可以使用不同的用户和vhosts，不同的RabbitMQ版本。支持多个版本的AMQP协议支持广域网可以容忍网络断断续续保证可靠性。原理使用首先开启插件rabbitmq-pluginsenablerabbitmq_shovelrabbi
qq_25825923·2019-07-18 11:16

HDFS Router-based Federation

上期回顾：漫谈HbaseFilterAbstractHadoop社区为了解决HDFS横向扩展的问题，早前的版本中实现了基于ViewFs的Federation架构，而在最新的Hadoop版本中，社区又实现了基于
weixin_30867015·2019-07-11 10:50

YARN Federation的架构设计

文章目录前言YARNFederation缘由YARNFederation整体架构YARNFederation的Policy策略AM跨集群间的资源调度YARNFederation的全局资源调度YARNFederation的相似设计：HDFSRouter-basedFederation引用前言对于HDFS的扩展性问题来说，很多人或许都了解过HDFSfederation的方案，一种通过横向扩展命名空间的
Android路上的人·2019-06-20 23:35

HDFS RBF的资源隔离设计

文章目录前言RBF的资源隔离和FCQ的资源隔离RBF的fairness管控原理引用前言Hadoop社区在HDFS-10467中实现了基于路由的federation功能，此功能比原先传统的HDFSfederation
Android路上的人·2019-06-15 12:30

胡海洋：Hive Metastore Federation 在滴滴的实践

出品|滴滴技术作者|胡海洋前言：本文来自滴滴基础平台大数据架构离线引擎组，针对内部hive元数据上亿级别存储方案的实践；该架构体系从根本上提高了hive元数据服务的稳定性及扩展性问题。▍背景ApacheHive是基于ApacheHadoop之上构建的数据仓库，提供了简单易用的类SQL查询语言，适合对大规模数据进行存储、查询操作，被广泛使用。Hive元数据Metadata包含用Hive创建的Data
滴滴技术·2019-06-03 00:00

Router-Based HDFS Federation 在滴滴大数据的应用

为了克服HDFS单点瓶颈存在的扩展性、性能、隔离问题，社区提出了Federation（https://issues.apache.org/jir...）方案来进行解决。
滴滴技术·2019-05-20 00:00

Prometheus监控学习笔记之Prometheus的Relabel，SD以及Federation功能

0x00k8s的监控设计k8s默认以及推荐的监控体系是它自己的一套东西：Heapster+cAdvisor+Influxdb+Grafana，具体可以看这里。包括k8s自身的HPA(HorizontalPodAutoscaler)，默认从Heapster中获取数据进行自动伸缩。（顺便提一句，当你部署完k8s集群之后，如果从Dashboard中看不到监控数据，往往就是因为你没有部署Heapster，
时光飞逝，逝者如斯·2019-04-25 14:00

01：View C++ as a federation of languages

将C++视为一个由相关语言组成的联邦而非单一的语言C++包含四个次要语言CC++仍是以C为基础。区块（blocks）、语句（statements）、预处理器（preprocessor）、内置数据类型（built-indatatypes）、数组（arrays）、指针（pointers）。但是C语言没有模板（templates）、异常（exceptions）、重载（overloading）……Obje
YiShiChangAnLuan·2019-04-24 15:09

asp.net core系列 53 IdentityServer4 (IS4)介绍

最常见的身份验证协议是SAML2p，WS-Federation、OpenIDConnect。SAML2p是最受欢迎和最广泛部署的。OpenIDConnect是三者中
花阴偷移·2019-04-11 09:00

asp.net core系列 53 IdentityServer4 (IS4)介绍

最常见的身份验证协议是SAML2p，WS-Federation、OpenIDConnect。SAML2p是最受欢迎和最广泛部署的。OpenIDConnect是三者中
花阴偷移·2019-04-11 09:00

asp.net core系列 53 IdentityServer4 (IS4)介绍

最常见的身份验证协议是SAML2p，WS-Federation、OpenIDConnect。SAML2p是最受欢迎和最广泛部署的。OpenIDConnect是三者中
花阴偷移·2019-04-11 09:00

Kubernetes+Federation打造跨多云管理服务

华为云高级工程师Fisher在CloudNativeDaysChina2019杭州站发表了名为《Kubernetes+Federation打造跨多云管理服务》的议题，介绍了基于Federation的多
容器魔方·2019-04-09 18:03

RabbitMQ分布式集群架构

功能和原理设计集群的目的允许消费者和生产者在RabbitMQ节点崩溃的情况下继续运行通过增加更多的节点来扩展消息通信的吞吐量1集群配置方式RabbitMQ可以通过三种方法来部署分布式集群系统，分别是：cluster,federation
JAVA努力中·2019-04-01 15:57

RabbitMq（2）——Federation

1.Federation是什么Federation是一个RabbitMQ官方插件。
Gaoxiangggg·2019-03-25 09:17

搭建NameNode联盟

一、NameNode的联盟（Federation）接收客户端的请求缓存1000M的元信息问题：（1）分摊NameNode压力（2）缓存更多的元信息搭建NameNode的联盟1、规划NameNode：bigdata112bigdata113DataNode
pengjunzhen·2019-03-03 23:06

hadoop Federation联邦机制介绍

前面的博客介绍了HDFSHA的实现方式,HA主要解决了"单点故障"的问题,但是在系统扩展性、整体性能和隔离性方面仍然存在问题。（1）系统扩展性方面，元数据存储在NN内存中，会受到NN内存上限的制约。（2）整体性能方面，吞吐量受单个NN的影响。（3）隔离性方面，一个程序可能会影响其他运行的程序，如一个程序消耗过多资源导致其他程序无法顺利运行。HDFSHA本质上还是单名称节点。HDFS联邦可以很好的解
流一&·2019-02-02 11:08

Hadoop之NameNode Federation图文详解

一.前言1.NameNode架构的局限性（1）Namespace（命名空间）的限制由于NameNode在内存中存储所有的元数据（metadata），因此单个NameNode所能存储的对象（文件+块）数目受到NameNode所在JVM的heapsize的限制。50G的heap能够存储20亿（200million）个对象，这20亿个对象支持4000个DataNode，12PB的存储（假设文件平均大小为
qq_43193797·2019-01-11 08:02

YARN的Federation特性

本文档描述了一种基于联邦（federation）的方法，通过联合多个YARN子集，将单个YARN集群扩展到数万个节点。
盗梦者_56f2·2018-12-26 21:08

干货：如何将Hadoop存储容量提升4倍？

原文链接：https://blog.csdn.net/D55dffdh/article/details/82423831本文主要介绍如何通过Federation使用多个独立的NamenodesNamespaces
首席数据师·2018-12-06 15:40

干货：如何将Hadoop存储容量提升4倍？

原文链接：https://blog.csdn.net/D55dffdh/article/details/82423831本文主要介绍如何通过Federation使用多个独立的NamenodesNamespaces
首席数据师·2018-12-06 15:40

KubeCon China 2018 "MVP" from PPT

传统v.s.微服务虚拟机v.s.容器k8sk8s的federation可以研究的部分：-filebeat（之前就了解过一些）-open-falcon-tcpcopy-chaosmonkey典型企业架构中的
moooofly_28e4·2018-12-06 13:25

[OIDC in Action] 3. 基于OIDC（OpenID Connect）的SSO（添加Github OAuth 2.0的支持）

OIDC的OpenIDProvider来实现的，OpenIDProvider简称OP，OP是OIDC的一个很重要的角色，OIDC用它来实现兼容众多的用户认证方式的，比如基于OAuth2，SAML和WS-Federation
blackheart·2018-12-01 10:00

Kubernetes Federation整体架构解读（v1、v2版本）

近期云原生圈中多云(Multi-Cloud)和混合云的概念受到了很多关注，通过IBM、Vmware这俩笔收购不难看出，云服务商正在相继开拓混合云市场。在IBM收购Redhat的声明中，俩家公司强调它们将联合推动基于kubernetes的混合云解决方案，并致力成为多云和混合云市场的领导者。VMware对Heptio的收购中也表示，将加强PKS与Heptio产品的合作，通过Kubernetes实现跨多
fisherxu1·2018-11-17 17:30

大数据笔记03--高可用的完全分布式HDFS及HDFS操作

常用操作高可用的完全分布式HDFS存在的问题NameNode单点故障，造成整个集群不可用，即可用度低解决：高可用（HighAvailability），通过备用NN解决NameNode内存受限，影响扩展性解决：联邦（Federation
KissshotAHUB·2018-10-12 20:47

HDFS（NameNode）的联盟：Federation

HDFS（NameNode）的联盟：Federation，配置HDFS联盟，多个NameNode节点同时存活，根据代理配置的路由规则处理客户端不同的请求，实现负载均衡，同时也可以缓存更多的元信息，它与HA
移望yuan·2018-09-20 17:45

Hadoop2.x新特性：HA、Federation、快照

NameNodeHA（1）基于NFS共享存储解决方案（2）基于QuromJournalManager（QJM）解决方案NameNodeFederation（1）存在多个NameNode，每个NameNode分管一部分目录（2）NameNode共用DataNode一、HDFS的新特性HA(一)HDFS的HA机制Hadoop2.2.0版本之前，NameNode是HDFS集群的单点故障点，每一个集群只有
菜鸟cxy·2018-06-17 09:48

详解hadoop之二：HDFS Federation(联邦)

hdfsfederation即hdfs的联邦，可以简单理解为多个hdfs集群聚合到一起，更准确的理解是有多个namenode节点的hdfs集群hadoop1.x的hdfs架构主要由namespace（命名空间）和BlockStorage（块的存储）两层组成1.namespace由目录、文件、块组成。支持创建、删除、修改、列举命名空间相关系统的操作2.BlockStorageblockmanagem
bluedream·2018-05-30 20:16

简单聊聊HDFS RBF第二阶段工作近期的一些进展

如果还有同学对RBF完全不太了解的，可以先阅读这篇博文：HDFS基于路由的Federation方案.主要改进点在这里
Android路上的人·2018-05-05 21:09

RabbitMQ 相关问题总结--RabbitMQ 如何确保消息发送和消费？

c.节点之间需要运行相同版本的RabbitMQ和Erlang2.federation部署在广域网，允许单台服务器上的交换机或者队列，接收发布
yunlielai·2018-04-10 17:41

Hadoop HDFS Federation 配置

一：系统环境配置二：编辑改变hadoop的配置文件三:启动服务节点：四:HDFSFederation环境测试一：系统环境配置：承接在上文档hadoop分布式的文档进行部署二：编辑改变hadoop的配置文件编辑core-site.xml文件：master.hadop.com的core-site文件配置vimcore-site.xmlfs.defaultFShdfs://master.hadoop.c
flyfish225·2018-04-10 12:44

[HDFS Manual] CH6 HDFS Federation

HDFSFederationHDFSFederation.11Background.12.多个namenode/namespace.12.1关键好处...13联合配置...13.1配置...13.2格式化namenode.13.3更新老的release并且配置联合...13.4增加新的namenode到已经存在的cluster.14管理集群...14.1启动和关闭集群...14.2均衡器...14
Fanr_Zh·2018-03-30 16:00

Kubernetes 联邦机制介绍

我的博客链接：http://blog.geekidentity.com/k8s/concepts/cluster-administration/federation-cn/Federation（联邦）此页面解释了为什么以及如何使用联邦来管理多个
geekidentity·2018-03-17 15:43

阿里云上Kubernetes集群联邦

Federation集群联邦可以一定程
一闪一闪亮晶晶1313·2018-03-12 17:58

kubernetes federation 工作机制之资源对象同步

01前言希望通过本文最简单的方式向熟悉k8s的人说明白其上的federation是干什么的，如何工作的。
hxpjava1·2018-02-13 20:52

k8s与监控--从kubernetes监控谈prometheus的federation机制

前言有时候对于一个公司，k8s集群或是所谓的caas只是整个技术体系的一部分，往往这个时候监控系统不仅仅要k8s集群以及k8s中部署的应用，而且要监控传统部署的项目。也就是说整个监控系统不是部署在k8scluster中。非in-cluster的prometheus怎么监控k8s是今天需要讨论的问题。在上一篇文章解读了prometheus提供的监控k8s的配置文件，我们知道主要是采集node，cad
iyacontrol·2018-02-09 00:00

聊聊HDFS RBF第二阶段的主要改进

前言HDFSRBF特性（基于路由的Federation解决方案）已经在ApacheHadoop3.0.0中正式发布了，此特性的发布将会大大方便于广大用户多于多集群的使用。
Android路上的人·2018-02-03 21:03

prometheus2.0 联邦的配置

prometheus2.0的联邦（又称Shard）搭建方法，一些理论知识就不贴了，自己去google扒吧：官网对于联邦的介绍：https://prometheus.io/docs/prometheus/latest/federation
我的二狗呢·2018-01-17 22:48

Hadoop Federation + HA 搭建（一） – 环境准备

开发环境和工具MACOSParallelsDesktop12SecureCRTSecureFXhadoop环境Centos7jdk-8u101-linux-x64Hadoop2.8.1zookeeper-3.4.10集群节点配置IpAddrHostName10.211.55.111wpixel0110.211.55.112wpixel0210.211.55.113wpixel0310.211.55
Wpixel·2018-01-15 14:18

HDFS RBF（基于路由的federation）的全局配额管理方案

前言前不久时间，ApacheHadoop发布了新的基线版本-Hadoop3.0.0正式发布，过去一段时间我们看到的发布版本都是各种3.0alpha，beta版本。此次Hadoop3.0正式发布，具有非常重大的意义。在此次Hadoop3.0版本中的HDFS模块，除了EC（纠删码）外，还有一个Feature特性也值得我们关注–RBF（Router-basedFederation，基于路由的Federa
Android路上的人·2017-12-31 16:04

HDFS基于路由的Federation方案

其中关于HDFS模块的一个重要功能是HDFSRouterFederation（基于路由的Federation）。有人可能好奇，这个功能与目前HDFS支持的federation功能有什么区别呢？
Android路上的人·2017-11-19 16:44

Kubernetes的多集群管理实践

Kubernetes在1.3版本之后，增加了“集群联邦”Federation的功能。这个功能使企业能够快速有效的、低成本的跨区跨域、甚至在不同的云平台上运行集群。
Docker_·2017-11-13 00:00

Kubernetes使用集群联邦实现多集群管理

Kubernetes使用集群联邦实现多集群管理Kubernetes在1.3版本之后，增加了“集群联邦”Federation的功能。
Kubernetes中文社区·2017-10-30 09:52

Kubernetes使用集群联邦实现多集群管理

一、Kubernetes集群联邦介绍二、Kubernetes使用集群联邦实现多集群管理Kubernetes在1.3版本之后，增加了“集群联邦”Federation的功能。这个功能使
bobozhangshao·2017-10-24 20:39

HA运行原理详解

1.HAhadoop集群拥有多个namenode，一个为activenamenode，一个为standbynamenode这两个namenode组建成一个nameserver也就是联邦（federation
坚持的道路注定孤独·2017-09-05 21:32

HDFS2的新特性：HA和Federation

一、HDFS的新特性HA(一)HDFS的HA机制Hadoop2.2.0版本之前，NameNode是HDFS集群的单点故障点，每一个集群只有一个NameNode，如果这个机器或者进程不可用，整个集群就无法使用，直到重启NameNode或者新重启一个NameNode节点。影响HDFS集群不可用主要包括以下两种情况。(1)类似机器跌宕这样的意外情况将导致集群不可用，只有重启NameNode之后才可使用。
converoscar·2017-08-29 09:02

Hadoop入门（3）——HA和Federation

关系型数据库的类比HA和Federation都是HDFS发展过程的必然产物，对应于关系型数据库就是数据库的高可用和拆分。
WayBling·2017-08-22 18:20
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他