HDFS集群

hbase ExportSnapshot迁移hbase表

在源集群上准备快照：snapshot'credit_dict','credit_dict_snapshot20221117'list_snapshots复制快照到目标集群：hbaseorg.apache.hadoop.hbase.snapshot.ExportSnapshot
Rjunxiang·2024-08-29 16:56

HBase数据迁移实战

1.前期准备1.1确认集群使用的版本源HBase集群（以下称旧集群）和目的HBase集群（以下称新集群）的版本可能并不是一致的，特别是其底层所使用的HDFS版本信息。
网易数帆大数据·2024-08-29 16:25

分布式中间件

1.Nacos服务注册和服务发现原理图：1.服务提供方将集群信息注册到Nacos，并定期心跳包提供健康信息，宕机即剔除2.服务消费方定期拉取订阅信息，获取服务实例列表3.服务集群的负载均衡是在消费者一方进行选择负载均衡
C15751X·2024-08-29 16:54

全量、增量数据在HBase迁移的多种技巧实践

HBase全量与增量数据迁移的方法1.背景在HBase使用过程中，使用的HBase集群经常会因为某些原因需要数据迁移。
华为云技术精粹·2024-08-29 15:52

Hbase离线迁移

假设是hbase集群，那么数据存储在hdfs上。1.关闭2个hbase2.使用distcp将hdfs上的hbase数据迁移到另一个【相同路径】的hdfs上。
我要用代码向我喜欢的女孩表白·2024-08-29 15:22

【零基础02】实战企业级K8S本地部署ThingsBoard专业版集群之二：戴尔R630本地服务器安装Linux Centos7.9系统

目录1、制作服务器启动U盘1.1、制作启动U盘准备工作1.1.1、确保制作启动U盘的Windows电脑处于联网状态1.1.2、下载Rufus 烧录软件1.1.3、下载Centos镜像文件1.1.4、准备1个8G以上的U盘1.2、使用Windows电脑制作启动U盘1.2.1、鼠标双击“rufus-3.19.exe”打开烧录软件1.2.2、弹出“当前无法访问>SmartScreen”窗口，点击“运行”
龙亘川·2024-08-29 13:37

2019-10-23

macat配置mysql集群异常1：TheslaveI/OthreadstopsbecausemasterandslavehaveequalMySQLserverUUIDs问题分析问题提示主从使用了相同的
袁小胜·2024-08-29 10:24

09-redis-conf配置文件基础介绍

redis-conf配置文件基础介绍这篇文章介绍了Redis-6.2.11的配置文件中的大多数配置，但是缺少集群的相关配置和其他一些配置，望大家知晓。
风在枝头·2024-08-29 08:34

Apache Druid安装部署手册

Coordinator监控Historical处理，负责分配segments到指定的服务，确保存在HIstorical中是自平衡的2.Overlord监控MiddleManager处理和控制数据加载进druid集群
长了手的兔子精·2024-08-29 03:30

【kubernetes】kubernetes 核心组件、角色介绍

worker节点是集群中的计算资源提供者，它运行应用程序的工作负载（容器）并由主控制节点进行管理。ControlPlane硅谷总部ControlPlane相当于硅谷总部࿰
九师兄·2024-08-29 02:21

Openstack 与 Ceph集群搭建(下)： Openstack部署

文章目录文章参考部署节点准备1.修改Host文件与hostname名称2.安装NTP软件3.网卡配置信息4.开启Docker共享挂载5.安装python虚拟环境6.安装kolla-ansible7.加载AnsiblegalaxyrequirementsOpenstack安装前预配置1.配置密码2.配置multinode文件3.修改全局配置文件Openstack正式安装1.启动bootstrap-s
范枝洲·2024-08-29 01:43

Hdfs的机架感知与副本放置策略

1.介绍Apachehadoop机架感知Hadoop分布式文件系统(Hdfs)作为ApacheHadoop生态系统的的核心组件之一,通过机架感知和副本放置策略来优化数据的可靠性,可用和性能.Hdfs的机架感知和副本放置策略是其设计的关键组成部分
sheansavage·2024-08-29 01:42

39-nacos eureka zookeeper区别

支持集群部署和高可用。Eureka是Netflix开源的一款提供服务注册和发现的产品。设计思路是AP（可用性和分区容忍性）。不支
weixin_41775999·2024-08-28 22:56

Java高级技术day75：Zookeeper与Dubbo

的介绍1.Zookeeper介绍：顾名思义zookeeper就是动物园管理员，他是用来管hadoop（大象）、Hive(蜜蜂)、pig(小猪)的管理员，ApacheHbase和ApacheSolr的分布式集群都用到了
开源oo柒·2024-08-28 20:54

Ovirt中的GWT框架

参考文档：如何在ovirt中使用GWT框架为页面新增组件ovirt前端代码分析定位页面ovirt中的页面规则，以集群为例：集群列表页面MainClusterView.java，类似页面MainNetworkView.javaMainHostView.javatab
ctrlcvKing·2024-08-28 19:03

Hive 分区表 & 数据加载

1.Hive表数据的导入方式1.1本地上传至hdfs命令：hdfsdfs-put[文件名][hdfs绝对路径]例如：测试文件test_001.txt内容如下在hdfs绝对路径：/user/hive/warehouse
Wu_Candy·2024-08-28 18:22

Clickhouse 集群部署安装

ClickHouse集群部署安装1、环境准备（1）、阿里云服务器两台集群节点信息192.168.5.13ch01192.168.5.14ch02（2）、修改/etc/cloud/cloud.cfg(所有节点
想当厨子的小章同学·2024-08-28 14:59

clickhouse集群部署

单节点设置为了延迟演示分布式环境的复杂性，我们将首先在单个服务器或虚拟机上部署ClickHouse。ClickHouse通常是从deb或rpm包安装，但对于不支持它们的操作系统也有其他方法。例如，您选择deb安装包，执行:sudoapt-getinstall-yapt-transport-httpsca-certificatesdirmngrsudoapt-keyadv--keyserverhkp
林鸟鸟·2024-08-28 14:29

汇总：20个Linux服务器性能调优技巧

Linux高可用服务器集群解决方案让IT系统管理员可以从容应对许多常见的硬件和软件故障，允许多台计算机一起工
开源Linux·2024-08-28 14:58

【离线安装clickhouse集群】

离线安装clickhouse集群clickhouse介绍Clickhouse是俄罗斯yandex公司于2016年开源的一个列式数据库管理系统，在OLAP领域像一匹黑马一样，以其超高的性能受到业界的青睐。
eddianliu·2024-08-28 14:56

clickhouse集群搭建

文章目录安装clickhouse修改集群配置文件启动clickhouse集群测试集群的可用性安装clickhouse本次用了4台服务器搭建clickhouse集群，使用rpm安装方式在4台服务器上安装clickhouse
颍天·2024-08-28 14:56

k8s上的clickhouse集群部署并创建分布式表（附详细参数说明和参考链接）

k8s上的clickhouse集群部署并创建分布式表制作docker镜像创建configmap创建clickhouseservicepod创建clickhouseclientpod创建Service创建分布式表部署总体参考
KirutoCode·2024-08-28 14:56

读写分离集群搭建

目录一、配置读写分离集群1、环境说明2、数据准备3、配置主库GRP1_RWW_01配置dm.ini配置dmmal.ini配置dmarch.ini配置dmwatcher.ini启动主库设置OGUID修改数据库模式
奥德彪的蕉·2024-08-28 11:41

kubeadm部署k8s1.25.3一主二从集群(Containerd)

第一章：K8S集群部署kubernetes集群规划主机IP主机名主机配置角色10.0.0.3master12C/4G管理节点10.0.0.4node12C/4G工作节点10.0.0.5node22C/4G
陌殇殇殇·2024-08-28 11:09

SparkStreaming 如何保证消费Kafka的数据不丢失不重复

（1）一个Receiver效率低，需要开启多个线程，手动合并数据再进行处理，并且Receiver方式为确保零数据丢失，需要开启WAL(预写日志)保证数据安全，这将同步保存所有收到的Kafka数据到HDFS
K. Bob·2024-08-28 10:02

Spark on YARN

Spark提供了一个统一的编程模型，可以在单个集群上运行各种
静听山水·2024-08-28 09:26

Kubernetes (K8s) 监控方案：Prometheus 实战指南

然而，随着K8s集群规模和复杂性的增加，有效的监控变得至关重要。本文将详细介绍如何使用Prometheus构建一个全面而强大的K8s监控系统，帮助您实时掌握集群状态，快速定位问题，并优化资源利用。
ivwdcwso·2024-08-28 07:14

数据存储 - 聊聊 MongoDB 使用场景

日志系统的场景日志系统数据量特别大，如果用MongoDB数据库存储这些数据，利用分片集群支持海量数据，同时使用聚集分析和MapReduce的能力，是个很好的选择。
撸帝·2024-08-28 06:49

MongoDB 单机和集群环境部署教程

在Ubuntu上安装MongoDB2.2在CentOS上安装MongoDB2.3启动MongoDB服务2.4验证MongoDB安装2.5MongoDB基本安全设置3.单机部署注意事项二、MongoDB集群环境部署
闲人编程·2024-08-28 06:08

Kubernetes中的Kube-proxy：服务发现与负载均衡的基石

摘要Kube-proxy是Kubernetes集群中负责服务发现和负载均衡的关键组件。它通过维护集群内部的网络规则，确保网络流量能够正确地从服务访问点分发到后端的Pod上。
liuxin33445566·2024-08-28 06:07

k8s笔记 | helm包管理

Helmkubenetes包管理器，是查找，分享和使用软件构件kubernetes的最佳方式；可以做什么从头开始创建新的chart将chart打包成归档(tgz)文件与存储chart的仓库进行交互与现有的kubernates集群中安装和卸载
你的代码我的心·2024-08-28 05:58

打造扛得住的MySQL数据库架构视频教程-数据库结构优化 高可用架构设计

打造扛得住的MySQL数据库架构视频教程-数据库结构优化高可用架构设计30套数据库系列Mysql/SQLServer/Redis/Mongodb/Nosql精讲训练营项目实战，数据库设计，架构设计，性能管理，集群搭建
cd137a460a79·2024-08-28 04:10

Ubuntu下部署Hadoop集群+Hive（三）

Hive部署准备环境apache-hive-4.0.0-bin.tar.gz、mysql-connector-j-8.1.0.jar如果是离线安装的话，使用mysql-8.0.34-1.el7.x86_64.rpm-bundle.tar，在线安装的话则不用；hive下载地址：Indexof/hive(apache.org)mysqlconnector下载地址：MySQL::DownloadConn
岩屿·2024-08-28 01:07

80、k8s概念及组件介绍

k8s理解成负责自动化运维管理多个容器化的应用的集群。谷歌基于go语言开发的。
ly1435678619·2024-08-28 01:35

学习笔记六：ceph介绍以及初始化配置

k8s对接cephceph是一种开源的分布式的存储系统，包含以下几种存储类型：块存储（rbd）文件系统cephfs对象存储分布式存储的优点：Ceph核心组件介绍安装Ceph集群初始化配置Ceph安装源安装基础软件包安装
风车带走过往·2024-08-27 23:49

kubectl命令详解

1.kubectl命令帮助kubernetes集群中的管理操作几乎都可以使用kubectl命令完成#kubectl-h2.kubectl命令说明类型命令描述基础命令create通过文件名或标准输入创建资源
闫利朋·2024-08-27 22:47

ubuntu22.04使用kubeadm部署k8s集群

使用kubeadm部署一个k8s集群，1个master+2个worker节点1.环境信息操作系统：ubuntu22.04内存：16GBCPU：4网络：能够互访，能够访问互联网hostnameip备注node0110.121.218.50masternode0210.121.218.49workernode0310.121.218.48worker2
闫利朋·2024-08-27 22:17

SpringCloud之一注册中心（Eureka）

1.注册中心：服务提供者可以将服务发布到注册中心，服务消费者从注册中心获取可以进行访问的服务列表;注册中心支持集群部署，集群中的机器，数据会进行同步复制更新(replicate
sinat_31986807·2024-08-27 20:05

Centos系统配置Redis哨兵高可用架构

我们现在开始搭建Redis哨兵集群配置，一主二存+三个哨兵组成Redis哨兵集群。Redissentinel哨兵是特殊的redis服务，不提供读写服务，主要用来监控redis实例节点。
sunaq691·2024-08-27 20:01

flink&paimon开发之一：创建catalog

开发环境IDEAFlink1.17.1Paimon0.5正式本地或HDFS存储参考链接paimonjavaAPIhttps://paimon.apache.org/docs/master/api/flink-api
leichangqing·2024-08-27 16:10

Kafka命令详解：从零开始，掌握Kafka集群管理、主题操作与监控的全方位技能，理解每一条命令背后的逻辑与最佳实践

为大家推荐几篇比较好的Kafka文章：Kafka分布式集群部署实战：跨越理论，直击生产环境部署难题与解决方案，性能调优、监控与管理策略大揭秘，轻松上手分布式消息中间件-CSDN博客ApacheKafka
长风清留扬·2024-08-27 16:37

Docker方式部署K8s集群

1.1集群创建说明Kubernetes支持多种容器运行时，包括Containerd、Docker和CRI-O。
麻辣头马头·2024-08-27 16:37

CentOS-7.9通过kubeadm搭建k8s集群（解决国内无法下载flannel镜像及yaml配置问题）

CentOS-7.9通过kubeadm搭建k8s集群（解决国内无法下载flannel镜像及yaml配置问题）环境说明虚拟机软件：VmWare16pro虚拟机系统：CentOS-7.9虚拟机配置：2核CPU
林木森森一飞冲天·2024-08-27 16:06

Kubernetes中如何对etcd进行备份和还原

获取etcd证书和密钥，如果集群使用了TLS加密。设置etcdctl环境变量，如ETCDCTL_API=3（指定使用etcdv3API）。
大白菜程序猿·2024-08-27 15:32

云原生周刊：KubeSphere 宣布开源 Thanos 的企业级发行版 Whizard

开源项目推荐AdmiraltyAdmiralty是一个Kubernetes控制器系统，可以智能地在多个集群之间调度工作负载。它使用简单，并且易于与其他工具集成。
KubeSphere 云原生·2024-08-27 14:59

Kubernetes中如何对etcd进行备份和还原

在Kubernetes集群中，etcd是一个分布式键值存储系统，用于保存集群的所有数据。如果etcd数据丢失，整个集群可能会出现严重的问题。因此，定期备份etcd数据是至关重要的。
TechCraft·2024-08-27 14:56

Kubernetes中的配置管理：Secret与ConfigMap的深入解析

引言在Kubernetes集群中，配置管理是确保应用程序正常运行的关键。Kubernetes提供了两种主要的方式来存储和管理配置数据：Secret和ConfigMap。
夜色呦·2024-08-27 14:22

Kubernetes中的Controller Manager：自动化集群管理的核心引擎

摘要KubernetesControllerManager是Kubernetes集群中负责运行集群控制器的组件，这些控制器是集群自动化的核心。
夜色呦·2024-08-27 14:22

CDH 之 hive 数据迁移

当你想切换了集群想把hive迁移至新集群，两个集群之间又互不相通，一个最简单快捷的方法，就是批量导出元数据信息，同时把数据文件下载上传至新服务器的数据文件存放目录下1.导出元数据信息#database即是数据库名称
啊 这·2024-08-27 13:18

Hive 数据迁移与备份

迁移类型同时迁移表及其数据（使用import和export）分步迁移表和数据迁移表（showcreatetable）迁移数据关联表和数据（msckrepair）迁移步骤将表和数据从Hive导出到HDFS
linzeyu·2024-08-27 13:17
上一页 4 5 6 7 8 9 10 11 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他