大规模集群

奇葩的迎检

据说这一回省里边直接下来检查，而我们学校作为西部山区学校的样板，只要是大规模的高层次的检查，绝对逃不掉。这一周大会开了开小会，政教处给老师们布置的任务都是交给你怎么应付检查。
过河小卒2008·2024-08-26 19:00

redis分片集群

1.为什么使用分片集群？主从和哨兵集群模式可以解决高并发和高可用的问题，依然存在两个问题没有解决：海量数据的存储问题；高并发写的问题；使用redis分片集群能够解决。2.redis分片集群原理？
求知耶·2024-08-26 18:10

[java][集群]consul集群安装

/usr/local/bin/consulagent-server-data-dir=/tmp/consul-node=server-1-bind=192.168.3.110-bootstrap-expect3-client=0.0.0.0-ui/usr/local/bin/consulagent-server-data-dir=/tmp/consul-node=server-2-bind=192
awonw·2024-08-26 17:05

spring-batch介绍

SpringBatch是一个用于处理大规模批量数据的框架，它是SpringFramework的一部分，专门设计用于处理批量任务的需求，如大规模数据导入、导出和转换。
l23456789o·2024-08-26 17:00

java操作zookeeper

java操作zookeeper文档linux安装java-centos安装java-linux配置java环境变量zookeeper单机安装zookeeper集群安装zookeeper客户端命令行操作、
shuair·2024-08-26 16:59

基于Zookeeper搭建Kafka高可用集群

基于Zookeeper搭建Kafka高可用集群一、Zookeeper集群搭建为保证集群高可用，Zookeeper集群的节点数最好是奇数，最少有三个节点，所以这里搭建一个三个节点的集群。
数字游牧人0v0·2024-08-26 16:58

zookeeper+KAFKA 集群搭建

它是一个为分布式应用提供一致性服务的软件，提供的功能包括：配置维护、域名服务、分布式同步、集群管理等。
懵逼的运维弟弟·2024-08-26 16:28

（十五）Flink 内存管理机制

这在很大程度上影响了系统的稳定性，因此很多框架都实现了自己的内存管理，从而更好的使用JVM来处理大规模数据集。本章我们通过对Flink内存模型、JobManag
springk·2024-08-26 16:27

面试笔记8.24

我会在集群中部署多台服务器，通过分布式计算和存储来处理大规模数据。解答思路：首先，我会搭建一个Hadoop或Spark集群，确保集群中的每台服务器都能正常通信。
励志秃头码代码·2024-08-26 16:55

zookeeper单机安装

zookeeper单机安装文档linux安装java-centos安装java-linux配置java环境变量zookeeper单机安装zookeeper集群安装zookeeper客户端命令行操作、节点类型及监听器
shuair·2024-08-26 15:49

Zookeeper实现分布式锁

文章目录什么是ZookeeperZookeeper集群机制Zookeeper特性Zookeeper数据结构Zookeeper应用场景Zookeeper的环境搭建（linux）Zookeeper客户端Zookeeper
爱吃糖的靓仔·2024-08-26 15:48

什么是耦合、紧耦合、松耦合

但随着集群规模的扩大，系统的稳定性逐渐变差，主要原因如下：1、同步操作导致对
mingzhi61·2024-08-26 15:18

大数据技术之Zookeeper安装 （2）

目录下载地址本地模式安装1）安装前准备2）配置修改3）操作Zookeeper配置参数解读Zookeeper集群操作集群规划解压安装配置服务器编号配置zoo.cfg文件集群操作Zookeeper集群启动停止脚本创建脚本增加脚本执行权限
大数据深度洞察·2024-08-26 14:43

Kylin系列-入门

Kylin系列-入门ApacheKylin是一个开源的分布式分析引擎，提供Hadoop/Spark之上的SQL查询接口及多维分析（OLAP）能力，以支持超大规模数据。
Dingdangr·2024-08-26 13:34

redis面试（十八）RedLock加锁原理

普通的redis分布式锁，其实是在redis集群中根据hash算法选择一台redis实例创建一个锁就可以了大致流程如下：获取当前时间戳，单位是毫秒跟上面类似，
木小同·2024-08-26 12:26

如何提升大模型的智能水平？

通过自监督学习和无监督学习，模型可以在大规模未标注数据上进行高效训练，
刷刷刷粉刷匠·2024-08-26 11:21

基于深度学习的生产流程自动化

通过利用深度学习算法对大规模数据进行分析与预测，生产流程自动化系统可以优化资源分配、提高生产效率、降低成本，并适应快速变化的市场需求。
SEU-WYL·2024-08-26 07:58

数据库系统 第25节 数据库集群

数据库集群是一种高可用性和可扩展性解决方案，它通过将数据和工作负载分散到多个服务器上来提高性能和可靠性。
hummhumm·2024-08-26 03:30

Spring Cloud Config 与Spring Cloud Bus组合实现配置文件热部署

先介绍下SpringCloudConfig功能：配置管理工具包，让你可以把配置放到远程服务器，集中化管理集群配置，目前支持本地存储、Git以及Subversion。
java_飞·2024-08-25 22:34

大数据的存储和处理面临哪些挑战，如何应对？

大数据的存储和处理面临以下挑战：数据量巨大：大数据的特点之一是数据量非常庞大，存储和处理这么大规模的数据是一个挑战。传统的数据库系统可能无法满足大数据需求，需要寻找适合大规模数据处理的解决方案。
程序猿阿伟·2024-08-25 22:02

反无人机技术综述：通信技术与人工智能的融合

在俄乌冲突这一现代战争中，双方都大规模使用了无人机执行多样化任务，包括侦查、打击和情报搜集等。无人机为战场带来了前所未有的洞察力，从而改变了传统的战略和战术。
人工智能学家·2024-08-25 21:59

TensorFlow库详解：Python中的深度学习框架

它能够处理大规模的多维数据，并支持在多种硬件平台上运行，如CPU、GPU和TPU（TensorProcessingUnit）。
Ambition_LAO·2024-08-25 21:28

Tair分布式缓存

redis集群中，想用缓存必须得指明redis服务器地址去要。这就增加了程序的维护复杂度。因为redis服务器很可能是需要频繁变动的。
kingkyrie·2024-08-25 18:38

63 - ES 诊断集群的潜在问题

集群运维所面临的挑战用户集群数量多，业务场景差异大使用与配置不当，优化不够如何让用户更加高效和正确的使用ES如何让用户更全面的了解自己的集群的使用状况发现问题之后，需要防患于未然需要“有迹可循”，做到“
舍是境界·2024-08-25 16:36

Hadoop入门基础（五）：Hadoop 常用 Shell 命令一网打尽，提升你的大数据技能！

1.2启动和停止Hadoop集群start-dfs.shstart-yarn.shstop-dfs.shstop-yarn.shstart-dfs.sh和stop-dfs.sh分别用于启动和停止HDFS
william.zhang(张)·2024-08-25 15:52

etcd集群恢复、单节点恢复操作手册

一、集群备份备份方式：Jenkins触发每小时的定时任务，通过调取ansible的playbook进行etcd集群的数据备份和上传，默认只备份集群中的非leader成员，避免leader成员压力过大。
*老工具人了*·2024-08-25 15:21

Kubernetes Master节点 灾备恢复操作指南

KubernetesMaster节点灾备恢复操作指南目录一，Etcd数据备份及恢复...1A,单节点etcd数据备份和恢复...2B，etcd集群数据的备份和恢复...2二，Master节点控制组件的备份及恢复
weixin_34384915·2024-08-25 15:51

kubernetes集群ETCD备份与恢复

一、通过kubeadm方式备份安装etcdctl命令行yuminstall-yetcd备份ETCDCTL_API=3etcdctl\snapshotsavesnap.db\#此处默认是当前路径，可自定义存储路径--endpoints=https://127.0.0.1:2379\--cacert=/etc/kubernetes/pki/etcd/ca.crt\--cert=/etc/kuberne
冷漠程序员小哥哥·2024-08-25 15:19

etcd

etcd主目录/配置配置在/etc/etcd.conf.yml主目录/数据/var/lib/etcd主目录/日志动态库或插件install:1，安装脚本：(安装脚本可与2配置文件一起使用，做自动化静态集群部署
mmgithub123·2024-08-25 15:49

etcd集群部署实战

文章目录前言安装集群环境添加配置文件启动etcd查看集群状态前言本文使用v3.5.4版本的etcd进行搭建集群演示，仅适用于学习etcd的基本使用。
tree先生·2024-08-25 15:18

Kubernetes 中如何对 etcd 进行备份和还原

etcd是Kubernetes的关键组件，用于存储集群的所有配置数据和状态信息。由于etcd永久性存储了集群的整个状态，因此对其进行定期备份非常重要。
乌南竹·2024-08-25 15:18

在Kubernetes中etcd作为存储集群

在Kubernetes中，etcd作为存储集群所有关键数据的分布式键值存储系统，其数据的备份与还原对于确保集群的可靠性和数据完整性至关重要。
hai40587·2024-08-25 15:17

Kubernetes 中如何对 etcd 进行备份和还原

etcd是Kubernetes集群的重要组件，存储了集群的所有数据，如配置文件、状态信息、以及服务发现数据。
william.zhang(张)·2024-08-25 14:16

通义千问( 五 ) 图片分析

5.多模态5.1.图片分析5.1.1.介绍通义千问VL(Qwen-VL)是阿里云研发的大规模视觉语言模型（LargeVisionLanguageModel,LVLM），可以以图像、文本、检测框作为输入，
春哥的魔法书·2024-08-25 14:15

大数据面试-Zookeeper

ZooKeeper的选举机制‌是基于Paxos算法的一种分布式选举算法，用于在ZooKeeper集群中选择一个节点作为Leader，负责处理客户端的写请求和协调其他节点。
文文鑫·2024-08-25 12:04

rocketmq： broker集群之间的brokerName命名是否可以一致。

今天回顾了下broker与nameserver之间建立连接之后30S一次的心跳测试源码和创建topic过程中broker主动推送topicConfig到Nameserver的源码（实际上心跳测试调用的方法和推送创建topic过程中broker主动推送topicConfig调用的方法是一样的，最终都是调用doRegisterBrokerAll()）。心里有两个疑惑产生：1.我们知道创建一个新的top
飞向天空的鱼·2024-08-25 10:18

（九）关于 PrimeTime 时序分析流程和方法

它能分析大规模、同步、数字ASIC的时序。PrimeTime工作在设计的门级层次，并且和Synopsys其它工具整合得很紧密。
那么菜·2024-08-25 09:41

向量数据库Faiss的搭建与使用｜Faiss｜向量数据库｜高效检索｜机器学习｜大规模数据

目录1.Faiss概述1.1Faiss的背景与重要性1.2Faiss的基本概念与特点2.Faiss的安装与环境配置2.1环境要求2.2Faiss的安装2.3验证安装3.Faiss的基本使用3.1创建索引与添加向量3.2执行查询3.3向量的压缩与内存优化4.Faiss的高级功能与优化4.1GPU加速与多GPU支持4.2混合索引与自定义距离度量4.3高维数据的优化在处理高维数据的场景中，快速且高效地进
concisedistinct·2024-08-25 09:10

HDFS的编程

HDFS是一个分布式文件系统，以流式数据访问模式存储超大文件，将数据分块存储到一个商业硬件集群内的不同机器上
卍king卐然·2024-08-25 07:02

Kubernetes中如何对etcd进行备份和还原

在Kubernetes中，etcd作为存储集群所有关键数据的分布式键值存储系统，其数据的备份与还原对于确保集群的可靠性和数据完整性至关重要。
jun778895·2024-08-25 06:28

Hadoop入门基础（二）：Hadoop集群安装与部署详解（超详细教程）

一、环境准备1.集群规划首先，需要为集群中的每台机器设置角色和网络配置。
william.zhang(张)·2024-08-25 06:57

人格凭证（PHC）：一种鉴别AI防伪保护隐私的真实身份验证技术

AI不仅能模仿人类行为，还能创建虚假账户、发布误导性信息，甚至进行大规模网络攻击。
Chauvin912·2024-08-25 06:52

基于k8s搭建gitlab

前言一、安装kubernetes集群可以参考这篇博客，写的挺好的:搭建k8s环境二、安装helm在github上下载helm的二进制文件,在系统中解压，并将可执行文件移动到/usr/bin/目录下三helm
爱哭的猫!·2024-08-25 05:18

基于calico部署k8s集群k8s-1.23.6

1、资源清单主机名IP地址系统版本CPU内存mn01192.168.242.130redhat7.92C4GBln0192.168.242.131redhat7.92C4GBcn01192.168.242.129redhat7.92C4GB2、系统配置(所有节点都要进行)1、安装所需软件yuminstallvimnet-toolswgetlsofipsetipvsadmiproute-tc-y2、
只是想成为一名程序员·2024-08-25 05:17

k8s-daemonSet控制器

当有节点加入集群时，也会为他们新增一个Pod。当有节点从集群移除时，这些Pod也会被回收。删除DaemonSet将会删除它创建的所有Pod。
垃圾宝宝·2024-08-25 05:47

深入理解LDA主题模型及其在文本分析中的应用

在大规模文本数据分析中，LatentDirichletAllocation(LDA)是最受欢迎的主题模型之一。LDA的核心目标是从文档集中提取不同的主题，并确定每篇文档属于这些主题的概率分布。
小高要坚强·2024-08-25 04:45

微服务中不同的容错模式

以下是每种模式的详细解释和应用场景：1.FailoverCluster（失败自动切换）描述:当服务调用失败时，系统会自动切换到集群中的其他机器进行重试。
Wade_Crab·2024-08-25 00:20

从零开始搭建Aliyun ESC高可用集群 (HaVip+KeepAlived)

从零开始搭建AliyunESC高可用集群(HaVip+KeepAlived)架构架构本设计方案采用两台阿里云ECS服务器搭建Keepalived结合LVS的高可用集群。
cloud_ether·2024-08-24 21:33

从零开始搭建 LVS 高性能集群 (DR模式)

从零开始搭建LVS高性能集群（DR模式）架构本设计方案采用三台服务器构建集群，使用LinuxVirtualServer(LVS)作为负载均衡器，运行在直接路由(DR)模式下。
cloud_ether·2024-08-24 21:03

LVS+Keepalived集群

在一个LVS服务集群中通常有主服务器（Master）和备份服务器（Backup）两种服务器，但是对外表现为一个虚拟IP，主服务器会广播VRRP报文给备份服
史努比.·2024-08-24 21:01
上一页 8 9 10 11 12 13 14 15 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他