hadoop单机

Elasticsearch8.11集群部署

集群就是多个node统一对外提供服务，避免单机故障带来的服务中断，保证了服务的高可用，也因为多台节点协同运作，提高了集群服务的计算能力和吞吐量。
liujiangxu·2024-01-28 05:53

Hadoop集群部署流程

前置要求需要3台虚拟机，系统为Centos7，分别host命名为node1，node2，node3，密码均为root请确保这三台虚拟机已经完成了JDK、SSH免密、关闭防火墙、配置主机名映射等前置操作在3台虚拟机的/etc/hosts文件中，填入如下内容：（同时这也是三台虚拟机的ip地址）192.168.88.131node1192.168.88.132node2192.168.88.133nod
正在绘制中·2024-01-28 02:09

22　Python网络编程

网络编程初识自从互联网诞生以来，基本上所有程序都是网络程序，很少有单机版程序了。计算机网络把各个计算机连接到一起，让网络中的计算机可以互相通信。网络编程在
泷汰泱·2024-01-28 01:24

2019-12-15 Spring Cloud微服务从入门到入土（2）使用Nacos进行服务注册与发现

https://github.com/alibaba/nacos/releases解压后使用以下命令启动：shnacos/bin/startup.sh-mstandalone其中standalone表示以单机模式运行
NoelleMu·2024-01-28 00:17

K8S,KubeSphere安装与卸载

K8S,KubeSphere单机与集群安装与卸载安装Docker安装K8S安装Helm安装OpenEBS安装(推荐Helm安装)KubeSphere安装卸载K8S卸载Helm卸载KubeSphere卸
IT小分享·2024-01-27 23:40

20190824 课堂笔记

20190824课堂笔记设置快捷键设置编译创建项目选择quickstartGAV设置项目设置修改添加hadoop-version,repositoryUTF-81.81.82.6.4clouderahttps
赛尔木·2024-01-27 23:37

Hadoop-分布式

分布式分步+并行处理+汇总结果Hadoop分布式一台计算机存储不了了，也计算不了了Hadoop把多台计算机资源（存储资源：硬盘；计算资源：CPU，内存）连接在一起，形成集群输入文件，拆分成块，多个节点存储计算任务
日月交辉·2024-01-27 23:48

用户行为数据采集

Flume——Hadoop——VMVM环境准备安装JDK安装HadoopHadoop运行模式本地模式伪分布式完全分布式集群启动组件逐一启动。模块启动
日月交辉·2024-01-27 23:18

mongoDB高级篇-Mongo复制集实践

前面我们学习了mongo的环境搭建到文档基础操作，以及高级查询处理等常见操作，但是一直都是处理的单机服务器，在我们实际生产中，使用单机风险会很高，如果是服务崩溃了或者不可访问怎么办，那么至少有一段时间不可用
逐梦々少年·2024-01-27 23:45

一个大场景下无线通信仿真架构思路（对比omnet与训练靶场）

并且涉及海量计算时候单机也无法承受。omnet的案例中提供的关于3D的示例可以使用openstreetmap瓦片填充，但是也是小尺度的
飞鸟真人·2024-01-27 20:36

ClickHouse(一)：入门

文章目录ClickHouse简介ClickHouse的特点列式存储DBMS的功能多样化引擎高吞吐写入能力数据分区与线程级并行性能对比ClickHouse的安装前期环境准备单机安装数据类型表引擎TinyLogMemoryMergeTreepartitionby
程序胖·2024-01-27 20:26

ClickHouse(22)ClickHouse集成HDFS表引擎详细解析

用法实施细节配置可选配置选项及其默认值的列表libhdfs3支持的ClickHouse额外的配置限制Kerberos支持虚拟列资料分享系列文章clickhouse系列文章知乎系列文章HDFS这个引擎提供了与ApacheHadoop
张飞的猪大数据·2024-01-27 17:35

【UE开发】2D飞机大战Demo

工程源码：GitHub-CNEarly/SpaceShipBattleDemo:使用虚幻引擎C++开发Roguelike类型2D飞机大战Demo2.演示视频：SpaceShipBattleDemo演示_单机游戏热门视频
CNEARLY·2024-01-27 17:53

apache 前30个开源项目

个具有代表性的项目序号项目名称功能描述业务范围活跃度（参考性描述）1ApacheHTTPServer高性能Web服务器提供HTTP服务支持非常活跃2ApacheTomcatJava应用服务器部署JavaWeb应用程序非常活跃3ApacheHadoop
临水逸·2024-01-27 17:35

HBase基础知识与架构概述

1.背景介绍HBase是一个分布式、可扩展、高性能的列式存储系统，基于Google的Bigtable论文设计，并作为Hadoop生态系统的一部分。
OpenChat·2024-01-27 17:31

MySQL高可用——Orchestrator架构、配置文件详细介绍和单机搭建部署

Orchestrator一、特性1.Discover(发现)2.Refactoring(重构)3.Recover(恢复)二、架构1.单点模式2.多点共享后端（1）后端单点（2）后端多点3.多点非共享后端三、配置文件四、部署Orchestrator是一个MySQL高可用和复制集管理工具平台，其具有如下主要功能：可以自动发现MySQL集群，通过mysql节点信息获取相关slave的信息，进而获取整个集
码精灵·2024-01-27 17:19

【云原生进阶之PaaS中间件】第三章Kafka-2-安装部署

1安装部署1.1kafka的分布式kafka是依靠zookeeper来实现分布式的，所以再启动前需要先启动zookeeper，如下图1.2集群部署官方下载地址：ApacheKafka（1）安装和Hadoop
江中散人·2024-01-27 16:16

【云原生进阶之PaaS中间件】第三章Kafka-3-命令操作

1命令操作1.1主题命令操作查看操作主题命令参数：[atguigu@hadoop102kafka]$bin/kafka-topics.sh参数描述--bootstrap-server，连接的KafkaBroker
江中散人·2024-01-27 16:16

使用 Docker 部署 Nacos 并配置 MySQL 数据源

本教程将指导您如何使用Docker在单机模式下部署Nacos，并将其数据持久化到MySQL中。
好奇的菜鸟·2024-01-27 16:14

Linux静态ip配置重启后 ip 恢复的问题（CentOS 6.7）

Linux静态ip配置重启后ip恢复的问题（CentOS6.7）文章目录Linux静态ip配置重启后ip恢复的问题（CentOS6.7）一、配置静态IP二、重启后IP恢复解决方案一、配置静态IP在学习Hadoop
Travis_del·2024-01-27 16:50

Spring Data Redis操作Redis（单机/集群）

REDIS（RedisProperties）（普通集群，不使用则不用开启）在群集中执行命令时要遵循的最大重定向数目。spring.redis.cluster.max-redirects=（普通集群，不使用则不用开启）以逗号分隔的“主机：端口”对列表进行引导。spring.redis.cluster.nodes=连接工厂使用的数据库索引。spring.redis.database=0连接URL，将覆
夜风月圆·2024-01-27 16:50

zookeeper原理篇-Zookeeper启动流程分析

前言上篇我们通过了解Paoxs算法开始，到Zab协议的两大特性:崩溃恢复和消息广播，学习了Zookeeper是如何通过Zab协议实现高可用，本篇开始我们来学习Zookeeper的启动流程单机模式启动流程我们知道
逐梦々少年·2024-01-27 16:15

【数据可视化技术】数据可视化概述&工具

在Hadoop生态群中，核心部件（如
Francek Chen·2024-01-27 16:39

贪婪洞窟2萌新法师职业详细攻略

作为以魔法输出为核心的职业，在前期难免会觉得伤害匮乏，推图困难，处于过渡期十分难受，在组队模式下应该可以舒服度过，不推荐入门且单机玩家选择。
老六盟BT·2024-01-27 15:47

SpringCloud（三）Eureka服务注册中心

文章目录1、Eureka基础知识什么是服务治理什么是服务注册Eureka两大组件2、Eureka介绍及原理理解介绍原理3、单机版Eureka构建步骤4、集群版Eureka构建步骤Eureka集群原理说明
七月J·2024-01-27 13:37

YARN 工作原理

1、Hadoop2新增了YARN，YARN的引入主要有两个方面的变更：其一、HDFS的NameNode可以以集群的方式部署，增强了NameNode的水平扩展能力和高可靠性，水平扩展能力对应HDFSFederation
无羡爱诗诗·2024-01-27 13:43

游戏服务器应当如何做选择，什么样子的才合适？

网上游戏主要有三种形式，一是大型的网络游戏，二是网页游戏，三是单机游戏。
德迅云安全小李·2024-01-27 12:52

一台虚拟机上的文件怎么复制给另一台虚拟机

1.想要将zookeeper文件复制给另一台虚拟机2.使用终端命令压缩该文件3.压缩完毕4.将压缩文件传至另一台虚拟机的hadoop账户上5.显示传送完毕6.文件已传送到另一台虚拟机上7.使用终端命令将压缩文件解压缩文件复制完毕
白嫖叫上我·2024-01-27 11:44

Python爬虫实战入门六：提高爬虫效率—并发爬取智联招聘

一般而言，在单机上我们使用三种并发方式：多线程(threading)多进程(multiprocessi
Python编程社区·2024-01-27 11:42

深入浅出hdfs源码

1、hadoop基本介绍2、周边生态图3、hdfs读源码解析4、hdfs写源码解析5、hdfs副本机制解读6、hdfs常见管理源码解析7、hdfs高可用源码解析-ha8、hdfs监控源码解析-dnmetrics-nnmetrics
大数据之家·2024-01-27 10:39

2021-03-07

解决存储问题·MapReduce=====>解决计算问题·Yarn=====>资源协调者·Zookeeper=====>分布式应用程序协调服务·Flume=====>日志收集系统·Hive=====>基于Hadoop
残月冷无声·2024-01-27 10:39

深入浅出hdfs-hadoop基本介绍

一、Hadoop基本介绍hadoop最开始是起源于ApacheNutch项目，这个是由DougCutting开发的开源网络搜索引擎，这个项目刚开始的目标是为了更好的做搜索引擎，后来Google发表了三篇未来持续影响大数据领域的三架马车论文
大数据之家·2024-01-27 10:03

电商系统设计到开发03 引入Kafka异步削峰

一、前言系统设计：电商系统设计到开发01第一版设计到编码-CSDN博客接着上篇文章：电商系统设计到开发02单机性能压测-CSDN博客本篇为大制作，内容有点多，也比较干货，希望可以耐心看看已经开发的代码，
风萧萧兮s·2024-01-27 09:15

服务器物理机备份,利用VMware免费工具对物理服务器进行整机备份

首先，我们需要一个性能高，主要是内存大的服务器作为硬件平台，软件平台可利用VMwarevsphereHypervisor，这可以到官方申请一个单机免费版本。然后再下载一个管理客户端，同时安
给我一个镜头·2024-01-27 09:38

Hadoop三大核心组件，hadoop原理

Hadoop的三大核心组件分别是：HDFS（HadoopDistributeFileSystem）：hadoop的数据存储工具。
你敢和我比剑吗·2024-01-27 09:03

Hadoop2.0架构及其运行机制，HA原理

文章目录一、Hadoop2.0架构1.架构图2.HA1)NameNode主备切换2)watcher监听3)脑裂问题3.组件1.HDFS2.MapReduce3.Yarn1.组件2.调度流程一、Hadoop2.0
Toner_唐纳·2024-01-27 09:30

Hadoop 原理及架构详解

###README本文是基于黑马程序员的Hadoop网课的前半部分整理的笔记，主要介绍了相关操作与组件架构。
Should·L·2024-01-27 09:25

知识库-kafka shell脚本用法

脚本名称用途描述connect-distributed.sh连接kafka集群模式connect-standalone.sh连接kafka单机模式kafka-acls.shtodokafka-broker-api-versions.shtodokafka-configs.sh
知秋ing·2024-01-27 08:52

一文读懂银联如何转接微信和支付宝

收单机构改造范
金融民工小曾·2024-01-27 08:05

从Linux到Laxcus，从单机操作系统到多机操作系统

继续回答一位网友的提问，贴出来给大家看看，欢迎大家在下方留言交流。问：博主，据我所知，现在操作系统很多，它们做的都比你们好，分布式技术也很成熟，有不少产品，你们再搞一个Laxcus分布式操作系统，有这个必要吗？谁会买谁会用？Laxcus分布式操作系统有地方超过它们？你觉得你们能干过一票操作系统大厂吗？想听听你的意见。答：不知道你是不是听过这样一句话：多数人只会因为看见而相信，极少人选择相信而看见。
LAXCUS分布式操作系统·2024-01-27 07:56

Hadoop与Spark横向比较【大数据扫盲】

大数据场景下的数据库有很多种，每种数据库根据其数据模型、查询语言、一致性模型和分布式架构等特性，都有其特定的使用场景。以下是一些常见的大数据数据库：1.**NoSQL数据库**：这类数据库通常用于处理大规模、非结构化的数据。它们通常提供简单的查询语言，并强调水平扩展和高可用性。例如：-**键值存储**：如Redis，AmazonDynamoDB-**列式存储**：如ApacheCassandra，
super_journey·2024-01-27 07:51

Hadoop增加新节点环境配置（自用）

完成Hadoop集群增添一个新的节点配置（文中命名为）Hadoop106，没有进行继续为该节点分配身份职能的步骤1.在VMware中安装CentOS7新建虚拟机1.
革斤要加油·2024-01-27 07:50

Hadoop-MapReduce-MRAppMaster启动篇

一、源码下载下面是hadoop官方源码下载地址，我下载的是hadoop-3.2.4，那就一起来看下吧Indexof/dist/hadoop/core二、上下文在上一篇中已经将到：作业提交到ResourceManager
隔着天花板看星星·2024-01-27 07:20

企业级大数据安全架构（六）数据授权和审计管理

作者：楼高本节详细介绍企业级大数据架构中的第六部分，数据授权和审计管理1.Ranger简介ApacheRanger是一款被设计成全面掌管Hadoop生态系统的数据安全管理框架，为Hadoop生态系统众多组件提供一个统一的数据授权和管理界面
云掣YUNCHE·2024-01-27 07:30

docker-compose部署单机ES+Kibana

记录部署的操作步骤准备工作编写docker-compose.yml启动服务验证部署结果本次elasticsearch和kibana版本为8.2.2使用环境：centos7.9本次记录还包括：安装elasticsearch中文分词插件和拼音分词插件准备工作1、创建目录和填写配置mkdir/home/es/singleecho"http.host:0.0.0.0">>./config/elastics
sissie喵~·2024-01-27 05:49

1分钟了解基于Hadoop的数据仓库工具Hive(附超实用示例)

Hive功能Hive是基于Hadoop构建的一套数据仓库分析系统，它提供了丰富的SQL查询方式来分析存储在Hadoop分布式文件系统中的数据：可以将结构化的数据文件映射为一张数据库表，并提供完整的SQL
yuyuyuyo·2024-01-27 05:53

Hbase2.1 集群搭建

>Hbase在大数据的体系中扮演着DB角色，不得不说是重要的一员，在上一篇，大猪已经给大家演示了[Hadoop3.2集群搭建](https://www.jianshu.com/p/3182aaff918d
kikiki5·2024-01-27 03:24

实时分析海量新数据的难点 和解决方案

解决方案：使用分布式计算和存储技术，如Hadoop、Spark、Kafka等，将数据分散存储在多个节点上，同时进行分布式计算和处理，以实现数据的实时处理和分析。2.数据质量的保障：海量新
云台095·2024-01-27 03:40

第17章 集群

突破单机数据库性能瓶颈。提高可用性。通过主从复制提供故障转移，进一步提高整个系统的稳定性。
weixin_30649859·2024-01-27 02:26

[AIGC 大数据基础] 浅谈hdfs

HDFS（HadoopDistributedFileSystem）是ApacheHadoop生态系统的一部分，是一个分布式文件系统。
程序员三木·2024-01-27 01:00
上一页 28 29 30 31 32 33 34 35 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他