hadoop单机

redis-5.0.8集群环境搭建

1.前置准备Linux版redis-3.2.8单机环境安装redis-3.2.8主从复制架构搭建及哨兵配置如果你对redis的安装很陌生，请看完我以上两期教程，对完成此期教程很有帮助2.下载解压redis
小刘新鲜事儿·2024-01-22 08:15

k8s搭建单机版redis

前段时间在集群上搭建了一个简易的单机版redis用于测试，注意redis是采用nodePort方式暴露的服务，因此需要在配置相应的端口安全组策略。
行走的小码农·2024-01-22 08:44

使用helm部署 redis 单机版

1、配置helmredisrepohelmrepoaddbitnamihttps://charts.bitnami.com/bitnami2安装下载helmredis下面是默认安装，不过前往别直接拿着下面安装命令就安装，官方默认安装的默认参数配置往往和我们实际场景不一样，需要配置一些参数helminstallmy-redisbitnami/redis--version18.7.02.1下载helm
leellun·2024-01-22 08:10

大数据技术原理及应用课实验3 ：熟悉常用的HBase操作

目录实验3熟悉常用的HBase操作一、实验目的二、实验平台三、实验步骤（每个步骤下均需有运行截图）（一）编程实现以下指定功能，并用Hadoop提供的HBaseShell命令完成相同任务：1.列出HBase
Blossom i·2024-01-22 08:08

Flink on YARN（下）：常见问题与排查思路

杨弢（搏远），阿里巴巴计算平台事业部技术专家，ApacheHadoopCommitter，目前专注于YARN、Flink、YuniKorn等开源项目的资源调度方向。
Apache Flink·2024-01-22 08:33

一张图轻松掌握 Flink on YARN 基础架构与启动流程

杨弢（搏远），阿里巴巴计算平台事业部技术专家，ApacheHadoopCommitter，目前专注于YARN、Flink、YuniKorn等开源项目的资源调度方向。
zhisheng_blog·2024-01-22 08:02

10 Hadoop的安全模式及权限介绍

1、HDFS工作流程启动NameNode，NameNode加载fsimage到内存，对内存数据执行editslog日志中的事务操作。文件系统元数据内存镜像加载完毕，进行fsimage和editslog日志的合并，并创建新的fsimage文件和一个空的editslog日志文件。NameNode等待DataNode上传block列表信息，直到副本数满足最小副本条件,这个过程NameNode处于安全模式
水无痕simon·2024-01-22 08:02

[flink]一Flink部署|配置文件|提交作业|部署模式|独立模式部署|yarn模式部署

一、集群部署集群规划节点服务器hadoop1hadoop2hadoop3hadoop4角色JobManagerTaskManagerTaskManagerTaskManagerTaskManager1、
胖胖学编程·2024-01-22 08:30

Hadoop基本概论

目录一、大数据概论1.大数据的概念2.大数据的特点3.大数据应用场景二、Hadoop概述1.Hadoop定义2.Hadoop发展历史3.Hadoop发行版本4.Hadoop优势5.Hadoop1.x/2
LzYuY·2024-01-22 08:25

史上最全深度解析Flink内存管理--大数据技术

目前，大数据计算引擎主要使用Java或基于JVM的编程语言实现的，例如ApacheHadoop，ApacheSpark，ApacheDrill，ApacheFlink等。
大数据学习僧·2024-01-22 08:50

Flink（十四）【Flink SQL（中）查询】

FlinkSQL查询环境准备：#1.先启动hadoopmyhadoopstart#2.不需要启动flink只启动yarn-session即可/opt/module/flink-1.17.0/bin/yarn-session.sh-d
让线程再跑一会·2024-01-22 08:14

Flink是如何管理内存的

在讲Flink管理内存之前要了解下Flink为什么要自己实现内存管理一、Flink为什么要自己实现内存管理在大数据领域，大多数数据相关的开源框架（Hadoop、Spark、Storm）都是基于JVM运行的
Relian哈哈·2024-01-22 08:13

hive sql转换成MR任务过程

)、WEBUI（浏览器访问hive）2）元数据：Metastore元数据包括：表名、表所属的数据库（默认是default）、表的拥有者、列/分区字段、表的类型（是否是外部表）、表的数据所在目录等；3）Hadoop
上官沐雪·2024-01-22 08:08

大数据开发之电商数仓（hadoop、flume、hive、hdfs、zookeeper、kafka）

第1章：数据仓库1.1数据仓库概述1.1.1数据仓库概念1、数据仓库概念：为企业制定决策，提供数据支持的集合。通过对数据仓库中数据的分析，可以帮助企业，改进业务流程、控制成本，提高产品质量。数据仓库并不是数据的最终目的地，而是为数据最终的目的地做好准备，这些准备包括对数据的：清洗、转义、分类、重组、合并、拆分、统计等。2、数据仓库的数据通常包括：业务数据、用户行为数据和爬虫数据等3、业务系统数据库
Key-Key·2024-01-22 07:29

分布式缓存

单机的Redis存在四大问题：一、Redis持久化Redis有两种持久化方案：RDB持久化AOF持久化1.1单机安装从官网下载源码包：Download|Redis解压缩：tar-xvfredis-6.2.14
希昂的学习日记·2024-01-22 07:46

Java-NIO篇章（4）——Reactor反应器模式

可能你会说不可能实现，答案是2万的并发可能都低估了，Redis单机通信20万的并发都是可以的，当然达到20万的并发对机器性能以
矩阵科学·2024-01-22 06:40

【征服redis15】分布式锁的功能与整体设计方案

在单机环境下，我们可以
纵横千里，捭阖四方·2024-01-22 06:09

并发导致重复添加问题-单机

基础环境与技术mysql5.7springboot2.4.2mybatis-plus需求概述学生管理功能，具备增删改查学生信息的逻辑。支持批量新增；要求逻辑删除重复加入的学生信息记录覆盖已存在的记录（学号作为学生唯一标识）；导入时间限制5s之内学生基本信息通过学号从三方系统提供接口获取（i/o操作）分析建表，由于逻辑删除，无法为学号建立唯一索引1考虑查询学号和姓名居多，分别为学号和姓名建立普通索引
AaronCos·2024-01-22 04:23

RHCE------HTTP

www可以结合文字、图形、影像以及声音等多媒体，并通过可以让鼠标单机超链接的方式将信息以internet
weiwei籽·2024-01-22 03:55

《Redis:NoSQL演进之路与Redis深度实践解析》

文章目录关于NoSQL为什么引入NoSQL1、单机MySQL单机年代的数据库瓶颈2、Memcached（缓存）+MySQL+垂直拆分（读写分离）3、分库分表+水平拆分+MySQL集群4、如今的网络架构5
CodeLinghu·2024-01-22 03:37

看看关系型数据库是怎么吊打Hadoop的

所以在不少架构中，会看到使用ETL的方式将数据库送到Hadoop中，使用其分布式存储和分布式计算的特点来进行分析。
薛晓刚·2024-01-22 02:58

25.集群异常故障分析——HOSTS

25.1问题情况Hadoop集群HDFS、YARN、Hive等服务出现异常告警重启集群异常告警任然存在大量告警Cluster1HDFS可用空间抑制...NameNode运行状况抑制...HDFS金丝雀抑制
大勇任卷舒·2024-01-22 02:51

发单机器人认证怎么弄出来

发单机器人认证是指通过相关认证程序，将机器人标记为经过验证和合规的机器人，以增加用户对其信任度和可靠性。
一起高省·2024-01-21 20:18

Hive SQL的编译过程（转）

Hive是基于Hadoop的一个数据仓库系统，在各大公司都有广泛的应用。美团数据仓库也是基于Hive搭建，每天执行近万次的HiveETL计算流程，负责每天数百GB的数据存储和分析。
愤怒的谜团·2024-01-21 20:40

Hbase笔记

HBase-1.hbase介绍ApacheHBase™是Hadoop数据库，是一个分布式，可扩展的大数据存储。当您需要对大数据进行随机，实时读/写访问时，请使用ApacheHBase™。
MFRain·2024-01-21 20:24

微服务环境搭建：docker+nacos单机

nacos需要连接mysql，持久化相关配置。1.部署好mysql后，新建nacos数据库然后初始化nacos脚本------------------------------------------------------------主机:192.168.150.101--服务器版本:8.0.27-MySQLCommunityServer-GPL--服务器操作系统:Linux--HeidiSQL版
我叫985·2024-01-21 17:49

spark on yarn安装部署

所使用的安装包名称按自己的修改，安装包可去各大官网上下载一，解压tar-zxvf/opt/software/spark-3.1.1-bin-hadoop3.2.tgz-C/opt/module/修改名称
佛系爱学习·2024-01-21 17:11

黑猴子的家：API 操作 HDFS 文件下载

1、Code->GitHubhttps://github.com/liufengji/hadoop_hdfs.git2、Code@TestpublicvoidgetFileFromHDFS()throwsException
黑猴子的家·2024-01-21 16:19

MySQL主从集群

当单机模式部署，不满足安全性、高可用、高并发等需求的时候，就需要考虑主从模式或者集群模式部署。什么是主从模式？
连不到蓝牙·2024-01-21 16:18

RabbitMQ部署指南

1.单机部署我们在Centos7虚拟机中使用Docker来安装。
理智很乏味清醒最孤独·2024-01-21 16:15

Ceph分布式存储部署

目录一、存储1、存储基础2、NAS（网络附加存储，是通过网络附加到当前主机文件系统之上的存储）3、SAN（存储区域网络）4、单机存储的问题5、商业存储解决方案6、分布式存储（软件定义的存储SDS）7、分布式存储的类型二
睡美人章繁·2024-01-21 16:26

django基于Hadoop平台的电影推荐系统(程序+开题报告)

本系统（程序+源码+数据库+调试部署+开发环境）带文档lw万字以上，文末可获取系统程序文件列表开题报告内容研究背景：随着互联网的普及和大数据技术的发展，人们对于个性化推荐的需求越来越高。电影作为一种重要的娱乐方式，其推荐系统的研究也受到了广泛关注。然而，传统的电影推荐系统往往基于用户的历史行为进行推荐，忽略了其他重要的信息，如电影的类型、导演、演员等。此外，由于电影数据的海量性和复杂性，传统的推荐
liu10662·2024-01-21 15:51

ubuntu22.04安装atlas2.0.0

在ubuntu裸机上安装，裸机未安装java，hadoop等环境。jdk和maven都使用apt方式安装。sudoaptinstallopenjdk-8-jdksudoa
playmakerlby·2024-01-21 15:37

微信群自动发单机器人哪个好?哪个免费?

做了淘宝客7年，使用过太多的返利软件，比如京粉、淘宝联盟、返利网等等APP。我来说说7年之痒之后我用的返利APP的经验。相信做了很多年淘客的朋友都会知道一个APP氧惠，现在氧惠软件的优化已经非常完美。购物、看电影、点外卖、用氧惠APP！更优惠！想要云发单就用：氧恵APP（邀请码：666888）（手机应用商店搜索“氧恵”下载，登录填写氧恵邀请码：666888，登录即享超高佣金，自用省，分享赚！）氧恵
氧惠好项目·2024-01-21 15:08

项目生产ERP(适合项目+生产型企业)软件系统

单机版永久免费使用，无录入数量限制，无打印限制，无时间限制产品概述每个项目的收入、支出、欠款、发票、利润等一目了然;软件覆盖了整个生产企业所有部门的管理(采购、销售、仓库、生产、财务、质量、OA);财务账和业务账完美结合
软希源码·2024-01-21 14:12

HBase节点故障的容错方案

涉及Master和RS相关组件，在出现单机故障时相关的容错方案。更多关于分布式系统的架构思考请参考文档关于常见分布式组件高可用设计原理的理解和思考1.Master高可用1.1选主
李姓门徒·2024-01-21 14:31

PHP服务报错500的排查过程

open_basedirrestrictionineffect.File(.log)isnotwithintheallowedpath(s)三、php_network_getaddressesgetaddrinfofailedredis报错解决架构是简单的单机
杰哥的技术杂货铺·2024-01-21 13:53

【JavaEE】_网络通信原理

五元组1.4协议分层1.4.1协议分层的优点1.4.2协议分层的分类1.4.3网络设备所在分层1.4.4两台主机通过TCP/IP协议通讯过程1.5封装与分用1.5.1封装1.5.2分用1.网络发展史（1）单机
_姜也·2024-01-21 13:52

电销外呼系统，中小企业电销难题破解之道

4.防撞单机制：链接沃创云CRM智能算力引擎，全面提升线索使用率、杜绝撞单，让线索
znyx 222·2024-01-21 11:24

hadoop yarn 配置

转自：http://blog.csdn.net/guotong1988/article/details/47130701
晴天哥_王志·2024-01-21 09:03

02-黑马程序员大数据开发：分布式计算和分布式资源调度

分布式计算模式：分散->汇总模式（MapReduce）和中心调度->步骤执行模式（ApacheSpark,Flink;比较复杂，中间会有数据交换的过程）；2.MapReduce概述MapReduce是Hadoop
S1406793·2024-01-21 08:52

【c++实现单机/多人联机 TankTrouble(坦克动荡) (一) —— 单机模式

项目地址:https://github.com/JustDoIt0910/TankTroubleServer地址：https://github.com/JustDoIt0910/TankTroubleServerTankTrouble(坦克动荡)是一款很有意思的小游戏，我是前段时间刷b站看到有人剪辑的精彩操作才知道的这个游戏。规则很简单，发射炮弹击中对方，同时躲避炮弹，炮弹可以在墙壁反弹，每发炮弹
0x7C9A·2024-01-21 08:03

mysql,clickhouse以及doris对比

mysql,clickhouse以及doris测试对比（一）clickhouse的单机安装与使用文章目录mysql,clickhouse以及doris测试对比（一）clickhouse的单机安装与使用前言一
andy73645212·2024-01-21 08:17

大数据开发之Kafka（broker、消费者、eagle监控、kraft模式）

KafkaBroker4.1KafkaBroker工作流程4.1.1Zookeeper存储的Kafka的信息1、查看zookeeper中的kafka节点所存储的信息启动Zookeeper客户端[atguigu@hadoop104zookeeper
Key-Key·2024-01-21 07:18

YARN节点故障的容错方案

涉及RM和NM相关组件，在出现单机故障时相关的容错方案。更多关于分布式系统的架构思考请参考文档关于常见分布式组件高可用设计原理
李姓门徒·2024-01-21 07:06

【微服务核心】ZooKeeper

文章目录1.简介2.下载与安装2.1单机版2.2集群版3.选举机制3.1首次启动3.2非首次启动4.客户端常用命令行操作4.1查看节点信息4.2节点类型4.3监听器原理4.4写数据流程5.编程实现监听服务动态上下线
比尔高特·2024-01-21 07:47

大数据之spark运行模式

ApacheSpark提供了多种运行模式，主要包括以下几种：本地模式(Local)：Spark在本地单机上运行，主要用于开发测试阶段。
转身成为了码农·2024-01-21 07:11

Hadoop入门概述

Hadoop是一个开源的分布式计算框架，主要用于处理和存储大规模数据集。
转身成为了码农·2024-01-21 07:41

大数据之Spark架构设计与工作流程

驱动器还负责任务的调度，并与集群管理器（如HadoopYARN、ApacheMesos或Standalone模
转身成为了码农·2024-01-21 07:41

大数据技术汇总

HadoopHadoop入门概述Hadoop运行模式介绍HadoopHDFS的运行流程HadoopMapReduce的运行流程Hadoopyarn的运行流程Hadoop内HDFS、MapReduce和YARN
转身成为了码农·2024-01-21 07:41
上一页 25 26 27 28 29 30 31 32 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他