Hadoop系统架构

基于SpringBoot的医院自助服务系统+74853（免费领源码）可做计算机毕业设计JAVA、PHP、爬虫、APP、小程序、C#、C++、python、数据可视化、大数据、全套文案

医院自助服务系统系统分析2.1可行性分析2.2系统流程分析2.2.1数据流程3.3.2业务流程2.3系统功能分析2.3.1功能性分析2.3.2非功能性分析2.4系统用例分析2.5本章小结3医院自助服务系统总体设计3.1系统架构设计
bysjwa813·2024-01-18 23:30

基于移动端/SpringBoot的团购网站+26449（免费领源码）可做计算机毕业设计JAVA、PHP、爬虫、APP、小程序、C#、C++、python、数据可视化、大数据、全套文案

基于移动端的团购网站系统分析2.1可行性分析2.2系统流程分析2.2.1数据流程3.3.2业务流程2.3系统功能分析2.3.1功能性分析2.3.2非功能性分析2.4系统用例分析2.5本章小结3基于移动端的团购网站总体设计3.1系统架构设计
bysjwa813·2024-01-18 23:28

Hadoop的心脏：中央异步调度器AsyncDispatcher代码和设计解析

以Yarn、HDFS和MapReduce为主要组成的Hadoop，涉及到大量复杂的、交互的事件处理、状态转换，同时，这些事件调度和状态转换又对实时性和效率提出了极高的要求。
麦兜和小可的舅舅·2024-01-18 22:56

Hadoop RPC Server基于Reactor模式和Java NIO 的架构和原理

文章目录前言JavaNIO简介Reactor设计模式详解1.Reactor设计模式概览2.RPC总服务启动3.Listener4.Reader5.Handler6.Responder结束前言HadoopRPC
麦兜和小可的舅舅·2024-01-18 22:26

HDFS WebHDFS 读写文件分析及HTTP Chunk Transfer Encoding相关问题探究

文章目录前言需要回答的首要问题DataNode端基于Netty的WebHDFSService的实现基于重定向的文件写入流程写入一个大文件时WebHDFS和HadoopNative的块分布差异基于重定向的数据读取流程尝试读取一个小文件尝试读取一个大文件读写过程中的
麦兜和小可的舅舅·2024-01-18 22:52

安卓、ios系统详解

一、安卓安卓系统架构：从上至下，依次是应用层、应用框架层、系统运行库层和Linux内核层应用层（systemapp）：系统内置的应用程序及非系统级的应用程序都属于应用层，负责与用于进行交互，一般都用java
Sabrina_FN·2024-01-18 22:17

竞赛保研 大数据疫情分析及可视化系统

文章目录0前言2开发简介3数据集4实现技术4.1系统架构4.2开发环境4.3疫情地图4.3.1填充图(Choroplethmaps)4.3.2气泡图4.4全国疫情实时追踪4.6其他页面5关键代码最后0前言优质竞赛项目系列
iuerfee·2024-01-18 18:17

Hive入门

介绍Hive是一个基于Hadoop的数据仓库工具，它可以将结构化数据文件映射成一张表，然后通过类似SQL的查询语句来执行查询。
kongxx·2024-01-18 17:11

MacBook Linux安装zookeeper

MacBookLinux安装zookeeperZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。
beyond阿亮·2024-01-18 17:12

虚拟机中配置hadoop

一、可以先在windows系统下下载好需要安装的hadoop版本比如：hadoop-3.1.3.tar.gz。
※海绵※的笑~·2024-01-18 14:40

系统架构设计笔记（27）—— 敏捷方法

2001年2月，在美国的犹他州，17位“无政府主义者”共同发表了《敏捷软件开发宣言》，在宣言中指出：尽早地、持续地向客户交付有价值的软件对开发人员来说是最重要的。拥抱变化，即使在开发的后期。敏捷过程能够驾驭变化，保持客户的竞争力。经常交付可工作的软件，从几周到几个月，时间范围越小越好。在整个项目中，业务人员和开发者紧密合作。围绕士气高昂的团队进行开发，为团队成员提供适宜的环境，满足他们的需要，并给
deniro·2024-01-18 13:17

Linux常用命令大全

1.查看端口号占用lsof-i:端口号lsof-i:8060sudonetstat-nlp|grep80602.查看CPU、核数、磁盘信息[hadoop@master1~]$cat/etc/redhat-releaseCentOSLinuxrelease7.9.2009
tuoluzhe8521·2024-01-18 13:52

大规模分布式系统架构与设计实战读书笔记

大规模分布式系统架构与设计实战彭渊59个想法1.1分布式计算、并行计算、云计算概述>>所谓分布式计算其实就是一门计算机科学，它研究如何把一个需要非常巨大的计算能力才能解决的问题分成许多小的部分，然后把这些部分分配给许多计算机进行处理
vasco_he·2024-01-18 12:40

电商平台-商品价格的设计与架构

说明：Java开源生鲜电商平台-商品价格的设计与架构,主要是对商品的价格进行研究与系统架构.一、常见的电商价格市场价（ListPrice）：这个价格仅是用于显示，用于衬托网站销售价格的优惠程度；销售价（
雷子的窝儿·2024-01-18 12:03

字节跳动-系统架构-北京-一面面经

1、自我介绍2、介绍当前实习期间所做的工作3、UDP可靠传输项目，问的很深4、拥塞控制算法听过BBR吗BBR算法介绍简单来说BBR相较于传统的TCP拥塞控制算法有以下两个优点：①在有一定丢包率的网络链路上充分利用带宽②降低网络链路上的buffer占用率，从而降低延迟通过带宽X延迟的方式估计发送窗口的大小5、了解quick吗，做完UDP可靠传输的项目有没有去对比过和quic之间的实现差异低延迟连接的
T_T-T_T·2024-01-18 12:14

书签留存文档

用plsql连接oracle-郑文亮-博客园IDEA中创建mavenweb项目的详细部署kettle连接hbase-CSDN博客PI服务器及各客户端安装配置-豆丁网Oracle客户端使用-CSDN博客hadoop
Liang.Wang·2024-01-18 09:13

作为刚入职的小白，怎么才能学好大数据 ？

大数据学习方向一、大数据运维之Linux基础打好Linux基础，以便更好地学习Hadoop，hbase,NoSQL，Spark，Storm，docker,openstack等。
铁拳虎·2024-01-18 09:40

HBASE学习一：原理架构详解

HBase的存储是基于HDFS的，HDFS有着高容错性的特点，被设计用来部署在低廉的硬件上，基于Hadoop意味着HBase与生俱来的超强的扩展性和吞吐量。HBase采用的时ke
Studying！！！·2024-01-18 08:34

ClickHouse vs StarRocks 全场景MPP数据库选型对比

ClickHousevsStarRocks选型对比面向列存的DBMS新的选择Hadoop从诞生已经十三年了，Hadoop的供应商争先恐后的为Hadoop贡献各种开源插件，发明各种的解决方案技术栈，一方面确实帮助很多用户解决了问题
涛子丶白了你一眼·2024-01-18 08:12

ClickHouse vs StarRocks 选型对比

ClickHousevsStarRocks选型对比面向列存的DBMS新的选择Hadoop从诞生已经十三年了，Hadoop的供应商争先恐后的为Hadoop贡献各种开源插件，发明各种的解决方案技术栈，一方面确实帮助很多用户解决了问题
dan20211·2024-01-18 08:40

Clickhouse VS StarRocks

ClickHousevsStarRocks选型对比面向列存的DBMS新的选择Hadoop从诞生已经十三年了，Hadoop的供应商争先恐后的为Hadoop贡献各种开源插件，发明各种的解决方案技术栈，一方面确实帮助很多用户解决了问题
chixushuchu·2024-01-18 08:10

dubbo入门案例！！！

Zookeeper是ApacaheHadoop的子项目，可以为分布式应用程序协调服务，适合作为Dubbo服务的注册中心，负责服务地址的注册与查找，相当于目录服务，服务提供者和消费者只在启动时与注册中心交互
明天更新·2024-01-18 07:51

Dinky创建Flink实例报错

Dinky版本：0.7.3Flink版本：1.13.0问题描述问题1：已有实例不显示在Dinky的【注册中心】—【Flink实例管理】中：hadoop集群以及zookeeper重启后，之前创建的一个yarn-session
THE WHY·2024-01-18 07:48

项目解决方案：“ZL铁路轨行车辆”实时视频监控系统

目录一、建设背景1.1政策背景1.2现状二、建设目标三、建设依据四、建设原则4.1经济高效性4.2系统开放性4.3系统继承性4.4系统扩展性4.5系统经济性4.6系统安全性五、系统架构5.1系统架构图5.2
威迪斯特·2024-01-18 06:13

银行数据仓库体系实践（2）--系统架构

UML对系统架构的定义是：系统的组织结构，包括系统分解的组成部分，它们的关联性，交互，机制和指导原则，例如对系统群就是定义各子系统的功能和职责，如贷款系统群可能分为进件申请、核额、交易账务、贷后管理、管理台等子系统
南极找南·2024-01-18 06:59

软件需求规格说明书

软件需求规格说明书编写规范编写规范1.项目背景2.项目目标3.系统架构4.总体流程5.名称解释6.功能模块
一只鹿鹿鹿·2024-01-18 06:29

数仓项目6.0配置大全（hadoop/Flume/zk/kafka/mysql配置）

配置背景我使用的root用户，懒得加sudo所有文件夹在/opt/module所有安装包在/opt/software所有脚本文件在/root/bin三台虚拟机：hadoop102-103-104分发脚本
Int mian[]·2024-01-18 06:57

hadoop YARN详解

YARN概念YARN是一个资源管理、任务调度的框架，主要包含三大模块：ResourceManager（RM）、NodeManager（NM）、ApplicationMaster（AM）。其中，ResourceManager负责所有资源的监控、分配和管理；ApplicationMaster负责每一个具体应用程序的调度和协调；NodeManager负责每一个节点的维护。对于所有的application
武昌库里写JAVA·2024-01-18 06:25

Hadoop之mapreduce参数大全-7

Inter-ProcessCommunication）连接在发生超时时的最大重试次数yarn.app.mapreduce.client-am.ipc.max-retries-on-timeouts是ApacheHadoopYARN
OnePandas·2024-01-18 06:54

Hadoop之mapreduce参数大全-8

176.指定JobHistoryServer在缓存中存储的日期字符串的最大数量mapreduce.jobhistory.datestring.cache.size是ApacheHadoopMapReduce
OnePandas·2024-01-18 06:54

STM32系统架构

MCU厂商，经ARM公司授权，添加不同的外设=各种xx32芯片F1系统架构4个主动单元+4个被动单元Cortex-M3内核DCode总线（D-Bus）Cortex-M3内核系统总线（S-Bus）通用DMA1
饼干饼干圆又圆·2024-01-18 06:52

系统架构的演变：从单体到微服务的旅程

文章目录前言一、单体架构简图二、垂直架构简图三、水平架构简图四、面向服务架构（SOA）简图五、微服务架构简图总结前言随着信息技术的快速发展，系统架构也在不断演变。
小阳小朋友·2024-01-18 06:21

ERP进出库+办公用品管理系统

系统架构简介系统架构部分页面结构图UML逻辑图办公用品入出库简介本系统适用于ERP企业公司职员关于系统化的申请相关办公用品，提高整体系统整合行，加大上下级之间的联系，规避因人员过多，而浪费人力在简单重复的工作中
杨DaB·2024-01-18 06:51

SeaTunnel 、DataX 、Sqoop、Flume、Flink CDC 对比

对比对比项ApacheSeaTunnelDataXApacheSqoopApacheFlumeFlinkCDC部署难度容易容易中等，依赖于Hadoop生态系统容易中等，依赖于Hadoop生态系统运行模式分布式
贾斯汀玛尔斯·2024-01-18 06:01

ecryptfs透明加密

文件系统架构正如常见的文件系统构成一样，ecrypt构建了自己的文件系统节点管理逻辑。之后是磁盘管理和虚拟文件系统管理。这
inquisiter·2024-01-18 04:06

JVM参数调优

优化分为好几个层次，比如系统架构层次、算法层次、代码逻辑层次以及JVM的性能优化等等很多方面。在真正运行环境中，出现问题我们就会从这几个方面去解决这些问题。
weixin_34168880·2024-01-18 04:00

阿里云大数据ACA及ACP复习题（21~40)

21.Hadoop的主要功能中，能完成对海量数据分布式运算的是哪个组件?
周周的奇妙编程·2024-01-18 03:08

HDFS 系统架构

HDFSArchitectureIntroductionHadoopDistributedFileSystem(HDFS)是设计可以运行于普通商业硬件上的分布式文件系统。
偷油考拉·2024-01-18 03:52

系统架构07 - 信息系统（下）

开环和闭环结构功能组成决策支持系统(DSS)基本模式结构功能特点组成专家系统(ES)概述专家系统人工智能特点组成应用领域办公自动化系统(OAS)概述主要功能组成企业资源规划(ERP)概述企业的资源计划结构功能综合性信息系统典型信息系统架构模型政府信息化与电子政务概述组成主体主要特征发展应用领域企业信息化与电子商务概
银龙丶裁决·2024-01-18 01:24

CCC数字钥匙3.0标准解读(1)

CCC数字钥匙3.0标准解读(1)本系列文章翻译及加入部分说明解读CCC数字钥匙3.01.1.1版本．文章目录CCC数字钥匙3.0标准解读(1)１简介和范围２系统架构2.1概述2.2高级功能2.3高层架构
Jason.rr·2024-01-18 01:46

基于JavaWeb+BS架构+SpringBoot+Vue+Hadoop的物品租赁系统的设计与实现

基于JavaWeb+BS架构+SpringBoot+Vue+Hadoop的物品租赁系统的设计与实现文末获取源码Lun文目录前言主要技术系统设计功能截图订阅经典源码专栏Java项目精品实战案例《500套》
FREE技术·2024-01-18 00:17

Note08：Hive-1.2.2安装配置

安装包下载安装地址：http://archive.apache.org/dist/hive/把安装包上传到/opt/software目录解压[kevin@hadoop112software]$tar-zxvfapache-hive
K__3f8b·2024-01-18 00:22

中国混沌工程调查报告2021(观点摘要，调查背景和混沌工程应用现状)

转载自混沌工程实验室随着分布式架构的普及以及云计算技术的成熟，国内企业应用云原生化推进业务系统的迭代速度越来越快，后端系统架构日趋复杂，服务间的依赖越来越多，调用的链路越来越长。
robot_test_boy·2024-01-17 23:20

【若泽大数据第二天】--MySQL二进制部署

1、通过winscp上传MySQL5.6安装文件2、判断一下服务器是否安装了MySQL3、解压MySQL安装文件并进行重命名[root@hadoop001~]#tar-zxvfmysql-5.6.23-
naroutofan·2024-01-17 21:52

浅谈配电能源管理系统应用在钢铁行业

通过系统架构和功能分析，确定该系统能够与智能配电系统、自动化管理系统
Acrel13916234315·2024-01-17 21:13

[CDH5] Oozie web console is disabled 问题解决

Ooziewebconsoleisdisabled.问题解决：下载ExtJS2.2:下载地址：http://archive.cloudera.com/gplextras/misc/ext-2.2.zip上传到服务器并解压[root@hadoop1libext
尼小摩·2024-01-17 19:12

IDEA插件安装ZooKeeper

zookeeper介绍Zookeeper是ApacaheHadoop的子项目，可以为分布式应用程序协调服务，适合作为Dubbo服务的注册中心，负责服务地址的注册与查找，相当于目录服务，服务提供者和消费者只在启动时与注册中心交互
冰冰很社恐·2024-01-17 19:07

Hadoop集群安装(入门级)

Hadoop集群安装配置三台主机(每台主机都需要配置)修改IP使用vi/etc/sysconfig/network-scripts/ifcfg-xx不同的机器可能不同修改三台主机ipaddr地址如下192.168.200.101master192.168.200.102slave1192.168.200.103slave2
blueoftravel·2024-01-17 17:20

HDFS简介与常用API

HDFS简介HDFS是一个文件系统（HadoopDocumentFileSystem），通过目录树来定位文件。其次，它是分布式的。HDFS适用于：一次写入，多次读出的场景。
正橙橙橙橙·2024-01-17 16:45

ZooKeeper 原理及其在 Hadoop 和 HBase 中的应用

简介ZooKeeper是一个开源的分布式协调服务，由雅虎创建，是GoogleChubby的开源实现。分布式应用程序可以基于ZooKeeper实现诸如数据发布/订阅、负载均衡、命名服务、分布式协调/通知、集群管理、Master选举、分布式锁和分布式队列等功能。基本概念本节将介绍ZooKeeper的几个核心概念。这些概念贯穿于之后对ZooKeeper更深入的讲解，因此有必要预先了解这些概念。集群角色在
Java程序员YY·2024-01-17 15:08
上一页 25 26 27 28 29 30 31 32 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他