Hadoop系统架构

大数据----31.hbase安装启动

三台机器都执行：zkServer.shstartHadoop正常部署Hadoop集群的正常部署并启动。
学无止境的大象·2023-12-21 19:40

大数据--- 14.MapReduce的本地操作和集群计算与打包到hadoop运行

MapReduce的本地操作和集群计算与打包到hadoop运行通过MapReduce处理本地手机销量1.通过MapReduce来操作我们上面文件的统计；其实就是使用框架来做计算；他的优点就是吧之前我们处理数据和
学无止境的大象·2023-12-21 19:39

大数据---33.HBase数据结构

一、HBase简介HBase是一个开源的、分布式的、版本化的NoSQL数据库（即非关系型数据库），依托Hadoop分布式文件系统HDFS提供分布式数据存储，利用MapReduce来处理海量数据，用Zookeeper
学无止境的大象·2023-12-21 19:07

计算机毕业设计hadoop+spark+hive直播可视化分析大屏 直播推荐系统 数据仓库 体育赛事分析 足球分析 推荐系统 体育赛事推荐系统 大数据毕业设计

开发技术：selenium(Python爬虫)、spark、hadoop、scala、hive、sqoop、Flask、echarts、mysql分析流程：python爬取直播数据存到.csv文件、mysql
计算机毕业设计大神·2023-12-21 19:26

基于SpringBoot的人事管理系统的设计与实现

系统架构考虑到实际生活中在人事管理方面的需要以及对该系统认真的分析,将系统权限按管理员和员工这两类涉及用户划分。
爱coding的同学·2023-12-21 18:53

Hadoop进阶2-Hadoop权威指南C1-C6阅读笔记

本文是Hadoop权威指南-第三版的阅读笔记，内容包括第1-6章内容记录了一些个人认为重要的知识点。
neo_ng·2023-12-21 18:02

【大数据优质案例】基于大数据分析的物流数据可视化平台

SpringBoot优质案例推荐IT源码社-小程序优质案例推荐IT源码社-Python优质案例推荐文末获取源码项目名基于大数据分析的物流数据可视化平台技术栈Python+Django+Spark+Hive+Hadoop
极客的Code·2023-12-21 18:50

【大数据项目】基于大数据分析的全国信息教育平台

SpringBoot优质案例推荐IT源码社-小程序优质案例推荐IT源码社-Python优质案例推荐文末获取源码项目名基于大数据分析的全国信息教育平台技术栈Python+Django+Spark+Hive+Hadoop
极客的Code·2023-12-21 18:50

【大数据项目】基于大数据分析的餐饮行业数据分析平台

SpringBoot优质案例推荐IT源码社-小程序优质案例推荐IT源码社-Python优质案例推荐文末获取源码项目名基于大数据分析的餐饮行业数据分析平台技术栈Python+Django+Spark+Hive+Hadoop
极客的Code·2023-12-21 18:50

【大数据优质项目】基于数据分析的保险行业可视化分析平台

SpringBoot优质案例推荐IT源码社-小程序优质案例推荐IT源码社-Python优质案例推荐文末获取源码项目名基于数据分析的保险行业可视化分析平台技术栈Python+Django+Spark+Hive+Hadoop
极客的Code·2023-12-21 18:49

计算机源码数据库基于SpringBoot的人事管理系统

技术指导讲解、定制和毕业设计服务项目名基于SpringBoot的人事管理系统技术栈SpringBoot+Vue+MySQL+Maven文章目录一、环境介绍1.1运行环境二、系统介绍2.1功能模块2.2系统架构三
极客的Code·2023-12-21 18:17

2023大数据应用开发赛题02套

目录2023年全国职业院校技能大赛赛题第02套任务A：大数据平台搭建（容器环境）（15分）子任务一：Hadoop完全分布式安装配置子任务二：Flume安装配置子任务三：FlinkonYarn安装配置任务
长风有续X·2023-12-21 17:54

Flume多路复用模式把接收数据注入kafka 的同时，将数据备份到HDFS目录

启动hadoop、在hdfs中创建需要访问的目录配置Hadoop的核心配置文件core-site.xml：设置Hadoop的核心配置参数，例如NameNode的地址、数据块大小、副本数量等。
HaveAGoodDay.·2023-12-21 17:52

2023大数据应用开发赛题03套

目录任务A：大数据平台搭建（容器环境）（15分）子任务一：HadoopHA安装配置子任务二：Hive安装配置子任务三：Kafka安装配置任务B：离线数据处理（25分）子任务一：数据抽取子任务二：数据清洗子任务三
长风有续X·2023-12-21 17:52

基于BS架构的智慧教室管理系统的设计与实现-计算机毕业设计源码63375

系统流程分析2.2.1数据增加流程2.2.2数据修改流程2.2.3数据删除流程2.3系统功能分析2.3.1功能性分析2.3.2非功能性分析2.4系统用例分析2.5本章小结3智慧教室管理系统总体设计3.1系统架构设计
weixin_bysj1330·2023-12-21 16:41

基于SSM的驾校预约练车管理系统的设计与实现-计算机毕业设计源码27864

系统流程分析2.2.1数据增加流程2.2.2数据修改流程2.2.3数据删除流程2.3系统功能分析2.3.1功能性分析2.3.2非功能性分析2.4系统用例分析2.5本章小结3驾校预约练车管理系统总体设计3.1系统架构设计
weixin_bysj1330·2023-12-21 16:10

springboot+mysql二手校园交易平台-计算机毕业设计源码67613

二手校园交易平台系统分析2.1可行性分析2.2系统流程分析2.2.1数据流程3.3.2业务流程2.3系统功能分析2.3.1功能性分析2.3.2非功能性分析2.4系统用例分析2.5本章小结3二手校园交易平台总体设计3.1系统架构设计
weixin_bysj1330·2023-12-21 16:38

Nginx 高可用实现方案

1.高可用HA（HighAvailability）是分布式系统架构设计中必须考虑的因素之一，它通常是指，通过设计减少系统不能提供服务的时间。
mywpython·2023-12-21 16:28

2022-10-11 Redis 原理

架构原理Redis组件的系统架构如图所示，主要包括事件处理、数据存储及管理、用于系统扩展的主从复制/集群管理，以及为插件化功能扩展的ModuleSystem模块。
胖大海啊·2023-12-21 16:24

生产经验——分区的分配以及再平衡

bin/kafka-topics.sh--bootstrap-serverhadoop102:9092--alter--topicfirst--partitions7复制CustomConsumer类，
zmx_messi·2023-12-21 15:03

Zookeeper集群与kafka集群部署搭建

数据结构Zookeeper应用场景Zookeeper选举机制部署Zookeeper集群环境配置搭建Zookeeper三台集群KafkaKafka概述Kafka简介Kafka定义Kafka的特性Kafka系统架构为什么需要消息队列
搬着砖，敲着代码·2023-12-21 14:14

Hive入门＋部署

看黑马视频做的笔记目录概念1.基本概述2.基础架构总架构部署1.安装MySQL2.配置Hadoop3.下载解压Hive4.下载MySQLDriver包注意！
Y蓝田大海·2023-12-21 14:32

hive与hadoop的版本对应问题

以hive-3.1.2为例，查看hive-3.1.2对应的Hadoop版本号的方式是：下载apache-hive-3.1.2-src.tar.gz链接：https://mirrors.bfsu.edu.cn
qiaoqiao2332·2023-12-21 14:32

Hive环境搭建（ubuntu 20.04 + java 1.8.0_281 + hadoop 3.1.0 + hive 3.1.2）

Hive依赖于Hadoop，而Hadoop依赖于Java。因此搭建Hive环境需要先装java，然后装hadoop，然后才是hive。
qiaoqiao2332·2023-12-21 14:02

hdfs如何把一整个目录都复制到本地, 包括目录中的子目录和子文件

在Hadoop分布式文件系统（HDFS）中，你可以使用hadoopfs-copyToLocal命令将整个目录复制到本地。该命令支持递归复制，包括目录中的子目录和子文件。
言之。·2023-12-21 14:27

[每周一更]-(第32期)：ChatGPT自动生成的Go微服务和容器技术

微服务是一种分布式系统架构，它将大型软件系统分解为一组轻量级、独立的服务。每个服务都负责一个单独的功能，并且通过简单的API与其他服务交互。
ifanatic·2023-12-21 14:24

Swagger生成接口文档

启动测试3常用注解4生成可以生成文档的增强4.1添加依赖4.2重启项目5记录生产环境的坑6生成docx文档6.1pandoc安装6.2文件转换6.3遇到的问题想学习架构师构建流程请跳转：Java架构师系统架构设计
赵广陆·2023-12-21 12:55

【大数据项目】企业经营数据可视化平台

欢迎各位前来交流讨论精彩专栏推荐订阅不然下次找不到哟天码编程-SpringBoot项目案例推荐天码编程-SSM项目案例推荐天码编程-Python项目案例推荐天码编程-小程序项目案例推荐天码编程-大数据项目案例推荐文末获取源码项目名企业经营数据可视化平台技术栈Hadoop
天码编程·2023-12-21 12:53

基于大数据可视化的智慧人才数据分析平台

SpringBoot项目案例推荐天码编程-SSM项目案例推荐天码编程-Python项目案例推荐天码编程-小程序项目案例推荐天码编程-大数据项目案例推荐文末获取源码项目名基于大数据可视化的智慧人才数据分析平台技术栈Hadoop
天码编程·2023-12-21 12:53

基于Servlet的超市订单管理系统【含源码+数据库】

程序设计开发、源码分享、技术指导和毕业设计厚台获取源码项目名基于Servlet的超市订单管理系统技术栈Servlet+JSP+MySQL文章目录一、环境介绍1.1运行环境二、系统介绍2.1功能模块2.2系统架构三
天码编程·2023-12-21 12:21

《PySpark大数据分析实战》-14.云服务模式Databricks介绍基本概念

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2023-12-21 11:45

《PySpark大数据分析实战》-13.Spark on YARN模式代码运行流程

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2023-12-21 11:44

《PySpark大数据分析实战》-16.云服务模式Databricks介绍运行案例

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2023-12-21 11:08

Sqoop入门：如何下载、配置和使用

下载和配置Sqoop是Apache的一个开源工具，主要用于在Hadoop和关系数据库之间传输数据。
冷月半明·2023-12-21 11:00

Hadoop/Spark 太重，esProc SPL 很轻

Hadoop/Spark就是其中重要的软件技术，由于开源免费而广受欢迎。
码农翻身·2023-12-21 10:07

大数据概念与hadoop起源

1、大数据定义根据维基百科的定义，大数据是指根据常用软件工具捕获、管理和处理数据所耗时间超过可容忍时间的数据集。按照麦肯锡的定义，大数据是指无法在一定时间内用传统数据库软件工具对其内容进行抓取、管理和处理的数据集合。在特征方面，大数据不仅“容量大”，还有很多其他的特色。总体而言，可以用“5V+1C”来概括：Variety(多样_化）、Volume(海量）、Velocity(快速）、Vitality
Ace_Wang·2023-12-21 09:50

Hadoop集群的搭建（全网最详细，看了就会）

Hadoop是Apache旗下的一个用java语言实现开源软件框架，是一个开发和运行处理大规模数据的软件平台。允许使用简单的编程模型在大量计算机集群上对大型数据集进行分布式处理。
叶落长街·2023-12-21 08:49

Hadoop集群搭建详细教程

Hadoop环境搭建1.环境准备1.首先创建一台模板机所谓的模板机是进行了一些最基础的配置，比如说进行主机名修改、网络配置、下载一些插件等准备工作。
百万攻程狮·2023-12-21 08:49

Hadoop 集群环境搭建

目录第一部分：系统安装...31：图形化安装...32：选择中文...33：安装选项...34：软件选项...45：安装位置...46：网络配置...67：开始安装...78：创建用户...79：重启系统...710：登录测试...8第二部分：初始化设置...91：SSH远程登录...92：yum源更新...93：安装vim和wget.114：增加test用户权限...125：修改主机/tec/h
惊鸿若梦一书生·2023-12-21 08:17

《系统架构设计师教程（第2版）》第2章-计算机系统基础知识-06-系统工程

文章目录1系统工程概述2.系统工程方法2.1霍尔的三维结构2.2切克兰德方法2.3并行工程法2.4综合集成法2.5WSR系统方法3.系统工程的生命周期3.1各阶段1）探索性研究阶段2）概念阶段3）开发阶段4）生产阶段5）使用阶段6）保障阶段7)退役阶段3.2生命周期方法1）计划驱动方法2）渐进迭代式开发（IID）3）精益开发（SE）4)敏捷开发4.基于模型的系统工程（MBSE）4.1建模语言4.2
玄德公笔记·2023-12-21 07:27

《系统架构设计师教程（第2版）》第2章-计算机系统基础知识-07-系统性能

文章目录1.性能指标1.1计算机的性能指标1.2路由器的性能指标（了解即可）1.3交换机的性能指标（了解即可）1.4网络的性能指标1.5操作系统的性能指标1.6数据库管理系统的性能指标1.7Web服务器的性能指标2.性能计算3.性能设计3.1性能调整3.2阿姆达尔解决方案4.性能评估4.1基准测试程序4.2Web服务器的性能评估
玄德公笔记·2023-12-21 07:27

《系统架构设计师教程（第2版）》第3章-信息系统基础知识-01-信息系统概述

文章目录1.信息系统的定义1.1.信息系统（IS）1.2信息化2.信息系统的发展2.1初始阶段2.2传播阶段2.3控制阶段2.4集成阶段2.5数据管理阶段2.6成熟阶段3.信息系统的分类3.1业务(数据)处理系统3.2管理信息系统（MIS）3.3决策支持系统（DSS）3.4专家系统（ES）3.5办公自动化系统（OAS）4.企业常用信息化系统ERP系统：企业资源管理系统WMS系统：仓储管理系统MES
玄德公笔记·2023-12-21 07:27

阿里云云计算架构师 ACE认证

通过该技术认证可以有效证明该认证人员具备丰富的需求分析能力，云架构设计能力，云架构部署实施能力，云架构诊断和调优能力，洞察业务痛点，制定有效的技术改进方案，最大限度地提高系统架构可扩展性，安全性，可靠性
回到地面·2023-12-21 07:55

基于javaweb实现的食品检测中心管理系统

一、系统架构前端：html|js|css|layui后端：spring|springmvc|mybatis环境：jdk1.8|mysql|tomcat二、代码及数据库三、功能介绍01.登录页02.任务管理
李白的粉·2023-12-21 07:55

《系统架构设计师教程（第2版）》第3章-信息系统基础知识-02-事务处理系统（TPS）

文章目录1.概述2.功能2.1数据输入2.2数据处理1）批处理(BatchProcessing)2）联机事务处理(OnLineTransactionProcessing,OLTP)2.3数据库的维护2.4文件报表的产生2.5查询处理教材中本章写的较为混乱，“业务处理系统”、“事务处理系统”两个词混用，而且语病极多。1.概述事务处理系统：针对管理中具体的事务来辅助管理人员将数据进行记录、传票、记账、
玄德公笔记·2023-12-21 07:53

基于SSM校园二手交易平台设计与实现.docx

论文结构8第二章技术背景102.1SSM框架介绍102.2Spring框架112.3SpringMVC框架122.4MyBatis框架13第三章需求分析143.1功能需求143.2非功能需求163.3系统架构设计
wusp1994·2023-12-21 07:41

毕设选题推荐基于SSM音乐播放网站系统

作者主页：计算机毕业设计老哥有问题可以主页问我一、开发介绍1.1开发环境开发语言：Java数据库：MySQL系统架构：B/S后端：SSM(Spring+SpringMVC+Mybatis)前端：Vue工具
计算机程序老哥·2023-12-21 07:01

Linux 如何查看架构和系统

以下是一些常用的命令：查看系统架构：使用uname命令可以显示系统的架构信息。特别是，使用-m或者--machine参数可以查看架构。
日日行不惧千万里·2023-12-21 07:32

大数据分析- 基于Hadoop/Mahout的大数据挖掘

目前对大数据的分析工具，首选的是Hadoop平台。Hadoop在可伸缩性、健壮性、计算性能和成本上具有无可替代的优势，事实上已成为当前互联网企业主流的大数据分析平台。一、培训对象1，系统架构师、系
shenmanli·2023-12-21 06:58

“大数据分析挖掘-基于Hadoop/Mahout/Mllib的大数据挖掘（含Spark、Storm和Docker应用介绍）”培训

目前对大数据的分析工具，首选的是Hadoop/Yarn平台。Hadoop/Yarn在可伸缩性、健壮性、计算性能和成本上具有无可替代的优势，事实上已成为当前互联网企业主流的大数据分析平台。为解决广大
shenmanli·2023-12-21 06:58
上一页 49 50 51 52 53 54 55 56 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他