E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Hadoop系统架构
计算机毕业设计
hadoop
+spark知识图谱房源推荐系统 房价预测系统 房源数据分析 房源可视化 房源大数据大屏 大数据毕业设计 机器学习
创新点:1.支付宝沙箱支付2.支付邮箱通知(JavaMail)3.短信验证码修改密码4.知识图谱5.四种推荐算法(协同过滤基于用户、物品、SVD混合神经网络、MLP深度学习模型)6.线性回归算法预测房价7.Python爬虫采集链家数据8.AI短信识别9.百度地图API10.lstm情感分析11.spark大屏可视化开发技术:springbootvue.jspythonechartssparkmys
计算机毕业设计大全
·
2024-09-03 07:05
基于分布式计算的电商系统设计与实现【系统设计、模型预测、大屏设计、海量数据、
Hadoop
集群】
=有需要本项目的代码或文档以及全部资源,或者部署调试可以私信博主==项目展示项目介绍目录摘要Abstract1引言1.1研究背景1.2国内外研究现状1.3研究目的1.4研究意义2关键技术理论介绍2.1
Hadoop
王小王-123
·
2024-09-03 04:54
hadoop
大数据
分布式
电商系统分析
分布式计算
大数据技术之Flume 企业开发案例——自定义 Interceptor(8)
编辑flume配置文件分别在
hadoop
12,
hadoop
13,
hadoop
14上启动flume进程,注意先后顺序。在
hadoop
12使用netcat向localhost:44444发送字母和数字。
大数据深度洞察
·
2024-09-03 03:50
Flume
flume
大数据
大数据基础之Flume——Flume基础及Flume agent配置以及自定义拦截器
Flume简介Flume用于将多种来源的日志以流的方式传输至
Hadoop
或者其他目的地 -一种可靠、可用的高效分布式数据收集服务Flume拥有基于数据流上的简单灵活架构,支持容错、故障转移与恢复由Cloudera2009
Clozzz
·
2024-09-03 03:17
Flume
大数据
flume
hadoop
Mapreduce是什么
Hadoop
MapReduce是一个软件框架,基于该框架能够容易地编写应用程序,这些应用程序能够运行在由上千个商用机器组成的大集群上,并以一种可靠的,具有容错能力的方式并行地处理上TB级别的海量数据集。
whisky丶
·
2024-09-03 01:07
VS2022打包Docker镜像
ZrAdminNetCore.net8分支为例3.添加docker支持4.配置工程文件在.proj文件加上ZrAdminCore1.0.05.打包在根目录执行打包命令--操作系統(--oslinux)--
系统架构
碧山云游
·
2024-09-03 01:07
docker
容器
运维
Hadoop
之MapReduce
1.MapReduce解决的问题1)数据问题:10G的TXT文件2)生活问题:统计分类上海市的图书馆的书2.MapReduce是什么MapReduce是一种分布式的离线计算框架,是一种编程模型,用于大规模数据集(大于1TB)的并行运算将自己的程序运行在分布式系统上。概念是:Map(映射)"和"Reduce(归约)指定一个Map(映射)函数,用来把一组键值对映射成一组新的键值对,指定并发的Reduc
qq_43198449
·
2024-09-03 01:07
大数据技术之Flume 数据流监控——Ganglia 的安装与部署(11)
目录Flume数据流监控Ganglia的安装与部署Ganglia组件介绍1)安装Ganglia2)在
hadoop
12修改配置文件/etc/httpd/conf.d/ganglia.conf3)在
hadoop
12
大数据深度洞察
·
2024-09-03 00:33
Flume
大数据
flume
Hadoop
中的大数据技术:调优篇(3)
故障模拟终止NameNode进程[lzl@
hadoop
12current]$kill-919886删除NameNode存储的数据[lzl@
hadoop
12
hadoop
-3.1.3]$rm-rf/opt/
大数据深度洞察
·
2024-09-03 00:33
大数据
hadoop
分布式
【HBase之轨迹】(1)使用 Docker 搭建 HBase 集群
——目录——0.前置准备1.下载安装2.配置(重)3.启动与关闭4.搭建高可用HBase前言(贫穷使我见多识广)前边经历了
Hadoop
,Zookeeper,Kafka,他们的集群,全都是使用Docker
寒冰小澈IceClean
·
2024-09-02 22:49
【大数据之轨迹】
【Docker之轨迹】
笔记
hbase
docker
hadoop
Spark-submit提交任务的常用参数
#参数名称#含义--clusterc3prc-
hadoop
#--masterMASTER_URL#可以是spark://host:port,mesos://host:port,yarn,yarn-cluster
liuzx32
·
2024-09-02 20:22
hadoop
sdk使用_使用 .NET SDK 管理 HDInsight 中的 Apache
Hadoop
群集
全球版技术文档网站,若需要访问由世纪互联运营的MICROSOFTAZURE中国区技术文档网站,请访问https://docs.azure.cn.使用.NETSDK管理HDInsight中的Apache
Hadoop
weixin_39862484
·
2024-09-02 20:39
hadoopsdk使用
Hive 运行在 Tez 上
Tez下载Tez官网Tez在Hive上的运用前提要有
Hadoop
集群上传Tez压缩包到Hive节点上tar-zxvfapache-tez-0.9.1-bin.tar.gz-C/opt/module/tez
爱吃酸梨
·
2024-09-02 20:07
大数据
医疗行业数字化转型设计方法论及典型案例
医疗行业数字化转型设计方法论及典型案例医疗行业数字化转型设计方法论及典型案例数字化转型背景与趋势医疗行业现状及挑战数字化转型必要性发展趋势与前景展望数字化转型设计方法论用户需求分析与定位产品功能规划与设计技术架构选型与搭建运营策略制定与执行典型案例一:智慧医院系统建设项目背景及目标设定智慧医院
系统架构
设计关键技术应用与实现运营效果评估及改进方向典型案例二
数字化建设方案
·
2024-09-02 19:04
数字化转型
数据治理
主数据
数据仓库
智慧医院
智慧医疗
医共体
医联体
健康平台
架构
人工智能
数据挖掘
大数据
数据库
系统架构
师考试学习笔记第三篇——架构设计高级知识(11)软件可靠性基础知识
本章知识点:第11课时主要学习软件可靠性基本概念、建模、管理、设计、测试和评价等内容。本课时内容侧重于概念知识,根据以往全国计算机技术与软件专业技术资格(水平)考试的出题规律,考查的知识点多来源于教材,扩展内容较少。根据考试大纲,本课时知识点会涉及单项选择题(约占2~3分),论文也会有涉及。本课时知识架构如图11.1所示。一、软件可靠性基本概念1.软件可靠性的定义软件可靠性是指在规定的时间内,软件
SheldonK
·
2024-09-02 17:22
软件架构师学习分享
学习
笔记
大数据开发技术HBase优化与特点分析
关闭HBase集群(如果没有开启则跳过此步)[atguigu@
hadoop
102hbase]$bin/stop-hbase.sh在con
at小白在线中
·
2024-09-02 13:32
大数据
经验笔记:
Hadoop
Hadoop
经验笔记一、
Hadoop
概述
Hadoop
是一个开源软件框架,用于分布式存储和处理大规模数据集。其设计目的是为了在商用硬件上运行,具备高容错性和可扩展性。
漆黑的莫莫
·
2024-09-02 03:54
随手笔记
笔记
hadoop
大数据
基于STM32开发的简易自动驾驶系统
目录引言环境准备工作硬件准备软件安装与配置系统设计
系统架构
硬件连接代码实现系统初始化传感器数据采集与处理电机控制与转向OLED显示与状态提示Wi-Fi通信与远程监控应用场景简易自动驾驶演示智能车模型开发与学习常见问题及解决方案常见问题解决方案结论
嵌入式详谈
·
2024-09-01 18:01
stm32
自动驾驶
嵌入式硬件
基于STM32开发的智能灌溉系统
目录引言环境准备工作硬件准备软件安装与配置系统设计
系统架构
硬件连接代码实现系统初始化土壤湿度检测与灌溉控制OLED显示与状态提示Wi-Fi通信与远程监控应用场景家庭花园的智能灌溉管理农业和温室的自动化灌溉系统常见问题及解决方案常见问题解决方案结论
嵌入式详谈
·
2024-09-01 18:31
stm32
嵌入式硬件
单片机
基于STM32开发的智能门禁系统
目录引言环境准备工作硬件准备软件安装与配置系统设计
系统架构
硬件连接代码实现系统初始化RFID读卡与门锁控制OLED显示与状态提示Wi-Fi通信与远程管理应用场景家庭和小型办公室的智能门禁管理企业和社区的安全门禁系统常见问题及解决方案常见问题解决方案结论
嵌入式详谈
·
2024-09-01 18:31
stm32
嵌入式硬件
单片机
ARM/Linux嵌入式面经(三二):百度
,展开讲一下对RTOS的线程和任务管理相关的有了解吗RTOS的线程和任务管理相关了解追问有深度的技术问题及答案vivado这个硬件平台怎么用的Vivado硬件平台使用了解追问有深度的技术问题及答案项目
系统架构
TrustZone_Hcoco
·
2024-09-01 14:04
ARM/Linux嵌入式面试
arm开发
dubbo
芯片
嵌入式硬件
单片机
【
系统架构
设计师】论文:论SOA面向服务架构技术的应用
论文:论SOA面向服务架构技术的应用文章目录摘要正文总结摘要本人于2020年7月参加国内某某知名港口供电业务系统的开发工作,在该项目中主要担任
系统架构
师,主要负责该
系统架构
和网络安全体系架构设计。
数据知道
·
2024-09-01 14:03
软考高级-系统架构设计师
系统架构
架构
软考高级
系统架构设计师
面向服务架构
SOA
Python大数据之
Hadoop
学习——day06_hive学习02
一.hive内外表操作1.建表语法create[external]table[ifnotexists]表名(字段名字段类型,字段名字段类型,...)[partitionedby(分区字段名分区字段类型)]#分区表固定格式[clusteredby(分桶字段名)into桶个数buckets]#分桶表固定格式[sortedby(排序字段名asc|desc)][rowformatdelimitedfiel
笨小孩124
·
2024-09-01 11:18
大数据
hadoop
学习
大数据毕业设计
hadoop
+spark+hive微博舆情情感分析 知识图谱微博推荐系统
(一)Selenium自动化Python爬虫工具采集新浪微博评论、热搜、文章等约10万条存入.csv文件作为数据集;(二)使用pandas+numpy或MapReduce对数据进行数据清洗,生成最终的.csv文件并上传到hdfs;(三)使用hive数仓技术建表建库,导入.csv数据集;(四)离线分析采用hive_sql完成,实时分析利用Spark之Scala完成;(五)统计指标使用sqoop导入m
qq_79856539
·
2024-09-01 11:16
javaweb
大数据
hadoop
课程设计
基于
hadoop
+spark的旅游大数据分析平台
S2023132基于
hadoop
+spark的旅游大数据分析平台使用BeautifulSoup爬取数据,爬取成功以后使用spark分析数据,将分析的结果保存到mysql,flask读取mysql数据,结合
源码空间站11
·
2024-09-01 11:16
hadoop
spark
旅游
大数据毕业设计天
hadoop
+spark+hive游戏推荐系统 游戏数据分析可视化大屏 steam游戏爬虫 游戏大数据 机器学习 知识图谱 计算机毕业设计 机器学习 深度学习 人工智能 知识图谱
|—||一、选题的目的和意义用户往往因为不能及时查看游戏信息而造成许多烦恼。另一方面,游戏商城平台没能进行系统的管理与维护使游戏信息没能及时的更新。而传统的游戏信息管理,采用的还是手工备案、人工查询的方式。但是随之游戏信息的增多这种管理方式的工作量不断加大,这种做法就存在费时费力、缺乏时效性、不利于调动人员的积极性等缺点。一旦网站建立好之后,一方面,用户可以在第一时间在系统里查询所需的信息,另一方
2401_84159688
·
2024-09-01 11:45
程序员
大数据
hadoop
人工智能
python使用threading多线程
多线程1多线程和多进程的速度区别1.任务类型2.
系统架构
3.编程语言特性4.资源开销5.应用场景总结示例代码示例:计算阶乘使用多线程使用多进程结论2多线程和多进程的特点区别1.内存空间2.资源开销3.并发执行
小蜗笔记
·
2024-09-01 11:42
python
python
基于STM32开发的智能农业监测与控制系统
目录引言环境准备工作硬件准备软件安装与配置系统设计
系统架构
硬件连接代码实现系统初始化传感器数据采集与处理自动灌溉与环境控制数据融合与决策算法OLED显示与状态提示Wi-Fi通信与远程监控应用场景温室环境的智能监控与自动化控制农田土壤与作物生长的实时监测常见问题及解决方案常见问题解决方案结论
stm32发烧友
·
2024-09-01 07:18
stm32
嵌入式硬件
单片机
基于STM32开发的智能家用能源管理系统
目录引言环境准备工作硬件准备软件安装与配置系统设计
系统架构
硬件连接代码实现系统初始化能源监测与数据处理能源管理与控制Wi-Fi通信与远程监控应用场景家庭能源使用优化智能电力监控常见问题及解决方案常见问题解决方案结论
stm32发烧友
·
2024-09-01 07:48
stm32
能源
单片机
【基于
Hadoop
3.3.6+Spark3.4.3电商用户行为分析】
基于
Hadoop
3.3.6+Spark3.4.3电商用户行为分析一、摘要二、正文2.1需求分析2.2架构设计2.3实施过程2.3.1系统环境说明2.3.2系统开发思路说明2.3.4代码实现及测试2.3.5
若兰幽竹
·
2024-09-01 00:09
大数据项目
大数据
基于
Hadoop
的高校教学管理平台设计与实现
文中就高校大数据平台的关键技术和架构进行阐述,结合高校实际情况,设计高校大数据平台架构,通过搭建
Hadoop
集群环境,以业务系统和平台之间的数据交互验证平台设计的可行性和优势。
这是辰辰啊
·
2024-09-01 00:38
hadoop
hadoop
大数据
基于STM32的智能物料运载小车:OpenMV和OpenCV结合图像识别与运动控制算法优化(代码示例)
二、
系统架构
1.
系统架构
设计本项目的系统
极客小张
·
2024-08-31 22:00
stm32
opencv
嵌入式硬件
系统架构
物联网
c语言
机器人
无人机及固定机巢自动化控制软件技术详解
无人机及固定机巢自动化控制软件作为支撑无人机高效、安全、自主运行的核心,集成了先进的
系统架构
、飞行控制算法、传感器技术、通信协议及数据处理能力。
无人机技术圈
·
2024-08-31 21:50
无人机技术
无人机
自动化
运维
Hive SQL练习之影评案例
找的练习hive,内容非原创链接https://www.cnblogs.com/frankdeng/p/9309668.html一、建表,导入数据1、建表[root@master
hadoop
]#hiveLogginginitializedusingconfigurationinjar
软件手
·
2024-08-31 17:23
Hive
mysql
hive
hadoop
sql
大数据
hadoop
日志文件
路径:/opt/homebrew/Cellar/
hadoop
/3.4.0/libexec/logs从你提供的输出信息来看,你正在查看
Hadoop
的日志文件目录(logs目录)。
静听山水
·
2024-08-31 17:51
Spark
hadoop
hadoop
常用地址
java:"/opt/homebrew/Cellar/openjdk/22.0.1/libexec/openjdk.jdk/Contents/Home"
hadoop
:1】sbin:/opt/homebrew
静听山水
·
2024-08-31 16:49
Spark
hadoop
Hadoop
技术栈
1.什么是
hadoop
(分布式软件框架)他提供了分步式数据存储分布式数据计算分布式资源调度为一体的整体解决方案1.1
hadoop
的用处可以部署在1台乃至成千上万台服务器节点上协同工作。
XingChen.
·
2024-08-31 16:48
分布式
hadoop
大数据
【Mysql】通过Keepalived搭建mysql双主高可用集群
一、环境信息主机名ip操作系统mysql版本VIP(虚拟ip)
hadoop
01192.168.10.200centos7_x865.7192.168.10.253
hadoop
03192.168.10.202centos7
维运
·
2024-08-31 15:13
数据库
mysql
数据库
《
Hadoop
系列》Docker安装
Hadoop
文章目录Docker安装
Hadoop
1安装docker1.1添加docker到yum源1.2安装docker2安装
Hadoop
2.1使用docker自带的
hadoop
安装2.2免密操作2.2.1master
DATA数据猿
·
2024-08-31 12:16
Hadoop
Docker
docker
hadoop
docker安装
Hadoop
拉取镜像[root@ecs-e722~]#dockerpullregistry.cn-hangzhou.aliyuncs.com/
hadoop
_test/
hadoop
_baseUsingdefaulttag
悾说
·
2024-08-31 11:16
docker
hadoop
hadoop
docker
大数据
带你详解B/S和C/S
系统架构
分析
系统架构
分析关于
系统架构
1.
系统架构
包括什么形式?C/S架构B/S架构2.C/S架构是什么?-用户在本地安装客户端,通过网络与服务器相互通信。
于弋gg
·
2024-08-31 04:50
系统架构
服务器
servlet
【
系统架构
设计】设计模式
【
系统架构
设计】设计模式设计模式概述GoF设计模式FactoryMethodAbstractFactory(*)BuilderPrototype(原型)Singleton(*)AdapterBridgeComposite
傻傻虎虎
·
2024-08-30 23:51
系统架构设计
系统架构
设计模式
系统架构
分析
一、速通一图流二、
系统架构
功能、作用分析1.Furion:框架核心层功能:这是Furion框架的核心层,通常包含框架本身的基本功能和配置。
冰冰在努力
·
2024-08-30 23:18
企业级技术
系统架构
c#
asp.net
.netcore
.net
小白学习大数据测试之
hadoop
hdfs和MapReduce小实战
转发是对小编的最大支持在湿货|大数据测试之
hadoop
单机环境搭建(超级详细版)这个基础上,我们来运行一个官网的MapReducedemo程序来看看效果和处理过程。
大数据学习02
·
2024-08-30 11:39
SpringBoot+Vue疫苗接种管理系统 预约接种疫苗管理系统 疫苗接种查询系统Java
作者主页:计算机毕业设计老哥有问题可以主页问我一、开发介绍1.1开发环境开发语言:Java数据库:MySQL
系统架构
:B/S后端:SpringBoot(Spring+SpringMVC+Mybatis)
计算机程序老哥
·
2024-08-30 08:49
基于STM32开发的智能语音控制系统
目录引言环境准备工作硬件准备软件安装与配置系统设计
系统架构
硬件连接代码实现系统初始化语音识别与指令处理控制设备OLED显示与状态提示Wi-Fi通信与远程监控应用场景家庭环境中的智能语音控制办公环境中的语音交互常见问题及解决方案常见问题解决方案结论
stm32发烧友
·
2024-08-29 23:46
stm32
嵌入式硬件
单片机
虚拟机安装
hadoop
,hbase(单机伪集群模式)
虚拟机安装
Hadoop
,Hbase工作中遇到了大数据方面的一些技术栈,没有退路可言,只能去学习掌握它,就像当初做爬虫一样(虽然很简单),在数据爆发的现在,传统的数据库mysql,oracle显然在处理大数据量级的数据时显得力不从心
流~星~雨
·
2024-08-29 21:31
大数据相关
hadoop
hbase
大数据
hive中的数据同步到hbase
关于
hadoop
,hive,hbase这三个技术栈我写了两篇博客简单的分享了我对这三个技术栈的一些看法,在我目前的认知里,
hadoop
提供hdfs这个组件来存储大数据量的数据(相比于mysql,oracle
流~星~雨
·
2024-08-29 21:31
大数据相关
hive
hbase
hadoop
hbase ExportSnapshot迁移hbase表
在源集群上准备快照:snapshot'credit_dict','credit_dict_snapshot20221117'list_snapshots复制快照到目标集群:hbaseorg.apache.
hadoop
.hbase.snapshot.ExportSnapshot
Rjunxiang
·
2024-08-29 16:56
hbase
hbase
大数据
hadoop
Hbase离线迁移
hadoop
distcp-Dmapreduce.job.hdfs-servers.token-renewal.exclude="xx.xx.xx.xx"-i-strat
我要用代码向我喜欢的女孩表白
·
2024-08-29 15:22
hbase
数据库
大数据
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他