E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hadoop离线
Kylin系列-入门
Kylin系列-入门ApacheKylin是一个开源的分布式分析引擎,提供
Hadoop
/Spark之上的SQL查询接口及多维分析(OLAP)能力,以支持超大规模数据。
Dingdangr
·
2024-08-26 13:34
kylin
Git 全面教程
每个开发者的工作目录中都拥有整个项目的完整历史记录,这使得Git在网络连接不稳定或
离线
情况下也能进行开发。
shuai_258
·
2024-08-26 11:55
git
git
c++
Mac
Hadoop
Yarn日志聚合出错
Mac
Hadoop
Yarn日志聚合出错通过日志查看出现了下面的错误:java.lang.IllegalStateException:CannotcloseTFileinthemiddleofkey-valueinsertion.atorg.apache.
hadoop
.io.file.tfile.TFile
HHoao
·
2024-08-26 10:15
macos
hadoop
大数据
基于spark+
hadoop
+hive大数据分析的电影推荐系统的设计与实现
1.1开发环境二、系统介绍2.1图片展示三、部分代码设计3.1.部分代码如下:**总结****大家可以帮忙点赞、收藏、关注、评论啦****有问题评论区交流**一、开发介绍1.1开发环境技术栈:spark+
hadoop
毕设木哥
·
2024-08-26 06:26
spark
spark
hadoop
hive
spring
java
《
Hadoop
核心技术》作者翟周伟 :我与
Hadoop
的不解之缘
摘要:翟周伟,资深
Hadoop
技术专家,《
Hadoop
开源云计算平台》、《
Hadoop
核心技术》作者。
xytlwp
·
2024-08-25 21:27
翟周伟
hadoop
数据挖掘
自然语言处理
hadoop
翟周伟
数据挖掘
自然语言处理
Tair分布式缓存
为什么不能像操作分布式数据库或者
hadoop
那样,增加一个中央节点,让它去代理所有事情。所以就开发了这个tai
kingkyrie
·
2024-08-25 18:38
分布式
Hadoop
入门基础(五):
Hadoop
常用 Shell 命令一网打尽,提升你的大数据技能!
1.
Hadoop
基本命令1.1查看版本信息
hadoop
version用于检查
Hadoop
的版本信息以及编译信息。
william.zhang(张)
·
2024-08-25 15:52
大数据
Hadoop
容器
大数据
hadoop
分布式
HDFS的编程
一、HDFS原理HDFS(
Hadoop
DistributedFileSystem)是
hadoop
生态系统的一个重要组成部分,是
hadoop
中的的存储组件,在整个
Hadoop
中的地位非同一般,是最基础的一部分
卍king卐然
·
2024-08-25 07:02
hdfs
hadoop
大数据安全
web安全
经验分享
Hadoop
入门基础(二):
Hadoop
集群安装与部署详解(超详细教程)
NameNodemaster192.168.1.101DataNode1slave1192.168.1.102DataNode2slave2192.168.1.1032.软件要求操作系统:CentOS7或Ubuntu20.04JavaJDK:
Hadoop
william.zhang(张)
·
2024-08-25 06:57
hadoop
大数据
分布式
chrome-网页gif截图插件
安装在线扩展程序管理页,打开chrome应用商店,检索安装即可
离线
https://download.csdn.
丿似锦
·
2024-08-24 21:30
Google
chrome
前端
Ubuntu下部署
Hadoop
集群+Hive(一)
配置主机Host在三台服务器上添加主机名与IP的映射,以方便在局域网内进行主机间的快速访问和后续的文件配置;配置方法:vi/etc/hosts为方便配置:我的三台主机取名为
Hadoop
Master、
Hadoop
Slave01
岩屿
·
2024-08-24 17:41
hadoop
ubuntu
hive
大数据
Hadoop
的基本 shell 命令
Hadoop
的基本shell命令主要用于与
Hadoop
分布式文件系统(HDFS)和MapReduce进行交互。
难以触及的高度
·
2024-08-24 14:22
hadoop
大数据
分布式
基于
Hadoop
的海量图像检索
基于
Hadoop
的海量图像检索“MassiveImageRetrievalBasedon
Hadoop
:AStudyinSoftwareEngineering”完整下载链接:基于
Hadoop
的海量图像检索文章目录基于
usp1994
·
2024-08-24 13:12
hadoop
eclipse
大数据
从零到一建设数据中台 - 关键技术汇总
一、数据中台关键技术汇总语言框架:Java、Maven、SpringBoot数据分布式采集:Flume、Sqoop、kettle数据分布式存储:
Hadoop
HDFS
离线
批处理计算:MapReduce、Spark
我码玄黄
·
2024-08-24 12:09
数据中台
数据挖掘
数据分析
大数据
Kylin的工作原理及使用分享
Kylin提供了一个
Hadoop
之上的SQL查询接口及多维分析(OLAP)能力,能够支持大规模数据,处理TB乃至PB级别的分析任务,并且能够在亚秒级查询巨大的Hive表。
丁爸
·
2024-08-24 07:01
大数据
kylin
无需联网的
离线
语音识别ic方案让全屋家电更智能
概括方便用户控制智能设备、电器,用户只须说一下口令就实现制智能设备、电器。特性●定制多种国家语音播报功能●低功耗高性价比●多种接口和协议支持●高度稳定性和可靠性●采用数字信号处理技术和人工智能算法●拥有完善的软件开发工具和技术支持语音相关参数●高性能32位RISC内核●主频240MHz●内置1MBSPIFLASH存储●采用最新的神经网络(TDNN)算法和语音降噪算法●支持硬件浮点运算●
九芯电子
·
2024-08-24 05:46
九芯电子语音芯片方案
语音芯片
语音识别
linux主机
离线
安装python3环境
一、下载好python版本Indexof/ftp/python/https://www.python.org/ftp/python/二、创建文件夹mkdir/home/python/三、上传到主机四、解压#解压xz得到tar包xz-dPython-3.9.8.tar.xz#解压tar包tar-xvfPython-3.9.8.tar五、指定安装路径#进入解压后的目录cdPython-3.9.8#"=
文子阳
·
2024-08-23 23:15
运维
linux
运维
服务器
linux
离线
安装python
安装jdk具体操作如下:1、下载jdk安装包到服务器2、解压tar-zxvfjdk-8u131-linux-x64.tar.gz3、配置环境变量3.1、vi~/.bash_profile3.2、在.bash_profile文件中填入如下语句:exportPATHexportJAVA_HOME=/home/appadmin/apps/jdk1.8.0_162exportPATH=$JAVA_HOME
kevin529_super
·
2024-08-23 23:13
linux
python
linux
python
阿里云服务器内存型r7、r8a、r8y实例区别及最新活动价格参考
在阿里云目前的活动中,属于内存型实例规格的云服务器有内存型r7、内存型r8a、内存型r8y这几个实例规格,相比于活动内的经济型e和通用算力型u1等实例规格来说,这些实例规格等性能更强,适用于数据分析与挖掘,
Hadoop
阿里云最新优惠和活动汇总
·
2024-08-23 22:23
离线
AI:使用 Termux 从源代码在 Android 手机/Waydroid 上构建 Ollama
简介学习从源代码在Android手机/Waydroid(开发模式)上构建Ollama(大型语言模型运行器)。Android手机/WaydroidTermux的终端命令相同推荐文章《在自己笔记本上使用Llama-3生成PowerPoint—幻灯片自动化的第一步》权重1,本地类、ppt类《如何微调NLLB-200模型以翻译新语言(教程含源码)》权重5,翻译类《LangchainStreamlitAI系
知识大胖
·
2024-08-23 17:32
NVIDIA
GPU和大语言模型开发教程
人工智能
智能手机
ollama
termux
waydroid
Ubuntu下部署
Hadoop
集群+Hive(二)
Hadoop
集群搭建准备环境
hadoop
-3.3.6.tar.gz,jdk-8u421-linux-x64.tar.gz根据自己的使用下载对的
hadoop
和jdk版本
hadoop
下载地址:Apache
Hadoop
JDK
岩屿
·
2024-08-23 14:46
hadoop
hive
计算机毕业设计
hadoop
+spark知识图谱美食推荐系统 美食价格预测 美团推荐系统 美团爬虫 大众点评爬虫 美食数据分析 美食可视化大屏 大数据毕设
创新点:1.支付宝沙箱支付2.支付邮箱通知(JavaMail)3.短信验证码修改密码4.知识图谱5.四种推荐算法(协同过滤基于用户、物品、SVD混合神经网络、MLP深度学习模型)6.线性回归算法预测房价7.Python爬虫采集大众点评美食数据8.AI短信识别9.百度地图API10.lstm情感分析11.spark大屏可视化开发技术:springbootvue.jspythonechartsspar
计算机毕业设计大全
·
2024-08-23 13:22
Linux保存依赖安装包到指定目录(用于
离线
安装)
经常与一些保密级别较高的企业打交道,他们使用的网络都是内部网络,根本无法访问到公网,但是部署一些项目时难免会有依赖包需要
离线
安装。
和月明
·
2024-08-23 12:33
服务安装
linux
centos
运维
计算机毕业设计
hadoop
+spark知识图谱高考分数预测系统 高考志愿推荐系统 高考可视化大屏 高考大数据 高考数据分析 高考爬虫 大数据毕业设计
开发技术
hadoop
sparkspringbootvue.jsPython爬虫、机器学习、深度学习mybatis-plusneo4j知识图谱图数据库mysql协同过滤算法(基于物品、基于用户模式)MLP
计算机毕业设计大全
·
2024-08-23 11:05
基于
Hadoop
平台的电信客服数据的处理与分析④项目实现:任务16:数据采集/消费/存储
任务描述“数据生产”的程序启动后,会持续向callLog.csv文件中写入模拟的通话记录。接下来,我们需要将这些实时的数据通过Flume采集到Kafka集群中,然后提供给HBase消费。Flume:是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据
我非夏日
·
2024-08-23 06:28
大数据开发---电信项目
大数据
大数据技术开发
hadoop
抖音极速版邀请码是多少2024一览 抖音极速版邀请码填写步骤(日常任务中隐藏的宝藏)
抖音极速版与各大内容商合作,同时持续扶持优质的原创内容,抖音极速版是一款提供免费在线听书的手机应用,抖音极速版用户可以在这里畅听海量的有声资源,而且还可以
离线
下载,无需流量也可以随时随地地欣赏。
桃朵十三
·
2024-08-23 04:16
不得不说说微信钉钉后端亿级用户架构那些事
6)**用户状态:**指用户当前是在线、
离线
还是挂起等状态。
2301_79099460
·
2024-08-23 03:08
程序员
微信
钉钉
架构
鸿蒙(API 12 Beta3版)【DRM系统管理(C/C++)】数字版权保护开发
DRM系统管理(MediaKeySystem)支持MediaKeySystem实例管理、设备DRM证书申请与处理、会话实例管理、
离线
媒体密钥管理、获取DRM度量统计信息、设备属性等。
移动开发技术栈
·
2024-08-23 00:47
harmonyos
c++
媒体
openharmony
音视频
安全
鸿蒙
鸿蒙(API 12 Beta3版)【DRM系统管理(ArkTS)】数字版权保护
DRM系统管理(MediaKeySystem)支持MediaKeySystem实例管理、设备DRM证书申请与处理、会话实例管理、
离线
媒体密钥管理、获取DRM度量统计信息、设备属性等。
移动开发技术栈
·
2024-08-23 00:17
鸿蒙开发
harmonyos
openharmony
媒体
音视频
ArkTS
安全
鸿蒙
探索Umi-OCR:一款高效易用的图像文字识别工具
探索Umi-OCR:一款高效易用的图像文字识别工具Umi-OCRUmi-OCR:这是一个免费、开源、可批量处理的
离线
OCR软件,适用于Windows系统,支持截图OCR、批量OCR、二维码识别等功能。
任翊昆Mary
·
2024-08-23 00:45
点淘邀请码是多少(5个亲测可用2024邀请码分享)大佬推荐爆款app
别的,它还支持
离线
阅读和夜间模式等成果,让你随时随地都能享受到贴心的阅读体验。
桃朵十三
·
2024-08-22 22:29
《Linux运维总结:基于银河麒麟V10+ARM64架构CPU部署zookeeper 3.8.4二进制分布式集群》
它是Google的Chubby项目的开源实现之一,并且是
Hadoop
和HBase等项目的重要组成部分。ZooKeeper提供的功能包括配置维护
东城绝神
·
2024-08-22 16:35
《Linux运维实战总结》
运维
分布式
linux
zookeeper
最细致最简单的 Arm 架构搭建 Harbor
更好的阅读体验:点这里(www.doubibiji.com)ARM
离线
版本安装官方提供了一个arm版本,但是好久都没更新了,地址:https://github.com/goharbor/harbor-arm
山石岐渡
·
2024-08-22 12:08
harbor
Amazon EFS:云端弹性文件系统的多元化应用场景
应用:
Hadoop
、Spark等大数据框架优势:高
ivwdcwso
·
2024-08-22 04:51
运维
EFS
AWS
webjs 数据库
离线
读取本地数据库源码-SAAS 本地化及未来之窗行业应用跨平台架构
一、初始化js数据库console.group("本地数据");var未来之窗db=newCyberWin_MS("cyberwinclient_gfsoft_itemmain","cyberwin_gfsoft_db");if(type=="项目"){未来之窗db=newCyberWin_MS("cyberwinclient_item","cyberwin_gfsoft_db");}if(typ
未来之窗软件服务
·
2024-08-22 03:15
未来之窗VOS
未来之窗混合云
软件架构思维-阿雪技术观念
数据库
windows
JavaScript数据库
Hadoop
的概念
1.什么是大数据数据体量巨大:数据量规模庞大,通常以PB(拍字节)或EB(艾字节)来衡量,远远超出了传统数据库和数据处理工具的处理能力。数据类型多样:大数据包括结构化数据、半结构化数据和非结构化数据。其中,非结构化数据占据了相当大的比例,如文本、音频、视频、图片、地理位置信息等。价值密度低:在大量的数据中,真正有价值的信息可能只是很小的一部分。因此,如何从海量数据中快速提取有价值的信息是大数据处理
子非鱼
·
2024-08-22 02:03
hadoop
大数据
分布式
MAP REDUCE
框架示例Apache
Hadoop
:以MapReduce作为默认处理引擎的框架。ApacheSpark:可以整合进
Hadoop
,取代MapReduce的框架
Xiao_die888
·
2024-08-22 01:58
大数据分析与应用
mapreduce
HiveSQL常见函数及使用方法(含代码示例)
HiveSQL(HiveSQL)是ApacheHive所使用的SQL方言,专门用于在
Hadoop
上进行大规模数据处理。以下是一些常见的HiveSQL函数及其使用方法:1.聚合函数COUNT统计记录数。
会飞的岛格酱
·
2024-08-21 21:31
SQL代码练习
hive
sql
数据分析
flink经典实战案例
一、java版flink-wordcount-
离线
计算版1.1maven构建flink,加入依赖org.apache.flinkflink-java${flink.version}provided-->
不 爱吃肉肉
·
2024-08-21 20:59
flink
big
data
java
scala
Azkaban各种类型的Job编写
一、概述原生的Azkaban支持的plugin类型有以下这些:command:Linuxshell命令行任务gobblin:通用数据采集工具
hadoop
Java:运行
hadoop
MR任务java:原生java
__元昊__
·
2024-03-28 21:00
Linux(centos7)部署hive
前提环境:已部署完
hadoop
(HDFS、MapReduce、YARN)1、安装元数据服务MySQL切换root用户#更新密钥rpm--importhttps://repo.mysql.com/RPM-GPG-KEY-mysqL
灯下夜无眠
·
2024-03-28 12:44
Linux
linux
hive
运维
dbeaver
hive客户端
关于HDP的20道高级运维面试题
HDP(HortonworksDataPlatform)的主要组件包括
Hadoop
框架、HDFS、MapReduce、YARN以及
Hadoop
生态系统中的其他关键工具,如Spark、Flink、Hive
编织幻境的妖
·
2024-03-26 15:34
运维
【
Hadoop
】使用Scala与Spark连接ClickHouse进行数据处理
风不懂不懂得叶的梦月不听不听闻窗里琴声意难穷水不见不曾见绿消红霜不知不知晓将别人怎道珍重落叶有风才敢做一个会飞的梦孤窗有月才敢登高在夜里从容桃花有水才怕身是客身是客此景不能久TieYann(铁阳)、薄彩生《不知晓》在大数据分析和处理领域,ApacheSpark是一个广泛使用的高性能、通用的计算框架,而ClickHouse作为一个高性能的列式数据库,特别适合在线分析处理(OLAP)。结合Scala语
音乐学家方大刚
·
2024-03-26 09:56
Scala
Hadoop
hadoop
scala
spark
ELK
离线
安装和配置流程
ELK
离线
安装和配置流程一、介绍ELK是一个开源的数据分析和可视化工具,由三个开源项目组成:Elasticsearch、Logstash和Kibana。
GB9125
·
2024-03-25 19:39
运维开发
elasticsearch
elk
linux
运维开发
利用K8S Statefulset搭建Etcd集群 - 本地存储
但是公司的项目运行在
离线
ARM架构平台,直接使用网上EtcdOperator代码,他们提供的镜像都是x86_64架构,经过Opeartor编译等尝试,最后都以失
夜晓码农
·
2024-03-25 15:34
大数据
Docker
kubernetes
etcd
容器
hadoop
配置免密登录
1.生成密钥ssh-keygen-trsa所有节点都要执行2.所有节点执行ssh-copy-id-i~/.ssh/id_rsa.pub用户名1@主机名1ssh-copy-id-i~/.ssh/id_rsa.pub用户名2@主机名2ssh-copy-id-i~/.ssh/id_rsa.pub用户名3@主机名33.目录授权chmod700~/.sshchmod600~/.ssh/authorized_
我干开发那十年
·
2024-03-24 07:25
ssh
服务器
linux
【笔记】HDFS基础笔记
启动
hadoop
命令(未配环境变量):进入
hadoop
安装目录输入.
哇咔咔哇咔
·
2024-03-20 04:12
Hadoop
hdfs
笔记
hadoop
大数据
ubuntu
【笔记】Linux常用命令
命令含义cd/home/
hadoop
#把/home/
hadoop
设置为当前目录cd..#返回上一级目录cd~#进入到当前Linux系统登录用户的主目录(或主文件夹)。
哇咔咔哇咔
·
2024-03-20 03:11
Linux
笔记
linux
运维
ubuntu
经典案例- 磁盘阵列两块盘掉线的数据恢复分析
磁盘阵列两块硬盘
离线
数据恢复案例一:客户使用Dell2850服务器组建了raid5磁盘阵列,阵列中包含有6块硬盘(SCSI硬盘,单盘容量300G),服务器操作系统为linuxRedhat4;文件系统为ext3
北亚数据恢复
·
2024-03-19 08:18
数据恢复
数据恢复
raid
阵列数据恢复
服务器
linux安装单机版spark3.5.0
一、spark介绍是一种通用的大数据计算框架,正如传统大数据技术
Hadoop
的MapReduce、Hive引擎,以及Storm流式实时计算引擎等.Spark主要用于大数据的计算二、spark下载spark3.5.0
爱上雪茄
·
2024-03-17 18:57
大数据
JAVA知识
spark
大数据
分布式
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他