E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
大数据-Hadoop
一文详解
大数据
时代与低代码开发应用
随着信息技术的飞速发展,我们迎来了一个崭新的时代——
大数据
时代。在这个时代,数据成为了一种新的资源,
大数据
技术的应用成为了推动社会进步的关键力量。
快乐非自愿
·
2024-03-24 13:03
大数据
低代码
Spark面试整理-Spark是什么?
自那时起,Spark已经成为
大数据
处理中最受欢迎和广泛使用的框架之一。下面是Spark的一些关键特点:速度:Spark使用了先进的DAG(有向无环图)执行引擎,可以支持循环数据流和内存计算。
不务正业的猿
·
2024-03-24 13:02
面试
Spark
spark
大数据
分布式
hadoop
配置免密登录
1.生成密钥ssh-keygen-trsa所有节点都要执行2.所有节点执行ssh-copy-id-i~/.ssh/id_rsa.pub用户名1@主机名1ssh-copy-id-i~/.ssh/id_rsa.pub用户名2@主机名2ssh-copy-id-i~/.ssh/id_rsa.pub用户名3@主机名33.目录授权chmod700~/.sshchmod600~/.ssh/authorized_
我干开发那十年
·
2024-03-24 07:25
ssh
服务器
linux
请介绍一下
大数据
主要是干什么的?决策支持预测分析用户行为分析个性化服务操作优化风险管理创新与产品开发加拿大卡尔加里大学历史背景学术结构研究和创新校园设施
目录请介绍一下
大数据
主要是干什么的?
盛溪的猫猫
·
2024-03-24 02:17
感悟
大数据
英语
加拿大
GEE在灾害预警中的遥感云
大数据
应用及GPT模型辅助分析
随着遥感技术的快速发展,云
大数据
在灾害、水体与湿地领域的应用日益广泛。通过遥感云
大数据
,我们能够实时获取灾害发生地的影像信息,为灾害预警、应急响应提供有力支持。
AIzmjl
·
2024-03-22 05:52
GPT
生态
遥感
大数据
gpt
gee
灾害预警
水体湿地
遥感
大数据
毕设 图像识别-人脸识别与疲劳检测 - python opencv
文章目录0前言1课题背景2Dlib人脸识别2.1简介2.2Dlib优点2.3相关代码2.4人脸数据库2.5人脸录入加识别效果3疲劳检测算法3.1眼睛检测算法3.2打哈欠检测算法3.3点头检测算法4PyQt54.1简介4.2相关界面代码0前言这两年开始毕业设计和毕业答辩的要求和难度不断提升,传统的毕设题目缺少创新和亮点,往往达不到毕业答辩的要求,这两年不断有学弟学妹告诉学长自己做的项目系统达不到老师
fawubio_A
·
2024-03-20 12:53
python
算法
大数据
开发(Hive面试真题-卷二)
大数据
开发(Hive面试真题)1、举几个Hive开窗函数例子?什么要有开窗函数,和聚集函数区别?2、说下Hive是什么?跟数据仓库区别?3、Hive架构?4、Hive数据倾斜以及解决方案?
Key-Key
·
2024-03-20 05:14
大数据
hive
面试
【
大数据
面试题】014 Flink CDC 用过吗,请简要描述
一步一个脚印,一天一道面试题。FlinkCDC的诞生背景FlinkCDC的全称是ChangeDataCapture(变更数据捕获)每一项技术的诞生都是为了解决某个问题,某个痛点。而FlinkCDC的诞生就是为了解决在读取,监控MySQL这样的数据库时,不会因为读取数据库,对数据库本身造成压力,影响性能。同时,保证了数据源的准确,正确。FlinkCDC原理方式一:通过查询来获取更新的数据。如查询数据
Jiweilai1
·
2024-03-20 04:43
一天一道面试题
flink
大数据
面试
flink
cdc
【笔记】HDFS基础笔记
启动
hadoop
命令(未配环境变量):进入
hadoop
安装目录输入.
哇咔咔哇咔
·
2024-03-20 04:12
Hadoop
hdfs
笔记
hadoop
大数据
ubuntu
【笔记】Linux常用命令
命令含义cd/home/
hadoop
#把/home/
hadoop
设置为当前目录cd..#返回上一级目录cd~#进入到当前Linux系统登录用户的主目录(或主文件夹)。
哇咔咔哇咔
·
2024-03-20 03:11
Linux
笔记
linux
运维
ubuntu
【
大数据
】Flink SQL 语法篇(五):Regular Join、Interval Join
《FlinkSQL语法篇》系列,共包含以下10篇文章:FlinkSQL语法篇(一):CREATEFlinkSQL语法篇(二):WITH、SELECT&WHERE、SELECTDISTINCTFlinkSQL语法篇(三):窗口聚合(TUMBLE、HOP、SESSION、CUMULATE)FlinkSQL语法篇(四):Group聚合、Over聚合FlinkSQL语法篇(五):RegularJoin、I
G皮T
·
2024-03-19 07:16
#
Flink
SQL
大数据
flink
sql
Regular
Join
Interval
Join
双流Join
有一点动心
从调查出来的
大数据
来看,适龄人群的不婚比例,是空前高的一个数字,越来越多的适婚人士,加入了不婚
段duan
·
2024-03-19 03:03
大数据
开发(Kafka面试真题-卷一)
大数据
开发(Kafka面试真题)1、请解释以下ApacheKafka是什么?它在
大数据
系统中的角色是什么?2、请解释以下Kafka的工作原理和它与传统消息队列服务的不同之处?
Key-Key
·
2024-03-18 23:05
大数据
kafka
面试
什么是分布式搜索引擎
搜索引擎依托于多种技术,如网络爬虫技术、检索排序技术、网页处理技术、
大数据
处理技术、自然语言处理技术等,为信息检索用户提供快速、高相关性的信息服务。
罗彬桦
·
2024-03-18 20:00
分布式搜索引擎
搜索引擎
分布式
挑战杯
大数据
商城人流数据分析与可视化 - python
大数据
分析
0前言优质竞赛项目系列,今天要分享的是基于
大数据
的基站数据分析与可视化该项目较为新颖,适合作为竞赛课题方向,学长非常推荐!
laafeer
·
2024-03-18 05:42
python
Java开发从入门到精通(七):Java的面向对象编程OOP:常用API
Java
大数据
开发和安全开发(一)Java的常用API1.1Object类1.1toString1.1equals方法1.1对象克隆clone1.1Objects类1.1包装类1.1StringBuilder1.1StringBuffer1.1StringJoiner1.1Math
HACKNOE
·
2024-03-18 02:37
Java开发从入门到精通
java
intellij-idea
linux安装单机版spark3.5.0
一、spark介绍是一种通用的
大数据
计算框架,正如传统
大数据
技术
Hadoop
的MapReduce、Hive引擎,以及Storm流式实时计算引擎等.Spark主要用于
大数据
的计算二、spark下载spark3.5.0
爱上雪茄
·
2024-03-17 18:57
大数据
JAVA知识
spark
大数据
分布式
Hadoop
简介
简介
大数据
简介概述
大数据
的说法从出现到现在,也经历了十多年时间的发展。
程序员小郭同学
·
2024-03-16 07:10
hadoop
数
大数据
时代的关键:融合数据治理与AI为企业增值_光点科技
在数据驱动的今天,企业不能再将数据治理和人工智能(AI)视作孤立的实体。它们之间的协同作用已经成为推动企业增长的强大引擎。本文将探索数据治理与AI如何相互作用,形成闭环,以及企业如何利用这一关系来提升数据价值,实现数字化转型。数据治理与AI的依存共生数据治理是整理和优化数据的过程,以确保其质量、安全性和可用性。而AI,尤其是大模型,是解析和应用这些数据的工具。没有高质量的数据治理,AI无法发挥其最
光点数据治理
·
2024-03-16 07:10
人工智能
大数据
科技
2024年阿里云
大数据
acp认证条件
阿里云
大数据
acp认证考试没有条件,在校大学生、应届毕业生、在职员工均可报考。acp认证考试预约流程1.账户注册,认证人员登录阿里云认证全球培训中心网站,在页面右上角点击“立即注册”2.选择专业。
腾科教育
·
2024-03-16 06:38
阿里云
大数据
云计算
Redis 的 RDB 和 AOF
优点:快速恢复
大数据
集。子进程创建的方式减少了主进程的内存消耗。RDB文件是一个紧凑
龙大.
·
2024-03-16 02:31
Redis
redis
数据库
Hive中的NVL函数与COALESCE函数
ReturnsdefaultvalueifvalueisnullelsereturnsvalueExample:>SELECTnvl(null,'bla')FROMsrcLIMIT1;blaFunctionclass:org.apache.
hadoop
.hive.ql.udf.generic.GenericUDFNv
独影月下酌酒
·
2024-03-15 13:13
Hadoop
大数据
hive
hadoop
数据仓库
hive库表占用空间大小的命令
hdfsdfs-du-h/user/hive/warehouse2、按占用空间大小降序排列hdfsdfs-du/user/hive/warehouse/ipms.db|sort-nr3、查某一个分区占用空间大小(单位G)
hadoop
fs-ls
刀鋒偏冷
·
2024-03-15 13:13
hive
hadoop
数据仓库
挑战杯 机器学习股票
大数据
量化分析与预测系统 - python 挑战杯
文章目录0前言1课题背景2实现效果UI界面设计web预测界面RSRS选股界面3软件架构4工具介绍Flask框架MySQL数据库LSTM5最后0前言优质竞赛项目系列,今天要分享的是机器学习股票
大数据
量化分析与预测系统该项目较为新颖
laafeer
·
2024-03-14 18:16
python
03hive数仓安装与基础使用
hiveHive概述Hive是基于
Hadoop
的一个数据仓库工具。
daydayup9527
·
2024-03-14 13:39
hadoop_hive
运维
hadoop
Spark的数据结构——RDD
Alistofpartitions:在
大数据
领域,
大数据
都是分割成若干个部分,放到多个服务器上,这样就能做到多线程的处理数据,这对处理
大数据
量是非常重要的。分区意味着,可以使用多个线程了处理。
bluedraam_pp
·
2024-03-14 08:32
Spark
spark
数据结构
大数据
Hbase集群搭建超详细教程
hbase-site.xml3.3修改regionservers文件4、分发hbase目录5、启动HBase集群6、查看HBaseWebUI大家好,我是风云,欢迎大家关注我的博客,在未来的日子里我们一起来学习
大数据
相关的技术
笑看风云路
·
2024-03-13 09:02
集群搭建系列
hbase
hbase
hadoop
大数据
flink重温笔记(十五): flinkSQL 顶层 API ——实时数据流转化为SQL表的操作
学习了flinkSQL基础入门,主要是解决
大数据
领域数据处理采用表的方式,而不是写复杂代码逻辑,学会了如何初始化环境,鹅湖将流数据转化为表数据,以及如何查询表数据,结合自己实验猜想和代码实践,总结了很多自己的理解和想法
那就学有所成吧(˵¯͒¯͒˵)
·
2024-03-13 09:32
Flink重温笔记
flink
笔记
sql
大数据
学习方法
数据库
KAFKA
大数据
开发(Spark面试真题-卷一)
大数据
开发(Spark面试真题)1、什么是SparkStreaming?简要描述其工作原理。2、什么是Spark内存管理机制?请解释其中的主要概念,并说明其作用。
Key-Key
·
2024-03-13 07:58
大数据
spark
面试
基于HBase和Spark构建企业级数据处理平台
专注于
大数据
分布式计算和数据库领域,具有6年分布式开发经验,先后研发Spark及自主研发内存计算,目前为广大公有云用户提供专业的云HBase数据
weixin_34071713
·
2024-03-12 22:44
大数据
数据库
爬虫
计算机设计大赛 疫情数据分析与3D可视化 - python
大数据
文章目录0前言1课题背景2实现效果3设计原理4部分代码5最后0前言优质竞赛项目系列,今天要分享的是
大数据
全国疫情数据分析与3D可视化该项目较为新颖,适合作为竞赛课题方向,学长非常推荐!
iuerfee
·
2024-03-12 15:03
python
HDFS
(一)HDFS简介及其基本概念 HDFS(
Hadoop
DistributedFileSystem)是
hadoop
生态系统的一个重要组成部分,是
hadoop
中的的存储组件,在整个
Hadoop
中的地位非同一般
weixin_51987187
·
2024-03-12 14:32
笔记
大数据
大数据
开发(Spark面试真题-卷六)
大数据
开发(Spark面试真题)1、SparkHashPartitioner和RangePartitioner的实现?
Key-Key
·
2024-03-12 02:16
大数据
spark
面试
大数据
开发(
Hadoop
面试真题-卷二)
大数据
开发(
Hadoop
面试真题)1、在大规模数据处理过程中使用编写MapReduce程序存在什么缺点?如何解决这些问题?
Key-Key
·
2024-03-12 02:15
大数据
hadoop
面试
HTTP代理ip如何助旅游
大数据
领域?怎么去建立安全代理隧道连接?
HTTP代理IP在旅游
大数据
领域的应用主要体现在以下几个方面:数据抓取:旅游
大数据
的获取往往需要从各种在线旅游平台、社交媒体、评论网站等抓取数据。
luludexingfu
·
2024-03-11 13:11
http
tcp/ip
旅游
Spark从入门到精通29:Spark SQL:工作原理剖析以及性能优化
SparkSQL工作原理剖析1.编写SQL语句只要是在数据库类型的技术里面,例如MySQL、Oracle等,包括现在
大数据
领域的数据仓库,例如Hive。
勇于自信
·
2024-03-11 00:20
魔法王国的故事——档案馆的危机
❝这是一个连续的专栏,在这里,我将用一个奇幻的魔法王国的故事,来向你介绍
大数据
相关内容,希望在这里可以帮助你学到有用的知识第一章:档案馆的危机在一个遥远的魔法王国,有一个叫做档案馆的地方,那里存放着王国的所有重要的文件
健鑫.
·
2024-03-10 22:22
数据仓库
大数据
hadoop
AI辅助研发:2024年的新趋势与未来展望
一、AI辅助研发的崛起随着计算能力的提升和
大数据
技术的进步,AI的能力已经达到了新的高度。在研发领域,
AI普惠行者
·
2024-03-10 22:22
人工智能
人工智能
zookeeper 使用
zookeeper介绍zookeeper是一个为分布式应用提供一致性服务的软件,它是开源的
Hadoop
项目中的一个子项目,并且根据google发表的论文来实现的,接下来我们首先来安装使用下这个软件,然后再来探索下其中比较重要一致性算法
SkTj
·
2024-03-10 02:15
Hive SQL 开发指南(三)优化及常见异常
在
大数据
领域,HiveSQL是一种常用的查询语言,用于在
Hadoop
上进行数据分析和处理。为了确保代码的可读性、维护性和性能,制定一套规范化的HiveSQL开发规范至关重要。
大数据_苡~
·
2024-03-09 14:13
003-数据开发
hive
Hive优化
数据倾斜
Hive常见异常
hive
join
大数据
开发(
Hadoop
面试真题-卷九)
大数据
开发(
Hadoop
面试真题)1、Hivecount(distinct)有几个reduce,海量数据会有什么问题?
Key-Key
·
2024-03-09 10:06
大数据
hadoop
面试
如何成为fpga工程师
FPGA的应用领域非常的广,尤其再人工智能,
大数据
,云计算等等方向非常吃香。
宸极FPGA_IC
·
2024-03-09 04:29
fpga开发
fpga
硬件工程
嵌入式硬件
大数据
开源框架技术汇总
主要基于对现阶段一些常用的
大数据
开源框架技术的整理,只是一些简单的介绍,并不是详细技术梳理。可能会有疏漏,发现再整理。参考的太多,就不一一列出来了。这只是作为一个梳理,对以后选型或者扩展的做个参考。
浪尖聊大数据-浪尖
·
2024-03-08 20:48
数据仓库
hive
flume
分布式
scipy
makefile
crm
lighttpd
光谱下的养殖业:数据可视化的现代变革
然而,随着科技的进步,
大数据
的兴起,数据可视化为养殖业提供了全面的数据支持。通过将养殖场内各项数据以图表、地图等形式直观呈现,养殖场主和管理者
希艾席蒂恩
·
2024-03-08 05:28
数字孪生科普
软件推荐
信息可视化
数据分析
数据挖掘
数据可视化
可视化大屏
什么是B+树,和B树有什么不同?
博主介绍:博主从事应用安全和
大数据
领域,有8年研发经验,5年面试官经验,Java技术专家,WEB架构师,阿里云专家博主,华为云云享专家,51CTO专家博主⛪️个人社区:个人社区个人主页:个人主页专栏地址
激流丶
·
2024-03-07 20:45
日常
b树
数据结构
B+树
java
2024年AI助力研发:内容驱动下的全新变革与展望
此外,随着
大数据
wd90119
·
2024-03-07 14:38
人工智能
Azkaban
大数据
任务调度
参考视频:尚硅谷
大数据
Azkaban3.x教程(全新发布)_哔哩哔哩_bilibili目录Azkaban:是一个定时、批量工作流任务调度器(工作流程调度,定时调度)常见的开源调度系统:比较:特点:三个关键组件
OutRoading
·
2024-03-07 13:37
大数据
西安-腾讯云-Python面试经验--一面凉经
僵尸进程,孤儿进程f.如何产生一个守护进程g.如何避免僵尸进程或者孤儿进程redisa.持久化方式有哪些,区别是什么b.redis集群有了解么c.rediszset()—底层如何实现(哈希表+跳跃表)和
大数据
相关的操作
jiet07
·
2024-03-07 02:53
腾讯云
面试
2022-06-06
大数据
真的很神奇,或许这就是吸引力法则吧。和一群人一起坚持了21天。因为喜欢,所以坚持。在另一个地方记录了碎碎念,没有想到有新的收获。尤其是教学反思这块。
小min的花园
·
2024-03-06 20:26
大数据
,更懂你
作者语:一个致力于用一不本正经的方式讲解一些一本正经的事物,从业多年见过太多一上来就满口专业术语后面做事情渣得不行的真实事件,后来发现原来能用浅显易懂的方式讲解一些高深内容的人都是真正的牛人。作者也致力于网这个方向发展
爱信天下
·
2024-03-06 12:08
上一页
6
7
8
9
10
11
12
13
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他