E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
大数据_Hive
基于云计算的自然资源视频监控系统设计与研究
该系统基于云计算和视频中台等技术构建了两级云架构的视频处理与存储系统,通过AI等
大数据
算法对数据进行整合、分析,进而构建了具有执法线索、监督问效、行动处置和综合指挥等功能的自然资源管理系统。
罗伯特之技术屋
·
2025-02-03 00:00
大数据与数字化的设计应用专栏
云计算
音视频
老玩童:互联网智慧助老平台——科技赋能银发族,开启智慧养老新生活
基于互联网技术的智慧助老平台“老玩童”,通过整合物联网、
大数据
、人工智能等先进技术,构建了一个全方位、智能化、个性化的助老服务体系,为老年人及其家庭提供了全新的解决方案。
IT源码大师
·
2025-02-02 22:47
科技
生活
sqoop导出orc数据至mysql,将Sqoop导入为OrC文件
Alternativestried:importedastextformatandusedatemptabletoreadinputastextfileandwritetohdfsasorcin
hive
终有尽头
·
2025-02-02 15:28
sqoop从orc文件到oracle,Sqoop import as OrC file
Alternativestried:importedastextformatandusedatemptabletoreadinputastextfileandwritetohdfsasorcin
hive
余革革
·
2025-02-02 15:58
Hadoop---(6)Sqoop(数据传输)
全称SQL-TO-HADOOP.它可以把hadoop数据,包括
hive
和hbase存储的数据转化为结构化数据也就是数据库的数据,也可以把关系型数据库数据转化为hadoop数据这些转换操作全是通过Hadoop
Mr Cao
·
2025-02-02 15:27
sqoop
大数据
Sqoop 支持 ORC 文件格式
ORC介绍ORC文件格式是
Hive
0.11.0版本引入的一种文件格式。ORC的引入是为了解决其他
Hive
文件格式的局限性。使用ORC文件格式提升
Hive
读取、写入及处理数据的性能。
吃鱼的羊
·
2025-02-02 15:27
sqoop
【漏洞复现】广联达 Linkworks OA Arc
hive
WebService XML实体注入漏洞
免责声明:本文旨在提供有关特定漏洞的信息,以帮助用户了解潜在风险。发布此信息旨在促进网络安全意识和技术进步,并非出于恶意。读者应理解,利用本文提到的漏洞或进行相关测试可能违反法律或服务协议。未经授权访问系统、网络或应用程序可能导致法律责任或严重后果。作者对读者基于本文内容的行为不承担责任。读者在使用信息时必须遵守适用法律法规和服务协议,独自承担所有风险和责任。如有侵权,请联系删除。漏洞描述广联达L
0x0000001
·
2025-02-02 11:29
漏洞复现
xml
网络
安全
web安全
渗透测试
网络安全
简述web3.0前端开发的最简单三个步骤
Web3.0是互联网的下一代前沿技术,包括人工智能,
大数据
和区块链都是这项技术的核心,Web3.0为用户提供了更为智能的互联网服务体验,该技术的核心要素为去中心化,也就是摆脱中心化的权力控制,能够让数据和各项交易通过网络里的各项节点来维护和验证
飞机号Mrsfu223
·
2025-02-02 10:25
web3
区块链
python
java
开发语言
22章2节:如何在 R Markdown 和 R Notebook 中创建使用
它结合了R语言的强
大数据
处理和分析能力,以及Markdown的简洁易用的文本格式,使得创建专业和美观的报告变得更加简单和高效。
DAT|R科学
·
2025-02-02 10:24
用R探索医药数据科学
r语言
开发语言
JavaSE笔记总结
桌面应用开发企业级应用开发移动应用开发科学计算
大数据
开发游戏开发3、Java的特性面向对
火车驶向云外.11
·
2025-02-02 10:23
java
开发语言
我的名字叫
大数据
:第1~4章
第1章大家好,我叫
大数据
1.1我的家族传统:从我小小的祖先到壮大的我1.1.1最初的我:原始部落里的计数石头大家好,我是你们人类文明的“老朋友”——
大数据
。你们知道吗?
大数据张老师
·
2025-02-02 08:08
我的名字叫大数据
大数据
大数据认知
大数据启蒙
什么是大数据
数据库
python
深度学习基因组学+机器学习单细胞分析,当下最火热研究方向!
深度学习通过强大的深度神经网络模型从高维
大数据
中自动
qwmb919
·
2025-02-02 07:25
人工智能
深度学习
机器学习
python
Java 大视界 -- Java
大数据
中的数据脱敏技术与合规实践(60)
一、欢迎加入【福利社群】点击快速加入:青云交灵犀技韵交响盛汇福利社群点击快速加入2:2024CSDN博客之星创作交流营(NEW)二、本博客的精华专栏:
大数据
新视
青云交
·
2025-02-02 05:11
大数据新视界
Java
大视界
大数据
数据脱敏
替换法
加密法
掩码法
Spark
SQL
Flink
Java 大视界 -- Java
大数据
实时数仓的构建与运维实践(55)
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。一、欢迎加入【福利社群
青云交
·
2025-02-02 05:40
大数据新视界
Java
大视界
大数据
实时数仓
Flume
Flink
HBase
ClickHouse
Lambda架构
Java 大视界 -- Java
大数据
中的强化学习算法实践与优化 (57)
一、欢迎加入【福利社群】点击快速加入:青云交灵犀技韵交响盛汇福利社群点击快速加入2:2024CSDN博客之星创作交流营(NEW)二、本博客的精华专栏:
大数据
新视
青云交
·
2025-02-02 05:40
大数据新视界
Java
大视界
大数据
强化学习算法
Q-learning
经验回放
探索利用平衡
智能能源管理
算法优化
Java
大数据
自动化数据管道构建:工具与最佳实践(47)
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。一、本博客的精华专栏:
青云交
·
2025-02-02 05:10
大数据新视界
Java
大视界
大数据
自动化数据管道
Sqoop
Flume
NiFi
数据质量
性能优化
java
Java
大数据
与区块链的融合:数据可信共享与溯源(45)
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。一、本博客的精华专栏:
青云交
·
2025-02-02 05:40
大数据新视界
Java
大视界
大数据
区块链
数据可信共享
数据溯源
智能合约
区块链存储
金融应用
java
Java
大数据
高性能计算:利用多线程与并行计算框架(39)
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。一、本博客的精华专栏:
青云交
·
2025-02-02 05:40
大数据新视界
Java
大视界
大数据
高性能计算
多线程
并行计算框架
Apache
Spark
线程安全
数据一致性
java
Java 与量子计算在
大数据
中的潜在融合:原理与展望(33)
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。一、本博客的精华专栏:
青云交
·
2025-02-02 05:40
大数据新视界
Java
大视界
大数据
量子计算
融合原理
技术路径
未来展望
跨学科人才
量子云计算
java
大数据
新视界 --
Hive
事务管理的应用与限制(2 - 16 - 8)
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。本博客的精华专栏:大数
青云交
·
2025-02-02 05:38
大数据新视界
#
Hive
之道
Hive
事务管理
应用场景
优化策略
数据一致性
并发处理
大数据爱好者们
大数据
深度学习-图像数据标注工具使用(LabelImg和BBox)
文章与视频资源多平台更新微信公众号|知乎|B站|头条:AI研习图书馆深度学习、
大数据
、IT编程知识与资源分享,欢迎关注,共同进步~图像数据标注工具的使用教程1.LabelImgLabelImg下载地址:
AI研习图书馆
·
2025-02-02 03:35
方法教程
LabelImg
BBox
图像标注工具
Hive
整合 Spark 全教程 (
Hive
on Spark)
hadoop.proxyuser.luanhao.groups*hadoop.proxyuser.luanhao.groups*2)HDFS配置文件配置hdfs-site.xmldfs.namenode.http-addressBigdata00:9870dfs.namenode.secondary.http-addressBigdata00:9868dfs.replication13)YARN配
字节全栈_rJF
·
2025-02-02 02:56
hive
spark
hadoop
Spark 任务与 Spark Streaming 任务的差异详解
Spark任务与SparkStreaming任务的主要差异源自于两者的应用场景不同:Spark主要处理静态的
大数据
集,而SparkStreaming处理的是实时流数据。
goTsHgo
·
2025-02-02 00:14
spark-streaming
分布式
大数据
spark
streaming
大数据
分布式
Python
大数据
之PySpark(三)使用Python语言开发Spark程序代码_windows spark python
算子:rdd的api的操作,就是算子,flatMap扁平化算子,map转换算子Transformation算子Action算子步骤:1-首先创建SparkContext上下文环境2-从外部文件数据源读取数据3-执行flatmap执行扁平化操作4-执行map转化操作,得到(word,1)5-reduceByKey将相同Key的Value数据累加操作6-将结果输出到文件系统或打印代码:#-*-codi
2401_84181704
·
2025-02-01 23:09
程序员
大数据
python
spark
《
大数据
时代“快刀”:Flink实时数据处理框架优势全解析》
在数字化浪潮中,数据呈爆发式增长,实时数据处理的重要性愈发凸显。从金融交易的实时风险监控,到电商平台的用户行为分析,各行业都急需能快速处理海量数据的工具。Flink作为一款开源的分布式流处理框架,在这一领域崭露头角,备受瞩目。一、真正实时,毫秒级响应与部分将流处理模拟为微批处理的框架不同,Flink是专为实时流处理打造的“原生”引擎。它直接处理持续不断的事件流,无需将数据攒成批次再处理,这种设计赋
程序猿阿伟
·
2025-02-01 20:15
大数据
flink
园区智能化系统实现管理与服务的智能化转型与创新进阶
通过集成
大数据
分析、物联网和人工智能,园区智能化系统能够为各类园区如工业园、产业园、物流园、写字楼与公寓等提供切实可行的解决方案。“智能化管理不仅是未来的发展趋势,更是提升竞争力的必要手段。”
快鲸智慧楼宇管理系统
·
2025-02-01 19:35
其他
CDH_6.3.2的搭建
一站式搭建
大数据
的应用1、前提条件和准备工作hostnamectlset-hostnamecdh01hostnamectlset-hostnamecdh02hostnamectlset-hostnamecdh032
我的K8409
·
2025-02-01 17:22
Flink
linux
大数据
分布式
大数据
笔记之 Flink1.17 算子
文章目录前言一、Partition分区(物理分区)1.1随机分区shuffle1.2轮询分区rebalance1.3重缩放分区rescale1.4广播分区broadcast1.5全局分区global1.6keyby1.7自定义分区Custom二、transform2.1flatMap2.2filter2.3RichFunction2.4map三、Aggregate聚合3.1keyBy()3.2ma
凡许真
·
2025-02-01 17:20
大数据
flink1.17
算子
01.双Android容器解决方案
ControlGroups)1.1.3联合文件系统(UnionFileSystem)1.2容器的应用1.2.1微服务架构1.2.2持续集成和持续部署(CI/CD)1.2.3多租户环境1.2.4混合云和多云环境1.2.5
大数据
和机器学习
高桐@BILL
·
2025-02-01 13:46
容器
Android
监控易:智慧高校一体化综合运维解决方案
自“十三五”规划中明确提出“支持各级各类学校建设智慧校园,综合利用互联网、
大数据
、人工智能和虚拟现实技术探索未来教育教学新模式”以来,政策春风也不断加码教育信息化进程,《教育信息化2.0行动计划》以及《
MXsoft618
·
2025-02-01 13:15
运维
信息安全
物联网
监控类
TDengine 做为 FLINK 数据源技术参考手册
ApacheFlink是一款由Apache软件基金会支持的开源分布式流批一体化处理框架,可用于流处理、批处理、复杂事件处理、实时数据仓库构建及为机器学习提供实时数据支持等诸多
大数据
处理场景。
TDengine (老段)
·
2025-02-01 11:02
tdengine
flink
大数据
涛思数据
时序数据库
数据库
Hadoop HA 架构
企业里面,多台机器伪分布式每一个角色都是一个进程HDFS:NNSNNDNYARN:RMNM
大数据
所有组件,都是主从架构master-slaveHDFS读写请求都是先到NN节点,但是,HBase读写请求不是经过
weixin_30569033
·
2025-02-01 09:49
shell
大数据
守护每一比特的安全——探索基于差分隐私的MySQL数据脱敏之道
在当今数字化时代,随着互联网和
大数据
技术的发展,数据的价值愈发凸显。然而,随之而来的个人隐私泄露风险也日益增加,成为社会广泛关注的问题之一。
墨夶
·
2025-02-01 09:13
数据库学习资料2
安全
mysql
数据库
12.udp
数据传输:适合传输
大数据
,但实际传输受网络MTU等因素限制。2.UDP编程框架(C/S模式)服务器端流程:创建套接字:调用socket()函数,参
就很对
·
2025-02-01 05:40
udp
网络协议
网络
开发者交流平台项目部署到阿里云服务器教程
1.工具软件的准备maven:https://arc
hive
.apache.org/dist/maven/maven-3/3.6.1/binaries/apache-maven-3.6.1-bin.tar.gztomcat
独自破碎E
·
2025-02-01 05:39
阿里云
服务器
云计算
java
后端
开发语言
hive
表指定分区字段搜索_
Hive
学习-
Hive
基本操作(建库、建表、分区表、写数据)...
hive
简单认识
Hive
是建立在HDFS之上的数据仓库,所以
Hive
的数据全部存储在HDFS上。
weixin_39710660
·
2025-02-01 04:00
hive表指定分区字段搜索
hive
分区表select全部数据_【
Hive
教程】(六)
HIVE
分区表 (静态分区+动态分区)
分区表分区表在实际企业中用途非常广,首先一个案例体验一下分区表的作用:假设我每天都要往
HIVE
表中插入一万条数据。经过一年的时间,我里面已经有365万条数据。
weixin_39658318
·
2025-02-01 04:30
hive
分区表select全部数据
【hadoop学习之路】
Hive
HQL 语句实现查询
目录表数据表1students_data.txt表2course.txt实验步骤结论表数据表1students_data.txt21434,Sara,F,21,20,73,classC41443,Mary,M,19,30,90,classA43333,Dery,F,20,40,85,classB45454,Mary,F,22,10,91,classA14634,Henry,M,18,50,56,c
新世纪debug战士
·
2025-02-01 03:58
hadoop学习之路
hive
【
大数据
入门核心技术-
Hive
】(十一)
Hive
SQL数据分区
hive
forest_long
·
2025-02-01 03:25
大数据技术入门到21天通关
大数据
hive
hadoop
数据仓库
hdfs
本地Apache
Hive
的Linux服务器集群复制数据到SQL Server数据库的分步流程
我们已经有安装Apache
Hive
的Linux服务器集群,它可以连接到一个SQLServerRDS数据库,需要在该Linux服务器上安装配置sqoop,然后将
Hive
中所有的表数据复制到SQLServerRDS
weixin_30777913
·
2025-02-01 03:54
数据库
数据仓库
hive
sqlserver
设计转换Apache
Hive
的HQL语句为Snowflake SQL语句的Python程序方法
在这个过程中要注意HQL语句和SnowflakeSQL语句的区别,比如
Hive
可以给单个用户加权限,但是Snowflake数据仓库是RBAC,也就是基于角色的权限控制,所以HQL语句中给用户加
weixin_30777913
·
2025-02-01 03:53
python
数据仓库
hive
sql
windows注册表详解
windows注册表详解http://blog.donews.com/converter/arc
hive
/2004/09/16/100404.aspx注册表对有的人还是比较陌生的,因为现在第三方软件太多了
ywwow
·
2025-02-01 01:13
计算机科学与技术
windows
microsoft
system
磁盘
dos
网络
毕设开源 python
大数据
旅游数据分析可视化系统(源码分享)
文章目录0前言1课题背景2数据处理3数据可视化工具3.1django框架介绍3.2ECharts4Django使用echarts进行可视化展示(mysql数据库)4.1修改setting.py连接mysql数据库4.2导入数据4.3使用echarts可视化展示5实现效果5.1前端展示5.2后端展示6最后0前言这两年开始毕业设计和毕业答辩的要求和难度不断提升,传统的毕设题目缺少创新和亮点,往往达不到
bee_dc
·
2025-01-31 23:26
毕业设计
毕设
大数据
Python正则表达式指南
http://www.cnblogs.com/huxi/arc
hive
/2010/07/04/1771073.html1.正则表达式基础1.1.简单介绍正则表达式并不是Python的一部分。
weixin_33755554
·
2025-01-31 22:46
python
大数据
“超能力”:数据安全和隐私该如何保障?
一人人都喜欢超级英雄。不论是超人还是钢铁侠,又或者是小蜘蛛和绿巨人,几乎每一个超级英雄漫画及电影的粉丝,都曾为其不公遭遇打抱不平:“他们明明是在用超能力做好事,拯救人类的,为什么电影里的政府和平民会这么蠢,总对他们缺乏信任,满是提防。”这就是所谓的“叶公好龙”了,因为当你身边真出现了个能把卡车当皮球一样抛来抛去的人时,你的反应恐怕也好不到哪儿去,可能也巴不得有政府出面,逼他接受《超级英雄注册法案》
大数据在线
·
2025-01-31 22:44
云静思园
大数据
数据安全
数据隐私
英特尔
Python爬虫基础知识:从零开始的抓取艺术
在
大数据
时代,网络数据成为宝贵的资源,而Python爬虫则是获取这些数据的重要工具。
egzosn
·
2025-01-31 19:20
python
爬虫
开发语言
探索Oracle数据库的多租户特性:架构、优势与实践
在云计算和
大数据
时代,多租户架构成为数据库设计中的一个重要趋势。
2401_85812026
·
2025-01-31 18:12
数据库
oracle
架构
「
大数据
」Kappa架构
Kappa架构是一种处理
大数据
的架构,它作为Lambda架构的替代方案出现。
吴维炜
·
2025-01-31 18:07
AIGC架构设计师
大数据
架构
kappa
AIGC
新零售社交电商系统小程序功能开发详细解析
现在的购物方式是越来越有趣了,新零售社交电商系统是互联网、
大数据
、人工智能的技术和咱们熟悉的传统零售深度结合后产生的。它整合线上线下渠道及数据,带来全方位、多渠道、个性化购物体验。
v.15889726201
·
2025-01-31 17:34
零售
小程序
Spark性能调优
1、前言在
大数据
计算领域,Spark已经成为了越来越流行、越来越受欢迎的计算平台之一。
大数据侠客
·
2025-01-31 16:58
spark相关问题汇总及解决
spark
性能调优
上一页
4
5
6
7
8
9
10
11
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他