E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Flink大数据
2024年作品汇总
读书笔记-《Redis设计与实现》(一)数据结构与对象(上)读书笔记-《
大数据
时代》读书笔记-《Spring技术内幕》(一)IoC容器的实现读书笔记-《Spring技术内幕》(二)AOP的实现读书笔记-
萝卜青今天也要开心
·
2025-02-03 04:34
spring
java
后端
笔记
学习
基于云计算的自然资源视频监控系统设计与研究
该系统基于云计算和视频中台等技术构建了两级云架构的视频处理与存储系统,通过AI等
大数据
算法对数据进行整合、分析,进而构建了具有执法线索、监督问效、行动处置和综合指挥等功能的自然资源管理系统。
罗伯特之技术屋
·
2025-02-03 00:00
大数据与数字化的设计应用专栏
云计算
音视频
老玩童:互联网智慧助老平台——科技赋能银发族,开启智慧养老新生活
基于互联网技术的智慧助老平台“老玩童”,通过整合物联网、
大数据
、人工智能等先进技术,构建了一个全方位、智能化、个性化的助老服务体系,为老年人及其家庭提供了全新的解决方案。
IT源码大师
·
2025-02-02 22:47
科技
生活
简述web3.0前端开发的最简单三个步骤
Web3.0是互联网的下一代前沿技术,包括人工智能,
大数据
和区块链都是这项技术的核心,Web3.0为用户提供了更为智能的互联网服务体验,该技术的核心要素为去中心化,也就是摆脱中心化的权力控制,能够让数据和各项交易通过网络里的各项节点来维护和验证
飞机号Mrsfu223
·
2025-02-02 10:25
web3
区块链
python
java
开发语言
22章2节:如何在 R Markdown 和 R Notebook 中创建使用
它结合了R语言的强
大数据
处理和分析能力,以及Markdown的简洁易用的文本格式,使得创建专业和美观的报告变得更加简单和高效。
DAT|R科学
·
2025-02-02 10:24
用R探索医药数据科学
r语言
开发语言
JavaSE笔记总结
桌面应用开发企业级应用开发移动应用开发科学计算
大数据
开发游戏开发3、Java的特性面向对
火车驶向云外.11
·
2025-02-02 10:23
java
开发语言
Flink
中定时器的使用_
flink
定时器 ontimerf()方法获取 事件
事件时间——调用Context.timerService().registerEventTimeTimer()注册;onTimer()在
Flink
内部水印达到或超过Timer设定的时间戳时触发。
字节全栈_vBr
·
2025-02-02 09:10
flink
java
大数据
我的名字叫
大数据
:第1~4章
第1章大家好,我叫
大数据
1.1我的家族传统:从我小小的祖先到壮大的我1.1.1最初的我:原始部落里的计数石头大家好,我是你们人类文明的“老朋友”——
大数据
。你们知道吗?
大数据张老师
·
2025-02-02 08:08
我的名字叫大数据
大数据
大数据认知
大数据启蒙
什么是大数据
数据库
python
深度学习基因组学+机器学习单细胞分析,当下最火热研究方向!
深度学习通过强大的深度神经网络模型从高维
大数据
中自动
qwmb919
·
2025-02-02 07:25
人工智能
深度学习
机器学习
python
Java 大视界 -- Java
大数据
中的数据脱敏技术与合规实践(60)
一、欢迎加入【福利社群】点击快速加入:青云交灵犀技韵交响盛汇福利社群点击快速加入2:2024CSDN博客之星创作交流营(NEW)二、本博客的精华专栏:
大数据
新视
青云交
·
2025-02-02 05:11
大数据新视界
Java
大视界
大数据
数据脱敏
替换法
加密法
掩码法
Spark
SQL
Flink
Java 大视界 -- Java
大数据
实时数仓的构建与运维实践(55)
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。一、欢迎加入【福利社群
青云交
·
2025-02-02 05:40
大数据新视界
Java
大视界
大数据
实时数仓
Flume
Flink
HBase
ClickHouse
Lambda架构
Java 大视界 -- Java
大数据
中的强化学习算法实践与优化 (57)
一、欢迎加入【福利社群】点击快速加入:青云交灵犀技韵交响盛汇福利社群点击快速加入2:2024CSDN博客之星创作交流营(NEW)二、本博客的精华专栏:
大数据
新视
青云交
·
2025-02-02 05:40
大数据新视界
Java
大视界
大数据
强化学习算法
Q-learning
经验回放
探索利用平衡
智能能源管理
算法优化
Java
大数据
自动化数据管道构建:工具与最佳实践(47)
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。一、本博客的精华专栏:
青云交
·
2025-02-02 05:10
大数据新视界
Java
大视界
大数据
自动化数据管道
Sqoop
Flume
NiFi
数据质量
性能优化
java
Java
大数据
与区块链的融合:数据可信共享与溯源(45)
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。一、本博客的精华专栏:
青云交
·
2025-02-02 05:40
大数据新视界
Java
大视界
大数据
区块链
数据可信共享
数据溯源
智能合约
区块链存储
金融应用
java
Java
大数据
高性能计算:利用多线程与并行计算框架(39)
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。一、本博客的精华专栏:
青云交
·
2025-02-02 05:40
大数据新视界
Java
大视界
大数据
高性能计算
多线程
并行计算框架
Apache
Spark
线程安全
数据一致性
java
Java 与量子计算在
大数据
中的潜在融合:原理与展望(33)
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。一、本博客的精华专栏:
青云交
·
2025-02-02 05:40
大数据新视界
Java
大视界
大数据
量子计算
融合原理
技术路径
未来展望
跨学科人才
量子云计算
java
大数据
新视界 -- Hive 事务管理的应用与限制(2 - 16 - 8)
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。本博客的精华专栏:大数
青云交
·
2025-02-02 05:38
大数据新视界
#
Hive
之道
Hive
事务管理
应用场景
优化策略
数据一致性
并发处理
大数据爱好者们
大数据
深度学习-图像数据标注工具使用(LabelImg和BBox)
文章与视频资源多平台更新微信公众号|知乎|B站|头条:AI研习图书馆深度学习、
大数据
、IT编程知识与资源分享,欢迎关注,共同进步~图像数据标注工具的使用教程1.LabelImgLabelImg下载地址:
AI研习图书馆
·
2025-02-02 03:35
方法教程
LabelImg
BBox
图像标注工具
Caused by: java.io.NotSerializableException: org.apache.kafka.common.metrics.MetricConfig
flink
自定义数据源的开发过程中遇到这样一个错误。错误原因:在于KafkaConsumer的初始化放在了定义处。解决:应该放在open方法内初始化。
Slient-猿
·
2025-02-02 02:58
flink
flink
kafka
Flink
的DataSource三部曲之一:直接API
mvn\archetype:generate\-DarchetypeGroupId=org.apache.
flink
\-DarchetypeArtifactId=
flink
-quickstart-java
字节全栈_rJF
·
2025-02-02 02:57
flink
大数据
Spark 任务与 Spark Streaming 任务的差异详解
Spark任务与SparkStreaming任务的主要差异源自于两者的应用场景不同:Spark主要处理静态的
大数据
集,而SparkStreaming处理的是实时流数据。
goTsHgo
·
2025-02-02 00:14
spark-streaming
分布式
大数据
spark
streaming
大数据
分布式
Python
大数据
之PySpark(三)使用Python语言开发Spark程序代码_windows spark python
算子:rdd的api的操作,就是算子,flatMap扁平化算子,map转换算子Transformation算子Action算子步骤:1-首先创建SparkContext上下文环境2-从外部文件数据源读取数据3-执行flatmap执行扁平化操作4-执行map转化操作,得到(word,1)5-reduceByKey将相同Key的Value数据累加操作6-将结果输出到文件系统或打印代码:#-*-codi
2401_84181704
·
2025-02-01 23:09
程序员
大数据
python
spark
centos7搭建
flink
1.18并以 standalone模式启动
版本组件版本scala2.12.20java1.8.0_181
flink
1.18.1关于scala和Java的安装参考:scala和java安装
flink
下载地址:
flink
下载链接集群规划bigdata01bigdata02bigdata03masterworkerworkerworker
咸鱼c君
·
2025-02-01 20:50
flink
大数据
大数据
Flink
Connector 写入 Iceberg 流程源码解析_confluent icebergsinkconnector
//添加Writer算子,有并行度SingleOutputStreamOperatorwriterStream=appendWriter(distributeStream,
flink
RowType,equalityFieldIds
字节全栈_mMD
·
2025-02-01 20:16
flink
java
大数据
《
大数据
时代“快刀”:
Flink
实时数据处理框架优势全解析》
Flink
作为一款开源的分布式流处理框架,在这一领域崭露头角,备受瞩目。一、真正实时,毫秒级响应与部分将流处理模拟为微批处理的框架不同,
Flink
是专为实时流处理打造的“原生”引擎。
程序猿阿伟
·
2025-02-01 20:15
大数据
flink
园区智能化系统实现管理与服务的智能化转型与创新进阶
通过集成
大数据
分析、物联网和人工智能,园区智能化系统能够为各类园区如工业园、产业园、物流园、写字楼与公寓等提供切实可行的解决方案。“智能化管理不仅是未来的发展趋势,更是提升竞争力的必要手段。”
快鲸智慧楼宇管理系统
·
2025-02-01 19:35
其他
Flink
CDC的安装配置
Flink
CDC是基于Apache
Flink
构建的,用于捕获数据库表中数据的变更情况,包括数据的插入、更新和删除操作,并能将这些变更数据以流的形式实时传输到其他系统中进行处理和分析。
我的K8409
·
2025-02-01 17:23
Flink
flink
大数据
Flink
整合Hudi及使用
1、jar包上传上传jar包即可完成整合#1、将hudi-
flink
1.15-bundle-0.15.0.jar包上传到
flink
的lib目录下/usr/local/soft/
flink
-1.15.3/
我的K8409
·
2025-02-01 17:23
Flink
flink
服务器
linux
CDH_6.3.2的搭建
一站式搭建
大数据
的应用1、前提条件和准备工作hostnamectlset-hostnamecdh01hostnamectlset-hostnamecdh02hostnamectlset-hostnamecdh032
我的K8409
·
2025-02-01 17:22
Flink
linux
大数据
分布式
大数据
笔记之
Flink
1.17 算子
文章目录前言一、Partition分区(物理分区)1.1随机分区shuffle1.2轮询分区rebalance1.3重缩放分区rescale1.4广播分区broadcast1.5全局分区global1.6keyby1.7自定义分区Custom二、transform2.1flatMap2.2filter2.3RichFunction2.4map三、Aggregate聚合3.1keyBy()3.2ma
凡许真
·
2025-02-01 17:20
大数据
flink1.17
算子
01.双Android容器解决方案
ControlGroups)1.1.3联合文件系统(UnionFileSystem)1.2容器的应用1.2.1微服务架构1.2.2持续集成和持续部署(CI/CD)1.2.3多租户环境1.2.4混合云和多云环境1.2.5
大数据
和机器学习
高桐@BILL
·
2025-02-01 13:46
容器
Android
监控易:智慧高校一体化综合运维解决方案
自“十三五”规划中明确提出“支持各级各类学校建设智慧校园,综合利用互联网、
大数据
、人工智能和虚拟现实技术探索未来教育教学新模式”以来,政策春风也不断加码教育信息化进程,《教育信息化2.0行动计划》以及《
MXsoft618
·
2025-02-01 13:15
运维
信息安全
物联网
监控类
TDengine 做为
FLINK
数据源技术参考手册
Apache
Flink
是一款由Apache软件基金会支持的开源分布式流批一体化处理框架,可用于流处理、批处理、复杂事件处理、实时数据仓库构建及为机器学习提供实时数据支持等诸多
大数据
处理场景。
TDengine (老段)
·
2025-02-01 11:02
tdengine
flink
大数据
涛思数据
时序数据库
数据库
Hadoop HA 架构
企业里面,多台机器伪分布式每一个角色都是一个进程HDFS:NNSNNDNYARN:RMNM
大数据
所有组件,都是主从架构master-slaveHDFS读写请求都是先到NN节点,但是,HBase读写请求不是经过
weixin_30569033
·
2025-02-01 09:49
shell
大数据
守护每一比特的安全——探索基于差分隐私的MySQL数据脱敏之道
在当今数字化时代,随着互联网和
大数据
技术的发展,数据的价值愈发凸显。然而,随之而来的个人隐私泄露风险也日益增加,成为社会广泛关注的问题之一。
墨夶
·
2025-02-01 09:13
数据库学习资料2
安全
mysql
数据库
12.udp
数据传输:适合传输
大数据
,但实际传输受网络MTU等因素限制。2.UDP编程框架(C/S模式)服务器端流程:创建套接字:调用socket()函数,参
就很对
·
2025-02-01 05:40
udp
网络协议
网络
【
大数据
入门核心技术-Hive】(十一)HiveSQL数据分区
目录一、分区的概念二、创建分区1)静态分区1、单分区测试2、多分区测试2)动态分区3、动态分区和静态分区混合使用三、分区的其它操作1、恢复分区2、归档分区3、交换分区四、分区数据查询1、单分区数据查询2、多分区数据查询方法1:通过union方法2:通过or一、分区的概念数据分区的概念以及存在很久了,通常使用分区来水平分散压力,将数据从物理上移到和使用最频繁的用户更近的地方,以及实现其目的。hive
forest_long
·
2025-02-01 03:25
大数据技术入门到21天通关
大数据
hive
hadoop
数据仓库
hdfs
毕设开源 python
大数据
旅游数据分析可视化系统(源码分享)
文章目录0前言1课题背景2数据处理3数据可视化工具3.1django框架介绍3.2ECharts4Django使用echarts进行可视化展示(mysql数据库)4.1修改setting.py连接mysql数据库4.2导入数据4.3使用echarts可视化展示5实现效果5.1前端展示5.2后端展示6最后0前言这两年开始毕业设计和毕业答辩的要求和难度不断提升,传统的毕设题目缺少创新和亮点,往往达不到
bee_dc
·
2025-01-31 23:26
毕业设计
毕设
大数据
大数据
“超能力”:数据安全和隐私该如何保障?
一人人都喜欢超级英雄。不论是超人还是钢铁侠,又或者是小蜘蛛和绿巨人,几乎每一个超级英雄漫画及电影的粉丝,都曾为其不公遭遇打抱不平:“他们明明是在用超能力做好事,拯救人类的,为什么电影里的政府和平民会这么蠢,总对他们缺乏信任,满是提防。”这就是所谓的“叶公好龙”了,因为当你身边真出现了个能把卡车当皮球一样抛来抛去的人时,你的反应恐怕也好不到哪儿去,可能也巴不得有政府出面,逼他接受《超级英雄注册法案》
大数据在线
·
2025-01-31 22:44
云静思园
大数据
数据安全
数据隐私
英特尔
Python爬虫基础知识:从零开始的抓取艺术
在
大数据
时代,网络数据成为宝贵的资源,而Python爬虫则是获取这些数据的重要工具。
egzosn
·
2025-01-31 19:20
python
爬虫
开发语言
探索Oracle数据库的多租户特性:架构、优势与实践
在云计算和
大数据
时代,多租户架构成为数据库设计中的一个重要趋势。
2401_85812026
·
2025-01-31 18:12
数据库
oracle
架构
「
大数据
」Kappa架构
Kappa架构是一种处理
大数据
的架构,它作为Lambda架构的替代方案出现。
吴维炜
·
2025-01-31 18:07
AIGC架构设计师
大数据
架构
kappa
AIGC
新零售社交电商系统小程序功能开发详细解析
现在的购物方式是越来越有趣了,新零售社交电商系统是互联网、
大数据
、人工智能的技术和咱们熟悉的传统零售深度结合后产生的。它整合线上线下渠道及数据,带来全方位、多渠道、个性化购物体验。
v.15889726201
·
2025-01-31 17:34
零售
小程序
Spark性能调优
1、前言在
大数据
计算领域,Spark已经成为了越来越流行、越来越受欢迎的计算平台之一。
大数据侠客
·
2025-01-31 16:58
spark相关问题汇总及解决
spark
性能调优
Python学习-九
大数据
类型整合,详细讲解
目录1.int(整型)2.float(浮点型)3.Bool(布尔类型)4.Str(字符串类型)5.None(空值)6.List(列表)7.Tuple(元组)8.Dict(字典)9.Set(集合)(字典,列表,元组,字符串知识点可能不全,可以参考本人之前发的博客进行学习,加油。)1.int(整型)特点和用途:1.可以表示正整数、负整数和零,没有小数部分。2.取值范围取决于您所使用的Python版本和
小伙儿.
·
2025-01-31 16:26
Python
python
开发语言
学习
[碎碎念] 重启学习与博客之旅-我的每日计划
比如说,我最近对人工智能和
大数据
分析特别感兴趣,所以打算每天看点相关的专业书,或
言午coding
·
2025-01-31 16:56
碎碎念
碎碎念
Java 性能优化与新特性
Java学习资料Java学习资料Java学习资料一、引言Java作为一门广泛应用于企业级开发、移动应用、
大数据
等多个领域的编程语言,其性能和特性一直是开发者关注的重点。
来恩1003
·
2025-01-31 16:52
Java
从入门到精通
java
pandas读取
大数据
量的Excel文件
使用pandas快速读取百万行Excel数据的一种方法是使用pandas中的read_excel函数。可以使用以下代码读取Excel文件:importpandasaspddf=pd.read_excel('file_name')这个适合少量数据,如果一旦数据几十万或者上百万,那么程序就很慢有几种优化方法只读取需要的列:使用read_excel函数的usecols参数来指定需要读取的列。这可以减少读
兮知
·
2025-01-31 15:13
python基础
数据分析
pandas
excel
数据分析
林子雨《
大数据
技术原理与应用》第五讲——NoSQL数据库
林子雨《
大数据
技术原理与应用》第五讲——NoSQL数据库林子雨《
大数据
技术原理与应用》第五讲笔记NoSQL数据库特点灵活的可扩展性灵活的数据模型和云计算结合查询性能差未形成通用的行业标准维护更加复杂NoSQL
天才代号23
·
2025-01-31 10:06
大数据
数据库
hadoop
nosql
大数据
OLAP引擎比较
doris是一个OLAP数据库,支持对
大数据
的复杂查询,延迟为秒级。doris比sparksql快,主要原因在于针对场景不同导致的架构不同。
小手追梦
·
2025-01-31 10:30
hadoop
rpc
java
上一页
3
4
5
6
7
8
9
10
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他