E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
大数据统计
Hadoop 和 Spark 的内存管理机制分析
大数
据技术:涵盖Hadoop(HDFS)、Hive、Spark、Fli
王子良.
·
2025-01-20 03:27
经验分享
hadoop
spark
大数据
2025最新
大数
据毕业设计选题汇总:创新课题推荐
学长给大家整理了
大数
据专业最新精选选题,如遇选题困难或选题有任何疑问,都可以问学长哦(见文末)!对毕设有任何疑问都可以问学长哦!更多选题指导:最新最全计算机专业毕设选题精选推荐汇总
HaiLang_IT
·
2025-01-20 02:51
毕业设计选题
大数据
毕业设计
python
leetcode66.加一
2.解题思路因为要考虑
大数
溢出的情况,所以要转成字
ccluqh
·
2025-01-20 02:20
leetcode
美食推荐系统 协同过滤余弦函数推荐美食 Springboot Vue Element-UI前后端分离
个性化美食推荐系统协同过滤余弦函数推荐美食Echart数
据统计
SpringbootVueElement-UI前后端分离【亮点功能】1.Springboot+Vue+Element-UI+Mysql前后端分离
小盼江
·
2025-01-20 01:44
源码
课题设计
毕业设计
美食
spring
boot
vue.js
PL/SQL语言的文件操作
PL/SQL语言的文件操作引言PL/SQL(ProceduralLanguage/SQL)是Oracle数据库提供的一种过程化编程语言,它结合了SQL的强
大数
据处理能力和过程性编程的灵活性。
云端 架构师
·
2025-01-20 01:41
包罗万象
golang
开发语言
后端
大数
据学习(五):如何使用 Livy提交spark批量任务--转载
Livy是一个开源的REST接口,用于与Spark进行交互,它同时支持提交执行代码段和完整的程序。Livy封装了spark-submit并支持远端执行。启动服务器执行以下命令,启动livy服务器。./bin/livy-server这里假设spark使用yarn模式,所以所有文件路径都默认位于HDFS中。如果是本地开发模式的话,直接使用本地文件即可(注意必须配置livy.conf文件,设置livy.
zuoseve01
·
2025-01-19 22:15
livy
Spark Livy 指南及livy部署访问实践
背景:ApacheSpark是一个比较流行的
大数
据框架、广泛运用于数据处理、数据分析、机器学习中,它提供了两种方式进行数据处理,一是交互式处理:比如用户使用spark-shell,编写交互式代码编译成spark
house.zhang
·
2025-01-19 22:40
大数据-Spark
大数据
大数
据学习(四):Livy的安装配置及pyspark的会话执行
一个基于Spark的开源REST服务,它能够通过REST的方式将代码片段或是序列化的二进制代码提交到Spark集群中去执行。它提供了以下这些基本功能:提交Scala、Python或是R代码片段到远端的Spark集群上执行;提交Java、Scala、Python所编写的Spark作业到远端的Spark集群上执行;提交批处理应用在集群中运行。从Livy所提供的基本功能可以看到Livy涵盖了原生Spar
猪笨是念来过倒
·
2025-01-19 21:08
大数据
pyspark
数据可信流通
从运维信任到技术信任丨隐私计算实训营第1期_哔哩哔哩_bilibili【一图读懂|数据二十条】-国家发展和改革委员会(ndrc.gov.cn)“数据二十条”对外发布,构建数据基础制度体系——做强做优做
大数
字经济
HZGame.
·
2025-01-19 21:37
大数据
网络
运维
网络爬虫——分布式爬虫架构
分布式爬虫在现代
大数
据采集中是不可或缺的一部分。随着互联网信息量的爆炸性增长,单机爬虫在性能、效率和稳定性上都面临巨大的挑战。
好看资源分享
·
2025-01-19 18:40
网络爬虫
Python
爬虫
分布式
架构
Python-玩转数据-数据分析之分析思维
二、
大数
据思维自从几年前
大数
据开始兴起,
大数
据思维已经逐渐被更动的人接受,随着其进一步发展,产生了巨大的生产效果。
人猿宇宙
·
2025-01-19 17:33
数据分析
python
big
data
火星数据电竞数据,世界杯数据接口api,足球数据资料库
电竞数据包含的内容有很多,比如说基础数据(实时比分,关键事件,赛后数据等等),统计数据(阵容分析,选手分析,地图分析等),还有资料库数据(赛事战队,赛程赛果,赛况榜单等等),众多的数据组合而成形成如今的电竞
大数
据
Tina0898
·
2025-01-19 14:04
数据分析
构建高效GPU算力平台:挑战、策略与未来展望
引言随着深度学习、高性能计算和
大数
据分析等领域的快速发展,GPU(图形处理器)因其强大的并行计算能力和浮点运算速度而成为首选的计算平台。
Mr' 郑
·
2025-01-19 11:43
gpu算力
Databricks:打造数据国度的“金砖四国”
Databricks,一个并不算熟悉的名字,是
大数
据国度的后起之星。成立不够一年,但却阵容强大,创始人都是开源圈子里面的重要级人物,值得关注。
weixin_33832340
·
2025-01-19 11:40
大数据
一文详解大厂数据中台架构
在
大数
据发展的黄金期,几乎所有的高科技企业都在思考一个问题:海量数据作为大多数企业发展不可避免的一个趋势之后,企业该怎么去应用这部分数据资产,会对其商业产生什么影响,如何使数据对企业产生正面的推动而不是成为企业的负担
isNotNullX
·
2025-01-19 10:06
架构
大数据
性能优化
大数
据公司 Databricks 详解
Databricks是一家在
大数
据和人工智能领域具有重要影响力的美国企业软件公司,以下是关于它的详细技术解析:1.起源与背景:Databricks成立于2013年,由来自加州大学伯克利分校AMP实验室的
Bj陈默
·
2025-01-19 10:00
大数据
hive小文件合并机制_hive小文件的问题弊端以及合并
,包括位置大小分块信息等,都保存在NN内存中,在小文件数较多的情况下,会造成占用大量内存空间,导致NN性能下降;2、在读取小文件多的目录时,MR会产生更多map数,造成GC频繁,浪费集群资源;3、现在
大数
据平台文件总数超过
做生活的创作者
·
2025-01-19 08:49
hive小文件合并机制
数仓建模(五)选择数仓技术栈:Hive & ClickHouse & 其它
在
大数
据技术的飞速发展下,数据仓库(DataWarehouse,简称数仓)成为企业处理和分析海量数据的核心工具。
昊昊该干饭了
·
2025-01-19 08:45
数仓建模
大数据
hive
clickhouse
hadoop
Hive 数据类型全解析:
大数
据开发者的实用指南
在
大数
据处理领域,Hive作为一款基于Hadoop的数据仓库工具,被广泛应用于数据的存储、查询和分析。
大鳥
·
2025-01-19 08:42
sql
hive
数据仓库
2024年网络安全最全CTF —— 网络安全大赛_ctf网络安全大赛
前言随着
大数
据、人工智能的发展,人们步入了新的时代,逐渐走上科技的巅峰。
网安墨雨
·
2025-01-19 07:35
web安全
安全
基于Python
大数
据的王者荣耀战队数据分析及可视化系统
专栏推荐:前后端分离项目源码、SpringBoot项目源码、Vue项目源码、SSM项目源码、微信小程序源码精品专栏:Java精选实战项目源码、Python精选实战项目源码、
大数
据精选实战项目源码系统展示
计算机学姐
·
2025-01-19 07:03
大数据精选实战项目源码
Python精选实战项目源码
Vue源码
1024程序员节
python
大数据
数据分析
数据挖掘
django
vue.js
Apache Hive--排序函数解析
在
大数
据处理与分析中,ApacheHive是一个至关重要的数据仓库工具。其丰富的函数库为数据处理提供了诸多便利,排序函数便是其中一类非常实用的工具。
大鳥
·
2025-01-19 06:31
apache
hive
hadoop
基于微信小程序的健身房预约管理系统
专栏推荐:前后端分离项目源码、SpringBoot项目源码、Vue项目源码、SSM项目源码、微信小程序源码精品专栏:Java精选实战项目源码、Python精选实战项目源码、
大数
据精选实战项目源码系统展示基于微信小程序
计算机学姐
·
2025-01-19 06:31
微信小程序源码
微信小程序
小程序
spring
boot
vue.js
java
mysql
后端
Java 大视界 -- Java
大数
据文本分析与自然语言处理:从文本挖掘到智能对话(十)
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。一、本博客的精华专栏:
青云交
·
2025-01-19 05:50
大数据新视界
Java
大视界
大数据
文本分析
自然语言处理
文本挖掘
机器翻译
智能对话
智能客服
java
Java 大视界 -- Java
大数
据物联网应用:数据处理与设备管理(八)
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。一、本博客的精华专栏:
青云交
·
2025-01-19 05:20
大数据新视界
Java
大视界
大数据
物联网
数据处理
设备管理
车联网
智能家居
预测性维护
java
Java 大视界 -- Java
大数
据分布式缓存:提升数据访问性能(五)
本博客的精华专栏:
大数
青云交
·
2025-01-19 05:50
大数据新视界
Java
大视界
大数据
分布式缓存
数据访问性能
Redis
Memcached
缓存一致性
缓存击穿
java
Java 大视界 -- Java 微服务架构在
大数
据应用中的实践:服务拆分与数据交互(一)
本博客的精华专栏:
大数
青云交
·
2025-01-19 05:20
大数据新视界
Java
大视界
Java
微服务架构
大数据应用
服务拆分
数据交互
性能优化
安全考量
分布式事务处理
java
Java 大视界 -- Java 驱动
大数
据流处理:Storm 与 Flink 入门(六)
本博客的精华专栏:
大数
青云交
·
2025-01-19 05:50
大数据新视界
Java
大视界
Flink
Storm
大数据流处理
实时数据处理
架构
实时监控
数据分析
java
Java 大视界 -- 解锁 Java 与 Hadoop HDFS 交互的高效编程之道(二)
本博客的精华专栏:
大数
青云交
·
2025-01-19 05:19
大数据新视界
Java
大视界
HDFS
Java
流
代码示例
性能优化
读写操作
大数据
Hadoop
java
技术征途的璀璨华章:青云交的砥砺奋进与感恩之心
本博客的精华专栏:
大数
青云交
·
2025-01-19 05:49
#
Java
成长之路
青云交
技术发展
技术交流
人才培养
原力榜
作者周榜
领军人物
大数
据新视界 -- Hive 数据仓库设计的优化原则(2 - 16 - 4)
本博客的精华专栏:
大数
青云交
·
2025-01-19 05:49
大数据新视界
#
Hive
之道
Hive
数据仓库
优化原则
数据分区
存储格式
查询优化
B
树索引
查询性能
大数据
大数
据新视界 --
大数
据大厂之 Impala 性能优化:基于数据特征的存储格式选择(上)(19/30)
本博客的精华专栏:
大数
青云交
·
2025-01-19 05:19
大数据新视界
#
Impala
之道
大数据
Impala
存储格式选择
数据特征
性能优化
社交媒体数据
金融数据
大数
据新视界 --
大数
据大厂之 Hudi 数据湖框架性能提升:高效处理
大数
据变更
本博客的精华专栏:
大数
青云交
·
2025-01-19 05:49
Hudi
之道
大数据新视界
大数据
Hudi
数据湖框架
大数据变更
数据版本控制
性能提升
数据存储优化
【Delete 删除数据语法合集】.NET开源ORM框架 SqlSugar 系列
根据主键数组四、根据表达式五、联表删除六、无实体删除七、全局过滤器八、逻辑删除8.1逻辑删除方式1:8.2逻辑删除方式2:九、初始化表十、导航删除十一、常用案例11.1除最新N条清空11.2N到N条删除11.3
大数
据删
Microi风闲
·
2025-01-19 04:27
【ORM】SqlSugar
.net
开源
微软技术
后端
sqlsugar
orm
北
大数
学校友胡懿娟归国任教!重回母校,专注于统计学、微生物学和遗传学的交叉领域
关注前沿科技量子位又一科学家从美归国——北
大数
学系校友胡懿娟。援引人民日报消息,在北京大学北京国际数学研究中心发布的2024年工作回顾中显示,她于去年7月入职北大。
·
2025-01-19 03:57
量子位
【
大数
据】Flink CDC 实时同步mysql数据
目录一、前言二、FlinkCDC介绍2.1什么是FlinkCDC2.2FlinkCDC特点2.3FlinkCDC核心工作原理2.4FlinkCDC使用场景三、常用的数据同步方案对比3.1数据同步概述3.1.1数据同步来源3.2常用的数据同步方案汇总3.3为什么推荐FlinkCDC3.4FlinkCDC适用范围3.5FlinkCDC不同版本对比3.5.1FlinkCDC1.x3.5.2FlinkCD
小码农叔叔
·
2025-01-19 02:16
springboot
入门到精通
大数据
Flink
CDC
Flink
CDC同步数据
Flink
CDC数据同步
使用 Hadoop 实现
大数
据的高效存储与查询
大数
据技术:涵盖Hadoop(HDFS)、Hive、Spark、Fli
王子良.
·
2025-01-18 23:24
经验分享
大数据
hadoop
分布式
numpy和panda在数
据统计
时的注意事项
numpy和panda在数
据统计
时的注意事项:NumPy中只要有数据缺失就会返回NaN而在Pandas中则会跳过该值对剩余的数值进行相应计算示例importpandasaspdimportnumpyasnpa
积跬步,慕至千里
·
2025-01-18 23:22
软件安装及程序错误解决方案集
数据分析所遇问题解答库
numpy
《守护数据隐私的堡垒:构建基于差分隐私的MySQL匿名化处理系统》
在
大数
据时代,个人隐私保护的重要性日益凸显。
墨夶
·
2025-01-18 22:06
数据库学习资料2
mysql
android
数据库
R语言的并发编程
尤其在
大数
据时代,数据量的急剧增加让单线程处理方式显得力不从心。为了解决这一问题,各种编程语言都开展了并发编程的研究和应用。
技术的探险家
·
2025-01-18 21:31
包罗万象
golang
开发语言
后端
Python数据分析高频面试题及答案
5.进阶问题6.数据清洗与预处理7.数据转换与操作8.时间序列分析9.高级数据分析技术10.数据降维与特征选择11.模型评估与优化12.数据操作与转换13.数据筛选与分析14.数据可视化与报告15.数
据统计
与分析
闲人编程
·
2025-01-18 20:23
程序员面试
python
数据分析
面试题
核心
手把手教你使用 Python 制作贪吃蛇游戏|Python游戏
在这个游戏中,玩家的主要目标是在不撞墙或不撞墙的情况下抓住最
大数
量的水果。在学习Python或Pygame时,可以将创建蛇游戏视为一项挑战。这是每个新手程序员都应该接受的最好的初学者友好项目之一。
程序员CC_
·
2025-01-18 19:39
Python教程
python
学python
pygame
python
开发语言
海康威视SDK常见错误码
2NET_DVR_NOENOUGHPRI权限不足3NET_DVR_NOINITSDK未初始化4NET_DVR_CHANNEL_ERROR通道号错误5NET_DVR_OVER_MAXLINK连接到的设备端口超出最
大数
熊文豪
·
2025-01-18 18:03
语音识别
人工智能
Azure Synapse Dedicated SQL Pool通过配置选项和参数优化性能
配置选项与参数分布键(DistributionKey):•选择:在
大数
据量表中,选择经常用于JOIN、WHERE条件中的列作为分布键,如Date、ID等。
weixin_30777913
·
2025-01-18 18:29
云计算
azure
大数
据最新医学图像分割 3D nnUNet全流程快速实现_医学图像分割步骤
第一步:选择一个你能找的路径位置(这很重要),在这个位置打开终端,输入gitclonehttps://github.com/MIC-DKFZ/nnUNet.git,将nnUNet的代码下载到这个位置第二步:终端内定位到下载的nnUNet文件夹cdnnUNet,或者直接在对应位置打开终端第三步:开始安装,pipinstall-e.2数据整理2.1数据存放形式首先,nnUNet有自己的一套数据文件夹的
2401_84182020
·
2025-01-18 13:52
程序员
大数据
大数
据毕业设计—基于python+Django自然灾害频发地区情况数据分析系统
一、项目技术开发语言:Pythonpython框架:Django软件版本:python3.7/python3.8数据库:mysql5.7或更高版本数据库工具:Navicat11开发软件:PyCharm/vscode前端框架:vue.js二、项目内容和项目介绍 1.项目内容 1.开发语言:该系统采用Python作为开发语言,Python具有优雅的语法和动态类型,以及解释型语言的本质,使其成为许多
qq_1406299528
·
2025-01-18 11:06
python
计算机毕业设计
python
大数据
课程设计
LabVIEW 蔬菜精密播种监测系统
该系统充分发挥高精度传感器的感知能力以及先进软件的强
大数
据处理与控制能力,显著提高了播种作业的
LabVIEW开发
·
2025-01-18 11:33
LabVIEW开发案例
LabVIEW开发案例
【2025最新计算机毕业设计】基于SSM的旅游与自然保护平台【提供源码+答辩PPT+文档+项目部署】
✌主要内容:Java项目、Python项目、前端项目、PHP、ASP.NET、人工智能与
大数
据、单片机开发、物联网设计与开发设计、简历模板、学习资料、面试题库、技术互助、就业指导等。
万码堂源码
·
2025-01-18 11:01
计算机毕设精品实战案例
实战项目源码
课程设计
vue.js
前端
计算机毕业设计
毕设项目
spring
boot
【源码+文档】基于SpringBoot+Vue旅游网站系统【提供源码+答辩PPT+参考文档+项目部署】
✌主要内容:Java项目、Python项目、前端项目、PHP、ASP.NET、人工智能与
大数
据、单片机开发、物联网设计与开发设计、简历模板、学习资料、面试题库、技术互助、就业指导等。
万码堂源码
·
2025-01-18 11:31
实战项目源码
计算机毕设精品实战案例
spring
boot
vue.js
旅游
【
大数
据学习 | kafka】kafka的组件架构
broker:每个kafka的机器节点都会运行一个进程,这个进程叫做broker,负责管理自身的topic和partition,以及数据的存储和处理,因为kafka是集群形式的,所以一个集群中会存在多个broker,但是kafka的整体又不是一个主从集群,需要选举出来一个broker节点为主节点,管理整个集群中所有的数据和操作,以及所有节点的协同工作。每个broker上面都存在一个controll
Vez'nan的幸福生活
·
2025-01-18 10:30
大数据
mysql
oracle
json
sql
kafka
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他