E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
spark大数据
WPF 使用DrawingVisual绘制高性能曲线图
一、前言项目中涉及到了心率监测,而且数据量达到了百万级别,通过WPF实现
大数据
曲线图时,尝试过最基础的Canvas来实现,但是性能堪忧,而且全部画出来也不实际。
dotNET跨平台
·
2024-08-26 19:44
java
c#
wpf
winform
android
(十五)Flink 内存管理机制
在
大数据
领域,很多开源框架(Hadoop、
Spark
、Storm)都是基于JVM运行,但是JVM的内存管理机制往往存在着诸多类似OutOfMemoryError的问题,主要是因为创建大量的实例,超过JVM
springk
·
2024-08-26 16:27
Flink全景解析
flink
大数据
实时数据
flink
内存管理
内存管理机制
面试笔记8.24
项目你的项目中涉及
大数据
开发,那你的代码工程是怎么搭建的?正确答案:在我的项目中涉及
大数据
开发时,我通常会采用分布式的架构,比如使用Hadoop或者
Spark
等
大数据
处理框架。
励志秃头码代码
·
2024-08-26 16:55
面试
职场和发展
Spring Boot实战:使用Spring Cloud Stream处理实时交易数据
随着金融市场的快速发展以及
大数据
技术的广泛应用,实时处理交易数据变得越来越重要。SpringBoot和SpringCloudStream为开发者提供了一个强大的工具组合来构建这样的系统。
潘多编程
·
2024-08-26 15:17
spring
boot
后端
java
山东大学
大数据
管理与分析知识点总结
大数据
概述
大数据
(bigdata),或称巨量资料,指的是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产
大数据
指不用随机分析法(抽样调查)这样的捷径,而采用所有数据进行分析处理
大数据
四个本质特征大量化
weixin_51565263
·
2024-08-26 14:46
云计算
大数据
mapreduce
数据仓库
大数据
技术之Zookeeper安装 (2)
目录下载地址本地模式安装1)安装前准备2)配置修改3)操作Zookeeper配置参数解读Zookeeper集群操作集群规划解压安装配置服务器编号配置zoo.cfg文件集群操作Zookeeper集群启动停止脚本创建脚本增加脚本执行权限Zookeeper集群启动脚本Zookeeper集群停止脚本Zookeeper选举机制(面试重点)首次启动选举非首次启动选举关键术语解释下载地址官网首页:ApacheZ
大数据深度洞察
·
2024-08-26 14:43
Zookeeper
大数据
hadoop
zookeeper
计算机毕业设计Hadoop+
Spark
知识图谱体育赛事推荐系统 体育赛事热度预测系统 体育赛事数据分析 体育赛事可视化 体育赛事
大数据
机器学习
大数据
毕业设计
大数据
毕设 机器学习 人工智能
开发技术前端:vue.js、element-ui、echarts后端:springboot、mybatis
大数据
:
spark
、hadoop数据库:mysql关系型数据库、neo4j图数据库算法:协同过滤推荐算法
计算机毕业设计大全
·
2024-08-26 13:43
Kylin系列-入门
Kylin系列-入门ApacheKylin是一个开源的分布式分析引擎,提供Hadoop/
Spark
之上的SQL查询接口及多维分析(OLAP)能力,以支持超大规模数据。
Dingdangr
·
2024-08-26 13:34
kylin
大数据
-Big Data
大数据
(BigData)是指规模庞大、多样化、高速度的数据集合。与传统数据相比,
大数据
具有一些显著的特点,并广泛应用于各个领域。
Dingdangr
·
2024-08-26 13:34
big
data
python入门基础——新手必看
前言随着人工智能,
大数据
的发展。python是当前时代最流行,可以在数据处理、web开发、人工智能等多个领域。
@haihi
·
2024-08-26 12:28
python
开发语言
【赵渝强老师】
Spark
中的RDD
RDD(ResilientDistributedDataset)叫做弹性分布式数据集,它是
Spark
中最基本、也是最重要的的数据模型。
赵渝强老师
·
2024-08-26 11:52
大数据技术
spark
大数据
分布式
文心快码(Baidu Comate)初体验
文心快码(BaiduComate)初体验1文心快码简介和安装:简要介绍文心快码(BaiduComate)、安装方法、使用方法等;BaiduComate是由百度自主研发,基于文心大模型,结合百度丰富的编程现场
大数据
和外部优秀开源数据
ruanxiaoqi
·
2024-08-26 11:22
百度
python
你眼中的IT行业现状与未来趋势
从人工智能、云计算、
大数据
、人工智能到物联网、5G通信和区块链,这些技术正在重塑我们的生活和工作方式。同时,数字化转型正在成为企业生存和竞争的关键,推动了更多传统行业向数字化、智能化转型。
刷刷刷粉刷匠
·
2024-08-26 11:51
人工智能
大数据
机器学习
其他
基于
spark
+hadoop+hive
大数据
分析的电影推荐系统的设计与实现
开发介绍1.1开发环境二、系统介绍2.1图片展示三、部分代码设计3.1.部分代码如下:**总结****大家可以帮忙点赞、收藏、关注、评论啦****有问题评论区交流**一、开发介绍1.1开发环境技术栈:
spark
毕设木哥
·
2024-08-26 06:26
spark
spark
hadoop
hive
spring
java
每天一个数据分析题(五百)- 关联规则
.预测(Prediction)数据分析认证考试介绍:点击进入题目来源于CDA模拟题库点击此处获取答案数据分析专项练习题库内容涵盖Python,SQL,统计学,数据分析理论,深度学习,可视化,机器学习,
Spark
跟着紫枫学姐学CDA
·
2024-08-26 04:40
数据分析题库
数据分析
数据挖掘
每天一个数据分析题(四百九十)- 主成分分析与因子分析
C.协方差矩阵D.相关系数矩阵数据分析认证考试介绍:点击进入题目来源于CDA模拟题库点击此处获取答案数据分析专项练习题库内容涵盖Python,SQL,统计学,数据分析理论,深度学习,可视化,机器学习,
Spark
跟着紫枫学姐学CDA
·
2024-08-26 04:07
数据分析题库
数据分析
数据挖掘
大数据
技术之Flume事务及内部原理(3)
目录FlumeAgent架构概述FlumeAgent内部工作流程FlumeAgent的配置FlumeAgent内部重要组件ChannelSelectorSinkProcessorApacheFlume是一个分布式的、可靠的、可用的服务,用于有效地收集、聚合和移动大量日志数据。它具有简单灵活的架构,基于流式数据流动模型。Flume主要由三个核心组件组成:Source(源)、Channel(通道)和S
大数据深度洞察
·
2024-08-26 01:20
Flume
flume
大数据
12.
Spark
Core-
Spark
-RDD持久化
(1)persist算子使用方法:varrdd=sc.textFile("test")rdd=rdd.persist(StorageLevel.MEMORY_ONLY)valcount=rdd.count()//或者其他操作StorageLevel说明:StorageLevel的构造函数:classStorageLevelprivate(privatevar_useDisk:Boolean,#是否
__元昊__
·
2024-08-25 23:43
大数据
的存储和处理面临哪些挑战,如何应对?
大数据
的存储和处理面临以下挑战:数据量巨大:
大数据
的特点之一是数据量非常庞大,存储和处理这么大规模的数据是一个挑战。传统的数据库系统可能无法满足
大数据
需求,需要寻找适合大规模数据处理的解决方案。
程序猿阿伟
·
2024-08-25 22:02
大数据
【面试系列】30个常见的初级SQL编程题
⭐️
大数据
平台建设指南:全面讲解从数据采集到数据可视化的整个过程,掌握构建现代化数据平台的核心技术和方法。⭐️《遇见Python:初识、了解与热恋
野老杂谈
·
2024-08-25 22:31
全网最全IT公司面试宝典
面试
sql
职场和发展
《Hadoop核心技术》作者翟周伟 :我与Hadoop的不解之缘
翟周伟,资深Hadoop技术专家,专注于Hadoop&
大数据
,数据挖掘,自然语言处理领域,目前就职于百度。2009年,利用Hadoop构建商业级
大数据
系统,是国内该领域最早的一批人之一;负责设
xytlwp
·
2024-08-25 21:27
翟周伟
hadoop
数据挖掘
自然语言处理
hadoop
翟周伟
数据挖掘
自然语言处理
vue2上传大文件到minio分片上传
项目中使用到的类库:
spark
-md5、axios、element-ui;npminstall
spark
-md5--Snpminstallaxios--S页面上传示例文件上传任务数:{{taskQueueRunningNum
zhou周大哥
·
2024-08-25 17:35
vue.js
javascript
ecmascript
Web Worker 应用场景和实现
如果前面的任务需要执行一些
大数据
量的计算,页面就会出现卡顿、点击无反应、甚至页面崩溃等现象。这对用户体验而言是非常糟糕的。
zhou周大哥
·
2024-08-25 17:05
java
开发语言
前端
什么品牌的身体乳好用?2022年最好用的十大品牌身体乳排行榜
基于全网
大数据
,根据品牌评价和销量,评选出2022年面膜十大品牌。前十名分别是玉兰油/Olay、美康粉黛、强生、美卿、膜法世家、阿芙、力士、海得宝、复因、兰芝/Laneige。
一起高省
·
2024-08-25 16:00
Hadoop入门基础(五):Hadoop 常用 Shell 命令一网打尽,提升你的
大数据
技能!
1.Hadoop基本命令1.1查看版本信息hadoopversion用于检查Hadoop的版本信息以及编译信息。1.2启动和停止Hadoop集群start-dfs.shstart-yarn.shstop-dfs.shstop-yarn.shstart-dfs.sh和stop-dfs.sh分别用于启动和停止HDFS,而start-yarn.sh和stop-yarn.sh用于管理YARN服务。1.3格
william.zhang(张)
·
2024-08-25 15:52
大数据
Hadoop
容器
大数据
hadoop
分布式
数据分析方法概括
能用简单分析的就不需要使用
大数据
挖掘。)一、描述性数据分析方法描述性数据分析可以用一言蔽之”一句话描述数据“
wujingwin
·
2024-08-25 15:52
GeoScene Pro教程(001):软件功能产品介绍
本软件以云计算为核心并融合各类最新IT技术,具有强大的地图制作、空间数据管理、
大数据
与人工智能挖掘分析、空间信息可视化以及整合、发布与共享能力。同时在用户体验、软硬件兼容适配、安全可控等方面
叁拾舞
·
2024-08-25 15:47
GeoScenePro教程
geoscene
pro
arcgis
大数据
面试-Scala
谈谈scala的闭包、柯里化、高阶函数如果一个函数,访问到了它的外部(局部)变量的值,那么这个函数和他所处的环境,称为闭包。闭包在函数式编程中是一个重要的概念,广泛用于高阶函数、柯里化等技术中。函数柯里化:把一个参数列表的多个参数,变成多个参数列表;函数柯里化,其实就是将复杂的参数逻辑变得简单化,函数柯里化一定存在闭包。高阶函数:1)函数可以作为值进行传递2)函数可以作为参数进行传递3)函数可以作
文文鑫
·
2024-08-25 12:35
#
大数据面试-Scala
大数据
scala
开发语言
大数据
面试-Zookeeper
你对Zookeeper的选举机制了解吗?为什么zk节点个数推荐奇数台?zk第一次启动的选举的细节了解吗?ZooKeeper的选举机制是基于Paxos算法的一种分布式选举算法,用于在ZooKeeper集群中选择一个节点作为Leader,负责处理客户端的写请求和协调其他节点。选举过程涉及多个方面,包括选举算法的实现细节、奇数节点的重要性,以及初始化时的选举过程。选举算法的实现细节:在ZooKe
文文鑫
·
2024-08-25 12:04
#
大数据面试-Zookeeper
大数据
面试
zookeeper
德州仪器(TI)的高性能、集成式的双全桥电机驱动器——DRV8412
芯品快报:德州仪器(TI)的高性能、集成式的双全桥电机驱动器——DRV8412芯品快报:亚德诺(ADI)超静音步进电机驱动芯片——TMC2209原创IPBrain平台君集成电路
大数据
平台2024年08月
Victor-Tian
·
2024-08-25 10:47
电机驱动
单片机
嵌入式硬件
松下信息和望繁信科技邀您参加「数智时代下
大数据
应用的“道”与“术”」闭门会议
我们即将迎来松下信息系统(上海)有限公司(简称“松下信息”)与上海望繁信科技有限公司(简称“望繁信科技”)联合举办的“数智时代下
大数据
应用的‘道’与‘术’”大会。距离8月23日的会议仅剩8天!
望繁信科技
·
2024-08-25 04:45
数字化转型
流程挖掘
智能化应用
大数据
流程智能
望繁信科技与金智维达成金融行业独家战略合作,共塑数字化转型新格局
作为
大数据
流程智能领域的
望繁信科技
·
2024-08-25 04:15
流程挖掘
数字化转型
金融行业
上海望繁信
数字员工
邀请函 I 松下信息和望繁信科技邀您参加「数智时代下
大数据
应用的“道”与“术”」闭门会议
在数字化浪潮席卷全球的今天,
大数据
与智能化的结合成为企业成功的关键。
望繁信科技
·
2024-08-25 04:45
科技
大数据
流程挖掘
人工智能
数智时代
外卖骑手平台有哪些可以选择?赚钱最多福利最好的外卖骑手平台推荐
根据
大数据
分析,以下几个外卖平台比较好:1、美团外卖现在市场占有率非常高的一款外卖平台,有美团专送和美团众包之分,如果只想兼职的话,可以申请众包服务,想什么时候跑就什么时候跑,特点是单子非常多。
高省APP
·
2024-08-25 03:08
大数据
技术——RDD编程初级实践
RDD编程初级实践1、需求描述2、环境介绍3、数据来源描述4、数据上传及上传结果查看5、数据处理过程描述1.py
spark
交互式编程2.编写独立应用程序实现数据去重3.编写独立应用程序实现求平均值问题6
@璿
·
2024-08-25 03:04
spark
手动修改zk类型的kafka offset
.*.87.125:2181查找并修改ae_
spark
这个topic的消费者组的offset值对于每个分区(0、1、2),需要分别查看和修改offset值查看和修改分区0的offset值查看当前offset
Keep hunger
·
2024-08-24 23:45
开发记录
kafka
分布式
每天一个数据分析题(四百八十七)- 非监督学习
C.Minkowski距离D.笛卡尔距离数据分析认证考试介绍:点击进入题目来源于CDA模拟题库点击此处获取答案数据分析专项练习题库内容涵盖Python,SQL,统计学,数据分析理论,深度学习,可视化,机器学习,
Spark
跟着紫枫学姐学CDA
·
2024-08-24 23:13
数据分析题库
数据分析
学习
数据挖掘
每天一个数据分析题(四百八十八)- 非监督学习
C.Minkowski距离D.笛卡尔距离数据分析认证考试介绍:点击进入题目来源于CDA模拟题库点击此处获取答案数据分析专项练习题库内容涵盖Python,SQL,统计学,数据分析理论,深度学习,可视化,机器学习,
Spark
跟着紫枫学姐学CDA
·
2024-08-24 23:13
数据分析题库
数据分析
学习
数据挖掘
Mysql索引知识的自我总结
这就有一套优化提升的过程了,首先对于
大数据
M-bao
·
2024-08-24 23:13
mysql
数据库
使用Python进行数据分析的最佳实践
随着
大数据
时代的到来,数据已经成为驱动业务增长的关键因素。Python作为一款强大的编程语言,在数据科学领域占据着重要的地位。
Envyᥫᩣ
·
2024-08-24 22:39
python
数据分析
开发语言
编程语言
程序人生
黑猴子的家:
Spark
RDD 行动算子 Action
1、reduce(1)原理通过f函数聚集RDD中的所有元素,这个功能必须是可交换且可并联的(2)源码defreduce(f:(T,T)=>T):T=withScope{valcleanF=sc.clean(f)valreducePartition:Iterator[T]=>Option[T]=iter=>{if(iter.hasNext){Some(iter.reduceLeft(cleanF))
黑猴子的家
·
2024-08-24 22:03
读《激荡十年,水大鱼大》有感(2016年~2017年)
大数据
、无人机、虚拟现实、人工智能、区块链、生物医疗以及新材料等都是热门的投资区域。网络直播、共享单车又
范范1118
·
2024-08-24 21:01
【PostgreSQL教程】PostgreSQL 高级篇之触发器
阿里云/InfoQ等平台优质作者、专注于Java技术领域✌技术范围:SpringBoot、SpringCloud、Vue、SSM、HTML、Nodejs、Python、MySQL、PostgreSQL、
大数据
No8g攻城狮
·
2024-08-24 20:25
postgresql
数据库
sql
mysql
oracle
从MySQL迁移到PostgreSQL的完整指南
与MySQL相比,PostgreSQL在处理复杂查询和
大数据
集时表
TechCraft
·
2024-08-24 19:23
数据库
MySQL
PostgreSQL
数据迁移
pgloader
mysqldump
什么是营销自动化?营销自动化的优势?
营销自动化基于
大数据
和人工智能技术,能够自动执行、管理和完成营销任务和流程,为企业带来诸多优势。营销自动化是一种能够一体化执行、管理、完成营销任务和流程的工具。
林叔聊渠道分销
·
2024-08-24 19:52
自动化
SaaS
sass
海康实时监控预览视频流接入web
它是海康威视基于多年在视频及物联网核心技术积累之上,融合AI、
大数据
、云计算等技术,为合作伙伴提供的一个二次开发及创新的平台。
LB_bei
·
2024-08-24 18:16
skill
音视频
Hive3:数据随机抽样查询
一、适用场景
大数据
体系下,在真正的企业环境中,很容易出现很大的表,比如体积达到TB级别。
生产队队长
·
2024-08-24 17:40
HIVE
hive
hadoop
大数据
与AI:驱动未来智能社会的双引擎
一、
大数据
:AI的“燃料”二、AI:
大数据
的“引擎”三、
大数据
与AI的融合应用1.医疗健康:2.教育科技:3.智慧城市:4.智能制造:四、未来趋势与挑战结语一、
大数据
:AI的“燃料”
大数据
,指的是无法在一定时间范围内用常规软件工具进行捕捉
yuhaoteng666
·
2024-08-24 14:51
大数据
人工智能
智能社会
未来趋势
应用案例
【Py
spark
-驯化】一文搞懂Py
spark
修改hive表描述以及增加列使用技巧
【Py
spark
-驯化】一文搞懂Py
spark
修改hive表描述以及增加列使用技巧本次修炼方法请往下查看欢迎莅临我的个人主页这里是我工作、学习、实践IT领域、真诚分享踩坑集合,智慧小天地!
算法驯化师
·
2024-08-24 13:43
pyspark
大数据
hive
hadoop
数据仓库
pyspark
spark
分布式
大数据
【Py
spark
-驯化】一文搞懂Py
spark
写入hive表的使用技巧
【Py
spark
-驯化】一文搞懂Py
spark
写入hive表的使用技巧本次修炼方法请往下查看欢迎莅临我的个人主页这里是我工作、学习、实践IT领域、真诚分享踩坑集合,智慧小天地!
算法驯化师
·
2024-08-24 13:43
pyspark
大数据
hive
hadoop
数据仓库
spark
分布式
pyspark
hdfs
上一页
4
5
6
7
8
9
10
11
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他