spark·-submit

elementUI 输入框按回车刷新页面问题

使用.prevent修饰符来阻止默认的表单提交行为：@submit.native.prevent注解添加到el-form标签上从而阻止了按下回车键时的页面刷新.native表示对一个组件
前端小凯·2025-06-07 02:21

elementui el-form 默认不支持回车提交，怎么解决

概念：1.在表单的提交按钮上添加Vue原生属性native-type="submit"可以让按钮变为表单提交按钮；2.阻止表单默认提交事件（默认是阻止），在表单上（即标签上）添加@submit.native.prevent
扫地鼠Gordon·2025-06-07 02:51

el-form表单，按下回车后刷新页面的问题

编辑表单，按下回车后会刷新页面：一、原因当你的表单只有一项时，按下回车默认会提交表单，所以会出现刷新页面的现象二、解决设置@keyup.enter.native=""或@submit.native.prevent
·2025-06-07 02:50

ELK高级搜索七Spring boot 接入Elasticsearch

的操作步骤查询文档测试异步查询文档测试分页查询文档信息创建文档测试异步创建文档编辑文档删除文档创建索引异步创建索引索引是否存在删除索引Javaapi实现文档管理es技术比较特殊，不像其他分布式、大数据课程，haddop、spark
yangyanping20108·2025-06-06 13:23

记一次·Spark读Hbase

记一次·Spark读Hbase一、背景过年回来，数仓发现hive的一个表丢数据了，需要想办法补数据。这个表是flume消费kafka写hive。
·2025-06-06 00:55

记录一次spark本地运行时的org.apache.hadoop.io.nativeio.NativeIO问题

最近换了新的电脑，好久不用的win10系统，安装了maven，jdk，idea之后，从git上下载了代码库，希望可以本地调试运行spark代码，安装好系统环境后，代码可以运行起来了，代码就是很简单的将系统字符存储到当前文件中
一颗小草333·2025-06-06 00:22

记一次运行spark报错

提交spark任务运次报错06/0318:27:50INFOClient:SettingupcontainerlaunchcontextforourAM25/06/0318:27:50INFOClient
不吃饭的猪·2025-06-05 23:49

读数据自助服务实践指南：数据开放与洞察提效16查询优化服务

1.查询优化服务1.1.好查询和坏查询之间的差别非常明显1.2.重复且长时间运行的查询是需要调优的1.3.痛点1.3.1.像Hadoop、Spark和Presto这样的查询引擎有太多的旋钮1.3.1.1
·2025-06-05 19:22

如何在IDE中通过Spark操作Hive

在IDE中通过Spark操作Hive是一项常见的任务，特别是在大数据处理和分析的场景中。
yt94832·2025-06-05 17:04

SparkSQL 优化实操

一、基础优化配置1.资源配置优化#提交Spark作业时的资源配置示例spark-submit\--masteryarn\--executor-memory8G\--executor-cores4\--num-executors10
社恐码农·2025-06-05 16:00

云开发实现新闻列表小程序

本项目中是分别在cloudfunctions中创建一个名为“submit”的云函数，功能为向小程序端发布信息，在pages中新建两个page页面，一个页面名为“index”用于新闻列表页，另一个名为“submit
轩115·2025-06-05 01:43

计算机毕业设计Hadoop+Spark+DeepSeek-R1大模型民宿推荐系统 hive民宿可视化 民宿爬虫 大数据毕业设计(源码+LW文档+PPT+讲解)

一、项目简介本项目基于Hadoop、Spark、DeepSeek-R1构建一个高效的大数据民宿推荐系统，涵盖数据爬取、存储、处理、分析、可视化、AI推荐等完整流程，并提供Hive可视化分析及大数据爬虫，
金枝玉叶9·2025-06-04 19:51

试试时序数据库 TDengine × Spark 的组合拳

现在，TDengine正式开放与ApacheSpark的无缝集成通道。一个是高性能、低成本的时序数据库，一个是横扫大数据世界的分析
·2025-06-04 14:42

Flink运行架构及并行度设置 —— 步骤级源码、模式、参数与调试

Flink运行架构及并行度设置——步骤级源码、模式、参数与调试一、作业提交1.主要源码片段//org.apache.flink.client.program.ClusterClient#submitJobpublicComplet
北漂老男人·2025-06-04 13:12

WeClone：用微信聊天记录克隆数字分身

语音克隆：结合微信语音消息和Spark-TTS模型，实现高质量的声音克隆，增强数字分身的真实感。隐
开源项目精选·2025-06-04 13:36

暑假集训第四周周三赛 D - Pass-Muraille 穿墙 贪心

D-Pass-MurailleTimeLimit:1000MSMemoryLimit:65536KB64bitIOFormat:%I64d&%I64uSubmitStatusPracticePOJ1230DescriptionInmoderndaymagicshows
linyuxilu·2025-06-04 07:47

暑假集训第二周——贪心 C -装箱

C-装箱TimeLimit:1000MSMemoryLimit:10000KB64bitIOFormat:%I64d&%I64uSubmitStatusDescriptionAfactoryproducesproductspackedinsquarepacketsofthesameheighthandofthesizes1
linyuxilu·2025-06-04 07:17

暑假集训第二周——贪心 A - Radar Installation雷达装置

A-RadarInstallationTimeLimit:1000MSMemoryLimit:10000KB64bitIOFormat:%I64d&%I64uSubmitStatusDescriptionAssumethecoastingisaninfinitestraightline.Landisinonesideofcoasting
linyuxilu·2025-06-04 07:17

暑假集训第二周——贪心 盒子平移

H-盒子平移TimeLimit:1000MSMemoryLimit:10000KB64bitIOFormat:%I64d&%I64uSubmitStatusDescriptionLittleBoblikesplayingwithhisboxofbricks.Heputsthebricksoneuponanotherandbuildsstacksofdifferentheight
linyuxilu·2025-06-04 07:47

java中文问答系统_基于知识图谱的问答系统

基于知识图谱的问答系统发布时间：2018-06-1021:27,浏览次数：561基于知识图谱的问答系统一.准备工作:1.下载好java8,并用mysql创建好数据库–重点在于存储数据2.spark安装–
Dolaan Zon·2025-06-03 22:45

JOIN使用的注意事项

JOIN的使用要求在SparkSQL/HQL中，使用JOIN进行表关联时，需要注意以下要求：空值处理，多个表进行JOIN取值，在非INNERJOIN的情况下大多会取到NULL空值，对这些空值在必要情况下需要进行空值处理
对许·2025-06-02 19:59

【多线程】结合代码理解不同业务场景使用的多线程

Mark下实际场景：当2个相同的场景依次需要对一数据处理时，若是串行，则使用的时间则是a+b，若是并行则使用的时间是max(a,b)，并且防止过大的访问量导致oom，所以采用线程池的方式一、通过线程池的submit
cxh_陈·2025-06-02 18:51

完全移除内联脚本

如下网页文件a.html：functionhandleClick{alert("Hello");}Submit修改为a.html和script.js两个文件。
Never_Satisfied·2025-06-02 17:14

使用 PySpark 从 Kafka 读取数据流并处理为表

使用PySpark从Kafka读取数据流并处理为表下面是一个完整的指南，展示如何通过PySpark从Kafka消费数据流，并将其处理为可以执行SQL查询的表。
Bug Spray·2025-06-02 03:06

Spark MLlib模型—决策树系列算法

文章目录SparkMLlib模型—决策树系列算法决策树系列算法随机森林（RandomForest）GBDT(Gradient-boostedDecisionTrees)总结SparkMLlib模型—决策树系列算法前面我们重点介绍了机器学习中的特征工程
猫猫姐·2025-06-01 21:52

Spark MLlib模型训练—分类算法 Decision tree classifier

SparkMLlib模型训练—分类算法Decisiontreeclassifier决策树（DecisionTree）是一种经典的机器学习算法，广泛应用于分类和回归问题。
猫猫姐·2025-06-01 21:52

Spark基础笔记之启动命令顺序

系统环境（三台虚拟机）node1192.168.32.101（主）node2192.168.32.102node3192.168.32.1031、启动hdfs、yarn、historyserver（hadoop用户启动）#启动dfs，启动后的服务名：DataNode、SecondaryNameNode、NameNodesh/export/hadoop/sbin/start-dfs.sh#启动yar
java刘先生·2025-06-01 05:56

resubmit v1.2.0 新特性支持类级别防止重复提交

前言resubmit是一款为java设计的渐进式防止重复提交框架。创作目的有时候手动加防止重复提交很麻烦，每次手动编写不利于复用。所以希望从从简到繁实现一个工具，便于平时使用。
·2025-05-31 19:38

Java在大数据处理中的应用：Hadoop与Spark

Java在大数据处理中的应用：Hadoop与Spark大家好，我是微赚淘客系统3.0的小编，是个冬天不穿秋裤，天冷也要风度的程序猿！
微赚淘客机器人开发者联盟@聚娃科技·2025-05-31 19:19

还在深夜加班改Bug？雷军都点赞的防重提方案来了！

现在，我只用一行代码就解决了这个问题——这就是resubmit，一个普通程序员送给所有同行的防崩盘保险。”
·2025-05-31 15:36

4.2.5 Spark SQL 分区自动推断

在本节实战中，我们学习了SparkSQL的分区自动推断功能，这是一种提升查询性能的有效手段。通过创建具有不同分区的目录结构，并在这些目录中放置JSON文件，我们模拟了一个分区表的环境。
酒城译痴无心剑·2025-05-31 08:01

大数据领域Spark的分布式计算安全防护

大数据领域Spark的分布式计算安全防护关键词：大数据、Spark、分布式计算、安全防护、数据安全摘要：本文围绕大数据领域中Spark的分布式计算安全防护展开深入探讨。
AGI大模型与大数据研究院·2025-05-31 08:00

Spark SQL ---一般有用

SparkSQLandDataFrame1.课程目标1.1.掌握SparkSQL的原理1.2.掌握DataFrame数据结构和使用方式1.3.熟练使用SparkSQL完成计算任务2.SparkSQL2.1
okbin1991·2025-05-31 06:15

Spark快速大数据分析——读书笔记

——8.16开始整理Spark快速大数据分析推荐序：一套大数据解决方案通常包含多个组件，从存储、计算和网络硬件层，到数据处理引擎，再到利用改良的统计和计算算法、数据可视化来获得商业洞见的分析层，这其中数据处理引擎起到了十分重要的作用
BBlue-Sky·2025-05-31 03:56

Spark与朴素贝叶斯在股票市场预测中的应用及代码实战

本文还有配套的精品资源，点击获取简介：本项目展示了如何利用Spark框架结合朴素贝叶斯算法进行股票市场的预测。
飞翔的袋鼠弟·2025-05-30 22:48

spark- ResultStage 和 ShuffleMapStage介绍

在Spark的DAG调度模型中，Stage被划分为ResultStag
大数据知识搬运工·2025-05-30 19:29

大数据学习（124）-spark数据倾斜

执行时间远超其他Task（通常超过平均时间10倍以上）集群资源利用率不均（部分Executor负载过高）作业执行时间主要由少数几个Task决定频繁出现GC超时或OOM错误2.诊断方法scala//通过SparkUI
viperrrrrrr·2025-05-30 11:22

Spark快速大数据分析读书笔记

1转载于:https://www.cnblogs.com/jellyj/p/9867050.html
weixin_30517001·2025-05-30 11:50

spark shuffle的分区支持动态调整，而hive不支持

根据Spark官方文档，SparkShuffle分区支持动态调整的核心原因在于其架构设计和执行模型的先进性：1.自适应查询执行（AQE）机制Spark3.0+引入的AQE特性允许在运行时动态优化执行计划
大数据知识搬运工·2025-05-30 05:11

Spark、Hadoop对比

目录Spark和Hadoop的对比总结1.架构对比HadoopSpark2.性能对比HadoopSpark3.数据处理模式HadoopSpark4.易用性HadoopSpark5.生态系统Hadoop*
大数据知识搬运工·2025-05-30 05:41

spark 2.1 Stage and ResultStage and ShuffleMapStage

Stage/***Astageisasetofparalleltasksallcomputingthesamefunctionthatneedtorunaspart*ofaSparkjob,whereallthetaskshavethesameshuffledependencies.EachDAGoftasksrun
houzhizhen·2025-05-30 05:09

spark-shell 启动 以及 例子

[root@cdh1hadoop]#spark-shellbash:spark-shell:commandnotfound[root@cdh1hadoop]#source/etc/profile[root
5icode.top·2025-05-30 05:09

Spark基础篇-Application、Job、Stage 和 Task

Spark基础篇单独看看Application、Job、Stage和Task在ApacheSpark中，Application、Job、Stage和Task是任务调度和执行的四个核心层级概念，它们构成从宏观到微观的完整执行流程
数据大包哥·2025-05-30 05:38

4.8.2 利用Spark SQL计算总分与平均分

在本次实战中，我们的目标是利用SparkSQL计算学生的总分与平均分。首先，我们准备了包含学生成绩的数据文件，并将其上传至HDFS。
酒城译痴无心剑·2025-05-30 02:12

YARN架构解析：大数据资源管理核心

支持多种计算框架：不再局限于MapReduce，可运行Spark、Flink、Tez等分布式应用。高扩展性：支持数千节点和数万并发任务的超大规模集群。
不辉放弃·2025-05-29 19:30

新手福利：Apache Spark入门攻略

新手福利：ApacheSpark入门攻略发表于2015-07-1018:07|5734次阅读|来源Dzone|10条评论|作者AshwiniKuntamukkala大数据开源Spark摘要：本文聚焦ApacheSpark
zstarstone·2025-05-29 12:14

spark学习-62-Spark:Yarn-cluster和Yarn-client区别与联系

前面借用：https://www.iteblog.com/archives/1223.html我们都知道Spark支持在yarn上运行，但是Sparkonyarn有分为两种模式yarn-cluster和
九师兄·2025-05-29 09:50

Spark-client，Spark-yarn模式

spark的集群主要有三种运行模式standalone、yarn、mesos，其中常被使用的是standalone和yarn模式。
Xq飓风翱翔·2025-05-29 09:19

Spark基础学习笔记06：搭建Spark On YARN集群

文章目录零、本讲学习目标一、SparkOnYARN架构（一）client提交方式（二）cluster提交方式二、搭建SparkOnYARN集群（一）搭建SparkStandalone集群（二）修改Spark
酒城译痴无心剑·2025-05-29 08:48

讯飞AI相关sdk集成springboot

星火认知大模型对话：（以spark4.0ultra为例）demo上的功能比较简陋，网络上搜到的比较残缺，很多功能缺失，我这里自己收集资料和运用编程知识做了整理，得到了自己想要的一些功能，比如持久化处理、
不会敲代码的熊mao·2025-05-29 08:15
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他