spark大赛

旗媛梦创始人屠红英女士受邀出席世界超模大赛(深圳)赛区总决赛

2018年5月13日，世界超模大赛（深圳）总决赛在大浪时尚小镇圆满成功地举行。
华夏印象·2024-02-05 16:13

解析UE动画系统——核心实现

【USparkle专栏】如果你深怀绝技，爱“搞点研究”，乐于分享也博采众长，我们期待你的加入，让智慧的火花碰撞交织，让知识的传递生生不息！
UWA·2024-02-05 16:36

Hudi学习6：安装和基本操作

目录1编译Hudi1.1第一步、Maven安装1.2第二步、下载源码包1.3第三步、添加Maven镜像1.4第四步、执行编译命令1.5第五步、HudiCLI测试2环境准备2.1安装HDFS2.2安装Spark3
hzp666·2024-02-05 14:59

Hudi学习 6：Hudi使用

准备工作：1.安装hdfshttps://mp.csdn.net/mp_blog/creation/editor/1096891432.安装sparkspark学习4：spark安装_hzp666的博客
hzp666·2024-02-05 14:58

spark学习4：spark安装

1.下载spark安装包2.配置环境1.cd/bigdata/spark-3.0.1-bin-hadoop3.2/conf/2.4.添加动态库在hadoop-3.2.2/bin目录下添加hadoop.dll
hzp666·2024-02-05 14:58

总会想起那句话 - 草稿

主持人大赛的召开吸引了无数的观众，我也是其中一个。
王者荣耀体验服资格·2024-02-05 14:23

力为什么只有三要素？数学很好的物理学家牛顿的一次“建模”

在几年前有这么一个“钓鱼”用的段子，说中国与美国学生一起参加数学建模大赛，结束后中国学生拿起东西就走了，而美国学生们则默默地将桌子上的模型收拾好带走才离开。虽然
酋知鱼·2024-02-05 14:51

“世界杯”MindManager脑图征集大赛启动！

为了让更多小伙伴感受到使用思维导图带来的高效和便捷，我们特举办本次“世界杯”MindManager脑图征集大赛！
徘徊走遇见·2024-02-05 14:22

计算机毕业设计hadoop+spark+hive小说数据分析可视化大屏 小说推荐系统 小说爬虫 小说大数据 机器学习 知识图谱 小说网站 大数据毕业设计

mapreduce对mysql中的小说数据集进行数据清洗，转为.csv文件上传至hdfs文件系统；3.根据.csv文件结构，使用hive建库建表；4.一半分析指标使用hive_sql完成，一半分析指标使用Spark-Scala
计算机毕业设计大神·2024-02-05 14:48

Exception in thread “main“ java.lang.NoSuchMethodError: com.google.comon.base.Preconditions.checkArg

hadoop-3.1.3hbase-2.2.2-bin一、问题描述：在学习林子雨老师编写的《Spark编程基础》时使用如下命令运行jar包读取HBase时出现如下错误：Exceptioninthread
学习BigData·2024-02-05 13:01

用传统文化濡养心灵——记西安高科的诗词朗诵大赛

为了进一步贯彻落实党的十八大精神,弘扬中华优秀文化，加强师生思想道德建设,6月26日晚上，西安高科职业技术学院师生在教学楼欢聚一堂，举办“中华情诗文朗诵大赛”总决赛，以此庆祝党的生日，通过中华情诗文朗诵表达对党的热爱和美好的祝愿
轻描淡写_3c8d·2024-02-05 13:40

【SparkML实践7】特征选择器FeatureSelector

本节介绍了用于处理特征的算法，大致可以分为以下几组：提取（Extraction）：从“原始”数据中提取特征。转换（Transformation）：缩放、转换或修改特征。选择（Selection）：从更大的特征集中选择一个子集。局部敏感哈希（LocalitySensitiveHashing,LSH）：这类算法结合了特征转换的方面与其他算法。FeatureSelectorsVectorSlicerVe
周润发的弟弟·2024-02-05 12:41

Spark 依赖包加载方式

1Spark依赖包来源我们知道Sparkapplication运行加载依赖有三个地方：systemClasspath：Spark安装时候提供的依赖包，${SPARK_HOME}/jars下的包。
大数据AI·2024-02-05 12:11

使用PySpark处理DataFrame以拆分数组列

问题：用pyspark处理df1,df1有三列，第一列是商品pid,第二列是商品name,第三列是候选标品cid_list(有多个cid),将df1中的cid_list拆开,转换成一个商品id和name
samoyan·2024-02-05 12:41

Spark的JVM调优

目录导致gc因素内存不充足的时候，出现的问题降低cache操作的内存占比调节executor堆外内存与连接等待时长调节executor堆外内存调节连接等待时长SparkJVM参数优化设置Sparkstreaming
王一1995·2024-02-05 10:55

Hadoop3.x单机安装教程

以最小化的成本学习和测试Hadoop；搭建基于Hadoop的上层应用，比如单机Spark环境需要先拥有单机的Hadoop；如果需要搭建分布式集群环境的Hadoop环境，请参考另外一篇：Hadoop3.x
文景大大·2024-02-05 10:06

2021年“ 艺汇百家 · 乾坤百家杯”全国书画艺术大赛获奖名单公布！

获奖名单2021年“乾坤百家杯”全国书画艺术大赛（线上人气评选环节）已圆满结束，恭喜以下获奖的参赛选手，感谢每一位参赛选手及书画爱好者对艺汇百家一直以来的信任与支持！
现代名家书画·2024-02-05 10:54

[qtp581715564-18] ERROR spark.http.matching.GeneralError - org.neo4j.driver.exceptions.ResultConsum

今天使用java连接neo4j执行查询的时候遇到了这个问题，报错如下：[qtp581715564-18]ERRORspark.http.matching.GeneralError-org.neo4j.driver.exceptions.ResultConsumedException
路过Coder·2024-02-05 09:36

趣头条Spark Remote Shuffle Service最佳实践

1.业务场景与现状趣头条是一家依赖大数据的科技公司，在2018-2019年经历了业务的高速发展，主App和其他创新App的日活增加了10倍以上，相应的大数据系统也从最初的100台机器增加到了1000台以上规模。多个业务线依赖于大数据平台展开业务，大数据系统的高效和稳定成了公司业务发展的基石，在大数据的架构上我们使用了业界成熟的方案，存储构建在HDFS上、计算资源调度依赖Yarn、表元数据使用Hiv
阿里云技术·2024-02-05 09:29

SparkSql读取外部Hql文件的公共类开发

SparkSql读取外部Hql文件的公共类开发SparkSQL与Hive的区别简介一、什么是SparkSQL？
岁月的眸·2024-02-05 09:27

在 CDH 中调优 Apache Hive on Spark

Spark上的Hive在提供相同功能的同时提供比MapReduce上的Hive更好的性能。在Spark上运行Hive不需要更改用户查询。
海阔天空&沫语·2024-02-05 09:27

Spark Shuffle Service简介与测试

Spark管理资源有两种方式：静态资源分配和动态资源分配。静态资源分配：spark提交任务前，指定固定的资源，在spark运行任务过程中，一直占用这些资源不释放，job运行结束后才会释放。
大数据AI·2024-02-05 09:26

CDH6.3.2 多 Spark 版本共存

一部署Spark客户端1.1部署spark3客户端tar-zxvfspark-3.3.1-bin-3.0.0-cdh6.3.2.tgz-C/opt/cloudera/parcels/CDH/libcd/
大数据AI·2024-02-05 09:56

大数据-Spark调优（一）

大数据-Spark调优（一）分配更多的资源分配更多的资源是性能优化调优的王道，就是增加和分配更多的资源，这对于性能和速度上的提升是显而易见的，基本上，在一定范围之内，增加资源与性能的提升，是成正比的；写完了一个复杂的
海恋北斗星·2024-02-05 09:29

大数据笔记--Spark（第五篇）

目录一、Spark的调优1、更改序列化为kryo2、配置多临时文件目录3、启动推测执行机制4、某些特定场景，用mapPartitions代替map5、避免使用collect二、Spark的共享变量1、广播变量
是小先生·2024-02-05 09:59

大数据 - Spark系列《三》- 加载各种数据源创建RDD

Spark系列文章：大数据-Spark系列《一》-从Hadoop到Spark：大数据计算引擎的演进-CSDN博客大数据-Spark系列《二》-关于Spark在Idea中的一些常用配置-CSDN博客目录3.1
王哪跑nn·2024-02-05 09:28

大数据原理-Spark

概述：基于内存计算三大分布式计算系统：Hadoop、Spark、Storm特点：采用有向无环图DAG作业调度运行速度快循环数据流容易使用：可以通过SparkShell交互式编程用途：SQL查询、流式计算
monster++·2024-02-05 09:28

大数据 - Spark系列《四》- Spark分布式运行原理

Spark系列文章：大数据-Spark系列《一》-从Hadoop到Spark：大数据计算引擎的演进-CSDN博客大数据-Spark系列《二》-关于Spark在Idea中的一些常用配置-CSDN博客大数据
王哪跑nn·2024-02-05 08:54

Windows系统运行pyspark报错：Py4JJavaError

运行pyspark时出现以下错误---------------------------------------------------------------------------Py4JJavaErrorTraceback
赫桃·2024-02-05 07:25

pyspark报错TypeError: an integer is required (got type bytes)

安装配置pyspark，计算时报错如下：UsingSpark'sdefaultlog4jprofile:org/apache/spark/log4j-defaults.propertiesSettingdefaultloglevelto"WARN
helluy·2024-02-05 07:23

pyspark报错：ValueError: object of IntegerType out of range

背景：pyspark任务中，调用了udf处理数据，并使用了链接:pyspark并行调用udf函数的方式，报错如上。但是在python中很少遇到整型越界问题。
leap_ruo·2024-02-05 07:53

Python调用pyspark报错整理

Pycharm配置了SSH服务器和Anaconda的python解释器，如果没有配置可参考大数据单机学习环境搭建(8)Linux单节点Anaconda安装和Pycharm连接Pycharm执行的脚本执行如下pyspark_model.py
赫加青空·2024-02-05 07:52

基于hadoop+spark的大规模日志的一种处理方案

而且CDN上的访问日志一般都非常大，需要用大数据处理架构来进行处理，本文描述了一种利用hadoop+spark来处理大量CDN日志的方法，当然本方
码农心语·2024-02-05 06:36

“你看街头直播那个男生火了”“摩登兄弟吗？！”

开始在抖音走红后我都没有怎么去关注到他，真正了解到他的时候是他参加完我是歌手大赛后。那一场比赛他是没有成功的，我在电视上看到他的时候已经结束了，他走出赛场看到那么多人支持他的音乐梦想，然后就哭了。
阿东的喵·2024-02-05 06:22

Flink实时流计算入门系列——广播变量使用

Flink和Spark一样，都有支持广播变量这定义。广播变量，可以理解成为日常的广播，是一个公共的变量。广播变量创建后，它可以运行在集群中的任何function上，而不需要多次传递给集群节
晨冉1688·2024-02-05 06:19

2018 年全国职业院校技能大赛高职组“信息安全管理与评估”赛项任务书（笔记解析）

1.网络拓扑图2.IP地址规划表3.设备初始化信息阶段一任务1：网络平台搭建1、根据网络拓扑图所示，按照IP地址参数表，对WAF的名称、各接口IP地址进行配置。2、根据网络拓扑图所示，按照IP地址参数表，对DCRS的名称、各接口IP地址进行配置。3、根据网络拓扑图所示，按照IP地址参数表，对DCFW的名称、各接口IP地址进行配置。4、根据网络拓扑图所示，按照IP地址参数表，对DCSW的各接口IP地
何辰风·2024-02-05 05:26

2017 年全国职业院校技能大赛高职组“信息安全管理与评估”赛项任务书（笔记解析）

1.网络拓扑图2.IP地址规划表3.设备初始化信息阶段一任务1：网络平台搭建1根据网络拓扑图所示，按照IP地址参数表，对WAF的名称、各接口IP地址进行配置。主机名称模式选择：透明模式IP地址：匹配参数表WAFIP地址子网掩码网口列表：eth0和eth12根据网络拓扑图所示，按照IP地址参数表，对DCRS的名称、各接口IP地址进行配置。3根据网络拓扑图所示，按照IP地址参数表，对DCFW的名称、各
何辰风·2024-02-05 05:25

「构」向云端征文大赛 ｜开发者利器： 从Amazon CodeWhisperer 到 Amazon Q

#「构」向云端，构建者征文大赛#re:Invent2023带来的全新技术风向标。在本次大会期间，我们举行了「构」向云端，构建者征文大赛，邀请构建者们一同提笔畅想生成式AI与云碰撞的无限可能。
亚马逊云开发者·2024-02-05 05:52

#木成原创#哲之辩9-人工智能与人类本身的博弈

从阿法狗在围棋界大放异彩开始，人工智能的自我学习能力与量子计算的方式，出现在人们眼前，最近又在《最强大脑》节目中看到机器人“小度”参加脑王大赛，分别展示了人工只能对视觉，记忆，听觉等范畴的惊人表现。
配音木成·2024-02-05 04:41

班主任培训：专业能力大赛

她讲的内容有两块：班主任专业能力大赛和师生沟通。我一直都对班主任专业能力大赛有很强烈的兴趣。我不太敢参加，因为觉得很难，我的表现不会好，但是我又很想参加，想要通过比赛来提高自己的专业能力。
纪莞宁·2024-02-05 03:07

2022-09-26 历史上的今天

2006年，核不扩散努力遭遇重大挫折；2006年，潘基文就任联合国秘书长；2000年，境内外国人宗教活动管理规定实施细则发布；1998年，国际小姐选美大赛在东京举行；1997年，印尼A300客机失事；1997
玉石儿·2024-02-05 03:32

计算机设计大赛 深度学习 机器视觉 车位识别车道线检测 - python opencv

0前言优质竞赛项目系列，今天要分享的是深度学习机器视觉车位识别车道线检测该项目较为新颖，适合作为竞赛课题方向，学长非常推荐！学长这里给一个题目综合评分(每项满分5分)难度系数：3分工作量：3分创新点：4分更多资料,项目分享：https://gitee.com/dancheng-senior/postgraduate简介你是不是经常在停车场周围转来转去寻找停车位。如果你的车辆能准确地告诉你最近的停车
iuerfee·2024-02-05 02:55

计算机设计大赛 深度学习 植物识别算法系统

文章目录0前言2相关技术2.1VGG-Net模型2.2VGG-Net在植物识别的优势(1)卷积核，池化核大小固定(2)特征提取更全面(3)网络训练误差收敛速度较快3VGG-Net的搭建3.1Tornado简介(1)优势(2)关键代码4InceptionV3神经网络4.1网络结构5开始训练5.1数据集5.2关键代码5.3模型预测6效果展示6.1主页面展示6.2图片预测6.3三维模型可视化7最后0前言
iuerfee·2024-02-05 02:55

计算机设计大赛 深度学习 大数据 股票预测系统 - python lstm

文章目录0前言1课题意义1.1股票预测主流方法2什么是LSTM2.1循环神经网络2.1LSTM诞生2如何用LSTM做股票预测2.1算法构建流程2.2部分代码3实现效果3.1数据3.2预测结果项目运行展示开发环境数据获取最后0前言优质竞赛项目系列，今天要分享的是深度学习大数据股票预测系统该项目较为新颖，适合作为竞赛课题方向，学长非常推荐！学长这里给一个题目综合评分(每项满分5分)难度系数：3分工作量
iuerfee·2024-02-05 02:25

创新大赛专访丨德至杰机电荣膺2023年度数字化创新服务卓越品牌：至力企业数据驱动 促进运营绩效卓杰

日前，2023第三届全国人力资源创新大赛颁奖典礼暨成果展圆满举行。
lsrsyx·2024-02-05 02:21

创新大赛专访丨南沙人才荣膺2023年度人才寻猎标杆品牌：吸纳海内外高学历人才，助力南沙精准“选苗”

日前，2023第三届全国人力资源创新大赛颁奖典礼暨成果展圆满举行。
lsrsyx·2024-02-05 02:21

创新大赛专访丨善世集团荣膺2023年度卓越雇主品牌：筑巢引凤，贯彻“人才是第一资源”理念，以人才驱动企业增长

日前，2023第三届全国人力资源创新大赛颁奖典礼暨成果展圆满举行。
lsrsyx·2024-02-05 02:20

晨间日记11.20

上午开会，校长在诗词大赛的感受不太好，反思之后责任到人，交流的人数可能有变，还有他去晋城的感受等等。同步进行的还有志慧的课，又讲了一次，得到三位老师的肯定。看来是准备好了。
雨荷_6fdb·2024-02-05 01:44

HIVE

--------hive数据仓库hive底层执行引擎有MapReduceTezSpark压缩GZIPLZOSnappyBZIP2等存储TextFileSequenceFileRCFileORCParquetUDF
Yagami_·2024-02-05 00:23

战神；第四章，在外的历练（泰宁篇）

第一节：古怪的马赛大师在龙级班大赛结束后，泰宁是最倒霉的那个，直接被马赛给生拉硬拽走了，也就是开庆祝会的时候露了面，然后整整消失了3年，秦岚刚也是让泰宁不必担心，只要在马赛那里呆够3年直接就算是历练任务完成了
启焰·2024-02-04 23:03
上一页 11 12 13 14 15 16 17 18 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他