spark毕设

Spark——Spark/Hive向量化查询执行原理分析（Vectorization Query Execution）

文章目录什么是向量化查询执行列式存储Spark向量化查询执行Hive向量化查询执行参考什么是向量化查询执行在标准的查询执行系统中，每次只处理一行数据，每次处理都要走过较长的代码路径和元数据解释，从而导致
Southwest-·2024-01-28 08:47

Spark——Spark缓存临时视图（View）

文章目录RDD/Dataset缓存复用纯SQL结果缓存复用RDD/Dataset缓存复用我们知道在使用RDD和DatasetAPI开发Spark应用程序的时候，如果要缓存某个RDD或Dataset来进行复用
Southwest-·2024-01-28 08:47

Spark——Spark DataFrame导出为Excel文件

文章目录问题背景实现1.Maven依赖2.代码实现3.参数详解1.'sheet_name'!B3:C35。2.sheet_name[#All]参考问题背景有时候我们在进行一些表的计算之后，会生成一些指标，需要导出来给其它同事用，虽说可以将DataFrame直接写成表，然后通过工具(比如Hue)导出为Excel，但是步骤就多了，而且如果要导出的表比较多的话，就更浪费时间了，那么这时候调用第三方插件就
Southwest-·2024-01-28 08:17

Spark —— JSON对象/数组转成Spark Dataset/DataFrame

JSON转DataFrame在日常使用Spark处理数据时,半结构化的JSON数据(JSONObject,JSONArray)可能是最常见的一种数据结构，那么能熟练并快速地处理JSON格式数据应该是数据开发人员的必备技能
Southwest-·2024-01-28 08:16

Spark——Spark读写MongoDB

文章目录Spark直连MongoDB1.通过SparkConf2.通过ReadConfig3.通过DataFrameReaderHive中创建映射表mongoexport导出文件参考如果我们要想通过Spark
Southwest-·2024-01-28 08:46

Spark——Spark读写Greenplum/Greenplum-Spark Connector高速写Greenplum

文章目录问题背景解决方式代码实现Spark写GreenplumSpark读Greenplum参考问题背景通过数据平台上的DataX把Hive表数据同步至Greenplum（因为DataX原生不支持GreenplumWriter
Southwest-·2024-01-28 08:42

Hive之set参数大全-18

指定在执行Spark上的动态分区裁剪时，用于评估分区数据大小的最大限制在Hive中，hive.spark.dynamic.partition.pruning.max.data.size是一个配置参数，用于指定在执行
OnePandas·2024-01-28 07:33

hive面试题

本质上是将SQL转换为MapReduce或者spark来进行计算，数据是存储在hdfs上，简单理解来说hive就是MapReduce的一个客户端工具。补充1：你可以说一下HQL转换为MR的任务流程吗？
韩顺平的小迷弟·2024-01-28 07:29

大数据——Flink 知识点整理

目录1.Flink的特点2.Flink和SparkStreaming的对比3.Flink和Blink、Alink之间的关系4.JobManager和TaskManager的职责5.Flink集群部署有哪些模式
Vicky_Tang·2024-01-28 06:17

毕设分享javaWeb的图书销售管理系统的设计与实现

今天向大家分享一个今年(2022)最新完成的毕业设计项目作品，毕设分享javaWeb的图书销售管理系统的设计与实现学长根据实现的难度和等级对项目进行评分(最低0分，满分5分)难度系数：3分工作量：3分创新点
Lee-web·2024-01-28 04:21

springboot132公司日常考勤系统

简介【毕设源码推荐javaweb项目】基于springboot+vue的适用于计算机类毕业设计，课程设计参考与学习用途。仅供学习参考，不得用于商业或者非法用途，否则，一切后果请用户自负。
CV工程师HYJones·2024-01-28 01:31

springboot133在线课程管理系统

简介【毕设源码推荐javaweb项目】基于springboot+vue的适用于计算机类毕业设计，课程设计参考与学习用途。仅供学习参考，不得用于商业或者非法用途，否则，一切后果请用户自负。
CV工程师HYJones·2024-01-28 01:31

Apache Spark架构与特点

1.背景介绍ApacheSpark是一个开源的大数据处理框架，由AMLLabs公司开发，后被Apache软件基金会所支持。
OpenChat·2024-01-27 23:35

3月13日——准备省考58天

省考倒计时36天4月18日今天完成了：1.考虫：申论、判断回顾课2.粉笔：专项突破【判断和言语】71%3.毕设：修改PPT，进行了二次修改4.看2019年四川省政府工作报告5.墨墨背单词打卡总结：1.自己还需要加强锻炼
Der浩研途漫漫·2024-01-27 23:50

Spark-core

什么是SparkSpark是基于内存的快速，通用，可扩展的大数据分析引擎Spark的内置模块SparkCore是Spark可以离线处理的部分，实现了spark的基本功能，包含任务调度，错误恢复，与存储系统交互等模块
luckboy0000·2024-01-27 23:12

独家解读 | 滴滴机器学习平台架构演进之路

所谓大同是指大家所要处理的问题都相似，技术架构和选型也差不太多，比如都会使用GPU集群、采用Spark或K8s平台等。
csdn产品小助手·2024-01-27 19:18

apache 前30个开源项目

高性能Web服务器提供HTTP服务支持非常活跃2ApacheTomcatJava应用服务器部署JavaWeb应用程序非常活跃3ApacheHadoop分布式存储和计算框架大数据处理非常活跃4ApacheSpark
临水逸·2024-01-27 17:35

如何使用irsa将火花提交给亚马逊eks集群

Inpreviousarticle,IhaveintroducedhowwesubmitaSparkjobtoanEKScluster.Aslongaswe’reusingotherAWScomponentsforourpipelinestointeract
weixin_26755331·2024-01-27 15:26

springboot/java/php/node/python电子产品销售及报修系统【计算机毕设】

本系统（程序+源码）带文档lw万字以上文末可领取本课题的JAVA源码参考系统程序文件列表系统的选题背景和意义选题背景：随着科技的飞速发展，电子产品已经成为我们日常生活中不可或缺的一部分。从手机、电脑到家用电器，电子产品的种类繁多，为我们的生活带来了极大的便利。然而，随着电子产品市场的不断扩大，消费者在购买和使用过程中遇到的问题也日益增多。如何有效地解决这些问题，提高消费者的满意度和忠诚度，已经成为
python-毕设程序设计·2024-01-27 15:02

springboot/java/php/node/python基于VUE电脑城摊位出租系统【计算机毕设】

本系统（程序+源码）带文档lw万字以上文末可领取本课题的JAVA源码参考系统程序文件列表系统的选题背景和意义选题背景：在当今信息化快速发展的时代，传统的电脑城摊位出租管理模式面临着种种挑战。过去依赖人工管理、纸质记录的方式已经难以满足现代化经营的需求，存在效率低下、信息不透明、管理混乱等问题。随着互联网技术的不断进步，特别是前端框架如Vue.js的流行，开发一个基于Web的电脑城摊位出租系统变得可
php-毕业源码设计·2024-01-27 15:01

springboot/java/php/node/python电子病历系统【计算机毕设】

本系统（程序+源码）带文档lw万字以上文末可领取本课题的JAVA源码参考系统程序文件列表系统的选题背景和意义选题背景：随着信息技术的飞速发展，医疗行业正经历着一场前所未有的数字化转型。电子病历系统作为这一转型的核心组成部分，其重要性日益凸显。传统的纸质病历记录方式因其易损坏、难以共享和检索等缺点，已经无法满足现代医疗服务的需求。电子病历系统的出现，不仅改变了医疗信息的记录、存储和传递方式，还极大地
php-毕业源码设计·2024-01-27 15:01

springboot/java/php/node/python智能法律管理系统【计算机毕设】

本系统（程序+源码）带文档lw万字以上文末可领取本课题的JAVA源码参考系统程序文件列表系统的选题背景和意义选题背景：随着科技的飞速发展，人工智能技术逐渐渗透到各个领域，为人们的生活带来了极大的便利。在法律领域，智能法律管理系统作为一种新兴的技术手段，正逐渐成为提高法律服务质量和效率的重要途径。智能法律管理系统通过运用大数据、云计算、自然语言处理等先进技术，实现对海量法律信息的快速检索、分析和推荐
php-毕业源码设计·2024-01-27 15:31

springboot/java/php/node/python服装销售管理系统【计算机毕设】

本系统（程序+源码）带文档lw万字以上文末可领取本课题的JAVA源码参考系统程序文件列表系统的选题背景和意义选题背景：随着科技的不断发展和人们生活水平的提高，服装行业已经成为了一个庞大的市场。在这个市场中，服装销售管理系统作为一种有效的管理工具，对于提高企业的经营效率、降低成本、提高客户满意度等方面具有重要意义。然而，目前市场上的服装销售管理系统功能单一，无法满足企业日益增长的需求。因此，开发一款
php-毕业源码设计·2024-01-27 15:31

springboot/java/php/node/python基于springboot的检察院卷宗系统【计算机毕设】

本系统（程序+源码）带文档lw万字以上文末可领取本课题的JAVA源码参考系统程序文件列表系统的选题背景和意义选题背景：随着信息技术的飞速发展，传统的检察院卷宗管理方式已经难以满足现代司法工作的需求。在数字化、网络化、智能化的大背景下，检察院作为国家法律监督机关，其工作效率和质量直接关系到司法公正和社会法治的实施。因此，构建一个基于springboot的检察院卷宗系统显得尤为重要。Springboo
php-毕业源码设计·2024-01-27 15:31

springboot/java/php/node/python在线药品销售系统【计算机毕设】

本系统（程序+源码）带文档lw万字以上文末可领取本课题的JAVA源码参考系统程序文件列表系统的选题背景和意义选题背景：随着互联网技术的不断发展和普及，电子商务已经成为了人们生活中不可或缺的一部分。在这个背景下，药品行业也逐渐开始尝试将传统的线下销售模式转变为线上销售模式。在线药品销售系统作为一种新型的药品销售渠道，通过互联网技术为消费者提供便捷、安全、高效的购药服务。这种销售模式不仅可以降低药品流
计算机专业毕设程序·2024-01-27 15:30

springboot/java/php/node/python网上购物系统【计算机毕设】

本系统（程序+源码）带文档lw万字以上文末可领取本课题的JAVA源码参考系统程序文件列表系统的选题背景和意义选题背景：随着互联网的快速发展和普及，电子商务成为了人们购物的主要方式之一。而在电子商务领域中，网上购物系统是最常见和广泛应用的一种形式。SpringBoot作为一种快速开发框架，具有简化配置、高效开发和易于维护等优势，因此在构建网上购物系统时，选择使用SpringBoot是一个明智的决策。
艺馨程序设计·2024-01-27 15:29

springboot/java/php/node/python网上书城系统【计算机毕设】

本系统（程序+源码）带文档lw万字以上文末可领取本课题的JAVA源码参考系统程序文件列表系统的选题背景和意义选题背景：随着互联网的快速发展，电子商务成为了人们购物的主要方式之一。而在电子商务领域中，网上书城系统作为一个重要的组成部分，为用户提供了便捷的图书购买和阅读体验。然而，传统的网上书城系统存在着一些问题，如界面设计不够友好、搜索功能不够智能、推荐算法不够准确等，这些问题严重影响了用户的使用体
艺馨程序设计·2024-01-27 15:29

springboot/java/php/node/python鲜花销售系统app【计算机毕设】

本系统（程序+源码）带文档lw万字以上文末可领取本课题的JAVA源码参考系统程序文件列表系统的选题背景和意义选题背景：随着社会的发展和人们生活水平的提高，鲜花作为一种重要的礼品和装饰品，越来越受到人们的喜爱和需求。传统的鲜花销售方式存在着时间成本高、空间限制大以及信息不对称等问题，无法满足现代消费者对于便捷、多样化和个性化购物体验的需求。因此，建立一个高效、智能的鲜花销售系统具有重要的现实意义。选
艺馨程序设计·2024-01-27 15:29

springboot/java/php/node/python网上订餐系统【计算机毕设】

本系统（程序+源码）带文档lw万字以上文末可领取本课题的JAVA源码参考系统程序文件列表系统的选题背景和意义选题背景：随着互联网的快速发展和人们生活水平的提高，网上订餐系统在现代社会中扮演着越来越重要的角色。传统的电话订餐方式已经无法满足人们对于便捷、高效的需求，而网上订餐系统则能够提供更加方便、快捷的订餐体验。特别是在繁忙的都市生活中，人们常常没有时间亲自到餐厅用餐，而通过网上订餐系统可以轻松选
艺馨程序设计·2024-01-27 15:59

springboot/java/php/node/python网上评教系统【计算机毕设】

本系统（程序+源码）带文档lw万字以上文末可领取本课题的JAVA源码参考系统程序文件列表系统的选题背景和意义选题背景和意义是指在设计和开发Springboot网上评教系统时，为什么选择这个特定的主题，并且它对于用户和系统的重要性。以下是针对该选题的500字选题背景和意义的描述：选题背景：随着信息技术的快速发展，传统的纸质评教方式逐渐无法满足高校评教的需求。纸质评教存在很多问题，如评教结果难以及时统
艺馨程序设计·2024-01-27 15:59

springboot/java/php/node/python远航药品销售系统【计算机毕设】

本系统（程序+源码）带文档lw万字以上文末可领取本课题的JAVA源码参考系统程序文件列表系统的选题背景和意义选题背景：随着社会的发展和科技的进步，药品行业作为人类健康的重要保障，其市场规模和影响力日益增强。然而，药品销售过程中的一些问题也逐渐显现出来，如信息不对称、流通环节复杂、监管难度大等。这些问题不仅影响了药品的销售效率，也对消费者的权益构成了威胁。因此，如何通过科技手段，提高药品销售的效率和
花儿゛程序设计·2024-01-27 15:58

springboot/java/php/node/python网上招聘系统【计算机毕设】

本系统（程序+源码）带文档lw万字以上文末可领取本课题的JAVA源码参考系统程序文件列表系统的选题背景和意义选题背景：随着互联网的快速发展和信息技术的广泛应用，网上招聘成为了现代企业人力资源管理中不可或缺的一部分。传统的招聘方式存在着时间成本高、效率低、信息不对称等问题，而网上招聘系统通过利用互联网和信息技术的优势，能够实现招聘流程的自动化、信息的全面共享和招聘效果的追踪评估，极大地提高了招聘的效
花儿゛程序设计·2024-01-27 15:28

springboot/java/php/node/python网上物流系统【计算机毕设】

本系统（程序+源码）带文档lw万字以上文末可领取本课题的JAVA源码参考系统程序文件列表系统的选题背景和意义选题背景：随着电子商务的快速发展，物流行业也面临着巨大的挑战和机遇。传统的物流管理方式已经无法满足日益增长的物流需求，而现代化的物流系统成为了提高效率、降低成本、提升用户体验的关键。在这样的背景下，开发一款基于SpringBoot框架的网上物流系统具有重要的意义。意义：网上物流系统可以实现物
花儿゛程序设计·2024-01-27 15:28

springboot/java/php/node/python杂志销售系统【计算机毕设】

本系统（程序+源码）带文档lw万字以上文末可领取本课题的JAVA源码参考系统程序文件列表系统的选题背景和意义选题背景：在当今社会，杂志作为一种传统的媒体形式，仍然在人们的生活中占据着重要的地位。无论是新闻、时尚、科技还是娱乐，杂志都能为读者提供丰富的信息和知识。然而，随着互联网的发展，电子阅读已经成为了主流，传统的纸质杂志销售面临着巨大的挑战。为了适应这种变化，许多杂志出版商开始寻求新的销售方式，
花儿゛程序设计·2024-01-27 15:28

springboot/java/php/node/python网上租车系统【计算机毕设】

本系统（程序+源码）带文档lw万字以上文末可领取本课题的JAVA源码参考系统程序文件列表系统的选题背景和意义选题背景：随着城市化进程的加快和交通工具的普及，汽车已经成为人们生活中不可或缺的一部分。然而，拥有一辆私家车也带来了一系列的问题，例如高昂的购买成本、停车位紧张、维修保养等。因此，越来越多的人开始倾向于租赁汽车来满足出行需求，这也催生了网上租车系统的发展。意义：网上租车系统作为一种新型的汽车
花儿゛程序设计·2024-01-27 15:58

springboot/java/php/node/python电子产品网上销售系统【计算机毕设】

本系统（程序+源码）带文档lw万字以上文末可领取本课题的JAVA源码参考系统程序文件列表系统的选题背景和意义选题背景：随着互联网技术的飞速发展和普及，电子商务已经成为了全球范围内的一种重要的商业模式。在这个背景下，电子产品网上销售系统应运而生，为消费者提供了一个便捷、高效的购物平台。电子产品网上销售系统是指通过互联网技术，将电子产品的生产、流通、销售等环节整合在一起，实现电子产品的在线交易和管理的
php-毕业源码设计·2024-01-27 15:57

springboot/java/php/node/python零食销售系统【计算机毕设】

本系统（程序+源码）带文档lw万字以上文末可领取本课题的JAVA源码参考系统程序文件列表系统的选题背景和意义选题背景：随着社会的发展和人们生活水平的提高，零食消费逐渐成为人们日常生活中不可或缺的一部分。传统的零食销售方式已经无法满足人们多样化、个性化的需求。因此，建立一个现代化的零食销售系统，能够更好地满足消费者的需求，提供更便捷、多样化的购物体验，具有重要的意义。意义：零食销售系统的建立将推动零
灵动 程序设计·2024-01-27 15:57

医技预约系统预约功能中的部分逻辑记录

毕设系统要做一个医技预约系统，在核心功能实现过程中，有一部分描述如下：用户在为患者预约检查的过程中，要求并非所有项目都可选择；只能预约那些时间在今日以后且已经人为安排了预约时段的检查项目。
霍格沃茨研究生·2024-01-27 14:50

Java项目：SSM框架基于spring+springmvc+mybatis实现的心理预约咨询管理系统（ssm+B/S架构+源码+数据库+毕业论文）

一、项目简介本项目是一套ssm823基于SSM框架的心理预约咨询管理系统，主要针对计算机相关专业的正在做毕设的学生与需要项目实战练习的Java学习者。
飞翔的佩奇·2024-01-27 14:00

Pyspark分类--LogisticRegression

LogisticRegression：逻辑回归分类classpyspark.ml.classification.LogisticRegression(featuresCol=‘features’,labelCol
Gadaite·2024-01-27 14:53

搭建大数据平台常用的端口号

journalnode默认的端口号9000：非高可用访问数rpc端口8020：高可用访问数据rpc8088：yarn的webUI的端口号8080：master的webUI，Tomcat的端口号7077：spark
修勾勾L·2024-01-27 13:51

Spark连接Hive的两种方式

一、使用hive-site.xml第一步：将集群中的hive-site.xml的内容复制出来，并放在idea项目的resources下，要求文件命名为：hive-site.xmldatanucleus.schema.autoCreateAlltruejavax.jdo.option.ConnectionURLjdbc:mysql://192.168.38.160:3306/hive_db?crea
修勾勾L·2024-01-27 13:50

项目中常用的utils

importcryptofrom'crypto'importSparkMD5from'spark-md5'importCryptoJsfrom'crypto-js'importJSEncryptfrom'jsencrypt'importstoragefrom
乐夫天命兮·2024-01-27 13:05

计算机毕业设计系列基于SpringBoot+Vue的校园招聘系统

项目截图四、源码获取一、项目介绍计算机毕业设计系列基于SpringBoot+Vue的校园招聘系统本项目是一款基于springboot、vue、myql实现的企业招聘管理系统，主要针对计算机相关专业的正在做毕设的学生与需要项目实战练习的
大钟聊编程·2024-01-27 13:04

springboot/java/php/node/python红色文化展示网站【计算机毕设】

本系统（程序+源码）带文档lw万字以上文末可领取本课题的JAVA源码参考系统程序文件列表系统的选题背景和意义选题背景：红色文化，作为中国特有的历史文化现象，承载着革命先辈的理想信念、英雄事迹和崇高精神。它起源于中国共产党领导的长期革命和建设过程，不仅包括了物质层面的革命遗址、文物，还包括了非物质文化遗产如革命歌曲、口号、故事等。随着时代的发展，红色文化不断丰富和发展，成为弘扬民族精神、培育社会主义
python-毕设程序设计·2024-01-27 12:34

springboot/java/php/node/python儿童听读书网站【计算机毕设】

本系统（程序+源码）带文档lw万字以上文末可领取本课题的JAVA源码参考系统程序文件列表系统的选题背景和意义选题背景：在数字时代，儿童的学习和娱乐方式正在经历着翻天覆地的变化。互联网不仅为孩子们提供了无限的知识资源，也为他们打开了一个全新的学习窗口。随着科技的进步和智能设备的普及，有声读物逐渐成为了一种新兴的学习工具。儿童听读书网站的出现，便是这一变革的直接产物。这类网站专门针对儿童群体，提供丰富
python-毕设程序设计·2024-01-27 12:34

springboot/java/php/node/python电子政务网的设计与实现【计算机毕设】

本系统（程序+源码）带文档lw万字以上文末可领取本课题的JAVA源码参考系统程序文件列表系统的选题背景和意义选题背景：随着信息技术的迅猛发展，特别是互联网技术的广泛应用，电子政务已经成为全球政府改革和信息化建设的重要趋势。电子政务网作为政府信息公开、服务提供和决策支持的平台，其设计与实现对于提升政府工作效率、增强政务透明度、优化公共服务具有深远的影响。在数字化时代背景下，公民对政府服务的便捷性、高
python-毕设程序设计·2024-01-27 12:34

springboot/java/php/node/python超时代停车场管理平台【计算机毕设】

本系统（程序+源码）带文档lw万字以上文末可领取本课题的JAVA源码参考系统程序文件列表系统的选题背景和意义选题背景：随着科技的不断发展和城市化进程的加快，汽车已经成为人们出行的主要工具。然而，随之而来的是城市停车难的问题日益严重，给人们的生活带来了诸多不便。传统的停车场管理方式已经无法满足现代社会的需求，因此，研究并开发一种超时代的停车场管理平台显得尤为重要。这种平台应该具备智能化、自动化、信息
python-毕设程序设计·2024-01-27 12:04

springboot/java/php/node/python大学生兼职平台【计算机毕设】

本系统（程序+源码）带文档lw万字以上文末可领取本课题的JAVA源码参考系统程序文件列表系统的选题背景和意义选题背景：在当今社会，大学生兼职已经成为一种普遍现象。随着经济的发展和社会的进步，大学生的就业压力越来越大，他们需要通过兼职来提高自己的实践能力和社会经验，以便更好地适应社会和找到满意的工作。同时，许多企业和个人也愿意雇佣大学生兼职，因为他们年轻、有活力、有创新精神，能够为企业带来新的活力和
python-毕设程序设计·2024-01-27 12:58

flume+kafka+SparkStreaming+mysql+ssm+高德地图热力图项目

第一步、编写python脚本，产生模拟数据#coding=UTF-8importrandomimporttimephone=["13869555210","18542360152","15422556663","18852487210","13993584664","18754366522","15222436542","13369568452","13893556666","1536669855
printf200·2024-01-27 12:24
上一页 19 20 21 22 23 24 25 26 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他