大数据后端spark

【Gateway】网关服务快速上手

针对以上问题，一个常用的解决方案就是使用API网关1.什么是API网关API网关(简称网关)也是一个服务,通常是后端
小小小小关同学·2024-09-14 02:10

如何利用命令模式实现一个手游后端架构?

命令模式的原理解读命令模式的英文翻译是CommandDesignPattern。在GoF的《设计模式》一书中，它是这么定义的：Thecommandpatternencapsulatesarequestasanobject,therebylettingusparameterizeotherobjectswithdifferentrequests,queueorlogrequests,andsuppo
隔窗听雨眠·2024-09-14 02:09

前后端分离，Asp.net core webapi 如何配置跨域

前言可以说，前后端分离已经成为当今信息系统项目开发的主流软件架构模式，微服务的出现，让前后端分离发展更是迅速，大量优秀的前端框架如vue.js、react的出现，也让前后端分离趋势加快。
代码掌控者·2024-09-13 23:53

前端大文件上传

大文件上传是需要前端和后端同时参与才可以实现的。
没资格抱怨·2024-09-13 23:22

前端文件上传总结

设置form的aciton为后端页面，enctype="multipart/form-data"，type=‘post’提交使用input选择文件，设置好其他input的值，点击提交，将文件数据及签名等认证信息发送到
小小小小小小拉松·2024-09-13 23:52

每日踩坑之 前后端时间格式转换

时间格式转换1.在后台进行格式处理今天在做管理员显示用户信息的时候发现，数据库里面保存的Date类取出后的格式是这样的：MonMar0911:36:53CST2020。我们都知道平时显示的时间格式都是2020-03-0911:36:53，而这个显示的是Date类默认格式。原模原样的返回给用户看肯定是不行的。话不多说，上代码：Datedate=newDate();SimpleDateFormatsd
孤心人·2024-09-13 23:49

前端有关文件上传下载操作

文件上传文件上传有两种形式（传给后端的文件形式）变成blob通过formData搭载传输（二进制blob传输）转为base64直接传输(简便，但是后端需要解码，时间长)，通过fileReader搭载相关对象
发呆小天才yy·2024-09-13 22:16

springmvc 前后端日期格式的转换

1.后台Date类型返回前端String类型@JsonFormat(pattern="yyyy-MM-ddHH:mm:ss",timezone="GMT+8")它的作用是，出参时，自动把Date型对象数据转化成格式化后的字符串输出:yyyy-MM-ddHH:mm:ss示例：@JsonFormat(pattern="yyyy-MM-ddHH:mm:ss",timezone="GMT+8")priva
owlets_ju·2024-09-13 22:16

计算机毕业设计选题推荐-基于Python框架项目推荐（中）

博主介绍：✌十余年IT大项目实战经验、在某机构培训学员上千名、专注于本行业领域✌技术范围：Java实战项目、Python实战项目、微信小程序/安卓实战项目、爬虫+大数据实战项目、Nodejs实战项目、PHP
计算机毕设大佬·2024-09-13 22:14

前后端时间转换的那些常见问题及处理方法

在现代的Web开发中，前后端分离的架构已经成为主流，尤其是在SpringBoot和Vue.js的组合中。开发者在这种架构下经常遇到的一个问题就是如何处理时间的转换和显示。
繁依Fanyi·2024-09-13 21:13

记一次生产环境大面积404问题！

经过排查，发现前端调用后端接口时，部分接口出现404的现象。今天，我到公司比较晚，肯定是哪个小伙伴昨晚下班，走出办公室前没有祈祷服务器不要出问题。要把这个人揪出来，吊在服务器上——祭天！
冰河团队·2024-09-13 20:59

使用Spring Boot开发一个准妈妈交流平台

系统设计：设计系统架构，包括前端、后端、数据库和可能的第三方服务集成。2.技术选型前端：可以选择React、Vue或Angular等现代JavaScript框架。
BABA8891·2024-09-13 19:34

Rust：重塑编程世界的利器，对前端开发的深远影响

它不仅在后端领域展现出强大的实力，更在前端领域带来了颠覆性的变革。本文将带你深入了解Rust的魅力，探讨其独特的优势，以及Rust如何影响前端开发，并通过案例分析展示Rust在前端应用的实力。
大鱼前端·2024-09-13 19:30

Vue + Django的人脸识别系统

后端使用了drf，识别知识刚开始打算使用opencv+tensorflow,但是发现吧识别以后的结果返回到浏览器当中时使用opencv比较麻烦（主要是我太菜，想不到比较好的方法），因此最终使用了tf
DXSsssss·2024-09-13 19:28

VBA 把Excel表当做一个大数据库来操作

VBA把Excel表当做一个大数据库来操作SubSqlQueryBJD(strBillNoAsString)DimstrSqlAsStringDimarrCol()AsStringDimstrLineWhereDimarrWhere
码猩·2024-09-13 18:52

RAG与LLM原理及实践(16)---RAG 前端技术Flask-socketIO

目录背景技术理念RAG结合点实时数据更新与推送实时查询与响应安装使用完整案例说明后端python代码代码解释前端html代码JS代码代码解释总结背景构建RAG系统或别的系统时，如果后端采用的全Python
PhoenixAI8·2024-09-13 17:18

【乐吾乐大屏可视化组态编辑器】API接口文档（pgsql）

API接口文档（pgsql）在线使用：https://v.le5le.com/采用前后端分离架构，乐吾乐后端服务提供一整套完整的web组态编辑器的所有数据接口，包含2D/3D图纸接口服务、文件接口服务和用户接口服务等
乐吾乐科技·2024-09-13 15:03

后端Controller获取成功，但是前端报错404

问题描述今天要做一个查看详情功能，debug时候能够成功进入到对应的Controller方法，Contorller方法里面也能得到对应的数据，但是前端页面一直报错404，显示对应的Controller方法路径找不到。解决Controller方法里面返回的是一个对象，但是我没有在该方法上加@ResponseBody注解。
有一个好名字·2024-09-13 14:59

淘宝购物攻略,省钱技巧大揭秘!

很早之前就已经开始实行网购返利，但还是有那么一部分人不愿意相信，戒备心的驱使下网购一直都是原价，但用大数据告诉你淘宝一年返利好几亿，就我本人一个月返利都好几百，特别是在双十一那种电商节的时候返利提现上千很容易
测评君高省·2024-09-13 14:31

Python基础知识进阶之正则表达式_头歌python正则表达式进阶

知识体系：含编程语言、算法、大数据生态圈组件（Mysql、Hive、Spark、Flink）、数据仓库、Python、前端等等。网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是
前端陈萨龙·2024-09-13 13:50

【计算机毕设-大数据方向】基于Hadoop的电商交易数据分析可视化系统的设计与实现

博主介绍：✌全平台粉丝5W+,高级大厂开发程序员，博客之星、掘金/知乎/华为云/阿里云等平台优质作者。【源码获取】关注并且私信我【联系方式】最下边感兴趣的可以先收藏起来，同学门有不懂的毕设选题，项目以及论文编写等相关问题都可以和学长沟通，希望帮助更多同学解决问题前言随着电子商务行业的迅猛发展，电商平台积累了海量的数据资源，这些数据不仅包括用户的基本信息、购物记录，还包括用户的浏览行为、评价反馈等多
程序员-石头山·2024-09-13 13:19

分布式离线计算—Spark—基础介绍

原文作者：饥渴的小苹果原文地址：【Spark】Spark基础教程目录Spark特点Spark相对于Hadoop的优势Spark生态系统Spark基本概念Spark结构设计Spark各种概念之间的关系Executor
测试开发abbey·2024-09-13 11:11

第十章 【后端】环境准备（10.6）——Redis

10.6RedisRedis尚未在Windows上得到正式支持，推荐Docker安装Redis。下载镜像文件dockerpullredis创建实例并启动mkdir-p/mydata/redis/conftouch/mydata/redis/conf/redis.confdockerrun-p6379:6379--nameredis--restart
yu玉米mi·2024-09-13 11:10

spark常用命令

查看报错日志：yarnlogsapplicationIDspark2-submit--masteryarn--classcom.hik.ReadHdfstest-1.0-SNAPSHOT.jar进入$SPARK_HOME
我是浣熊的微笑·2024-09-13 10:38

spark启动命令

hadoop启动：cd/root/toolssstart-dfs.sh，只需在hadoop01上启动stop-dfs.sh日志查看：cat/root/toolss/hadoop/logs/hadoop-root-datanode-hadoop03.outzookeeper启动：cd/root/toolss/zookeeperbin/zkServer.shstart，三台都要启动bin/zkServ
学不会又听不懂·2024-09-13 10:36

【大数据】如何读取多个Excel文件并计算列数据的最大求和值

导语：在数据分析和处理中，我们经常需要从多个Excel文件中提取数据并进行计算。本文将带您通过一个实用的Python教程，学习如何读取D盘目录下特定文件夹内的多个Excel文件，并计算特定列数据的最大求和值。文章目录一、准备工作二、教程步骤1.导入必要的库2.设置文件路径3.获取Excel文件列表4.选择文件5.初始化最大求和值6.指定求和的列索引7.读取Excel文件并计算列求和8.输出结果三、
熬夜的王·2024-09-13 10:04

大数据领域的深度分析——AI是在帮助开发者还是取代他们？

在大数据领域，生成式人工智能（AIGC）的应用正在迅速扩展，改变了数据科学家和开发者的工作方式。本文将从大数据的专业视角，探讨AI工具在这一领域的作用，以及它们是如何帮助开发者而非取代他们的。
阳爱铭·2024-09-13 09:32

用户登陆网址都发生了什么？

用户从网址登录到查询后端服务，中间涉及多个步骤，每个步骤都有特定的功能和设计考量。以下是一个详细的描述，涵盖了从用户请求到后端服务响应的全过程。1.用户请求步骤：用户在浏览器中输入URL并按下回车。
阳爱铭·2024-09-13 09:32

python实现模糊逻辑_基于Python的大数据集模糊逻辑

我的团队一直致力于在两个大数据集上运行模糊逻辑算法。第一个(子集)大约是180K行，包含我们需要在第二个(超集)中匹配的人的姓名、地址和电子邮件。超集包含250万条记录。
takeiiii·2024-09-13 09:00

大数据新视界 --大数据大厂之 Spark 性能优化秘籍：从配置到代码实践

亲爱的朋友们，热烈欢迎你们来到青云交的博客！能与你们在此邂逅，我满心欢喜，深感无比荣幸。在这个瞬息万变的时代，我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客，正是这样一个温暖美好的所在。在这里，你们不仅能够收获既富有趣味又极为实用的内容知识，还可以毫无拘束地畅所欲言，尽情分享自己独特的见解。我真诚地期待着你们的到来，愿我们能在这片小小的天地里共同成长，共同进步。本博客的精华专栏：Ja
青云交·2024-09-13 08:25

大数据新视界--大数据大厂之MySQL数据库课程设计：MySQL集群架构负载均衡方法选择全攻略（2-2）

亲爱的朋友们，热烈欢迎你们来到青云交的博客！能与你们在此邂逅，我满心欢喜，深感无比荣幸。在这个瞬息万变的时代，我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客，正是这样一个温暖美好的所在。在这里，你们不仅能够收获既富有趣味又极为实用的内容知识，还可以毫无拘束地畅所欲言，尽情分享自己独特的见解。我真诚地期待着你们的到来，愿我们能在这片小小的天地里共同成长，共同进步。本博客的精华专栏：Ja
青云交·2024-09-13 08:25

大数据新视界 --大数据大厂之Flink强势崛起：大数据新视界的璀璨明珠

亲爱的朋友们，热烈欢迎你们来到青云交的博客！能与你们在此邂逅，我满心欢喜，深感无比荣幸。在这个瞬息万变的时代，我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客，正是这样一个温暖美好的所在。在这里，你们不仅能够收获既富有趣味又极为实用的内容知识，还可以毫无拘束地畅所欲言，尽情分享自己独特的见解。我真诚地期待着你们的到来，愿我们能在这片小小的天地里共同成长，共同进步。本博客的精华专栏：Ja
青云交·2024-09-13 08:50

【深入剖析】Kylin架构全景及其组件详解

标题：【深入剖析】Kylin架构全景及其组件详解ApacheKylin是一个开源的分布式分析引擎，提供大数据集上的即时分析能力。它通过预计算技术，将数据以多维立方体的形式存储，从而加快查询速度。
2401_85763639·2024-09-13 08:50

Spring项目:文字花园（三）

一.实现博客详情1.后端逻辑代码controller层添加方法（根据博客id查看博客详情）@RequestMapping("/getBlogDetail")publicResultgetBlogDetail
小李同学_LHY·2024-09-13 06:41

Java学习之路：实践项目与进阶学习--创建一个图书管理系统

项目结构后端:使用Java和SpringBoot实现RESTfulAPI。数据库:使用H2数据库进行书籍信息存储。（也可使用mysql数据库设计，详情可参考：《MySQL数据库课程设计
Dreams°123·2024-09-13 04:54

使用Spring Boot来开发一个准妈妈交流平台

-**后端服务**：处理业务逻辑。-**数
MAMA6681·2024-09-13 03:16

编程常用命令总结

编程命令大全1.软件环境变量的配置JavaScalaSparkHadoopHive2.大数据软件常用命令Spark基本命令Spark-SQL命令Hive命令HDFS命令YARN命令Zookeeper命令
Yellow0523·2024-09-13 02:42

从底层原理上理解ClickHouse 中的稀疏索引

这种索引的核心思想是通过减少需要扫描的数据范围来加速查询，特别适用于大数据量场景。1.基本概念：数据存储与索引在理解稀疏索引之前，首先需要理解ClickHouse的列式存储
goTsHgo·2024-09-13 02:09

Springboot2 thymeleaf 静态资源加版本号控制缓存更新

最近写了一个前后端不分离的项目了，用的Springboot2thymeleaf用的js原生，没有用到webpack，所以不能在每次js变更以后打包自动给静态文件加上hash后缀关于静态资源缓存不更新的问题
VIAE·2024-09-12 22:46

ECharts地图-自定义26(大数据量散点图、地图飞线效果)

代码视频讲解：ECharts地图-自定义26_哔哩哔哩_bilibiliECharts地图-自定义26
图表制作解说·2024-09-12 20:03

Python爬虫入门实战：抓取CSDN博客文章

一、前言在大数据时代，网络上充斥着海量的信息，而爬虫技术就是解锁这些信息宝库的钥匙。Python，以其简洁易读的语法和强大的库支持，成为编写爬虫的首选语言。
A Bug's Code Journey·2024-09-12 20:03

【面试系列】Spark 高频面试题解答

⭐️大数据平台建设指南：全面讲解从数据采集到数据可视化的整个过程，掌握构建现代化数据平台的核心技术和方法。⭐️《遇见Python：初识、了解与热恋》：涵盖了Pytho
野老杂谈·2024-09-12 18:52

spark常见面试题

文章目录1.Spark的运行流程？2.Spark中的RDD机制理解吗？3.RDD的宽窄依赖4.DAG中为什么要划分Stage？
爱敲代码的小黑·2024-09-12 18:51

Peewee的基本使用

背景：刚接触大数据工作，要核对大量的接口返回数据的准确性验证工作，由于数据字典在编写sql的时候查看很不方便，而且对现有数据接口不是很清楚且表、字段数据量多且短时间内无法烂熟于心，给予此背景，简单的整理了一下
不曾驻足·2024-09-12 18:20

Spark面试题

Spark面试题1.Spark基础概念1.1解释Spark是什么以及它的主要特点Spark是什么？
golove666·2024-09-12 18:19

图计算：基于SparkGrpahX计算聚类系数

图计算：基于SparkGrpahX计算聚类系数文章目录图计算：基于SparkGrpahX计算聚类系数一、什么是聚类系数二、基于SparkGraphX的聚类系数代码实现总结一、什么是聚类系数聚类系数（ClusteringCoefficient
妙龄少女郭德纲·2024-09-12 18:16

vue进阶——整合富文本编辑器wangEditor

wangEditor1.React2.Vue23.Vue34.CDN三、基本使用1.vue22.vue3四、文件上传问题1、前端重点在于editorConfig中fileName及server的配置2、后端重点在于返回类型及文件大小配置五
秋书一叶·2024-09-12 16:39

收藏！打造高质量技术文章的 8 个技巧

今天给大家分享打造高质量技术文章的8个技巧，由零售技术后端开发工程师孟冬同学所总结。帮助大家提升文章的质量，激发大家的写作热情，共同推动技术交流与知识传播的进程。
京东零售技术·2024-09-12 15:03

2022-04-17

NatBiotech|组织中单细胞转录组的空间图谱原创图灵基因图灵基因2022-04-1707:03收录于话题#前沿生物大数据分析单细胞RNA测序（scRNA-seq）已经彻底改变了单细胞水平上的基因表达研究
图灵基因·2024-09-12 15:12

在 Vue 2 中使用 Axios 发起 POST 和 GET 请求

在Vue2应用中，Axios可以帮助我们轻松地与后端API进行通信。本文将介绍如何在Vue2项目中引入Axios，并使用它来发起POST和GET请求。
Jarvis Downey·2024-09-12 15:30
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他