spark面试题

Spark之PySpark

PySpark是ApacheSpark的PythonAPI，它允许开发者使用Python编程语言进行大规模数据处理和分析。
james二次元·2025-02-27 18:01

HTML专题之语义化

前言石匠敲击石头的第3次有一道经典的前端面试题：如何理解HTML语义化？如果让我自己回答，我会说语义化会让HTML代码更利于维护，并且有利于SEO的优化。
·2025-02-27 17:39

pandas series 相加_Numpy和Pandas教程

-pandas的DataFrame结构和大家在大数据部分见到的spark中的DataFrame非常类似。目录-numpy速成-Series-Da
weixin_39778393·2025-02-27 16:49

大模型最新面试题系列：深度学习基础（二）

21.解释模型容量与过拟合的关系，如何在理论上平衡两者？模型容量与过拟合的关系模型容量指的是模型能够学习的复杂模式的能力，通常与模型的参数数量、网络结构的复杂度等相关。过拟合是指模型在训练数据上表现很好，但在未见过的测试数据上表现不佳。当模型容量较低时，模型可能无法学习到数据中的复杂模式，导致欠拟合，即在训练集和测试集上的表现都较差。随着模型容量的增加，模型能够学习到更复杂的模式，在训练集上的表现
人肉推土机·2025-02-27 15:08

进BAT必懂：大厂高频八股文面试题及参考答案（6万字长文）

目录解释Java中的自动装箱和拆箱机制，并举例说明。自动装箱与拆箱机制注意事项简述Java中的异常处理机制，包括try-catch-finally结构的使用。异常处理机制谈谈Java中的访问修饰符（public、private、protected、default）的作用范围和使用场景。访问修饰符使用场景什么是Java的注解？列举一些常见的注解并说明其用途。Java注解常见注解描述Java中的对象克
大模型大数据攻城狮·2025-02-27 10:34

Redis面试题----为什么要做Redis分区？

Redis分区，也称为分片（Sharding），是将数据分散存储到多个Redis实例上的一种策略。做Redis分区主要有以下几个方面的原因：扩展性突破单机内存限制：随着业务的发展，数据量会不断增大，而单个Redis实例的内存是有限的。通过分区可以将数据分散到多个Redis实例中，理论上可以不受单机内存的限制，从而存储更多的数据。例如，一个电商平台的商品缓存数据量巨大，单台Redis服务器无法容纳，
指尖下的技术·2025-02-27 08:54

Redis面试题----MySQL 里有 2000w 数据，Redis 中只存 20w 的数据，如何保证 Redis 中的数据都是热点数据？

要保证Redis中存储的20w数据都是热点数据，可以从数据筛选和数据淘汰两个大的方面来考虑，以下是详细的实现思路和方法：数据筛选1.基于业务规则分析业务场景：不同的业务场景有不同的热点数据特征。例如，在电商系统中，热门商品、促销商品往往是热点数据；在新闻资讯系统中，最新发布、阅读量高的新闻是热点数据。根据业务的特点，确定热点数据的规则。定期同步：编写脚本或程序，根据业务规则从MySQL中筛选出符合
指尖下的技术·2025-02-27 08:24

Java 设计模式面试题

说一下开发中需要遵守的设计原则？设计模式中主要有六大设计原则，简称为SOLID，是由于各个原则的首字母简称合并的来(两个L算一个,solid稳定的)，六大设计原则分别如下：1、单一职责原则单一职责原则的定义描述非常简单，也不难理解。一个类只负责完成一个职责或者功能。也就是说在类的设计中我们不要设计大而全的类,而是要设计粒度小、功能单一的类。比如我们设计一个类里面既包含了用户的一些操作,又包含了支付
code36·2025-02-27 08:52

Python常见面试题的详解13

1.以下X是什么类型X=(iforiinrange(10))要点在Python中，变量的类型取决于其赋值的对象。下面代码中的(iforiinrange(10))是一个生成器表达式。生成器表达式是一种简洁的创建生成器的方式，它类似于列表推导式，但使用圆括号而非方括号。生成器是一种特殊的迭代器，它不会一次性生成所有的值，而是在需要时逐个生成，这在处理大量数据时可以节省内存。pythonX=(ifori
ylfhpy·2025-02-27 07:47

2020年Python最新面试题（四）：爬虫基础知识

目录1.什么是爬虫?2.爬虫的基本流程有哪些?3.Request中包含了哪些内容?4.Response中包含了哪些内容5.HTTP请求中的POST、GET有什么区别?6.HTTP、HTTPS协议有什么区别?7.Cookie和Session有什么区别？8.域名和IP之间有什么关系?如何查看某个域名对应的IP地址?9.在HTTP协议头中，keep-alive字段有什么作用?10.HTTP常用的状态码(
Amo Xiang·2025-02-27 07:17

Python常见面试题的详解7

1.内置的数据结构有哪几种Python中有多种内置的数据结构，主要分为以下几种：1.1数值类型整数（int）：用于表示整数，没有大小限制。例如：1,-5,100。浮点数（float）：用于表示小数。例如：3.14,-0.5。复数（complex）：由实部和虚部组成，虚部以j或J结尾。例如：3+4j。1.2序列类型字符串（str）：由零个或多个字符组成的不可变序列。例如："hello"。列表（lis
ylfhpy·2025-02-27 07:17

Python常见面试题的详解10

1.哪些操作会导致Python内存溢出，怎么处理？要点1.创建超大列表或字典：当我们一次性创建规模极为庞大的列表或字典时，会瞬间占用大量的内存资源。例如，以下代码试图创建一个包含10亿个元素的列表，在执行这段代码时，由于需要为这10亿个整数分配内存空间，很容易就会导致内存溢出错误。pythonhuge_list=[iforiinrange(10**9)]2.递归深度过大：递归函数在没有正确设置终止
ylfhpy·2025-02-27 07:17

Python常见面试题的详解11

1.函数调用参数的传递方式是值传递还是引用传递？要点在Python中，参数传递方式既不是纯粹的值传递，也不是纯粹的引用传递，而是“对象引用传递”。本质上传递的是对象引用的副本，对于不可变对象，函数内修改参数不会影响原对象；对于可变对象，函数内修改参数可能会影响原对象。python#不可变对象作为参数（类似值传递）defmodify_immutable(num):num=num+1returnnum
ylfhpy·2025-02-27 07:17

Java集合设计模式面试题

Java集合设计模式面试题迭代器模式Q1:Java集合框架中的迭代器模式是如何实现的？迭代器模式提供了一种统一的方式来访问集合中的元素，而不需要暴露集合的内部结构。
夜游猿·2025-02-27 06:35

Python常见面试题的详解23

1.存储过程与触发器有什么区别要点定义用途：存储过程是预编译SQL语句集合，存于数据库，含逻辑控制和变量，用于特定业务，可被调用；触发器是特殊存储过程，特定数据库事件触发，用于数据完整性和审计。调用方式：存储过程需显式调用；触发器由事件自动触发，不可显式调用。参数传递：存储过程可接收输入输出参数；触发器通常无显式参数，基于触发事件表数据操作。存储过程和触发器在数据库中扮演着不同但又重要的角色。存储
ylfhpy·2025-02-27 06:34

华为MRS产品组件

MRS提供租户完全可控的一站式企业级大数据集群云服务（全栈大数据平台），轻松运行Hadoop、Spark、HBase、Kafka、Storm等大数据组件。
QianJin_zixuan·2025-02-27 06:59

Hive SQL 使用及进阶详解

Hive将SQL查询转换为MapReduce、Tez或Spark等分布式计算任务，使得不熟悉Java编程的数据分析人员也能方便地处理大规模数据。二、HiveSQL基础使用（一）环境准备在
小四的快乐生活·2025-02-27 03:37

网络安全常见面试题--含答案

本文面试题汇总：防范常见的Web攻击重要协议分布层arp协议的工作原理rip协议是什么？rip的工作原理什么是RARP？工作原理OSPF协议？
网络安全-杰克·2025-02-27 02:00

JVM 高级面试题及答案整理，最新面试题

JVM中的垃圾收集器有哪些，它们的工作原理是什么？JVM中的垃圾收集器主要包括以下几种：1、Serial收集器：它是一个单线程收集器，工作时会暂停所有其他工作线程（"Stop-The-World"），它的优点是简单高效（与其他收集器的单线程比），适用于单核处理器的环境。2、ParNew收集器：可以看作是Serial收集器的多线程版本，主要用于新生代的垃圾收集，适合多核处理器环境。3、Paralle
扫地僧009·2025-02-27 02:59

Spring Boot 面试题及答案整理，最新面试题

SpringBoot中的自动配置是如何工作的？SpringBoot的自动配置是其核心特性之一，它通过以下方式工作：1、@EnableAutoConfiguration注解：这个注解告诉SpringBoot开始查找添加了@Configuration注解的类，并自动配置它们。当应用启动时，SpringBoot会扫描项目依赖中的jar包，寻找包含spring.factories文件的项目。2、条件注解：
扫地僧009·2025-02-27 02:56

Spring Cloud 面试题及答案整理，最新面试题

SpringCloud中断路器的原理及其作用是什么？SpringCloud断路器的原理和作用基于以下几个关键点：1、故障隔离机制：在微服务架构中，断路器作为一种故障隔离机制，当某个服务实例出现问题时，断路器会“断开”这个实例，防止故障蔓延到其他服务。2、快速失败机制：当断路器打开时，对该服务的调用将会快速失败而不是等待，从而避免资源浪费和延迟。3、服务降级：在断路器打开时，可以为用户提供备选的响应
扫地僧009·2025-02-27 02:56

Spring MVC 面试题及答案整理，最新面试题

SpringMVC中的DispatcherServlet是什么，它如何工作？DispatcherServlet是SpringMVC中的核心组件，负责协调不同的请求处理器。它的工作流程包括：1、请求接收：接收HTTP请求，并将其转发到相应的处理器。2、处理器映射：根据请求查找合适的Controller。3、调用适当的处理器：执行处理器逻辑并返回ModelAndView对象。4、视图渲染：将Model
扫地僧009·2025-02-27 02:26

C++八股（面试题、手撕题）自用版

目录面试题：1.defineinline在编译的哪个阶段2.conststatic3.子函数返回结构体有什么问题，返回对象调用了哪些函数4.volatile关键字5.编译器基本原理6.预处理、编译、汇编
为了找工作开始抱佛脚·2025-02-27 01:18

腾讯面试：大厂必问消息队列场景面试题

今天，我将那些大厂必问的消息队列的场景问题为大家整理出来,本文将跟大家一起来探讨如何回答这些问题。为什么要使用消息队列？保证消息有序，一个topic只能有一个partition吗？(消息顺序)业务突然增长，导致消息消费不过来怎么办？(消息积压)生产者收到写入成功响应后消息一定不会丢失吗？(消息丢失)高并发场景下怎么保证消息不会重复消费？(重复消费)如何保证消息的可靠性？各大消息队列中间件对比及使用
·2025-02-26 19:57

Java面试题总结之Spring高频面试题

一、题目:谈谈你对Spring框架的理解1.Spring是一个开源框架，主要是为简化企业级应用可开发而生，可以实现EJB可以实现的功能，Spring是一个IOC和AOP容器框架。①控制反转(IOC):Spring容器使用了工厂模式为我们创建了所需要的对象，我们使用时不需要自己去创建，直接调用Spring为我们提供的对象即可，这就是控制反转的思想②依赖注入(DI):Spring使用JavaBean对
程恤·2025-02-26 17:27

spring security面试题

1、springsecurity所谓的全局上下文是如何实现的？ThreadLocal2、了解springsecurity哪些核心组件，并介绍？AuthenticationManagerBuilder@Configuration@EnableWebSecuritypublicclassWebSecurityConfigextendsWebSecurityConfigurerAdapter{@Over
「已注销」·2025-02-26 17:56

Java集合性能优化面试题

Java集合性能优化面试题初始化优化Q1:如何优化集合的初始化？
夜游猿·2025-02-26 17:24

腾讯SQL面试题变体实现：最长连续天数与允许1天中断的进阶解法

腾讯SQL面试题变体实现：最长连续天数与允许1天中断的进阶解法作者：某七年数据开发工程师|2025年02月23日关键词：滑动窗口、容错机制、连续区间优化一、变体题型需求分析在原题如何找出连续5天涨幅超过
数据大包哥·2025-02-26 17:22

2024腾讯最新面经总结：面试题库+实战笔记（附答案解析）

20、你们用过缓存吗没有，但是用redis做了分布式锁21、你说说下分布式锁怎么做的？分布式锁也是一个锁，需要满足几个特性，1可重入2可以识别加锁的身份防止ABA问题3考虑是否需要续约key是所需要加上的锁的业务资源唯一编码，value是当前线程的uuid，uuid存在threadLocal内加锁的时候用的jedis，先设一个过期时间，然后用ex，若不存在key则添加新key，若已经存在则直接失败
2401_84048521·2025-02-26 17:22

21个MongoDB经典面试题

1、什么是MongoDB？MongoDB是一个文档数据库，提供好的性能，领先的非关系型数据库。采用BSON存储文档数据。BSON（）是一种类json的一种二进制形式的存储格式，简称BinaryJSON.相对于json多了date类型和二进制数组2、MySQL与MongoDB之间最基本的差别是什么?MySQL和MongoDB两者都是免费开源的数据库。MySQL和MongoDB有许多基本差别包括数据的
程序员麦冬·2025-02-26 16:14

MongoDB 面试题及答案整理，最新面试题

MongoDB中索引的工作原理及其类型MongoDB中索引的工作原理类似于传统数据库，用于加速查询操作。索引存储着文档的一个小部分字段，并按照这些字段的排序顺序进行组织。常见的索引类型包括：1、单字段索引：最基本的索引类型，只对文档中的一个字段进行索引。2、复合索引：对文档中的多个字段进行组合索引，可以支持对这些字段的查询操作。3、多键索引：用于数组字段，为数组中的每个元素创建索引项。4、全文索引
孙恒阳·2025-02-26 16:11

Java 算法和数据结构 答案整理，最新面试题

Java中如何使用动态规划求解背包问题？1、定义子问题：首先确定动态规划状态，通常以物品数量和背包容量为变量定义子问题，例如dp[i][j]表示前i件物品放入容量为j的背包所能获得的最大价值。2、确定状态转移方程：基于是否选择当前物品，将问题分为两个子问题，即dp[i][j]=max(dp[i-1][j],dp[i-1][j-weight[i]]+value[i])，表示选择当前物品和不选择当前物
扫地僧009·2025-02-26 13:54

数据仓库面试题集锦（附答案和数仓知识体系），面试必过

3、如何构建数据仓库？数据仓库模型的选择是灵活的，不局限与某种模型方法；数据仓库数据是灵活的，以实际需求场景为导向；数仓设计要兼顾灵活性、可扩展性、要考虑技术可靠性和实现成本1）调研：业务调研、需求调研、数据调研2）划分主题域：通过业务调研、需求调研、数据调研最终确定主题域3）构建总线矩阵、维度建模总线矩阵：把总线架构列表形成矩阵形式，行表示业务处理过程，即事实，列表示一致性的维度，在交叉点上打上
m0_60635001·2025-02-26 13:20

Elasticsearch 相关面试题

1.Elasticsearch基础Elasticsearch是什么？Elasticsearch是一个分布式搜索引擎，基于Lucene实现。Mapping是什么？ES中有哪些数据类型？Mapping：定义字段的类型和属性。数据类型：text、keyword、integer、float等。2.什么是全文检索？全文检索是一种基于文本内容的检索方式。3.ES支持哪些类型的查询？全文查询：match、que
一切顺势而行·2025-02-26 12:47

腾讯PHP经典面试题（附答案）

腾讯PHP经典面试题（附答案）PHP开发工程师笔试试卷姓名:PHP一、PHP开发部分1．合并两个数组有几种方式，试比较它们的异同答：1、array_merge()2、’+’3、array_merge_recursivearray_merge
事业运财运爆棚·2025-02-26 11:06

深入探索Spark MLlib：大数据时代的机器学习利器

ApacheSpark作为大数据处理的利器，其内置的机器学习库MLlib（MachineLearningLibrary）提供了一套高效、易用的工具，用于处理和分析海量数据。
concisedistinct·2025-02-26 10:59

前端开发岗模拟面试题套卷A答案及解析（一）技术面部分

前端开发岗模拟面试题套卷A答案及解析（一）技术面部分（一）技术面一、JavaScript核心技术（ES6+）1-1、实现防抖函数functiondebounce(fn,delay){lettimer=null
向贤·2025-02-26 09:28

微信小程序面试题

微信小程序面试题微信小程序页面的生命周期函数主要包括哪些？onLoad:页面加载时触发。一个页面只会调用一次，可以在onLoad的参数中获取打开当前页面路径中的参数。onShow:页面显示时触发调用。
Sunshinedada·2025-02-26 09:28

Node.js定义以及性能优化

以下是一些常见的Node.js面试题及其解答，帮助你准备面试：1.什么是Node.js？
Sunshinedada·2025-02-26 09:55

Java 的 JDK 8,11,17,21 新特性 ，最新面试题

JDK8中lambda表达式的引入有什么意义？JDK8中引入的lambda表达式标志着Java对函数式编程范式的支持。这一新特性有以下几个重要意义：1、代码更简洁：使用lambda表达式可以用更少的代码实现相同的功能，尤其是在使用匿名内部类的地方。2、增强集合库的功能：通过引入StreamAPI，lambda表达式使得对集合进行序列化操作变得更加简单和高效。3、提高编程效率：lambda表达式使得
扫地僧009·2025-02-26 08:20

java题库app有什么,Java面试题库

Java面试题库是一个学习刷题类软件，主要针对Java从业者设计，整合了众多基础的题目资源，涵盖面试中可能会遇到的各种出题内容；软件使用功能非常简单，上面就设置了题库和搜索等中心，打开软件就能看到其中各种不同的题目划分栏目
m0_74824091·2025-02-26 08:46

Android面试题-多线程(99题)

Android面试题之多线程，包括线程、Java同步问题、阻塞队列、线程池、AsyncTask、HandlerThread、IntentService等内容。
猎羽·2025-02-26 08:44

Java基础常见面试题及详细答案（总结40个）

最近看到网上流传着各种面试经验及面试题，往往都是一大堆技术题目贴上去，但是没有答案。为此我业余时间整理了40道Java基础常见的面试题及详细答案，望各路大牛发现不对的地方不吝赐教，留言即可。
java梅洛·2025-02-26 08:14

java字符串热点面试题

为什么Java中的String是不可变的？这种设计有什么好处？1.为什么String是不可变的？在Java中，String被设计为不可变类，这意味着一旦创建了一个String对象，它的内容（即char[]数组中的字符）就不能被修改。这种设计是通过以下方式实现的：String类的内部使用一个final的char[]数组来存储字符数据。final修饰符确保了数组引用不会被重新赋值。所有修改字符串的操作
WangYaolove1314·2025-02-26 08:44

前端面试题---vue和react的区别

文章目录框架vs库：学习曲线：模板vsJSX：数据绑定：状态管理：性能：社区支持：框架vs库：Vue是一个完整的框架，提供了从模板到状态管理的全套解决方案；React是一个UI库，主要聚焦于构建用户界面，其他功能依赖第三方库。学习曲线：Vue的语法更简洁，易于上手，适合初学者；React使用JSX，结合了JavaScript和HTML，学习曲线较陡。模板vsJSX：Vue使用类似HTML的模板语法
*星之卡比*·2025-02-26 06:02

Spark Streaming 容错机制详解

SparkStreaming是Spark生态系统中用于处理实时数据流的模块。它通过微批处理（micro-batch）的方式将实时流数据进行分片处理，每个批次的计算本质上是Spark的批处理作业。
goTsHgo·2025-02-26 04:20

Spark提交任务

1、Spark提交任务到Yarn1.1、DwKuduAppspark-submit--classcom.io.etl.dwkudu.DwKuduApp\--files/etl/etl-dwkudu/conf
docsz·2025-02-26 04:50

如何使用GraphX在Spark中进行图计算

GraphX是ApacheSpark的一个图计算框架，它允许开发者在分布式环境中进行大规模的图数据处理和分析。
python资深爱好者·2025-02-26 04:19

在Spark中如何配置Executor内存以优化性能

在Spark中，配置Executor内存以优化性能是一个关键步骤。
python资深爱好者·2025-02-26 04:19

面试技巧|软件测试面试题八股文-数据库题库

可以根据面试题来展开学习相关知识点，会让你进步得更快。关系型数据库和非关系型数据库的区别？
软件测试雪儿·2025-02-26 04:48
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他