大数据面试

大数据面试题（四）：Yarn核心高频面试题

文章目录Yarn核心高频面试题一、简述Hadoop1与Hadoop2的架构异同二、为什么会产生yarn，它解决了什么问题，有什么优势？三、HDFS的数据压缩算法？及每种算法的应用场景？1、gzip压缩2、Bzip2压缩3、Lzo压缩4、Snappy压缩四、Hadoop的调度器总结五、Mapreduce推测执行算法及原理Yarn核心高频面试题一、简述Hadoop1与Hadoop2的架构异同加入了ya
Lansonli·2022-12-18 22:40

人工智能与大数据面试指南——Python

分类目录：《人工智能与大数据面试指南》总目录《人工智能与大数据面试指南》系列下的内容会持续更新，有需要的读者可以收藏文章，以及时获取文章的最新内容。
von Neumann·2022-12-14 10:19

大数据面试3分钟自我介绍_通用面试两分钟自我介绍范文5篇

通用面试两分钟自我介绍范文5篇面试两分钟自我介绍范文(一)各位考官好，今天能够站在这里参加面试，有机会向各位考官请教和学习，我感到非常的荣幸。希望通过这次面试能够把自己展示给大家，希望大家记住我。我叫xxx，今年xx岁。汉族，法学本科。我平时喜欢看书和上网浏览信息。我的性格比较开朗，随和。能关系周围的任何事，和亲人朋友能够和睦相处，并且对生活充满了信心。我以前在检察院实习过，所以有一定的实践经验。
weixin_39887531·2022-12-13 10:17

大数据面试题

hadoop面试100道收集（带答案）标签：hadoop面试2016-04-2700:283993人阅读评论(0)收藏举报本文章已收录于：.embody{padding:10px10px10px;margin:0-20px;border-bottom:solid1px#ededed;}.embody_b{margin:0;padding:10px0;}.embody.embody_t,.embod
unity_kw_do·2022-12-04 00:48

2021-03大数据面试题

Java:1.类加载器机制，都有哪些类加载器2.解释SPI3.GC算法、cms和g1收集流程、GCRoots4.synchronized和reenrantLock的区别5.synchronized的锁升级过程，什么情况下会由cas升级到重量级锁6.什么情况下会oom和stackOverFlow7.什么情况下会FullGC8.什么情况下对象会进入老年代9.ConcurrentHashMap原理10.
xianbin.yang·2022-11-29 16:37

大数据面试题（五）：Hadoop优化核心高频面试题

文章目录Hadoop优化核心高频面试题一、Mapreduce跑的慢的原因？1、计算机性能2、I/O操作优化二、Mapreduce优化方法1、数据输入2、map阶段3、reduce阶段4、IO传输5、数据倾斜问题6、常用的调优参数三、HDFS小文件优化方法1、HDFS小文件弊端2、解决方案3、CombineFileInputFormat4、开启JVM重用四、MapReduce怎么解决数据均衡问题，如
Lansonli·2022-11-29 16:30

flink学习总结（大数据面试）

Flink概述Flink是一个开源的流处理框架，应用于分布式、高性能、高可用的数据流应用程序。可以处理有限数据流和无限数据，即能够处理有边界和无边界的数据流。无边界的数据流就是真正意义上的流数据，所以Flink是支持流计算的。有边界的数据流就是批数据，所以也支持批处理的。不过Flink在流处理上的应用比在批处理上的应用更加广泛，统一批处理和流处理也是Flink目标之一。Flink可以部署在各种集群
404个问号·2022-11-29 15:14

【先收藏，早晚用得到】49个Flink高频面试题系列（一）

【先收藏，早晚用得到】49个Flink高频面试题系列（一）持续分享有用、有价值、精选的优质大数据面试题致力于打造全网最全的大数据面试专题题库一.你在开发Flink任务时，有没有遇到过背压问题，你是如何排查的
大数据研习社·2022-11-29 15:13

大数据面试题_数据仓库篇

文章目录大数据面试题_数据仓库篇离线数据仓库1、为什么要对数据仓库分层？2、数据建模用的哪些模型？3、你感觉数仓建设中最重要的是什么大数据面试题_数据仓库篇离线数据仓库1、为什么要对数据仓库分层？
Jerry Hong·2022-11-24 23:19

如何排查Flink生成环境中的反压问题

《2021年最新版大数据面试题全面开启更新》反压问题是流式计算系统中经常碰到的一个问题，如果你的任务出现反压节点，那么就意味着任务数据的消费速度小于数据的生成速度，需要对生成速度进行控制。
王知无(import_bigdata)·2022-11-12 05:27

「硬刚Doris系列」Apache Doris的向量化和Roaring BitMap

点击上方蓝色字体，选择“设为星标”回复"面试"获取更多惊喜轻戳有惊喜：全网最全大数据面试提升手册！
王知无(import_bigdata)·2022-11-10 11:40

大数据面试重点之kafka(六)

大数据面试重点之kafka(六)Kafka分区分配算法可回答：Kafka的partition分区策略问过的一些公司：阿里云，小米参考答案：1、生产者分区分配策略生产者在将消息发送到某个Topic，需要经过拦截器
大数据小理·2022-11-09 19:05

大数据面试题总结

大数据为什么这么快1、扩展性传统的是纵向扩展（服务器数量不变，每个的配置越来越高）大数据是横向扩展（每个的配置不变，但服务器数量越来越多）2、分布式传统的是集中式存储，集中式计算大数据是分布式存储，分布式计算3、可用性传统的是单份数据（存储数据的磁盘少）大数据是多份数据（存储数据的磁盘多）4、模型传统的是移动数据到程序端大数据是移动程序到数据端（减少了大量的IO开销和网络开销，利用并行计算，并行存
ischangle·2022-10-12 10:04

全网最全的的java大数据面试题

前言学习群的几个小伙伴和我都有面试ebay大数据岗位的经历，而且也都拿了offer，我特意抽出了一些时间把问题和部分答案就行了汇总，希望对大家有帮助。全文篇幅1万字左右，从数据结构到Java再到大数据都有整理，可以先收藏起来，补缺补漏。ebay大数据组也持续招人。一、java基础1、Queue和Stack你平时有用过么，说说你常用的方法，他们的却别在哪呢？2、了解java的异常吗，有什么区别，常见
搬砖养女人·2022-10-12 10:10

大数据面试题（校招）

项目1.介绍电商数仓项目2.在项目中用的什么数据栈？3.数据仓库建模几种方式一般有关系建模和维度建模，关系建模遵循范式，一般有一范式、二范式、三范式、bc范式等。维度建模一般有星型模型、雪花模型、星座模型。星型模型允许数据冗余但是减少shuffle、雪花模型一般遵循范式，数据冗余少但增多工作量。星座模型与前两种不冲突，由多张事实表汇总。4.讲一下维度建模，维度表维度建模有两种表：维度表、事实表。事
梧桐林.·2022-10-12 10:38

大数据面试题（每天更新，直到我找到工作）

Hadoop1.MR工作原理分为三个阶段，map,shuffle,reduce.MR将得到的切片split分配给maptask,每个任务处理相对于的split,将split以line的方式读取每一行数据，进行mapTask运算。加载到环形缓冲区（默认为100M），双向读写（一边存元数据和索引，一边存数据），达到80M进行溢写操作期间会进行kv分区（分区数由reduce数来决定）默认使用hashpa
编程爱上我吧·2022-10-12 10:23

常见大数据面试题汇总带答案

大数据面试题汇总**牛客网刷sql题**redisflumeflink(大部分知识点写过的帖子里都有)mr，java,集群算法题kafka维度建模分为哪几种?
Direction_Wind·2022-10-12 10:55

大数据面试题汇总【持续更新】

前言本文内容是根据自身对相应知识的浅薄理解，如有错误欢迎指正~大数据生态圈Hadoop架构HDFS（分布式文件系统）:解决海量数据的存储问题NameNode：集群当中的主节点，管理元数据，主要用于管理集群当中的各种数据SecondaryNameNode：辅助Hadoop对中元数据信息的管理DataNode：集群当中的从节点，主要用于存储集群当中的各种数据MapReduce（分布式运算编程框架）：解
Kazi_1024·2022-10-12 10:45

大数据面试之hive重点(二)

大数据面试之hive重点(二)HiveSQL转化为MR的过程？
大数据小理·2022-09-21 13:35

「硬刚Doris系列」Doris高级用法

点击上方蓝色字体，选择“设为星标”回复"面试"获取更多惊喜轻戳有惊喜：全网最全大数据面试提升手册！1.1添加RollupRollup可以理解为Table的一个物化索引结构。
王知无(import_bigdata)·2022-09-15 16:24

更快更强，ElasticSearch 8.0.0 正式发布！

点击上方蓝色字体，选择“设为星标”回复"面试"获取更多惊喜大数据面试提升私教训练营Hi，我是王知无，一个大数据领域的原创作者。放心关注我，获取更多行业的一手消息。
王知无(import_bigdata)·2022-09-15 16:23

大数据面试常见问题（七）——面试部分

目录1、出了一道题，一张千万数据量的表和一张抽取的新增的8万数据量的表，在不同的层里，怎么合并两张表？用sql方法？2、数据漂移3、你们的项目组表右多少张，数据量大概是多少4、每天的数据量有多少5、什么时候用到存储过程6、你在工作中遇到过哪些报错，什么原因导致的7、查询两千万的数据要多久8、标签，字段，口径是同一个东西9、什么是维度退化10、项目的粒度11、每天同步的表有哪些，增量数据有哪些？12
大数据求学路·2022-09-08 10:12

大数据面试常见问题（五）——报表部分

目录1、Finereport的报表设计流程2、做报表开发，如何确保你拿到的数据时准确的3、你们用的报表工具是收费的吗？都少钱？4、做出的报表是以什么文件或者形式发给客户，客户又是通过什么方式查看报表的呢？5帆软和tableau的区别（传统bi工具和商务智能bi工具的区别）6、olap和oltp的区别1、Finereport的报表设计流程2、做报表开发，如何确保你拿到的数据时准确的我们都是根据需求来
大数据求学路·2022-09-08 10:42

大数据面试常见问题（一）——Oracle部分

目录1、Oracle分区类型2、每种类型一般是用在什么场景下？3、哪种分区类型使用的最多？为什么？4、有没有用过组合分区？怎么搭配的？5、分区表创建的基本语法是什么？6、分区还有哪些不同的操作？7、怎么去查看表格分区的信息？8、对分区字段进行where筛选和直接读取分区内容，谁快一些？9、索引的概念？10、索引有哪些不同的类型？11、不同的索引一般用在什么场景下？12、普通索引和位图索引有什么区别
大数据求学路·2022-09-08 10:41

大数据面试常见问题（三）——Hadoop部分

目录1、hive数据库和其他的数据库有什么区别？2、传统数仓和大数据数仓的区别3、你们使用的hadoop是什么环境什么版本的？4、分桶的作用是什么？5、分桶的数量你是如何决定的？6、hive里面经常用到的函数有哪些？7、进行数据的同比和环比有什么方法？8、hive表连接和其他数据库有什么区别？9、hive里面经常用到的几个不同的排序分别是什么，有什么区别？10、Hive中的有哪几种存储格式？11、
大数据求学路·2022-09-08 10:11

大数据面试常见问题（四）——ETL部分

目录1、什么是映射2、什么是etl3、kettle抽数一般遇到什么问题，你们是怎么解决的？4、如果抽取的数据有重复，怎么解决5、etl脚本开发以后，怎么运维6、一张特别大的表，几千万，几亿的表，怎么通过etl工具同步7、数据同步以后，源系统的表结构发生了改变，比如源系统的表增加了字段，你的kettle脚本是否会报错？8、有一张表下午5点才出数据，依赖的表早上十点就已经跑完了，是什么原因导致表这么慢
大数据求学路·2022-09-08 10:49

「面试必背」大数据面试题100道（收藏）

前言随着5G时代的到来，大数据人工智能产业链又一次迎来了井喷式的爆发，随着岗位需求的不断增加，越来越多的人选择大数据课程，但是没有真正从事大数据工作的人面对企业面试有种无从下手的感觉，面对面试说不到技术的重点，每次面试只能靠队友，靠兄弟支援，尤其是面对架构，编程更是无从下手。于是我决定对市场上大多的有关大数据核心的面试题做一个详细的分析，也希望大家尽可能的做到举一反三，而不是局限于题目本身。1、选
java晴天过后·2022-09-08 04:56

大数据面试总结-hadoop

下一篇Zookeeperhttps://blog.csdn.net/Mr_Fjl/article/details/972923061.什么是Hadoop？Hadoop是一个开源软件框架，用于存储大量数据，并发处理/查询在具有多个商用硬件（即低成本硬件）节点的集群上的那些数据。总之，Hadoop包括以下内容：HDFS（HadoopDistributedFileSystem，Hadoop分布式文件系统
不愿做秃头男孩·2022-09-06 19:32

吐血整理50家企业真实大数据面试题！！学长实测，真实面试！！快收藏！

文章目录前言京东面试题58面试题新浪面试题搜狐面试题360面试题小米面试题顺丰面试题OPPO面试题VIVO面试题华为面试题boss直聘面试题搜狗金融面试题瓜子二手车面试题猎豹移动面试题作业盒子面试题每日优鲜美团面试要求快手面试题新美互通面试题金山云面试题图新瀚合面试题中创软件面试题清华同方面试题柠檬微趣面试题量化派面试题天阳科技面试题泰康保险面试题软通动力面试题乐元素面试题北京国信博飞面试题知因智
一只楠喃·2022-08-24 12:00

【300+精选大厂面试题持续分享】大数据运维尖刀面试题专栏（六）

持续分享有用、有价值、精选的优质大数据面试题致力于打造全网最全的大数据面试专题题库51、如何迁移大数据平台中的Zookeeper集群？
大数据研习社·2022-08-21 15:31

【300+精选大厂面试题持续分享】大数据运维尖刀面试题专栏（四）

持续分享有用、有价值、精选的优质大数据面试题致力于打造全网最全的大数据面试专题题库31、如果发现现有集群出现数据倾斜，生产环境中HBase出现数据倾斜了该如何解决呢？
大数据研习社·2022-08-21 15:31

Spark学习之路 （八）SparkCore的调优之开发调优

《2021年最新版大数据面试题全面开启更新》欢迎关注github《大数据成神之路》前言在大数据计算领域，Spark已经成为了越来越流行、越来越受欢迎的计算平台之一。
王知无(import_bigdata)·2022-08-21 09:43

大数据面试题2

大数据项目之企业级数据仓库实战第一章数据仓库概述1.1数据仓库简介1.1.1什么是数据库？数据库(Database)是按照数据结构来组织、存储和管理数据的建立在计算机存储设备上的仓库。数据库是长期储存在计算机内、有组织的、可共享的数据集合。数据库中的数据指的是以一定的数据模型组织、描述和储存在一起、具有尽可能小的冗余度、较高的数据独立性和易扩展性的特点并可在一定范围内为多个用户共享。常用的数据库有
DHRJFH·2022-08-21 08:13

（转）大数据面试题130道及答案整理 1-15

大数据面试题130道及答案整理1-15转载自：https://www.cnblogs.com/yuluoxingkong/p/13475235.html1、HashMap和Hashtable区别HashMap
你的动作太慢了！·2022-07-31 10:10

原创｜5万字详谈大数据面试题，面试必备

1一面维度建模如何建确认主题确认粒度确认度量确认事实表确认维度表Hiveshuffle和sparkshuffle的区别Spark为什么快Spark任务是怎么执行的转化率如何计算缓慢变化维怎么处理Flink状态Flink窗口Flink广播流题目两个升序链表合并后仍然升序给你两个单词word1和word2，请你计算出将word1转换成word2所使用的最少操作数。你可以对一个单词进行如下三种操作：插入
小晨说数据·2022-07-28 07:18

❤️爆肝三万字，40道Kafka大厂高频面试题，涨薪全靠它！

博主闭关两个多月，查阅了数百万字的大数据资料，结合自身的学习和工作经历，总结了大厂高频面试题，里面涵盖几乎所有我见到的大数据面试题目。《大厂高频面试题系列》目前已总结4篇文章，且在持续更新中✍。
雷恩Layne·2022-07-13 08:16

常见大数据面试话术(建议收藏)

点击上方"大数据肌肉猿"关注,星标一起成长后台回复【加群】，进入高质量学习交流群2021年大数据肌肉猿公众号奖励制度面试吹牛之前先打草稿！各位面试官好!我叫xxx，毕业于xxx，之前在xxx公司待了1年多，期间⼀直从事的是IT行业，刚开始的时候做的是Java开发后来转岗到大数据方向做大数据开发;刚转行到大数据开发时开始比较困难的，大数据并不像Java那样⼀套框架基本可以搞定所有的问题，而是不同的业
无精疯·2022-07-12 12:48

面经1：字节跳动：22年实习生大数据开发面试（一面凉经）

记录了面试各个公司的问题和心经，给正在面试的你做一些适当的参考如果这篇文章对你有所帮助，可以点一下关注作者支持一下，对于这段时间的面试，作者也是参考和总结了一些面试中常常问到的问题，可以关注作者私信“大数据面试
牧码文·2022-07-12 09:22

面经2：22年实习生大数据开发面试（第一家凉了，第二家拿了offer）

记录了面试各个公司的问题和心经，给正在面试的你做一些适当的参考如果这篇文章对你有所帮助，可以点一下关注作者支持一下，对于这段时间的面试，作者也是参考和总结了一些面试中常常问到的问题，可以关注作者私信“大数据面试
牧码文·2022-07-12 09:22

大数据面试题：Zookeeper有什么作用？优缺点？有什么应用场景？

作用Zookeeper作用包括存储数据（文件系统）和监听（监听通知机制）优点1）分布式协调过程简单2）同步：zk高度同步，这意味着服务器进程之间既存在互斥又存在合作，同步有助于ApacheHBase进行配置管理。3）有序消息：zk跟踪一个数字，表示每个更新的顺序，保证消息有序4）序列化：根据具体规则，zk对数据进行编码。另外，它还可确保我们的应用程序始终如一地运行。但是，在MapReduce中，我
蓦然_·2022-07-05 10:06

大数据面试题：介绍下Zookeeper是什么？

Zookeeper是一个开源的分布式的，为分布式应用提供协调服务的Apache项目。Zookeeper从设计模式角度来理解，是一个基于观察者模式设计的分布式服务管理框架，它负责存储和管理大家都关心的数据，然后接受观察者的注册，一旦这些数据的状态发生了变化，Zookeeper就负责通知已经在Zookeeper上注册的那些观察者做出相应的反应。Zookeeper提供的服务包括：统一命名服务、统一配置管
蓦然_·2022-07-05 10:06

大数据面试题：介绍下Flume

1、什么是FlumeFlume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统。2009年被捐赠了apache软件基金会，为hadoop相关组件之一。尤其近几年随着flume的不断被完善以及升级版本的逐一推出，特别是flume-ng，同时flume内部的各种组件不断丰富，用户在开发的过程中使用的便利性得到很大的改善，现已成为apachetop项目之一。Flum
蓦然_·2022-07-02 09:50

阿里大数据面试题集合：Hadoop+HBase+Spark+Zookeeper

附面试思维导图：Hadoop面试题讲述HDFS上传文件和读文件的流程？HDFS在上传文件的时候，如果其中一个块突然损坏了怎么办？NameNode的作用？4.NameNode在启动的时候会做哪些操作？NameNode的HA？Hadoop的作业提交流程？Hadoop怎么分片？如何减少HadoopMap端到Reduce端的数据传输量？Hadoop的Shuffle？哪些场景才能使用Combiner呢？HM
m0_55849656·2022-06-16 12:19

大数据面试3分钟自我介绍_面试的时候，如何自我介绍？

干货，干货，干货！！大学生必看面试通过率超过80%的师兄路过我比较熟校园招聘，当时为了熟悉面试氛围和锻炼面试技巧，参加了好几十次面试，通过率超80%，算是比较高的了(毕竟很多岗位也不难，所以不敢说很高)我说几点我的建议，希望对大家有用一.事先准备我一直有「要么不做，要么做到最好」的执念，所以在面试前会提前做很多准备，这些准备可能跟自我介绍关系不大，但是的确可以增加面试成功率1.外表避免弱点面试的成
weixin_39555415·2022-06-16 07:03

大数据面试求职经验总结

写在前面：空杯心态，多投多改，把握好校招机会，它是你最容易通往大厂的机会。面试经验分享：1.提前了解应聘公司信息，知道该公司是做什么的，发展情况，招聘的岗位的要求等；2、面试不要说自己是培训班出身,个人技能里千万尽量不要体现出学习、了解字样3、找工作策略：先可以找一些普通公司试试经验，面试几次熟悉套路后，再去面试心仪公司。4、简历写的不要太多，尤其是项目不用写太细，提前想好可能被提问的点，留一些空
GoAI·2022-06-09 18:47

大数据面试题总结

一美团自我介绍一下？介绍一下最近的项目？目前在研究什么技术？如何判定一个表是事实表还是维度表？维度表示你要对数据进行分析时所用的一个量,比如你要分析产品销售情况,你可以选择按类别来进行分析,或按区域来分析.这样的按…分析就构成一个维度。前面的示例就可以有两个维度：类型和区域。另外每个维度还可以有子维度（称为属性），例如类别可以有子类型，产品名等属性。下面是两个常见的维度表结构：产品维度表：Prod
鸭梨山大哎·2022-06-08 07:23

Mysql高频面试题（后端大数据面试必备）

文章目录1B树和B+树的区别，为什么Mysql使用B+树2Mysql锁有哪些，如何理解？3索引的基本原理4索引设计的原则?5索引覆盖是什么6最左前缀原则是什么7lnnodb是如何实现事务的8简述MylSAM和InnoDB的区别9事务基本特性ACID分别是:10什么是MVCC11存储引擎的类型12数据库表设计时，字段你会如何选择?1.字段类型优先级2.可以选整型就不选字符串3.够用就行不要慷慨4.尽
默主归沙·2022-06-05 15:23

大数据面试 逻辑题

逻辑题大致分为比较逻辑题、分析逻辑题、综合逻辑题、抽象逻辑题、概括逻辑题、推理逻辑题、论证逻辑题等，由于这类题比较考验综合素质，因此也一直是各大企业笔试、面试时经常喜欢考察的题目类型之一。很多童鞋认为逻辑题很难，其实不然。多做练习，打开思路，这类题还是可以轻易化解的。下面为大家整理了网络上最全的75道逻辑判断测试题。在每道题目下方有答案，是用白色显示的，反选就可以看到啦~【1】假设有一个池塘，里面
zzq_0916s·2022-04-30 08:47

大数据面试题

一.SQL1、查询出每门课程的及格人数和不及格人数2、使用分段[100-80],[80-60][‹60]来统计各科成绩，分别统计：各分数段人数，课程号和课程名称3、下面是学生的成绩表（表名score，列名：学号、课程号、成绩）5.查询没有学全所有课的学生的学号、姓名6.查询两门以上不及格课程的同学的学号及其平均成绩二、Hadoop1、hadoop数据倾斜如何处理2、Hadoop性能调优3、hado
黑冰vip·2022-04-22 08:46

大数据面试题--最真实面试总结！！BAT等一线大厂，学长们实测！！

今年我们大三的学长学姐要找实习了，大概整理了一下他们的面试题，问出来的！！！！抓紧收藏！！准备要校招的学长学姐！一定要码好！！这一篇是一部分普通企业和BAT大厂的面试，后续还有京东、58、搜狐、小米等等公司的，等我整理好！！后续我会把这些面试进行综合的总结并附答案，等我啊！这些是普通的公司学长11）技术框架部分：（1）面试官会根据面试者简历上的技能点进行考察。（注意技能点描述用词，不要随便用熟悉，
一只楠喃·2022-02-28 11:14
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他