大数据企业面试真题汇总三

三百零一、六度人和面试题

（1）以项目为主，自己说。

（2）做实时过程中，如果手机app 端，数据正好准备上传，但是网断了。然后一个小时之后，这个数据才发过来。那你们怎么进行处理。

（3）es 你做了几页。你的doc 有多少数据量。

（4）实时部分， canal 监控主机，然后主机挂了，从机上位，这个过程中的数据变化咋办

三百零二、

（1）hive的优化

（2）数仓分层及能否应用到公司投资业务上，需求实现

（3）集群架构

（4）HR、经理、技术、组织者一块视频面试

三百零三、数梦工场面试题

1）一面

（1）说一下你最熟悉的框架的底层原理

（2）hadoop的map端的一个分区数据如果有大量的重复，怎么去重？

（3）es的连接池是怎么做的？

（4）sparkstreaming消费kafka的数据

（5）自定义了哪些udf udtf函数

（6）最难的指标

（7）kafka的offset维护的方式

（8）flink底层是怎么