大数据和云计算技术周报（第154期)

导语

“大数据” 三个字其实是个marketing语言，从技术角度看，包含范围很广，计算、存储、网络都涉及，知识点广、学习难度高。

    

本期会给大家奉献上精彩的：微服务、Flink、数仓、Hbase、spark、hive、MongoDB、ES。全是干货，希望大家喜欢！！！

1微服务

可通过服务定级，哪些服务不能出问题，哪些服务允许有异常，采用降级、熔断的方式来解决问题，以达到系统的高可用。这三种方式如能合理运用，微服务的高可用性大大提升，所以说缓存、队列、熔断降级成了微服务架构中的新三板斧。

https://mp.weixin.qq.com/s/Xyicrd8rrU2SFsVdIBYpIQ

2MongoDB

本文讲述了MongoDB如何获取SQL的执行计划，在什么情况下MongoDB会缓存执行计划，如何查看和维护缓存执行计划、固定执行计划；

https://mp.weixin.qq.com/s/4igdc1zxpM0q5yx-jYfIJg

3数仓

拉链表是一种数据模型，主要是针对数据仓库设计中表存储数据的方式而定义的；顾名思义，所谓拉链表，就是记录历史，记录一个事务从开始一直到当前状态的所有变化的信息。本文对拉链表做了详细讲解。https://mp.weixin.qq.com/s/Xu45kKpzJOoLRFtmgIcSTg

4商务

做To B，一定要避免9类错误！

https://mp.weixin.qq.com/s/p6IiW8OCfXMEiuCOFfr6Gw

5Hive

本文讲解了Hive鲜为人知的宝石-Hooks，深入分析了Hooks一些实例和源码。

https://mp.weixin.qq.com/s/xPq2MY5RzxH_r9EaU_BY1Q

6Spark

Spark通过DataSource和DataFrame API访问Iceberg table，或者进行Catalog相关的操作。由于Spark Data Source V2 API还在持续的演进和修改中，所以Iceberg在不同的Spark版本中的使用方式有所不同。

www.iteblog.com/archives/9824.html

7ES

本文从当前的业务场景出发，分析 ES 稳定性未到达要求的原因并提供相应的解决思路。

https://mp.weixin.qq.com/s/qQ2D3_doHe7aOkll3WwEoA

8数据可视化

如何丰富的图形种类，并实时更新绘图数据并进行交互式操作

https://mp.weixin.qq.com/s/EoVbniLemTTYli4rH6vliA

9spark

Databricks软件工程师李元健为大家带来structured streaming生产化实践及调优的介绍。内容包括输入参数，状态参数，输出参数的调优，以及部署。以下由Spark+AI Summit中文精华版峰会的精彩内容整理

https://mp.weixin.qq.com/s/laEu8unoor770cfc63R_eQ

10ElasticSearch

ElasticSearch 是一个分布式的开源搜索和分析引擎，因其功能强大、简单易用而被应用到很多业务场景。在生产环境使用 ES 时，如果未进行优化则服务的稳定性可能得不到保障，目前我们使用 ES 作为账单平台的基础组件为微信支付提供服务时就遇到这种问题。本文即从当前的业务场景出发，分析 ES 稳定性未到达要求的原因并提供相应的解决思路。

https://mp.weixin.qq.com/s/qQ2D3_doHe7aOkll3WwEoA

11开心一刻

你好//是什么意思啊？B：你好. A：额，我问你//是什么意思？B：问吧. A：我适才不是问了么？B：啊？A：你再看看记实... B：看完了.A：......所以//到底是啥意思？B：所以什么？A：你存心耍我呢吧？B：没有啊 你想问什么？

致谢：

周蓬勃、王在道、孙亚飞、冯艺帆、陈少军、邓开表、张少华、薛述强、刘彬、刘超、廖程鹏、董言、吕西金、朱洁、蓝随、黄文辉、郭飞

猜你喜欢

#大数据和云计算机技术社区#博客精选（2017）

NoSQL 还是 SQL ？这一篇讲清楚

阿里的OceanBase解密

#大数据和云计算技术#: "四有"社区介绍

大数据和云计算技术周报（第56期）

新数仓系列：Hbase周边生态梳理（1）

《大数据架构详解》第2次修订说明

简单梳理跨数据中心数据库

云观察系列：漫谈运营商公有云发展史

云观察系列：百度云的一波三折

云观察系列：阿里云战略观察

超融合方案分析系列（7）思科超融合方案分析

加入技术讨论群

《大数据和云计算技术》社区群人数已经6000+，欢迎大家加下面助手微信，拉大家进群，自由交流。

喜欢QQ群的，可以扫描下面二维码：

欢迎大家通过二维码打赏支持技术社区（英雄请留名，社区感谢您，打赏次数超过108+）：