大数据与云计算技术周报(第148期)

导语

“大数据” 三个字其实是个marketing语言,从技术角度看,包含范围很广,计算、存储、网络都涉及,知识点广、学习难度高。

    

本期会给大家奉献上精彩的:实时数据、ELK、redis、MongoDB、spark、规则引擎、推荐系统。全是干货,希望大家喜欢!!!

1ELK

本文主旨是通过一个实际案例来讲述下ELK平台的日常操作方法,帮助我们的后台工程师能绕开枯燥的理论学习而直接收获实际应用的干货,进而帮助提高实际工作效率

https://mp.weixin.qq.com/s/kFmBNjXTXfbcx5bwa5ykHw

2Redis

本文讲述了小米是如何将Redis Cluster部署在K8S上提供高质量的服务的

https://mp.weixin.qq.com/s/WrUU3C-C8TBgJfGuOv3qGQ

3实时数仓

趣头条一直致力于使用大数据分析指导业务发展。目前在实时化领域主要使用 Flink+ClickHouse 解决方案,覆盖场景包括实时数据报表、Adhoc 即时查询、事件分析、漏斗分析、留存分析等精细化运营策略,整体响应 80% 在 1 秒内完成,大大提升了用户实时取数体验,推动业务更快迭代发展。https://mp.weixin.qq.com/s/rgmTm6tSccVNBj4b8gUTLQ

4MongoDB

本文讲述了华为云GaussDB for MongoDB的新特性时间漫游读能力,这个特性与MongoDB 4.0/4.2提供的readAtClusterTime能力不同的是,

GaussDB for MongoDB时间漫游读提供的快照是持久化的,及底层实现和案例分享;

https://mongoing.com/archives/72872

大数据与云计算技术周报(第148期)_第1张图片

5Spark

本文介绍了最新发布的Apache Spark 3.0.0 重要特性全面,解决了3400 多个 ISSUES问题。

https://mp.weixin.qq.com/s/R6XYCUIWDo19mXPybukAYw

6规则引擎

在互联网时代,安全已经成为企业的命脉。美团信息安全团队需要采用各种措施和手段来保障业务安全,从而确保美团平台上的用户和商户利益不会受到侵害。

本文主要介绍了美团在打造自有规则引擎Zeus(中文名“宙斯”)的过程中,信息安全团队遇到的挑战以及对应的解决方案,并分享了很多踩过的坑,同时还有一些思考和总结。希望对从事安全领域相关工作的同学能够有所启发或者帮助。

https://tech.meituan.com/2020/05/14/meituan-security-zeus.html

大数据与云计算技术周报(第148期)_第2张图片

7Dubbo

本文根据多点生活平台架构组研发工程师陈鹏,线上主题分享《多点生活在 Service Mesh 上的实践 -- Istio + MOSN 在 Dubbo场景下的探索之路》整理,文末包含本次分享的视频回顾链接以及 PPT 下载地址。

https://mp.weixin.qq.com/s/oDxuXdpaWf3FG3R7Z1tBmA

8数据湖

Apache Hudi(Hadoop Upserts Deletes and Incrementals)是一个数据湖项目,可在与Apache Hadoop兼容的云存储系统(包括Amazon S3、Aliyun OSS)上进行流数据处理。

https://mp.weixin.qq.com/s/pLTNuocMLFekU0K1EiLZ3g

9spark

Spark底层原理概述

https://mp.weixin.qq.com/s/M-Umwa9405QSamB8EsB3Vw

10推荐系统

在本文中,将详细介绍多种类型的推荐系统,具体介绍基于近邻算法的推荐引擎、个性化推荐引擎、基于模型的推荐系统和混合推荐引擎等,并分析介绍每种推荐系统的优缺点。

https://mp.weixin.qq.com/s/h5FuxJ9tvzyFTLH-iIYf6Q

11开心一刻

请在座的产品经理举个手?

“在座产品经理举个手”相当于问“在座不懂技术的举个手”。

没办法,平常产品经理不管程序员的死活,今天我也不管你的死活

致谢:

周蓬勃、王在道、孙亚飞、冯艺帆、陈少军、邓开表、张少华、薛述强、刘彬、刘超、廖程鹏、董言、吕西金、朱洁、蓝随、黄文辉、郭飞

猜你喜欢

#大数据和云计算机技术社区#博客精选(2017)

NoSQL 还是 SQL ?这一篇讲清楚

阿里的OceanBase解密

#大数据和云计算技术#: "四有"社区介绍

大数据和云计算技术周报(第56期)

新数仓系列:Hbase周边生态梳理(1)

《大数据架构详解》第2次修订说明

简单梳理跨数据中心数据库

云观察系列:漫谈运营商公有云发展史

云观察系列:百度云的一波三折

云观察系列:阿里云战略观察

超融合方案分析系列(7)思科超融合方案分析

加入技术讨论群

《大数据和云计算技术》社区群人数已经6000+,欢迎大家加下面助手微信,拉大家进群,自由交流。

喜欢QQ群的,可以扫描下面二维码:

欢迎大家通过二维码打赏支持技术社区(英雄请留名,社区感谢您,打赏次数超过108+):

你可能感兴趣的:(大数据与云计算技术周报(第148期))