开源大数据周刊-第65期

原文链接： https://my.oschina.net/u/3627103/blog/1525018

点击查看全文

 

产品动态：

• EMR Task计算节点发布，更加灵活的调整计算能力
• hbase集群在线无感知扩容磁盘

资讯：

• Apache Kylin v2.1.0正式发布

  Apache Kylin是一个开源的分布式分析引擎，提供Hadoop之上的SQL查询接口及多维分析（OLAP）能力，支持对超大规模数据进行秒级查询。

• 政策东风提供发展便利 大数据开启中国重大时代转型

  自2011年5月“大数据时代已来”的号角奏响以来，“大数据”三个字就反复在政府、行业、学术各大会议中出现。这表明，一方面，近5～6年里人们关注大数据的热情高涨;另一方面，大数据确实给人类生产生活带来了空前的变化和影响。

• 2017第二届中国国际大数据产业博览会将于11月在北京召开

  随着现代信息技术的不断发展，世界已跨入了互联网+大数据时代。全球正掀起以融合、渗透、创新为特点的新一轮信息革命。大数据已成为世界主要国家抢占新一轮经济和科技发展制高点的重大战略选择。

技术

• 七牛大数据平台的演进与大数据分析实践

  大数据生态很复杂，对于个人来说，要全部学会可能要花费好几年时间。而对于企业来说，要最大程度发挥其价值，构建一个成熟稳定、功能多样的大数据平台，期间花费的时间以及人力成本着实难以估量，更何况还需要考虑持续维护的问题。这就是七牛的Pandora大数据平台灵感的来源，我们构建一个大数据平台，作为产品提供给用户，快速帮助用户挖掘数据价值。

• 企业级SaaS产品自动化测试实践

  本文讲述某个企业级SaaS产品自动化测试项目的实践过程。文章介绍了项目遇到的挑战、应对策略和实施过程，最后总结了企业级SaaS产品给自动化测试带来的新挑战和项目的六点实践经验。

• 图解Apache Kafka消息偏移量的演变(0.7.x~0.10.x)

  本文探讨 Kafka 各个版本对消息中偏移量的处理

• 面向大数据的分布式调度

  大数据的分布式调度是在进行数据ETL过程中起到了总体的承上启下的角色，整个数据的生产、交付、消费都会贯穿其中，本文从调度、分布式调度的特征展开，再对大数据调度个性化特征的一些阐述，由满足大数据使用的架构和业务场景的需求上娓娓道来，从实践的角度分享如何打造一个高可用、高效率、灵活性的大数据调度平台。

欢迎入群技术交流！

 

点击查看全文

转载于:https://my.oschina.net/u/3627103/blog/1525018