当大数据遇见应用性能管理（概念篇①）

  云智慧（北京）科技有限公司 陆兴海

 
1、2014年的他（大数据） 
2013年被称为中国大数据的元年，经过近两年的持续发酵，到2014年底，伴随着媒体的宣传、学者的研究、厂商的推广以及企业的不断深入探索实践，大数据在各个行业都已经不少的应用与发展。 
举个例子，目前在微信中有600个左右关于大数据的公众号，每天产生近2000条译文或原创文章，这些文章每天将会产生大致200亿的阅读量，全年下来相当于一个人总共看2400亿遍张爱玲的《倾城之恋》。（注：真是大数据~）

 

正是由于全民的大数据热潮，推动了各个行业及垂直领域对大数据的投融资，如下表所示2014年初到目前（15年2月）全球市场主要的大数据融资咨询（不完全统计数据来源：36氪）。 
1 用大数据分析帮销售团队找到潜在价值顾客，Infer融资1000万美元 
2 Twitter收购大数据分析及可视化公司Lucky Sort，用于Twitter自己的文本挖掘 
3 实时大数据平台初创企业Splice Machine获1500万美元融资 
4 基于地理位置大数据分析的移动广告初创公司PlaceIQ，获C轮1500万美元融资 
5 Google Ventures 1.3亿美元领投用大数据服务肿瘤医疗行业的Flatiron Health 
6 大数据销售管理服务提供商InsideSales获得1亿美元C轮融资，估值近10亿美元 
6 拍拍贷获光速安振领投数千万美元B轮，所融资金将投入大数据征信系统研发 
8 为企业级市场提供大数据系统处理的创业公司Cloudera融资9亿美元，英特尔投资7.4亿美元 
9 让团队和客户的交往更聪明，大数据智能关系管理RelateIQ再获4000万美元融资 
10 把大数据带到任意一家企业, Cloudera刚获得一轮1.6亿美元的投资 
11 将大数据处理搬到云端，以色列初创公司SiSence获3000万美元融资 
12 大数据初创企业Concurrent获千万美元融资 
13 打通大数据技术的底层与顶层，Trifacta宣布已完成C轮2500万美元融资 
14 由前Google与Facebook高管创办的大数据初创企业Metanautix携700万美元融资现身 
15 大数据服务商“百分点”获C轮2500万美元融资，发布“践行大数据”战略 
16 大数据分析服务公司Hortonworks完成5000万美元融资，乃名门雅虎之后 
17 Salesforce以3.9亿美元收购大数据智能关系管理初创企业RelateIQ 
18 用大数据分析为酒店做定价管理的SaaS，Duetto获得2100万美元B轮融资 
19 大数据分析云服务GoodData获Intel Capital领投E轮融资2750万美金 
20 国内第一家大数据信用评估公司 Wecash 获 IDG A 轮融资4000万元 
21 EverString大数据用户预测分析引擎获光速资本领投一千两百万美元 A 轮融资 
22 帮助企业更好的理解数据，大数据初创公司Adatao完成1300万美元A轮融资，由a16z领投 
23 “逸橙科技”获得千万美元A轮融资，利用职场大数据提高HR工作效率 
24 高盛押注亚洲大数据市场，新加坡大数据公司Antuit获得5600万美元新融资 
25 大数据分析公司Rubikloud获700万美元A轮融资，投资方多来自中国 
26 用自助型BI推动企业产品消费化，大数据可视化公司永洪科技完成五千万元A+轮融资 
27 大数据＋机器学习＋平台，所以Dato拿了1850万美元B轮融资 
缔元信网络数据CEO秦雯在回顾整个大数据行业的发展状态时提到，2014年最大的变化是从“说大数据”转变到“用大数据”。这点深有同感，资本的不断关注带来的是大数据在各行业的不断实际深入应用。比如当当网引入了以Ranking Model为代表的消费者行为分析作为推荐系统，透过消费者的点击行为分析，揭示点击率高低与消费者身份和商品之间的隐隐联系，促使销售额增加1亿元。交行通过对海量语音信息进行处理使历史语音检索调听花费的时间 从3～5个工作日缩短为5分钟，检索反馈时效低于100毫秒，调听反馈时效低于1秒。前几天网络上的一则新闻，信用卡“套利者”钻银行漏洞年赚近千万，最终也是通过银行的实施大数据防诈骗监控平台，通过设定相应的指标来监测每张信用卡，进而实现报警来发现的。 
以上仅仅是几个例子，实际上在2014年各行业都有不少积极的探索及应用，在应用性能管理领域亦是如此。至于究竟什么是应用性能管理？它与大数据相遇能够摩擦出什么样的火花，在接下来的章节中与大家探讨。 
2、2014年的她（应用性能管理） 
应用性能管理的英文简称为APM，全称为Application Performance Management。到底是APM？我们首先来一个官方的定义，在wikipedia.org网站上其解释如下：应用性能管理是指对软件程序可用性以及性能的监测与管理，应用性能为确保一定程度的服务等级需要关注应用系统问题的检测与诊断，它是链接复杂IT数据与业务价值实现之间的桥梁。 
为什么说是2014年的应用性能管理呢？实际上应用性能管理的概念在多年前就有提及，但是新一代的APM在中国发展，可谓说2014年是其元年，正是因为国外相关理念与产品不断成熟演进、国内互联网行业的急迫需求才使得这个老概念又有了新的内涵与技术特征。要形象化解释APM的概念，我们需要温习两个概念。 
其一：业务，更白话一些来说，就是各行业中需要处理的事务，业务是任何一家企业生存的基础，因为业务意味着收益，企业经营的最终目标是通过良性的业务运转带来合理利润。 

其二：用户体验，在互联网时代产品能否获得成功，用户体验越来越成为关键，当用户使用产品的时候，体验之旅才真正开始，而这个过程是否愉快，将直接影响到产品的口碑，影响到销售。从企业产品与服务的层面来讲，用户体验分为三类，如下图所示。 
 
在无电子不商务的今天，产品与服务的用户体验问题已得到几乎所有人的认同，性能体验作为非常基础的一环其重要性不言而喻。“应用性能质量好坏”与“业务增长与否”这两个概念基本上被认作同义词。期待企业的业务增长，必然要求从用户的体验状况出发，不断提高关键应用的性能和稳定性。 
互联网，尤其是近年来移动互联网在各个行业的应用迅猛发展，在给企业带来巨大商机的同时，也带来了新一轮的技术挑战。新技术带来的网络结构变化以及网络环境和网络应用不断发展带来的不确定性，极大冲击了性能的稳定，不断加深的网络复杂性使其处于失控的边缘。在移动互联网领域，接入方式的多样化和移动用户持有的终端设备的多样化、网络层次和结构的复杂化给移动网络业务带来更为严峻的问题，同时随着移动用户的增多和成熟，他们对移动互联网性能的要求也越来越高，人们更加注重整个使用过程的感官与体验，延迟就意味着故障，这对商家业务影响巨大。 
最近的一项消费者调查显示，60%的用户会对加载时间超过 3 秒钟的应用（网站或 App）失去兴趣。74%的受调查者表示等待时间不会超过 5 秒钟，当遇到一个性能表现很差的应用时，1/3 的受访者表示将转向竞争对手。在用户体验要求如此苛刻的竞争压力下，购物者的受挫经历对企业不仅意味着业务的损失，同时也是品牌声誉的损害。综上所述，应用系统的性能已经成为制约公司业务发展的瓶颈，很难想象一个响应很慢，体验很差的系统能够留住更多的用户。同时现代应用的复杂度空前增大，影响系统性能因素繁多，给问题发现与定位带来巨大的挑战。