软件的涅磐<?xml:namespace prefix = o ns = "urn:schemas-microsoft-com:office:office" />
作者:黄柳青
1999年,计算机科学家布鲁克斯(Frederick Phillips Brooks,Jr.)以近70岁的“高龄”获得了图灵奖——这位数十年来蜚声世界的软硬件专家、教育家曾在其《没有银弹》(1986)一文中提出了一个迄今为止尚未被打破的著名论断:“没有一种单纯的技术或管理上的进步,能够独立地承诺在10年内大幅度地提高软件的生产率、可靠性和简洁性”。布鲁克斯用形象的譬喻来论述软件工程中存在的“陷阱”——“在所有恐怖民间传说的妖怪中,最可怕的是人狼,因为它们可以完全出乎意料地从熟悉的面孔变成可怕的怪物”,而“大家熟悉的软件项目具有一些人狼的特性(至少在非技术经理看来),常常看似简单明了的东西,却有可能变成一个落后进度、超出预算、存在大量缺陷的怪物”。惊悚故事里,人们只有用银弹(银质子弹)才能消灭人狼,而布鲁克斯认为,在软件工程中,“没有银弹”,没有一种能够遏制软件向“怪物”变异、同时还可大幅提升开发效率和产品质量的武器。
某种意义上,布鲁克斯的观点(抑或预言)是正确的——如果不能对基于代码的软件体系进行彻底的革新,那么在今后10年(甚至更久)的时间里,我们仍会在繁复迂曲的代码迷宫中遭遇“怪物”。
软件之死
一、大型企业级应用软件已经死亡
2003年8月底,一年一度的DCI CRM展会在纽约Javitz中心举行,参加展会的有21%是来自全球性企业(平均有6600多名员工)的CxO,60%是这些企业的中层管理人员。作为CRM市场的预言家和领头羊,Siebel总裁Tom Siebel每年的主题演讲都是大家翘首以待的。但是,这一年Tom Siebel的演讲标题却让与会的所有人震惊:“CRM之死”。
“CRM产品已经没有市场了。”根据Siebel的预计:IT部门将不再购买通用的CRM软件,然后再按照自己内部的业务流程对软件进行调整了。如果Siebel的预见是正确的,那么CRM市场的终结也意味着企业关系管理市场、供应链、人力资源管理市场,以及其他大型应用软件市场的终结。通过市场调查,我们发现,国际主流的几家企业管理软件厂商,包括SAP、PeopleSoft、Siebel等,近几年来的营收一直在容与徘徊,而利润更有下降之势。当前,几乎每一种大型的企业级应用软件都在遭遇着深重的危机,以至于出现濒危甚至垂死的症状。美国国家标准和技术研究院的一份研究报告显示:“占据世界软件销售额85%的是大型的专用软件,而其开发的失败率却高达70%!”
大型企业级应用软件正在走向死亡,它表现在各个方面。
首先,以传统方式开发的大型企业级应用软件难以突破布鲁克斯的“没有银弹论”,找不到软件工程或者项目管理的方法,能够大幅度提高应用软件的开发效率——开发周期长、开发费用高,实施费用超支和工期延长,已经司空见惯。更加可怕的是,随着企业的环境和需求的不断变化,“建成即成闲置”,形成软件工程的灾难。
其次,客户对大型企业级应用软件的诸多期望几乎无法得到完全满足。例如,客户期望实现业务集成和协作,在协作基础上构建出高效的企业应用体系;客户期望对供应链上的信息进行及时传递与处理,以实现更快捷的市场响应能力;客户期望能够快速实施和低成本部署满足个性化需求的软件系统,并适应未来商业环境的变迁……一句话,客户对软件功能和性能的要求越来越高。在这种市场需求下,要实现企业各个层次的集成,必然会导致软件在规模、复杂度、功能上的空前扩张。
不仅如此,企业级应用的危机还表现为系统部署运行和维护的“危机”。应用环境从单机应用,过渡到客户机/服务器的环境,再过渡到浏览器/服务器的环境,并进一步向多层式(N-tier)分布式系统的网络环境迁徙。今天,基于互联网的企业级应用要求软件实现跨空间、跨时间、跨设备、跨用户的协同,软件处于极度复杂的异构环境中,这种情形下,以传统的软件开发思路应对当前的危机就只能是刻舟求剑、缘木求鱼。
类似的危机,在中国表现得尤为突出。中国是一个迅速发展和不断转型的国家,中国企业的形态因此而更复杂,中国企业的改革变化空间因此而更大。正因如此,中国企业级应用开发和运营的危机也就更为严重,企业信息化的风险更多,失败率更高。
我认为,正是传统的软件体系酝酿和加重了企业级应用的危机。
软件体系主要包括软件结构和生产方式。传统的大型企业级应用软件的主要特点是:编码式的开发方式和一次开发持续运行的应用软件——编码式的开发方式,使得快速开发企业级应用软件的愿望难以实现;一次开发持续运行的方式,则导致了软件的僵化和濒危——很明显,这种软件不但难以适应客户需求的变化,而且每次修改都必须在代码层上推倒重来,因此造成了效率的降低和资源的糜费。
传统的软件体系正在内外交困的重重危机之下走向死亡!
二、探究软件死亡之因
互联网时代给企业带来了无限的想象空间。企业的营销模型由传统的4P(产品、定价、地点、促销),引领出基于互联网的ABC模型(任何时间任何地点、基于网络、沟通营销)。企业系统已经从部门级、企业级,发展到社会级的实时在线的应用,应用的范围在深度、广度上都发生了质的变化。
世易时移,变“法”宜矣——当应用需求已从部门、企业上升到社会的层次,我们必须重新考察企业级应用的需求。
一方面,用户需要个性的软件。市场经济条件下,成功的企业,一定是个性化的,有独特的管理方式和企业文化,以此区别于竞争对手,以赢得市场空间。企业的价值一定是个性化的,企业信息化必须从个性出发:企业级应用软件的实施应该充分体现和放大企业的与核心竞争力相关联的个性价值,从而使企业的价值得以提升,这才应该是信息化对企业的核心贡献。如果一个信息化项目不仅不能凸显出企业的个性——反而加剧了企业与同行的“价值同质化”,那就可以判定,这个信息化项目未能获得成功。
另一方面,企业需要灵活的软件。企业的生命周期是一个动态变化的过程。在每个成长阶段,企业都需要有所区别的政策和管理;随着环境的变化,企业的业务和管理方式要相应地发生变化;再加上随着企业概念的外延扩展,如今已变成了一个涵盖供应商、客户以及各种合作伙伴的虚拟组织。因此,企业对灵活性或者弹性的需求变得十分重要,相应的,企业级应用软件也需要更高的弹性。
目前,传统的企业级应用软件产品往往采用两种典型的交付模式。
其一,以套装软件加上二次开发交付客户。此种方式主体上固化了软件的功能结构,只留一小部分参数配置。这样的软件在具体应过过程中还需要大量的二次开发,即使这样,仍然时常不能满足企业的需求。应用软件厂商通常会大肆宣扬自己的产品包含“行业最佳业务实践”,并以“管理专家”的身份对客户的管理模式强行变革,以适应这种标准化的“行业最佳业务实践”。然而每个企业所处的竞争环境千差万别,企业的战略、核心竞争力亦有所不同,企业只有保持自己鲜明的个性,并对环境的变化保持高度的柔性,随时准备调整管理策略,才是生存和发展的关键。试问哪里有这种“放之四海而皆准”的管理真理能解决所有企业的问题?由此可见,所谓的“行业最佳实践”必然是以抹煞企业特征和不适应未来发展需要为代价而实现的。“开盒即用”的方式往往具有良好的系统架构和稳定的系统性能,能够适应一定领域的市场需求,但很难满足不同用户的个性化需求。
其二,为客户从代码级开发定制的软件系统。这种定制开发方式,基本上是从客户的个性化需求出发,进行软件定制。诚然,这种定制开发的软件系统能够满足特定用户的大部分需求,但开发者总是很难全面考虑软件的扩展性、稳定性等架构因素,产品因此而不能快速适应客户的需求变化,同时也很难提高开发的效率。许多软件公司,陷身于在软件定制开发的泥潭中无法自拔——软件知识得不到有效的积累,成本又居高不下,这构成软件公司或者是系统集成公司的发展瓶颈,同时也在一定程度上妨害了软件产业的发展。
显而易见的,上述两种软件开发方式,都不能解决软件随需应变的问题——软件开发方式效率低下,软件结构死板僵化。在这个企业形态不断变化、企业外延不断扩展、企业的环境不断变迁、企业的业务不断调整的时代,这种以一次开发持续使用为特征的软件已日显陈腐和落伍。
三、寻找银弹
“没有银弹!”布鲁克斯如是说——真的就没有任何一种技术或管理上的进步,能够独立承诺大幅度提高软件开发的生产率、可靠性和简洁性吗?
确实,直到上个世纪末,20多年以来,软件行业的生产效率依然没有数量级的提高,软件在帮助传统行业提高效率的同时,自身却成为最原始意义上的“手工行业”。虽然,许多大型的企业级应用软件采取了大规模的生产和协作,但是这种软件往往开发时间长,效率低,无法动态调整,无法由僵硬变得灵活和敏捷。软件业也需要脱离手工作坊时代和工业时代,而走进敏捷定制的后工业时代。
软件生产方式的落后,加之需求和环境的进一步复杂,使得传统软件的生产方式,不但不能缓解软件工程的危机,而是处于不断加深的危机之中。互联网应用时代,企业期望的是以更低的成本,更快的速度,获得高质量、高灵活性的随处可得的软件。显然,依靠传统软件业落后的生产方式和僵化的软件结构,无法面对互联网应用的挑战。矛盾在不断加剧,危机在不断加深。
我的看法是,传统的软件工程的方法无法解决“软件危机”的问题;换言之,不要期望从传统的软件体系中找到真正的“银弹”。
僵化的软件结构无法产生银弹——从代码级做起的软件,强调功能实现,天生具有庞大、僵化、无法适应变化的缺点。编码式的软件,无论是采取何种方式,都无法真正实现“敏捷定制”。代码级的编程、代码级的维护使得效率不可能真正地提高。
落后的生产方式无法产生银弹——从代码级做起的软件,经历了大量重复性的需求分析、设计、编码、测试、维护工作,生产周期长、软件复用性差。依靠这样的生产方式,生产效率如何提高?又如何能保证软件的高质量?
既然传统的软件体系是导致软件危机的根本原因,固守这种软件体系,软件业将永远无法摆脱“软件危机”的噩梦,更无法实现软件大规模敏捷定制的梦想,那么,那颗用以制服“软件人狼”的银弹究竟在何方?
软件之变 | ||||
软件之变 “史前史中,没有别的场景比巨兽在焦油坑中垂死挣扎的场面更令人震撼。上帝见证着恐龙、猛犸象、剑齿虎在焦油中挣扎。它们挣扎得越是猛烈,焦油纠缠得越紧,没有任何猛兽足够强壮或具有足够的技巧,能够挣脱束缚。它们最后都沉到了坑底……过去几十年的大型系统开发就犹如这样一个焦油坑,很多大型和强壮的动物在其中剧烈地挣扎。他们中大多数开发出了可运行的系统——不过,其中只有非常少数的项目满足了目标、时间进度和预算的要求。各种团队,大型的和小型的,庞杂的和精干的,一个接一个淹没在了焦油坑中……” 布鲁克斯《人月神话》 结构之变 我们来解剖一个死亡的大型应用软件系统。在一个有几千员工的企业,在投入了千万级的资金和两年时间之后,一个企业级的业务支撑系统刚刚上线运行。可是企业的组织结构、流程、人员在软件开发的过程中已经发生变化,而且还在变化!软件开发商必须修改软件。软件有一千多页的设计文档,上百万行的代码。“有经验”的程序员跳过了设计思路而直接编写程序源代码。久而久之,软件的设计文档还“刻舟求剑”的停在原地,源代码已经与当初的图示思路大相径庭。实际上,任何事物有了“百万级”的因子之后,都是没有办法直接管理的。上百万行软件源代码几乎无人能懂,并且极难改动和维护,软件因此变成了挣扎于焦油坑中的巨大怪兽。 要解决大型应用软件的难题,必须首先解决软件的结构问题。汇编语言的出现,使软件告别了“0”与“1”组成的“天书”。其后软件的车轮走过高级语言、面向对象、面向服务等不同阶段。直至面向构件的软件技术出现,软件技术人员将挣脱面对大段冗长代码的泥潭。在面向构件的软件中,一个应用系统不是由上百万行的代码组成的,而是由几千个构件经过可视化组装而成的。系统的复杂度有了数量级的下降,而图形化的组装使软件跟应用设计合二为一。 作为对代码式软件体系的颠覆和革新,面向构件的软件体系首先从表达层面填平了代码表达与图形化知识表达两者间的鸿沟,彻底消除了软件源代码与软件设计思路之间的断层。主要优势在于:用户的需求改变可以直接通过构件装配式的图形化设计思路得以体现;永久的屏蔽软件代码层,可以让软件架构师和程序员跳出传统开发模式的局限,只需和图形化的构件打交道,在彻底进化软件表达的同时,也使其改动与维护易如反掌。 在面向构件的软件思路下,简洁表达带来了简洁的软件更新——“随需应变”不再只是一句口号。面向构件的软件体系,松散耦合的构件组装方式,系统不同部件之间的低关联度。重复使用经过考验的构件,可视化的知识表达,系统复杂指数的数量级下降,也使得企业应用更为成熟更为稳定。 面向构件的趋势正为软件行业的预言家所看好。在《软件成功的奥秘》一书中,麦肯锡四位资深专家Detlev Hoch、Cyriac Roeding、Gert Purkert、Sandro Lindner经过对全球一百家最成功的软件公司、450位顶尖领导人物的访谈之后,认为面向构件技术是软件行业未来前景中的核心部分,软件行业提高生产率的主要来源。引用软件专家Brad Cox的话说,面向构件的技术是软件行业的银弹! 追溯历史,面向构件的技术理念渊源已久。Mcllroy在1968年提交NATO软件工程会议的论文《大量生产的软件构件》中,首次提出了“软件组装生产线”的思想。早在20世纪九十年代初,中国科学院的杨芙清院士就提出了构件化软件体系的设想。那以后,采用构件技术实现软件复用,采用“搭积木”方式生产软件,就成为软件开发人员长期以来未能实现的梦想。海内外学者不谋而合对面向构件技术展开的大量探索,归根结底是为了解决软件开发过程中“重复发明轮子”的问题,如何能让同一个轮子也可以用于不同的车。这恰恰印证了中国的一句老话:殊途同归。 生产方式之变 中国正在制造一切。在美国人、欧洲人、日本人看来,的确如此。从打火机、儿童玩具、服装鞋帽到钢琴、计算机主板、飞机配件,我们的政府从不讳言制造业已成为中国经济发展的支柱产业。试想一下,如果能充分借鉴并汲取制造业的发展经验,软件产业会不会在不久的将来成为驱动中国经济增长的又一“强力引擎”? 其实,就如同制造汽车,软件的开发完全可以构筑在“构件组装”的模式之上;这样,软件技术人员可以摆脱“一行行写代码”的低效环节,直接进入“一块块搭配构件”的更高阶段。不仅如此,面向构件的技术彻底打破了原有软件基于代码层开发的固有模式。“构件”取代了“代码”成为了软件的“信息原子”(基本结构单元)。随着构件库的不断充实和完善,灵活的构件、集成式的软件结构将把搭积木式的“组装软件”从梦想变为现实。 面向构件的产品不仅在客户需求吻合度、上线时间、软件质量上领先于同类产品,大大提高了项目的成功率。而且,软件的开发和维护变得空前简单,客户可以随时随地获取应对商业环境变化和IT技术变化的最新信息化方案,真正实现“敏捷定制”。 再从软件应用的角度看——互联网时代的企业应用定义,正在发生革命性的变化。软件在传统的企业应用模式中,是为某一个部门服务的,也是以其所完成的功能表述的,从主观上可以把企业应用分割为人事、财务、行政、ERP、CRM、SCM、BI等等;而在互联网的应用中,横向的部门互动、实时的企业间互动、多样的交互渠道、灵活的业务规则,使得原先意义上的“独立应用”不复存在。客户应用模式的变化,从根本上对软件企业及其产品提出了更高的要求。 综前所述,面向构件不失为软件企业的优选方案——作为软件代码的集合,构件可以完成一个或多个功能的特定服务,也为用户提供了多个接口。通过构件组装,实现契合互联网时代应用需求的全部软件功能,这种解决思路必将为当前的大型企业应用产品画上一个历史性的圆满句号。不久我们看到的企业解决方案 会面目一新,不再单一固化;它是一组或多组面向构件的模块,按照企业自身需要灵活组装,并随着企业的变化不断重组重构、动态匹配。 面向构件的思想,第一次给了软件腾飞的翅膀,可以]快速实现像硬件那样的任意装配定制。过去,有人将软件定义为“编码的知识”,而今,新体系下的软件成为了“构件的知识”——即使说成“构件技术改写软件定义”也丝毫不为过。 产业之变 开发效率是企业生产力。全球范围内的软件从业者都在探寻着“提高软件开发效率”的可行途径。概括说,提高软件开发效率的关键在于提高软件的复用能力和复用程度。 研究报告显示:“一个软件的60%-70%的功能是可以被复用的。”然而现实情况则是,不同的企业总是不断在为其客户开发着几近相同的“轮子”——某种意义上,“不断地重复发明轮子”正是对当前软件生产模式的最恰当的描述。毫无疑问,只有面向构件才能让企业这驾战车(包括软件公司和客户在内)在“软件复用之路”奔驰得更加迅疾、更加平稳。 在长期笼罩着阴霾的软件天空里,面向构件的思想仿佛一道曙光,撕裂了陈腐的旧软件体系——相信进化论吧,最终,旧的一切会被抛弃,取而代之的将会是崭新的面向构件的软件结构。这是一个灵活的软件取代僵化的软件的过程,也是一个新的体系开始产业化的过程。据不完全统计,目前国内外已经有相当一部分前瞻性厂商,开始尝试新的软件体系。 图表:面向构件的软件体系下的软件产业结构
一方面,面向构件的互联网应用基础平台将备受瞩目——该平台将成为应用软件构件化的“金字塔基”,为应用软件向面向构件的技术迁徙,提供开发运行的环境和基础设施。 另一方面,分层级的应用构件将取代应用软件编码——复杂、僵化的应用软件的编码时代将会结束,取而代之的是“敏捷的构件集成时代”的到来。 此外,面向构件的技术还将会极大地促进应用市场的发展。未来以面向构件技术为基础的软件产业必将催生出众多的应用构件厂商,从而形成社会化的分工和交换。这种分工协作带来的明显好处是,面向构件的应用软件在成本、质量、交货期等方面的竞争力将远远超越传统的软件体系结构下的应用软件。 分析面向构件的软件产业的生命周期,大致可划分为五个阶段:创新期、接受期、成熟期早期、成熟期晚期和衰退期。如今,面向构件的软件生产已经跨过了接受期,其标志是面向构件的软件生产思想开始商业化,单个厂商开始采用面向构件的软件生产方式。然而,接受期和成熟期早期之间的产业鸿沟依旧存在。构件理念由接受期向成熟期早期进化,单点突破很多,但尚未形成生态链。可以预见,一旦跨越产业鸿沟,整体产业发展将经历巨变,我们将面临一个雪崩式的发展阶段——根据Gartner Group的预测:“到2005年至少70%的新应用将主要建立在如软件构件和应用框架这类‘构造块’之上。”——我国在构件化软件的探索方面也已悄然前行,国务院信息化工作办公室在《振兴软件产业行动纲要(2002年至2005年)》中,多次提到推广应用软件构件和复用技术,加快构件技术发展的目标要求。国内已经有一些厂商开始通过联盟的方式推动面向构件的软件体系的发展。毋庸置疑,新体系将为中国软件产业提供“后发先至”的宝贵机遇! 软件业变革的帷幕已然拉开,面向构件的软件技术被越来越多的国内外业界专家推崇为软件产业的The One。可以深信,在未来的十年里,我们将有幸目睹软件在面向构件的思想指导下不断发展、日臻成熟。代码式的软件最终会成为历史,软件将以更优美的形式被表达、更优美的方式在生产,并在使用过程中获得更加完美的体验。
|