虚拟化和云计算让Hadoop变得更弹性

概要
以Hadoop为代表的大数据技术是一系列颠覆性的创新技术。它使得企业可以低成本的存储海量的数据，在分布式系统上并行处理海量结构化、非结构化数据，进行分析和查询。但是作为一项新的技术，企业从开始接触到大规模生产应用会面临各种问题和挑战。经过与大量企业的沟通，我们归纳出企业应用大数据技术的三个阶段，总结出每个阶段的主要需求，并使用WMware的虚拟化与云计算技术帮助企业更好、更容易的使用大数据技术。 通过使用我们的技术，用户可以把精力集中在使用大数据技术上，而不必花大量的时间去学习大数据系统的搭建、管理与维护。VMware的vMotion，HA与FT技术大大改善了Hadoop系统的可用性，大幅降低系统的计划与非计划宕机时间。通过服务器集群的池化与共享，资源得到最大限度的利用，并且保证了各个系统之间的有效隔离。减少企业对于大数据系统的资金投入与运维费用的同时，加快任务处理的速度。

个人简介

董波是VMWare Serengeti项目的最早的规划者之一。领导了Serengeti自问世以来的4个版本的研发与发布。现在担任包括Serengeti在内的虚拟化Hadoop与大数据产品的产品线经理，致力于让私有云平台成为最佳的大数据应用平台。 董波曾长期从事分布式系统和企业级目录服务器的研发工作，这使他对于分布式高并发、低延迟系统建立了深刻的认识。董波最早涉足分布式存储和计算领域始于早期与NEC研究院合作的可扩展网页存储系统，从那时起他就对此产生了极大的兴趣并结下了不解之缘。他在微软亚洲研究院搜索技术中心从事包括垂直搜索相关性，分布式网页存储与处理系统平台的工作，这形成了他对大数据系统的架构与应用的知识与经验。他还曾负责过移动互联网终端的产品管理与研发工作，从中了解到移动互联网生态系统与商业模式，看到大数据系统在移动互联网应用中的重要性。

作为InfoQ主办的全球顶级盛会，QCon在伦敦、北京、东京、纽约、圣保罗、 杭州、旧金山举办过多次，这次是首次走进中国西南软件名都。希望能给当 地的公司、技术社区和技术人员提供一流的学习、交流平台。