在数字经济时代,数字化转型正在重新定义并支撑企业管理的进化。对传统企业而言,数字化转型涉及从根本上对战略、运营和技术进行彻底改造。企业数字化转型的关键在于组织变革与管控模式转型、制造模式与业务模式创新,以及基于大数据的智能分析、智能决策,最终实现颠覆式创新、全渠道多接触点的客户体验和运营数字化、智能化的目标。
工欲善其事,必先利其器
在这里相信有许多想要学习大数据的同学,大家可以+下大数据学习裙:957205962,即可免费领取套系统的大数据学习教程……
大数据作为实现新 IT 与企业管理创新融合的关键技术,是重构企业智慧的关键。利用大数据等技术,可以从客户体验、企业运营和业务模式等多方面推进企业数字化转型。如推进企业运营平台化,推动客户、供应商、员工、创客和消费者全程深度参与价值创造过程;创新制造模式、业务模式,如支撑C2M、用户直连制造、网络协同制造、全渠道接触点的营销服务、共享服务、服务外包等业务模式;如推进智能决策、预测性分析、智能制造,实现集团管控精准、智能、实时、可视…… 大数据的重要作用可见一斑。那么,大数据究竟是什么呢?它的定义、特点是什么呢?它又能应用在哪些方面呢?相信通过这篇文章你可以对大数据有一个全新全面的认识。
大数据是什么
大数据(Big Data)是指“指无法在一定时间内用常规软件工具对其内容进行抓取、管理和处理的数据集合。”业界通常用4个V(即Volume、Variety、Value、Velocity)来概括大数据的特征。
数据体量巨大(Volume)。截至目前,人类生产的所有印刷材料的数据量是200PB,而历史上全人类说过的所有的话的数据量大约是5EB(1EB=210PB)
数据类型繁多(Variety)。相对于以往便于存储的以文本为主的结构化数据,非结构化数据越来越多,包括网络日志、音频、视频、图片、地理位置信息等,这些多类型的数据对数据的处理能力提出了更高要求。
价值密度低(Value)。价值密度的高低与数据总量的大小成反比。如何通过强大的机器算法更迅速地完成数据的价值“提纯”成为目前大数据背景下亟待解决的难题。
处理速度快(Velocity)。大数据区分于传统数据挖掘的最显著特征。根据IDC的“数字宇宙”的报告,预计到2020年,全球数据使用量将达到35.2ZB。
大数据的类型
传统企业数据(Traditional enterprise data):包括 CRM systems的消费者数据,传统的ERP数据,库存数据以及账目数据等。
机器和传感器数据(Machine-generated /sensor data):包括呼叫记录(Call Detail Records),智能仪表,工业设备传感器,设备日志(通常是Digital exhaust),交易数据等。
社交数据(Social data):包括用户行为记录,反馈数据等。如Twitter,Facebook这样的社交媒体平台。
总的来说,所有产业都会或多或少的从这三类大数据中受益,只是多少、快慢、发展程度等的不同。
大数据应用
1985年,我国国家统计局明确地把我国产业划分为三大产业:农业(包括林业、牧业、渔业等)定为第一产业;工业(包括采掘业、制造业、自来水、电力、蒸汽、煤气)和建筑业定为第二产业;把第一、二产业以外的各行业定为第三产业。
由于数据缺乏以及从业人员本身的原因,第一、第二产业的发展速度相对于第三产业来说会迟缓一些。第三产业即除第一、第二产业以外的向全社会提供各种各样劳务的服务性行业,主要是服务业。其中第三产业可具体分为两大部门:一是流通部门;二是服务部门。
第三产业细分
第一层次,流通部门。包括交通运输行业、邮电通讯行业、物资供销和仓储行业。
第二层次,为生产和生活服务的部门。包括金融业、商业饮食业、保险业、地质普查业、房地产业、公用事业、技术服务业和生活服务修理业务;
第三层次,为提高科学文化水平和居民素质服务的部门。包括教育文化、广播电视事业、科学研究事业、卫生、体育和社会福利事业;
第四层次,为社会公共需要服务的部门。包括国家机关、党政机关、社会团体、以及军队和警察公安司法机关等。
Mckinsey报告中各个行业利用大数据的难易度以及发展潜力
可以发现,相对于第一产业和第二产业来说,第三产业凭借自身的优势,大多汇聚了当前最海量的数据以及大批的科研中坚力量。同时与其他产业比起来,对于第一产业和第二产业的企业这就是差距,发现差距并着力于发展,实现弯道超车。
大数据的价值
大家都知道赌场的每一个游戏有一定的游戏规则,每一次游戏的赢钱和输钱是随机的,当重复次数多了,随机事件呈现出一定的概率,从统计学的概率上看赢钱的概率会比输钱的概率大那么一点点,可能差不了多少(百分之零点几到百分之几),但赌场每天的客流量非常巨大,而这就是赌场赚钱的根本,大量的随机样本的频率近似于它的概率。
赌场正是大数定理的一个具体应用场景,不管是预测未来、精准营销,还是优化资源配置,亦或降低风险等等,对于大数据而言,获得的数据量越大,种类越多,能挖掘到的价值也就越多。
Mckinsey报告中开放数据为七大行业带来的经济价值
(教育,运输,消费品、电力、石油与天然气、医疗护理、消费金融)
数据分析
含义:数据分析是指通过建立审计分析模型对数据进行核对、检查、复算、判断等操作,将被审计单位数据的现实状态与理想状态进行比较,从而发现审计线索,搜集审计证据的过程。
目的:对于企业来说,数据分析的目的,是为了给管理者更好的做出决策,优化企业的资源配置,为企业增加营收,创造价值。
If you can't measure it, you can't manage it.
--Peter Drucker
管理大师德鲁克这句话说的是如果没法衡量、度量,就没法进行管理。而数据就是用来衡量和度量的,数据通过分析得出支持决策的结论,为管理者提供帮助。
数据分析的类型
数据分析分为描述性统计分析、探索性数据分析以及验证性数据分析。
描述性统计分析就是对数据做简单的运算并展现,比如传统的数据报表等;
探索性数据分析是为了检验假设而对数据进行分析,侧重于在数据之中发现新的特征;
验证性数据分析则侧重于已有假设的证实或证伪。
数据分析的实施过程
介绍了这么多,大家应该对数据分析有了基本的概念了,随着机器学习和深度学习的发展,当前数据分析也在往有监督学习和无监督学习的方向发展,为数据分析人员提供更深层次的数据分析结果。在未来,“机器学习+人”的数据分析模式将成为数据分析的主流形式,为各个产业的大数据分析提供不同程度的提升。