大数据技术方面需要哪些支持

![请添加图片描述](https://img-blog.csdnimg.cn/6d035b226de3420fbc92772cd776669b.jpeg)

大数据谈得多了，很多人也厌烦。其实它并非虚无的概念，而是有着直观的作用：媒体行业。我们每天会收到很多新闻，但大部分其实是用户不感兴趣的，离真正的精准性还有很大距离。广告行业。淘宝百度都有关键词，针对关键词是现在最为精准的广告投放方式，接下来将针对用户的年龄、性别、收入层次、兴趣爱好投放广告，大数据在这方面可以有更大作为。零售业。沃尔玛、711这些行业先驱，早已将数据收集分析作为基本业务，产品销量数据、人口统计数据，甚至天气数据都被纳入分析范围，在特定时间上架合适产品。硬件层：物联网设备机遇想做到大数据首先需要有数据。数据怎么来？最基础的数据感知采集，依赖智能手机、PC、手环、VR、搜集收据的汽车自行车等硬件设备。
软银孙正义曾预测：“在未来的20年里，将会有1万亿台物联网设备出现。”随着设备的爆炸性增长，数据总量在未来20年增长将超过3000倍。HBO的新剧《西部世界》让人工智能的话题再次成为热点。对于AI来说，数据也是重要制约因素，没有数据，机器就无从学习。
很多公司期望引入人工智能，但其行业和公司数据积累并不充分，人工智能应用也是想法多于实际。在数据采集设备方面，现在的智能硬件公司尤其是智能手机公司占有先发优势。谷歌拼了命也要做手机，最大的原因在于AI需要设备载体实现。有了硬件载体，才有希望最大化的搜集数据。
除了采集数据的设备，还需要为数据采集设备提供数据接收的服务器，解决数据集中化处理问题；分步式爬虫服务器，解决互联网资源调度问题；硬盘数据库服务器，用于部署分数据库，解决高并发在线数据服务问题；Web服务器，解决大数据平台对外服务问题。软件层：数据安全大挑战随着未来连接到互联网的设备数量几十倍的增加，数据安全性将成为最大挑战。这方面的恶性事件层出不穷。例如雅虎公司泄露5亿条账户的名称、电子邮箱地址、电话号码信息；
今年2月，黑客入侵孟加拉国央行在纽约联邦储备银行的账户，并一举盗走8100万美元，成为全球有史以来最大规模网络盗窃案。这两年，亚马逊AWS、微软Azure、阿里云等云计算巨头也接连曝出故障，导致正在服务的网站中断、用户无法连接服务器。保护物联网安全性，须建立过硬的存储性能。闪存作为物联网设备里必要的组成部分，存储启动代码、设备配置、IP 和数据都依赖于它。
如果攻击者获得系统中内存设备的访问权限，设备中的内容就会面临被清除或修改的可能，从而影响系统功能，甚至会危害到用户本身。之所以说“闪存是保证物联网安全性的关键”，原因在于不同硬件层可以各有所长地发挥作用，以增强安全性和填补漏洞：块锁定：通过设置配置数据位锁定内存块；当此配置数据位状态不正确时，闪存内容将无法修改。
此外，还可以防止意外或恶意修改代码一次性可编程：永久性地锁定内存块，使其无法再进行清除或写入操作；一次性可编程普遍用于保护系统中的初始化或启动代码，在其他内存内容发生损坏的情况下，可让系统在启动后进入已知的良好恢复模式。重放保护单调计数器：这一功能为启动内存中的代码和数据存储添加增量式单调计数，用于保留独特性，还可提高启动前的安全性，使系统可抵御回滚和重放攻击。读取保护：闪存设备中的内存块可设置为禁止内存读取；可防止复制内存中存储的IP或数据。密码访问：在输入有效的64位密码前，阻止系统的读取或修改行为，以保护存储在主阵列内存块中的IP和启动代码。