大数据可视化技术挑战和措施

　　数据可视化在大数据场景中面临许多新的挑战，包括数据规模、数据融合、图表绘制效率、图表表达能力、系统可扩展性、快速构建能力、数据分析和数据交互等。

 

　　数据规模

 

　　大数据规模大、价值密度降低，受限于屏幕空间，所能显示的数据量有限。因此为了有效显示使用者所关注的数据和特征，需要采用有效的数据压缩方法。目前已有的方法针对数据本身进行采样或聚合，未考虑数据可视化的显示特性。近期一些学者提出了针对特定可视化场景的数据压缩方法。但是目前依然缺少通用的面向可视化的数据压缩方法，也缺少实际应用的产品。

 

　　数据融合

 

　　大数据的另一个表现是数据类型多样，常常分布于不同的数据库。如何融合不同来源、不同类型的数据，为使用者提供统一的可视化视角，支持可视化的关联探索与关系挖掘，是一个重要的问题。其中涉及数据关联的自动发现、多类型数据可视化、知识图谱构建等多个技术问题。

 

　　图表绘制效率

 

　　随着数据规模的增加，图表可视化的效率问题越来越凸显。目前，有些可视化产品开始采用WebGL借助GPU实现平行绘制。越来越多的数据可视化产品采用B/S架构，其性能一定程度上优先于浏览器；另外，由于跨终端需求越来越普遍，也对图表绘制提出了更多挑战。

 

　　图表表达能力

 

　　随着产生数据的来源增加，数据类型不断增加，数据使用者对于数据的交互需求越来越多，已有的数据可视化产品完全无法满足使用者的可视化需求，时常出现需要的可视化形式产品不支持或支持不够等问题。这就对于系统的图表表达能力提出了更高的要求，同时对于系统支持使用者的个性化定制提出了新的要求。

 

　　系统可扩展性

 

　　大数据对于数据可视化系统的扩展能力提出了新的挑战，系统的可扩展性将成为衡量一个大数据可视化系统的重要指标。

 

　　快速构建能力

 

　　大数据伴随着快速变化与增加的数据，如何帮助用户及时理解数据，发现问题，离不开数据可视化的快速构建能力，即根据使用者数据驱动的图表快速定制能力。数据在s级甚至ms级更新的情况下，有没有可能实现图表的秒级更新与快速定制。另外，图表定制后的快速共享与响应功能也将成为必要的系统功能。

 

　　数据分析

 

　　传统的BI工具主要集中在数据筛选、聚合及可视化功能，已经不能满足大数据分析的需求，Gartner提出了“增强分析”，数据可视化只有结合丰富的大数据分析方法，将数据的探索式分析形成一个闭环，才能实现完整的大数据可视化产品，有效帮助使用者理解数据。预测性分析是大数据的趋势，数据可视化有效结合预测方法，将有助于使用者的决策。

 

　　数据交互

 

　　大数据可视化使用者需要通过可视化与图表背后的数据和处理逻辑进行交互，由此反应使用者的个性化需求，帮助用户用一种交互迭代的方式理解数据。在传统的交互手段基础上，更加自然的交互方式，将有助于使用者与数据更好的交互，也有助于拓展大数据可视化产品的使用范围与应用场景。

 

　　大数据可视化技术与产品所面临主要挑战的同时也对其发展带来了新机遇，例如亿信华辰自主研发的一款一站式数据分析工具——亿信ABI，迎难而上。

 

　　ABI中除了有word分析报告，现在还支持即席报告。即席报告是完全面向业务人员的自助式报告，自由布局排版，打造专属的word版式报告。幻灯片报告可以像PPT一样播放，可引用上述分析表，直接用于汇报展示。系统根据用户使用场景及需求进行了深入分析，具有操作简单，上手快的特点。敏捷看板是ABI分析展示的重要方式之一，业务人员可以进行探索式自主分析，只需要简单拖拽维度指标就能自动生成表格、统计图等。

 

　　看板集即基于相同筛选条件的多张敏捷看板的集合，是在看板功能上的一次深挖，能同时对多张敏捷看板进行对比分析，具有操作简单，功能完善的特点。

 

　　ABI支持数据回填，可以通过表格、表单、列表展现出数据，并对数据进行操作后保存到数据库表中。可运用在活动、简历、测评、收款、问卷等多种场景中。已经存在业务数据，需要修改和补充部分数据后进行数据分析，可以通过一站式数据填报解决方案。

 

　　数据可视化已经成为人们理解数据的重要途径。在大数据时代，人们需要有效的数据可视化工具来直观地分析大规模数据并快速捕捉数据变化，有效应对这些挑战将有助于大数据可视化随着大数据和数据科学的普及，推动其应用到更多领域。