【华为云-上云之路】网络AI模型开发（3）数据时序标注、数据探索

前言

本篇文章主要分享在华为云NAIE的数据服务中，完成数据入湖、数据处理后，进行数据时序标注、数据探索。

如果没有订阅相关的AI服务、数据服务，或数据入湖的朋友，可以参考：

【华为云-上云之路】网络AI模型开发（1）创建IAM用户、订阅AI服务

【华为云-上云之路】网络AI模型开发（2）数据入湖、数据处理

目录

数据时序标注

简介、作用、特点

实际操作

数据探索

简介、特点

实际操作

---

数据时序标注

简介

对数据进行标注后，给每个数据贴有标签，可以用于有监督学习；在无监督学习中，对原始数据进行标注后，能对模型进行算法验证和评估。在KPI异常中，用于检测非常重要的数据；

作用

1. 有监督学习：可以提升监督学习训练过程中KPI检测准确率；
2. 无监督学习：做算法验证评估。

进一步说明

• 监督学习：使用标注工具对原始数据进行标注，并将标注数据用于训练。用户基于训练结果进行确认和重新标注，并将标注数据重新用于训练，提升KPI检测准确率。 
• 无监督学习：使用标注工具对原始数据进行标注，对模型进行算法验证和评估。 用户基于训练结果进行确认和重新标注，对模型进行算法验证和评估。数据标注 服务是为数据工程师、数据科学家等提供的辅助标注工具。 

什么是KPI异常检测？？

比如：Web服务的稳定性主要靠运维来保障，运维人员通过监控各种各样的关键性能指标（KPI）来判断Web服务是否稳定

参考：https://zhuanlan.zhihu.com/p/41201506

进一步了解：https://blog.csdn.net/devcloud/article/details/106680824（华为云-网络KPI异常检测之时序分解算法）

https://blog.csdn.net/qq_34219959/article/details/101779795（连续区间多类型KPI异常检测）

 

特点

1）在KPL标注中，标注类型有点标注、整行标注、CL标注；

2）标注结果直观显示。

 

实际操作

1）选择“数据资产管理服务”，进入服务  https://www.hwtelcloud.com/

 

2）选择“智能工具 > 时序数据标注”，进入时序数据标注服务管理控制台页面，单击“标注”

 

3）选择OBS文件，使用第二篇文章上传的15_ATS_M477106162 .csv文件

4）结果文件

结果文件存贮路径不填写时，标注完成后自动存贮在源文件路径下，在源文件 加后缀_Lable.csvs； 也可自定义存贮路径，必须以.csv 结尾（以为原来的文件也是以.csv结尾的）

5）选择“点标注”，单击“下一步”，注意指标名称有多种时，根据实际情况选择，比如选择C478156420

 

6）单击“开始标注”，来到如下页面，选择一个标注工具进行标注

 

标注工具有四种，根据自己实际情况选择，比如选择纵向选择

先用鼠标选择标注的范围，然后会出现如下图：

其他功能可以都尝试一下呀。将标注结果进行保存，单击“保存结果”；

 

好啦，标注完成啦。

 

数据探索

简介

我们使用数据探索服务，可以看到数据的分布情况，以及部分趋势规律；支持交互式的跨异构数据源的数据统一分析与探索，挖掘数据深度价值。

特点

1）能直观显示数据的分布，通过对数据进行有效值、均值、方差、最大和最小值等进行分析，从而挖掘数据深度价值；

2）分析数据比较高效。

 

实际操作

1）先来到数据探索的页面 https://console.huaweicloud.com/dataplan/?region=cn-north-4&locale=zh-cn#/dataPlan/dataExplorer

 

2）我们先创建查询，单击“添加数据集文件”。

 

3）我们选择要分析分数据文件，比如：15_ATS_M477106162 .csv文件

 

4）选择结果字段，即：选择要分析的列名称；数据通常由多列组成的。

我这边全都选择上了。

 

5）看到刚才选择的数据啦：

 

6）使用工具进行分析数据，可以选择“绘制图形”，里面有多种类型的数据图

注意使用工具进行绘制图形前，先选择数据哈（可以选择多列）

例如，选择3列数据：

 

7）其他功能都可以尝试一下

 

好啦，数据探索完成啦。