| 摘要:为了满足对工控大数据的自主分析计算需求，提出了一种基于有向无环图与弹性分布式数据集的工控大数据交互式分析方法。根据该方法采用可视化绘制DAG图构建数据计算过程模型，在此基础上通过基于DAG与RDD的数据分析计算引擎，实现交互式数据分析功能。实践表明，根据该分析方法构建的交互式数据分析系统，让数据分析人员可以通过可视化绘制数据计算流程图的方式自助进行数据统计与探查分析。与现有的数据分析方法相比，采用可视化DAG建模+SparkRDD执行的分析方法，既不需要用户学习SQL脚本的编写方法，也不需要用户了解数据的存储方式与结构，更不需要学习编程语言，即可按照用户自己的分析需求通过拖拽的方式自由查询与分析，所见即所得，显著降低数据分析操作难度，减少学习成本并提高工作效率。基于该方法构建的大数据交互式分析系统可以满足普通业务人员自主进行数据分析计算的需要，同时也可在通过数据挖掘分析驱动业务创新等方面发挥积极作用。 |
| 关键词: 交互式数据分析 大数据 DAG RDD |
|
|
|
|
| Abstract: |
| Key words: |
