大数据在水质数据分析中的应用

摘要：

随着物联网的不断发展,在水质监测中要面对海量的不同类型的传感器采集数据,数据爆发性增长且传统数据挖掘技术难以针对文本数据进行分析,因此建立基于大数据的存储平台,对海量的水质监测数据进行快速、准确的分析极为重要.本文提出基于Hadoop的框架大数据平台实现低成本下海量的水质监测数据分布式存储及分布式并行计算分析,提高了水质监测数据存储和分析计算能力.

关键词： 水质监测数据 分布式存储 分布式并行计算 大数据平台

作者: 万俊杰

作者单位: 长江勘测规划设计研究院

会议类型: 国内会议

会议名称: 2015(第三届)中国水利信息化与数字水利技术论坛

会议地点: 郑州

会议语种:中文

页码: 234-242

在线出版日期: 2015-04-02（万方平台首次上网日期，不代表论文的发表时间）