会议专题

基于大数据的水利数据中心建设

随着信息技术在水利行业应用的日趋广泛,水利信息化采集、分析、业务处理等方面产生的数据量急剧膨胀,现代水利数据中心的建设需求随之变得更加迫切.利用大数据技术,可高效的存储和处理水文、水利工程监测等长系列数据以及文档、图片、视频等非结构化数据.本文通过总结水利大数据的特点以及大数据架构、实时数据处理和元数据等关键技术,提出基于传统关系型数据库与分布式文件系统相结合的、支持实时计算和元数据管理的水利数据中心架构.分布式文件系统、实时数据处理组件的引入,可满足多源、多结构水利数据统一存储和处理的需求。而以MapReduce为代表的大数据处理技术,可突破传统数据分析的视角,以截然不同的方式分析海量水利数据,其成果展示方式也将随之改变。随着大数据技术在水利行业不断地深入应用,行业用户的思维方式将迅速转变,越来越多的应用需求也将随之涌现,基于大数据技术的水利数据中心的研究范围和深度也将得到极大的提升和拓展。

水利行业 数据中心 需求分析 架构设计

龚琪慧 刘伟 李坤 游攀利

长江水利委员会长江勘测规划设计研究院 430010

国内会议

2015(第三届)中国水利信息化与数字水利技术论坛

郑州

中文

243-248

2015-04-02(万方平台首次上网日期,不代表论文的发表时间)