用电信息采集系统非结构化数据管理设计

作     者：祝恩国 刘宣 葛磊蛟 ZHU Enguo;LIU Xuan;GE Leijiao

作者机构：中国电力科学研究院北京100192 天津大学电气与自动化工程学院天津300072 

出 版 物：《电力系统及其自动化学报》 (Proceedings of the CSU-EPSA)

年 卷 期：2016年第28卷第10期

页      面：123-128页

核心收录：

学科分类：080802[工学-电力系统及其自动化] 0808[工学-电气工程] 08[工学] 

基　　金：国家电网公司基础性前瞻性科技资助项目(JL-71-14-001) 

主　　题：用电信息采集系统 非结构化数据 框架设计 海量数据 数据挖掘 

摘      要：针对用电信息采集系统的非结构化数据具有海量、接入点多而分散等特点,本文提出一种用电信息采集系统非结构化数据管理设计方案。首先,对用电信息采集系统的非结构化数据进行分类。其次,提出了数据采集、数据存储和数据挖掘等3部分的管理设计方案:数据采集主要实现非结构化数据的收集;数据存储包括数据预处理和Hadoop两部分,完成海量数据的快速存储;数据挖掘按照文本、视频、音频3种类别分类处理,实现海量数据挖掘应用。该方案对用电信息采集系统的海量非结构化数据管理,有一定的参考价值。