• 设为首页
  • 加入收藏
  • 联系邮箱
  • 网站首页
  • 期刊介绍
    • 期刊简介
    • 历任主编
    • 期刊荣誉
  • 编委会
    • 社长及主编
    • 主任委员
    • 编委名单
  • 投稿指南
    • 作者须知
    • 投稿步骤
    • 范文(规范细则)
    • 稿件处理流程
    • 著作权转让协议
  • 期刊影响力
  • 开放获取
  • 出版道德政策
    • 出版伦理声明
    • 学术不端认定和处理方法
    • 广告及市场推广
    • 同行评议流程
    • 斟误和撤回
    • 回避制度
    • 文章署名及版权转让
  • 历年目次
  • 联系我们
  • English
站内检索    
 
韦 彪,刘天琪,苏学能.依托Hadoop架构的海量变压器实时监测与存储方案构建[J].电测与仪表,2020,57(10):6-12.
Wei Biao,Liu Tianqi,Su Xueneng.Construction of massive transformer real-time monitoring and storage solution relying on Hadoop architecture[J].Electrical Measurement & Instrumentation,2020,57(10):6-12.
依托Hadoop架构的海量变压器实时监测与存储方案构建
Construction of massive transformer real-time monitoring and storage solution relying on Hadoop architecture
DOI:DOI: 10.19753/j.issn1001-1390.2020.10.002
中文关键词:  智能电网  在线监测  变压器  Hadoop框架  HBase
英文关键词:Smart  grid, online  monitoring, transformer, Hadoop  Framework, HBase
基金项目:
        
作者中文名作者英文名单位
韦 彪Wei Biao四川大学电气工程学院
刘天琪Liu Tianqi四川大学电气工程学院
苏学能Su Xueneng国网四川省电力公司电力科学研究院
摘要点击次数: 2108
中文摘要:
      随着智能电网的建设以及电力变压器在线监测技术的成熟,电力变压器在线监测数据呈现出体量大、类型多等特点。使用传统存储技术存储变压器在线监测数据,已不能满足实时、快速的需求。为此,设计基于Hadoop集群的变压器在线监测数据存储方案。该方案利用HBase(分布式列式数据库)具有快速实时读写数据的优势,将变压器在线监测系统采集的海量数据实时快速地存储。为能自动快速实时收集数据和避免因数据流过大造成系统崩溃,分别采用Flume(日志收集工具)和Kafka(分布式流处理平台)收集和缓存数据。最后,以电力变压器在线监测的油色谱数据为例,验证了所提存储方案的可行性和有效性。
英文摘要:
      With the construction of smart grids and the maturity of on-line monitoring technology for power transformers, the online monitoring data of power transformers are characterized by large volumes and types. Using traditional storage technology to store transformer online monitoring data can no longer meet real-time and fast requirements. To this end, a Hadoop cluster-based transformer online monitoring data storage scheme is designed. This solution utilizes the advantages of HBase (distributed columnar database) to quickly read and write data in real time, and stores the massive data collected by the transformer online monitoring system in real time and quickly. To automatically and quickly collect data in real time and avoid system crashes due to excessive data flow, Flume (log collection tool) and Kafka (distributed stream processing platform) are used to collect and cache data, respectively. Finally, the oil chromatogram data of power transformer online monitoring is taken as an example to verify the feasibility and effectiveness of the proposed storage scheme.
查看全文  查看/发表评论  下载PDF阅读器
关闭
  • 哈尔滨电工仪表研究所有限公司
  • 中国电工仪器仪表信息网
  • 中国仪器仪表学会
  • 中华人民共和国新闻出版总署
  • 中国科技期刊编辑学会
  • 黑龙江省科学技术协会
  • 编辑之家
  • 中国知网
  • 万方数据库
  • 维普网
  • 北极星电力网
  • 中华中控网
  • 网站首页
  • 期刊介绍
    • 期刊简介
    • 历任主编
    • 期刊荣誉
  • 编委会
    • 社长及主编
    • 主任委员
    • 编委名单
  • 投稿指南
    • 作者须知
    • 投稿步骤
    • 范文(规范细则)
    • 稿件处理流程
    • 著作权转让协议
  • 期刊影响力
  • 开放获取
  • 出版道德政策
    • 出版伦理声明
    • 学术不端认定和处理方法
    • 广告及市场推广
    • 同行评议流程
    • 斟误和撤回
    • 回避制度
    • 文章署名及版权转让
  • 历年目次
  • 联系我们
地址:哈尔滨市松北区创新路2000号    邮编:150028
邮箱:dcyb@vip.163.com    电话:0451-86611021;87186023
© 2012 电测与仪表    哈公网监备2301003445号
黑ICP备11006624号-1
技术支持:北京勤云科技发展有限公司