• 综合
  • 标题
  • 关键词
  • 摘要
  • 学者
  • 期刊-刊名
  • 期刊-ISSN
  • 会议名称
搜索

作者:

闫健卓 (闫健卓.) | 高凯丽 (高凯丽.) | 许红霞 (许红霞.) | 于涌川 (于涌川.)

收录:

CQVIP

摘要:

针对自然界与人类社会二元水循环产生的海量水务观测数据,现有水务数据管理系统存在存储负荷大,数据库扩展困难,查询速度慢的问题,无法满足存储与分析的需要。针对问题,首先,结合虚拟化技术、Hadoop基础架构,设计分布式大数据存储平台的基本架构;其次,依据现有水务大数据情况及实际业务数据库表,实现分布式大数据存储平台的设计;最后,完成从集中式平台到分布式平台的数据迁移代码实现,并进行数据迁移实验测试。实验结果验证了分布式大数据存储平台设计方案的可行性与有效性,可为大规模行业数据的存储与处理提供一种理想的分布式解决方案。

关键词:

Hadoop集群 分布式存储 大数据 存储平台 数据迁移 水务数据 虚拟化

作者机构:

  • [ 1 ] 北京工业大学信息学部数字社区教育部工程研究中心

通讯作者信息:

电子邮件地址:

查看成果更多字段

相关关键词:

来源 :

水利信息化

年份: 2019

期: 03

页码: 17-24

被引次数:

WoS核心集被引频次: 0

SCOPUS被引频次:

ESI高被引论文在榜: 0 展开所有

万方被引频次:

中文被引频次:

近30日浏览量: 1

在线人数/总访问数:2475/2922371
地址:北京工业大学图书馆(北京市朝阳区平乐园100号 邮编:100124) 联系我们:010-67392185
版权所有:北京工业大学图书馆 站点建设与维护:北京爱琴海乐之技术有限公司