• 综合
  • 标题
  • 关键词
  • 摘要
  • 学者
  • 期刊-刊名
  • 期刊-ISSN
  • 会议名称
搜索

作者:

阚京 (阚京.) | 陈彩 (陈彩.) | 梁毅 (梁毅.)

收录:

CQVIP

摘要:

伴随着数据的爆炸式增长,越来越多的大数据业务分析与处理选择分布式计算平台.目前针对大数据的分布式计算框架都支持DAG式的任务编排.由于大数据采集来源以及分布式存储系统特点,很多使用DAG框架进行计算的应用都是增量式的大数据集,但现有的DAG框架对这样的数据集进行计算时有许多冗余,造成计算资源浪费.提出了在DAG框架上进行增量式复用的方法,并针对FILTER算子特点提出了基于FILTER算子匹配的间接复用机制.

关键词:

DAG计算 分布式计算 增量计算 查询优化 计算复用

作者机构:

  • [ 1 ] [阚京]北京工业大学
  • [ 2 ] [陈彩]北京工业大学
  • [ 3 ] [梁毅]北京工业大学

通讯作者信息:

电子邮件地址:

查看成果更多字段

相关关键词:

相关文章:

来源 :

软件导刊

ISSN: 1672-7800

年份: 2017

期: 7

卷: 16

页码: 26-29

被引次数:

WoS核心集被引频次: 0

SCOPUS被引频次:

ESI高被引论文在榜: 0 展开所有

万方被引频次: -1

中文被引频次:

近30日浏览量: 4

归属院系:

在线人数/总访问数:6097/2939104
地址:北京工业大学图书馆(北京市朝阳区平乐园100号 邮编:100124) 联系我们:010-67392185
版权所有:北京工业大学图书馆 站点建设与维护:北京爱琴海乐之技术有限公司