一种面向大数据实时应用的元协数据流调度方法

一种面向大数据实时应用的元协数据流调度方法

论文摘要

大数据并行应用往往由多个计算作业和通信作业构成。协数据流(coflow)技术能对这类系统的通信作业进行抽象建模,实现高效的网络数据调度,提高系统的整体执行效率。与此同时,大数据应用的计算作业的资源定制也会影响系统的执行时间。考虑到这类应用的实时性需求,将大数据应用工作流中的计算作业的可定制性与通信作业的可调度性相结合,通过优化计算作业的资源定制与协数据流的调度来保证应用的实时性需求并优化执行成本。针对该问题,提出一种基于遗传算法的元协数据流调度方法。通过与已有的协数据流调度算法的对比,证明该方法能够有效地保证实时应用的时间期限约束并能够优化应用的执行成本。

论文目录

  • 1 相关研究
  • 2 问题描述
  • 3 GAC算法
  • 4 实验及分析
  • 5 结束语
  • 文章来源

    类型: 期刊论文

    作者: 王俊超,庞建民,单征,李志刚,张勇

    关键词: 协数据流,实时应用,资源定制,工作流,云计算

    来源: 信息工程大学学报 2019年06期

    年度: 2019

    分类: 信息科技

    专业: 计算机软件及计算机应用

    单位: 信息工程大学,陆军烟安防空兵学院郑州校区

    分类号: TP311.13

    页码: 727-732

    总页数: 6

    文件大小: 466K

    下载量: 18

    相关论文文献

    • [1].基于动态窗口的大数据流式处理技术研究[J]. 数字技术与应用 2020(03)
    • [2].基于邻域相似的大数据流滞后相关性挖掘仿真[J]. 计算机仿真 2020(06)
    • [3].数据流技术在汽车维修中的应用探讨[J]. 时代汽车 2019(07)
    • [4].基于大数据的定性数据流聚类优化模型研究[J]. 西安文理学院学报(自然科学版) 2019(04)
    • [5].一种基于数据流的异常值检测改进算法[J]. 中国科技信息 2017(23)
    • [6].云计算中数据流存储负载均衡优化仿真[J]. 计算机仿真 2018(10)
    • [7].大数据流式计算系统综述[J]. 成组技术与生产现代化 2016(04)
    • [8].数据流技术在汽车维修中的应用[J]. 科技展望 2016(16)
    • [9].数据流分类挖掘中的概念变化研究[J]. 计算机科学 2014(S2)
    • [10].浙江传媒学院加快数据治理形成“数据流”[J]. 中国教育网络 2020(Z1)
    • [11].面向非平衡与概念漂移的数据流分类的研究[J]. 现代计算机 2020(04)
    • [12].基于迁移学习的数据流分类研究综述[J]. 天津理工大学学报 2019(03)
    • [13].试分析电网自动化中数据流技术的运用[J]. 电工文摘 2016(06)
    • [14].海量数据流的分类稳定性决策与评判数学模型仿真[J]. 科技通报 2016(02)
    • [15].非平稳数据流下的网络入侵检测优化方法研究[J]. 计算机仿真 2016(09)
    • [16].分布式数据流分类关键技术研究[J]. 华北科技学院学报 2015(04)
    • [17].数据流技术在电喷发动机维修中的应用分析[J]. 湖南农机 2014(05)
    • [18].数据流技术在电网自动化中的应用实践[J]. 电子技术与软件工程 2014(08)
    • [19].数据流技术在汽车维修中的运用[J]. 黑龙江科技信息 2014(26)
    • [20].数据流系统降载研究综述[J]. 计算机应用研究 2008(10)
    • [21].基于协调数据流抢占机制的原理及设计[J]. 电脑与电信 2008(10)
    • [22].基于多维分层采样的时间维度型大数据流整合系统设计[J]. 现代电子技术 2020(05)
    • [23].数据流计算环境下的集群资源管理技术[J]. 大数据 2020(03)
    • [24].大数据流计算特点及“单一窗口”适用场景探讨[J]. 中国口岸科学技术 2020(08)
    • [25].一种对数据流进行聚类的改进算法[J]. 电子设计工程 2017(22)
    • [26].分布式数据流上的高性能分发策略[J]. 软件学报 2017(03)
    • [27].一种基于质量估算的空间数据流聚类算法研究[J]. 计算机应用研究 2017(09)
    • [28].融合互近邻降噪的动态数据流分类研究[J]. 计算机科学与探索 2016(01)
    • [29].多媒体云计算下的大规模数据流调度方法研究[J]. 现代电子技术 2015(20)
    • [30].一种面向演进数据流的结合相似准则和反例信息的分类方法[J]. 控制与决策 2013(11)

    标签:;  ;  ;  ;  ;  

    一种面向大数据实时应用的元协数据流调度方法
    下载Doc文档

    猜你喜欢