基于国产化服务器集群的海量数据处理负载均衡技术

基于国产化服务器集群的海量数据处理负载均衡技术

论文摘要

国产服务器可控性强、安全性高,但处理性能较国外产品有较大差异。通过搭建国产服务器集群,可以达到所需的处理性能,但需要解决集群内负载均衡的问题。为改善目前航天海量数据处理服务器集群负载不均的现状,本文提出"动""静"结合的负载均衡方法。在数据接收环节采用静态负载均衡,利用LVS进行任务调度;在数据处理环节采用动态负载均衡,根据数据流量和服务器负载来分配处理任务。实验结果表明,该方法可以有效地均衡集群中各个服务器的负载。

论文目录

  • 1 国产化平台海量数据处理系统
  •   1.1 系统组成
  •   1.2 数据处理流程
  •     1.2.1 数据接收
  •     1.2.2 数据解析
  •     1.2.3 数据抽样
  •     1.2.4 数据入库
  • 2 集群内负载均衡技术
  •   2.1 数据接收环节的静态负载均衡
  •     2.1.1 技术原理
  •     2.1.2 实现策略及调度算法
  •   2.2 数据抽样环节的动态负载均衡
  •     2.2.1 统一调度
  •     2.2.2 按需优化
  • 3 实验验证
  •   3.1 LVS接收转发数据统计
  •   3.2 系统负载监测
  • 4 结束语
  • 文章来源

    类型: 期刊论文

    作者: 聂璐,郑吉洲,王丽娜,刘海彬,王子豪

    关键词: 服务器集群,数据处理,负载均衡,海量数据

    来源: 航天控制 2019年01期

    年度: 2019

    分类: 工程科技Ⅱ辑,信息科技

    专业: 航空航天科学与工程,计算机硬件技术,自动化技术

    单位: 北京航天自动控制研究所,宇航智能控制技术国家级重点实验室

    分类号: TP368.5;V557

    DOI: 10.16804/j.cnki.issn1006-3242.2019.01.009

    页码: 51-56

    总页数: 6

    文件大小: 281K

    下载量: 110

    相关论文文献

    • [1].高校办公环境下的服务器集群技术应用[J]. 电子技术与软件工程 2019(09)
    • [2].服务器集群在发射台平台系统中的应用[J]. 广播电视信息 2016(08)
    • [3].服务器集群技术探析[J]. 数字技术与应用 2013(10)
    • [4].基于环境参数的服务器集群自动保护系统设计[J]. 现代电子技术 2017(08)
    • [5].浅谈服务器集群技术在数字化校园中的应用[J]. 硅谷 2011(09)
    • [6].服务器集群及负载均衡的研究[J]. 电脑知识与技术 2009(26)
    • [7].服务器集群技术的介绍与应用[J]. 沙漠与绿洲气象 2009(S1)
    • [8].普招网报系统中服务器集群与缓存的研究[J]. 电脑知识与技术 2009(34)
    • [9].服务器集群技术在数字化校园中的应用[J]. 计算机与信息技术 2008(05)
    • [10].服务器集群技术研究与应用[J]. 信息系统工程 2018(07)
    • [11].服务器集群负载均衡的建模与仿真研究[J]. 通讯世界 2014(06)
    • [12].服务器集群技术综述[J]. 电脑知识与技术 2013(22)
    • [13].浅析服务器集群的设计、实现与测试[J]. 信息系统工程 2012(03)
    • [14].服务器集群负载均衡的建模与仿真研究[J]. 计算机仿真 2012(03)
    • [15].服务器集群在学校中的应用[J]. 信息与电脑(理论版) 2010(22)
    • [16].趋于云计算的虚拟服务器集群[J]. 南通大学学报(自然科学版) 2009(01)
    • [17].服务器集群网络中纠缠疑似攻击检测技术研究[J]. 计算机仿真 2015(05)
    • [18].解读金融企业大规模服务器集群运维[J]. 通信世界 2010(02)
    • [19].基于服务器集群及云存储技术应用的驾考监管系统设计[J]. 江苏建筑 2018(S1)
    • [20].服务器集群技术在医院中的应用[J]. 现代医院 2008(02)
    • [21].智能电网系统中费控服务的优化调度研究[J]. 计算机学报 2020(02)
    • [22].基于云服务器集群三层分布式云监控系统的设计与实现[J]. 福建电脑 2015(01)
    • [23].基于软件定义网络的服务器集群负载均衡技术研究[J]. 电子与信息学报 2018(12)
    • [24].服务器集群中的负载均衡策略研究[J]. 电脑知识与技术 2019(08)
    • [25].服务器集群中负载均衡专利申请分析[J]. 科技创新导报 2017(32)
    • [26].服务器集群技术在视频编辑网络中的扩展应用[J]. 中国报业 2018(14)
    • [27].多媒体服务器集群系统节能建模与在线优化[J]. 信息与控制 2013(01)
    • [28].校园网服务器集群和备份技术应用研究[J]. 长江大学学报(自然科学版)理工卷 2009(04)
    • [29].云计算服务器集群的时间同步方法[J]. 指挥信息系统与技术 2018(04)
    • [30].基于目标规划的服务器集群系统请求调度模型[J]. 计算机仿真 2010(12)

    标签:;  ;  ;  ;  

    基于国产化服务器集群的海量数据处理负载均衡技术
    下载Doc文档

    猜你喜欢