论文摘要
铁路货运超偏载监控设备在日常运行中生成并积累了大量的结构化数据,如何突破传统业务系统处理能力的限制实现对海量历史数据的分车计算是对超偏载数据挖掘的关键所在。概述货车超偏载数据分车计算,针对存在的问题,提出以大数据平台为载体,基于分布式内存计算框架实现海量超偏载数据的分车计算,经2种方案进行验证,结果充分证明分车计算方案的正确性。依托铁路数据服务平台的分布式计算架构,对海量的铁路货车超偏载检测数据进行统计分析,实现分车(运输任务去重)计算,为后续开展铁路货运分析奠定基础。
论文目录
文章来源
类型: 期刊论文
作者: 王喆,杨连报,刘宗洋
关键词: 铁路大数据,超偏载检测,分布式计算,数据仓库
来源: 铁道货运 2019年05期
年度: 2019
分类: 工程科技Ⅱ辑,经济与管理科学,信息科技
专业: 铁路运输,计算机软件及计算机应用
单位: 中国铁道科学研究院集团有限公司电子计算技术研究所
基金: 中国铁路总公司科技研究开发计划课题(2017X006-B)
分类号: TP311.13;U294
DOI: 10.16669/j.cnki.issn.1004-2024.2019.05.05
页码: 22-26
总页数: 5
文件大小: 1311K
下载量: 93