论文摘要
为推进大数据技术在油田领域的快速融合和应用,提出一种覆盖大数据处理整个生命周期的多功能大数据处理平台。平台融合各类大数据分析框架和机器学习框架,设计面向油田领域,能够支持实时和离线处理的数据挖掘功能。基于Docker容器封装各类计算框架和算法服务,并基于Kubernetes框架完成容器的编排与调度。在系统的架构方式上采用基于微服务的架构方式,将不同技术栈的应用独立分解为单个服务模块,以此来保证业务系统服务的可靠性、可扩展性。这使得企业数据分析人员能够专注于业务数据分析问题,而不必花费大量时间学习框架部署和其他大型数据挖掘技术细节。
论文目录
文章来源
类型: 期刊论文
作者: 郭燚,张卫山,徐亮,翟佳
关键词: 微服务,大数据挖掘
来源: 计算机与现代化 2019年05期
年度: 2019
分类: 信息科技,工程科技Ⅰ辑
专业: 石油天然气工业,计算机软件及计算机应用
单位: 中国石油大学(华东)计算机与通信工程学院,北京科技大学计算机与通信工程学院,中国传媒大学信息与通信工程学院
基金: 国家自然科学基金资助项目(61309024),山东省重点科研项目(2017GGX10140)
分类号: TE4;TP311.13
页码: 25-29+58
总页数: 6
文件大小: 1575K
下载量: 250
相关论文文献
- [1].中小银行数据挖掘思路浅析[J]. 金融电子化 2020(05)
- [2].浅析大数据挖掘中抽样估计法的应用[J]. 现代信息科技 2019(21)
- [3].基于大数据挖掘的广播电视客户价值分析[J]. 科技视界 2019(34)
- [4].基于深度学习的工业领域数据挖掘方法及应用[J]. 数字技术与应用 2019(11)
- [5].基于大数据思维的财务数据挖掘及应用研究[J]. 国际商务财会 2019(11)
- [6].第16届高级数据挖掘和应用国际会议[J]. 软件工程 2020(04)
- [7].基于云计算的大数据挖掘体系构建分析[J]. 中外企业家 2020(11)
- [8].测绘地理信息专业背景下的《时空数据挖掘》课程设计[J]. 南宁师范大学学报(自然科学版) 2020(01)
- [9].智慧医疗下云数据挖掘在精细化医疗管理中的应用[J]. 中医药管理杂志 2020(03)
- [10].高校管理人员教育数据挖掘能力培养的实践价值与实施路径[J]. 中国教育信息化 2020(07)
- [11].大数据环境下的数据挖掘课程教学探索[J]. 中国新通信 2020(06)
- [12].第16届高级数据挖掘和应用国际会议[J]. 软件工程 2020(05)
- [13].基于云计算的大数据挖掘内涵及解决方案研究[J]. 数字通信世界 2020(03)
- [14].基于可拓数据挖掘的建筑立面设计方法研究[J]. 科技传播 2020(08)
- [15].数据挖掘实践教学环节探索[J]. 科技经济导刊 2020(11)
- [16].大数据挖掘与云服务模式的构建[J]. 江西电力职业技术学院学报 2020(01)
- [17].医疗云存储下医院信息数据挖掘及实现技术的探索[J]. 信息与电脑(理论版) 2020(05)
- [18].高校治理视阈下教育数据挖掘的应用与挑战[J]. 高教论坛 2020(04)
- [19].大数据挖掘与分析的关键技术研究[J]. 中国新通信 2020(08)
- [20].浅析数据挖掘[J]. 内江科技 2020(06)
- [21].教育数据挖掘关键技术应用研究[J]. 轻纺工业与技术 2020(06)
- [22].物联网海上舰船航行数据挖掘方法[J]. 舰船科学技术 2020(12)
- [23].云环境中大数据挖掘的有效花费研究[J]. 上海理工大学学报 2020(03)
- [24].对《零售数据挖掘与应用》课程教学的思考[J]. 知识经济 2020(18)
- [25].教育数据挖掘和学习分析研究进展[J]. 牡丹江师范学院学报(自然科学版) 2020(03)
- [26].第16届高级数据挖掘和应用国际会议[J]. 软件工程 2020(08)
- [27].电商市场中大数据挖掘的分析以及决策探究[J]. 中国新通信 2020(12)
- [28].关于大数据挖掘中的数据分类算法技术的研究[J]. 电脑知识与技术 2020(20)
- [29].长输油气管道大数据挖掘与应用[J]. 物联网学报 2020(03)
- [30].数据挖掘实践课程教学模式的探索[J]. 教育教学论坛 2020(36)