Research and design of railway big data platform architecture
-
摘要: 中国铁路已积累、沉淀了大量数据。数据量大、结构复杂、来源多样的铁路大数据需要一种新的架构模式进行数据的存储与计算。为适应铁路大数据发展的需要,对铁路大数据平台进行了架构研究与设计,将大数据技术与不同数据源的特点相结合,使平台既能对现有业务进行快速响应,又能对海量历史数据进行价值深挖。为满足复杂大量数据的存储与计算,提高数据处理效率提供技术支撑。Abstract: China Railway has accumulated and precipitated a large amount of data. Railway big data with large amount of data, complex structure and diverse sources need a new architecture model for data storage and calculation. In order to meet the needs of the development of railway big data, this paper studied and designed the architecture of railway big data platform. In order to meet the needs of the development of railway big data, this paper studies and designs the structure of railway big data platform, combines the big data technology with characteristics of different data sources, so that the platform can not only respond to the existing business quickly, but also dig deep into the value of massive historical data. It provides technical support for the storage and calculation of large amount of complex data and the improvement of data processing efficiency.
-
Keywords:
- big data /
- data architecture /
- data processing
-
-
[1] 马小宁,马建军,史天运,等. 物联网技术在铁路的应用研究[J]. 中国铁路, 2015(7):42-43. [2] 冯歆尧,彭泽武. 基于广东电网数据仓库大数据架构研究[J]. 电力学报, 2015(30):520-521. [3] 单杏花,王富章,朱建生,等. 铁路客运大数据平台架构及技术应用研究[J]. 铁路计算机应用, 2016, 25(9):14-15. [4] 铁路网铁路大数据时代下的大作为[EB/OL].[2017-03-1]. http://news.tielu.cn/yixian/2017-03-10/130119.html. [5] 王同军. 中国铁路大数据应用顶层设计研究与实践[J]. 中国铁路, 2017(1):9-10. [6] 马小宁,李平,史天运. 铁路大数据应用体系架构研究[J]. 铁路计算机应用, 2016, 25(9):10-11. [7] 朱广劼,陈敏伟,龚德鹏,等. 铁路货运非结构化数据的应用与应用框架研究[J]. 交通运输工程与信息学报, 2017(15):57-58. [8] [美]W.H.Inmon Daniel Linstedt.数据架构[M].唐富年,译.北京:人民邮电出版社, 2017:116-117. [9] 中国铁路总公司. 铁路数据服务平台建设方案[Z]. 北京:中国铁路总公司, 2016:5-7. [10] 王喆,戚小玉,东春招,等. 大数据时代两款敏捷商业智能工具对比分析[J]. 铁路计算机应用, 2016, 25(9):80-81. -
期刊类型引用(18)
1. 王瑞，张雨，刘彦明，王玮，赵鹏. 基于物联网的地下工程安全监测云平台研发及系统集成. 铁道标准设计. 2024(06): 129-136+170 . 
百度学术
2. 舒伟权，朱俊彦. 大数据背景下船员培训驾驶舱平台设计与实现——以浙江国际海运职业技术学院船员培训为例. 武汉船舶职业技术学院学报. 2024(03): 104-110 . 百度学术
3. 李成龙，喻冰春，李鑫，李佳懿，杨臻. 和谐型机车故障预测与健康管理系统总体设计. 铁路计算机应用. 2023(02): 23-27 . 本站查看
4. 胡平，张骞，钱银，毛萌，田健. 铁路企业财务报销数字化平台方案研究. 铁路计算机应用. 2023(05): 32-35 . 本站查看
5. 宋宗莹，王文斌，刘子扬，周瑾，刘永壮. 重载铁路运输大数据分析平台架构设计研究. 铁路通信信号工程技术. 2023(11): 44-49 . 百度学术
6. 吴丽，李平，刘忠东，苏尔慈，于行健. 雅万高铁智能信息化方案研究. 中国铁路. 2023(12): 154-162 . 百度学术
7. 江少斌，夏彦凯，姚军，陆峰. 基于大数据技术的铁路企业人才管理信息平台方案研究. 铁路计算机应用. 2022(04): 36-41 . 本站查看
8. 姚莉，陶凯，张文轩，刘国跃，王凡. 基于5G技术的铁路基础设施动态检测数据实时汇聚方案研究. 铁路计算机应用. 2022(04): 1-6 . 本站查看
9. 燕玲，赵程，景亮，陈燕静. 人工智能技术在城市轨道交通的应用与探索. 信息与电脑(理论版). 2022(13): 181-184 . 百度学术
10. 王喆. 铁路大数据治理体系研究. 网络安全与数据治理. 2022(11): 30-35 . 百度学术
11. 王喆，马小宁，邹丹，王沛然，孙思齐. 基于铁路数据服务平台的铁路数据资产管理研究. 铁路计算机应用. 2021(03): 23-26 . 本站查看
12. 董咚. 国家能源集团货车状态修生产指挥系统构建研究. 铁道货运. 2021(06): 49-56 . 百度学术
13. 景亮，赵程，燕玲，张森. 基于毫米波雷达的城市轨道交通全自动运行设计与探索. 智能城市. 2021(16): 7-10 . 百度学术
14. 刘新，吕峰，孙玉明，李福顺. 基于大数据的铁路安全信息与技术规章协同分析系统. 铁路计算机应用. 2020(02): 34-37 . 本站查看
15. 刘其韬. 铁路局集团公司数据分析能力体系建设的实践与思考. 铁路计算机应用. 2020(05): 22-26 . 本站查看
16. 谢飞，魏盛昕，张奕男. 基于Greenplum的城轨信号系统车载日志大数据分析平台. 铁路计算机应用. 2020(06): 30-33+38 . 本站查看
17. 刘菱琳，周祖斌，杨志清，曲成，王婷. 基于大数据的应用体系架构设计研究. 电子设计工程. 2020(23): 25-28+33 . 百度学术
18. 朱洁琳，吴伟，瞿建平. 大数据在铁路标准制修订工作中的应用. 铁道技术监督. 2019(12): 14-17 . 百度学术
其他类型引用(5)
计量
- 文章访问数: 124
- HTML全文浏览量: 7
- PDF下载量: 68
- 被引次数: 23
下载:
