交通大数据：一种基于微服务的敏捷处理架构设计

杜圣东; 杨燕; 滕飞

doi:10.11959/j.issn.2096-0271.2017030

您当前的位置：

首页 >

文章列表页 >

交通大数据：一种基于微服务的敏捷处理架构设计

研究 | 更新时间：2024-06-03

- 交通大数据：一种基于微服务的敏捷处理架构设计
- Traffic big data:an agile architecture design based on micro service
- 大数据 2017年3卷第3期页码：2017030
- 作者机构：
- 作者简介：
  
  [ "杜圣东（1981-），男，西南交通大学信息科学与技术学院讲师，中国计算机学会（CCF）和国际计算机学会（ACM）会员，主要研究方向为数据挖掘、机器学习、交通大数据、医疗大数据等。" ]
  [ "杨燕（1964-），女，西南交通大学信息科学与技术学院教授、博士生导师，主要研究方向为大数据分析与挖掘、人工智能、教学管理等。" ]
  [ "滕飞（1984-），女，博士，西南交通大学信息科学与技术学院讲师，CCF和ACM会员，主要研究方向为云计算、工业大数据等。" ]
- 基金信息：
  
  国家重点研发计划基金资助项目;The National Key Research and Development Program of China(2016YFC0802209);国家科技支撑计划基金资助项目;The National Science and Technology Support Program of China(2015BAH19F02)
- DOI：10.11959/j.issn.2096-0271.2017030
  中图分类号： TP274
- 网络首发：2017-05，
  
  纸质出版：2017-05-20
- 稿件说明：
移动端阅览
杜圣东, 杨燕, 滕飞. 交通大数据：一种基于微服务的敏捷处理架构设计[J]. 大数据, 2017,3(3):2017030.

Shengdong DU, Yan YANG, Fei TENG. Traffic big data:an agile architecture design based on micro service[J]. Big data research, 2017, 3(3): 2017030.
杜圣东, 杨燕, 滕飞. 交通大数据：一种基于微服务的敏捷处理架构设计[J]. 大数据, 2017,3(3):2017030. DOI： 10.11959/j.issn.2096-0271.2017030.

Shengdong DU, Yan YANG, Fei TENG. Traffic big data:an agile architecture design based on micro service[J]. Big data research, 2017, 3(3): 2017030. DOI： 10.11959/j.issn.2096-0271.2017030.

摘要

面对智慧交通广泛的大数据应用场景和技术需求，一般大数据系统难以适应多种处理情况并做出快速响应。针对这一问题，首次提出了敏捷大数据方法论，对其概念、处理流程、核心原则与关键技术等进行了研究和探索。基于数据科学迭代性本质，设计了面向微服务的敏捷大数据架构，对交通大数据微服务化、交通大数据融合等关键环节进行了详细设计和论述。敏捷大数据架构的提出为交通大数据环境下的高效、灵活数据挖掘和机器学习提供了新思路、新方法。

Abstract

Faced with a wide range of intelligent transportation application scenarios and technical requirements

the general big data system is difficult to adapt to a variety of processing and make a quick response.In order to solve this problem

the methodology of agile big data for the first time was put forward.Based on the iterative nature of data science

the agile big data architecture based on micro service was designed

and the key points of the traffic oriented micro service and data fusion technology were discussed.The agile big data architecture provides new idea and method for efficient and flexible data mining and machine learning under the environment of traffic big data.

关键词

Keywords

references

李国杰 , 程学旗 . 大数据研究:未来科技及经济社会发展的重大战略领域——大数据的研究现状与科学思考 [J ] . 中国科学院院刊 , 2012 ( 6 ): 647 - 657 .

LI G J , CHENG X Q . Research status and scientific thinking of big data [J ] . Bulletin of the Chinese Academy of Sciences , 2012 ( 6 ): 647 - 657 .

郑宇 . 城市计算概述 [J ] . 武汉大学学报(信息科学版) , 2015 ( 1 ): 1 - 13 .

ZHENG Y . Introduction to urban computing [J ] . Geomatics and Information Science of Wuhan University , 2015 ( 1 ): 1 - 13 .

杨芙清 , 梅宏 , 李克勤 . 软件复用与软件构件技术 [J ] . 电子学报 , 1999 ( 2 ): 69 - 76 .

YANG F Q , MEI H , LI K Q . Software reuse and software component technology [J ] . Acta Electronica Sinica , 1999 ( 2 ): 69 - 76 .

王珊 , 王会举 , 覃雄派 , 等 . 架构大数据:挑战、现状与展望 [J ] . 计算机学报 , 2011 ( 10 ): 1741 - 1752 .

WANG S , WANG H J , QIN X P , et al . Architecting big data:challenges,studies and forecasts [J ] . Chinese Journal of Computers , 2011 ( 10 ): 1741 - 1752 .

孟小峰 , 慈祥 . 大数据管理:概念、技术与挑战 [J ] . 计算机研究与发展 , 2013 , 50 ( 1 ): 146 - 169 .

MENG X F , CI X . Big data management:concepts,techniques and challenges [J ] . Journal of Computer Research and Development , 2013 , 50 ( 1 ): 146 - 169 .

CHEN H M , KAZMAN R , HAZIYEV S . Agile big data analytics development:an architecture-centric approach [C ] // Hawaii International Conference on System Sciences,Jan 5-8,2016,Koloa,HI,USA . New Jersey:IEEE Press , 2016 : 5378 - 5387 .

NAMIOT D,SNEPS-SNEPPE M . On micro-services architecture [J ] . International Journal of Open Information Technologies , 2014 , 2 ( 9 ): 24 - 27 .

程学旗 , 靳小龙 , 王元卓 , 等 . 大数据系统和分析技术综述 [J ] . 软件学报 , 2014 ( 9 ): 1889 - 1908 .

CHENG X Q , JIN X L , WANG Y Z , et al . Survey on big data system and analytic technology [J ] . Journal of Software , 2014 ( 9 ): 1889 - 1908 .

WIRTH R , HIPP J . CRISP-DM:towards a standard process model for data mining [C ] // The Fourth International Conference on the Practical Application of Knowledge Discovery and Data Mining,April 18-20,2000,Kyoto,Japan .[S.l.:s.n. ] , 2000 : 1 - 11 .

孟小峰 , 杜治娟 . 大数据融合研究:问题与挑战 [J ] . 计算机研究与发展 , 2016 ( 2 ): 231 - 246 .

MENG X F , DU Z J . Research on the big data fusion:issues and challenges [J ] . Journal of Computer Research and Development , 2016 ( 2 ): 231 - 246 .

ZHENG Z , ZHU J , LYU M R . Servicegenerated big data and big data-asa-service:an overview [C ] // IEEE International Congress on Big Data,June 27- July 2,2013,Santa Clara,CA,USA . New Jersey:IEEE Press , 2013 : 403 - 410 .

FELTER W , FERREIRA A , RAJAMONY R , et al . An updated performance comparison of virtual machines and Linux containers [J ] . Lecture Notes in Computer Science , 2014 ( 1140 ): 438 - 453 .

BREWER E A , . Kubernetes and the path to cloud native [C ] // The Sixth ACM Symposium on Cloud Computing,August 27-29,2015,Kohala Coast,Hawaii,USA . New York:ACM Press , 2015 : 167 - 167 .

LI L , TANG T , WU C . A REST service framework for fine-grained resource management in container-based cloud [C ] // IEEE International Conference on Cloud Computing,June 27-July 2,2015,New York,NY,USA . New Jersey:IEEE Press , 2015 : 645 - 652 .

浏览量

1717

下载量

CSCD

文章被引用时，请邮件提醒。

提交

工具集

关联资源

基于分布式缓存加速容器化深度学习的优化方法