大数据时代的数据挖掘——从应用的角度看大数据挖掘

李涛; 曾春秋; 周武柏; 周绮凤; 郑理

doi:10.11959/j.issn.2096-0271.2015041

您当前的位置：

首页 >

文章列表页 >

大数据时代的数据挖掘——从应用的角度看大数据挖掘

研究 | 更新时间：2024-06-03

- 大数据时代的数据挖掘——从应用的角度看大数据挖掘
- Data Mining in the Era of Big Data:From the Application Perspective
- 大数据 2015年1卷第4期页码：49-72
- 作者机构：
  
  1. 南京邮电大学计算机学院南京 210023
  2. 美国佛罗里达国际大学迈阿密 33199
  3. 厦门大学自动化系厦门 361005
- 作者简介：
  
  [ "李涛，男，南京邮电大学计算机学院、软件学院院长，南京邮电大学大数据研究院院长。2004年7月获美国罗彻斯特大学（University of Rochester）计算机科学博士学位，2004-2014年先后任美国佛罗里达国际大学（Florida International University）计算机学院助理教授、副教授（终身教授）、教授（full professor）、研究生主管（graduate program director）。由于在数据挖掘及应用领域成效显著的研究工作，曾多次获得各种荣誉和奖励，其中包括2006年美国国家自然科学基金委颁发的杰出青年教授奖，2010年IBM大规模数据分析创新奖，并于2009年获得佛罗里达国际大学最高学术研究奖。" ]
  [ "曾春秋，男，美国佛罗里达国际大学计算机科学博士生，南京邮电大学计算机学院大数据项目组成员。2009年7月-2012年1月为阿里巴巴（中国）网络技术有限公司高级数据工程师。主要研究兴趣包括大规模分布式数据挖掘和系统管理，发表多篇顶级数据挖掘国际期刊和会议论文，参与多本数据挖掘相关应用领域书籍的编写工作。" ]
  [ "周武柏，男，美国佛罗里达国际大学计算机科学博士生，南京邮电大学计算机学院大数据项目组成员。主要研究兴趣包括数据挖掘和计算机系统管理，发表多篇顶级数据挖掘国际期刊和会议论文，参与多本数据挖掘相关应用领域书籍的编写工作。" ]
  [ "周绮凤，女，博士，厦门大学自动化系副教授。2002年起从事数据挖掘及智能系统方面的研究工作，2014-2015年在美国佛罗里达国际大学访学，主要研究兴趣包括机器学习、数据挖掘及其在可持续发展等领域的应用。" ]
  [ "郑理，男，2014年在美国佛罗里达国际大学获得计算机科学博士学位，南京邮电大学计算机学院项目研究员。主要研究兴趣包括信息检索、推荐系统及灾难信息管理，发表多篇顶级数据挖掘国际期刊和会议论文，参与多本数据挖掘相关应用领域书籍编写。" ]
- 基金信息：
- DOI：10.11959/j.issn.2096-0271.2015041
  中图分类号： TP311.13
- 网络首发：2015-11，
  
  纸质出版：2015-11-20
- 稿件说明：
移动端阅览
李涛, 曾春秋, 周武柏, 等. 大数据时代的数据挖掘——从应用的角度看大数据挖掘[J]. 大数据, 2015,1(4):49-72.

Data Mining in the Era of Big Data:From the Application Perspective[J]. BIG DATA RESEARCH, 2015, 1(4): 49-72.
李涛, 曾春秋, 周武柏, 等. 大数据时代的数据挖掘——从应用的角度看大数据挖掘[J]. 大数据, 2015,1(4):49-72. DOI： 10.11959/j.issn.2096-0271.2015041.

Data Mining in the Era of Big Data:From the Application Perspective[J]. BIG DATA RESEARCH, 2015, 1(4): 49-72. DOI： 10.11959/j.issn.2096-0271.2015041.

摘要

介绍了大数据时代数据挖掘的特点、任务及难点，分析了大数据挖掘的核心架构，提出大数据的核心和本质，即应用、算法、数据和平台4个要素的有机结合。在此基础上介绍了本团队研究设计的大数据挖掘系统FIU-Miner。该系统是一个用户友好并支持在分布式环境中进行高效率计算和算法快速集成的数据挖掘系统平台，使得数据分析人员能够快速有效地进行各类数据挖掘任务。最后，介绍了基于FIU-Miner的3个典型的成功应用案例：高端制造业数据挖掘、空间数据挖掘和商务智能数据挖掘。

Abstract

The technical characteristics

tasks

and difficulties of data mining in big data era were introduced.The system architecture of large-scale data mining was analyzed.Then

the developed FIU-Miner which is a fast

integrated

and user-friendly system for data mining

was introduced.FIU-Miner supports user-friendly rapid data mining task configuration

flexible cross-language program integration

and effective resource management in heterogeneous environments.Finally three successful real-world applications of FIU-Miner: advanced manufacturing data mining

spatial data mining

and business intelligence data mining

were presented to demonstrate its efficacy and effectiveness.

关键词

Keywords

references

严霄凤 , 张德馨 . 大数据研究 . 计算机技术与发展 , 2013 , 23 ( 4 ): 168 ～ 172

Yan X F , Zhang D X . Big data research . Computer Technology and Development , 2013 , 23 ( 4 ): 168 ～ 172

李国杰 . 对大数据的再认识 . 大数据 , 2015 001

Li G J . Further understanding of big data . Big Data Research , 2015 001

李涛 . 数据挖掘的应用与实践: 大数据时代的案例分析 . 厦门 : 厦门大学出版社 , 2013

Li T . Data Mining Where Theory Meets Practice . Xiamen : Xiamen Press , 2013

Hall M , Frank E , Holmes G , et al . The Weka data mining software: an update . SIGKDD Explorations , 2009 , 11 ( 1 ): 10 ～ 18

Owen S , Anil R , Dunning T , et al . Mahout in Action . Shelter Island: Manning Publications , 2011

Prekopcsak Z , Makrai G , Henk T , et al . Radoop: analyzing big data with rapid miner and hadoop . Proceedings of RapidMiner Community Meeting and Conference, , Dublin, Ireland , 2011

Yu L , Zheng J , Wu B , et al . Bc-pdm: data mining, social network analysis and text mining system based on cloud computing . Proceedings of the 18th ACM SIGKDD International Conference on Knowledge Discovery and Data Mining (KDD’12) , Beijing, China , 2012

Zeng C Q , Jiang Y X , Zheng L , et al . Fiu-Miner: a fast, integrated, and user-friendly system for data mining in distributed environment . Proceedings of the 19th ACM SIGKDD International Conference on Knowledge Discovery and Data Mining (KDD’13) , Chicago, Illinois, USA , 2013 : 1506 ～ 1509

Lei D , Hitt M A , Goldhar J D . Advanced manufacturing technology: organizational design and strategic flexibility . Organization Studies , 1996 , 17 ( 3 ): 501 ～ 523

Zheng L , Zeng C Q , Li L , et al . Applying data mining techniques to address critical process optimization needs in advanced manufacturing . Proceedings of the 20th ACM SIGKDD International Conference on Knowledge Discovery and Data Mining (KDD’14) , New York, USA , 2014 : 1739 ～ 1748

Zhang M J , Wang H B , Lu Y , et al . TerraFly GeoCloud: an online spatial data analysis and visualization system . ACM Transactions on Intelligent Systems and Technology (TIST) , 2015 , 6 ( 3 )

Zeng C Q , Li H T , Wang H B , et al . Optimizing online spatial data analysis with sequential query patterns . Proceedings of the 15th IEEE International Conference on Information Reuse and Integration , San Francisco, CA, USA , 2014

Li L , Shen C , Wang L , et al . iMiner:mining inventory data for intelligent management . Proceedings of the 23rd ACM International Conference on Information and Knowledge Management , Shanghai, China , 2014

浏览量

1074

下载量

CSCD

文章被引用时，请邮件提醒。

提交

工具集

关联资源

论大数据视角下的地球空间信息学的机遇与挑战

大数据分析与应用技术创新平台

收益管理中基于大数据仓库的需求无约束估计：框架与挑战

面向大数据的粒计算理论与方法研究进展

大数据环境下的管理信息系统发展研究