大数据环境下数据挖掘面临的挑战和机遇
时间:2018-12-31 16:54 来源:毕业论文 作者:毕业论文 点击:次
摘 要:大数据环境的出现给人类的信息检索、数据挖掘造成了巨大的不便,大数据环境下的对数据查询的需求对于数据挖掘的手段和方法要求更高,传统的数据挖掘方法无法满足这一需求。这就为更加便捷的、更加系统的数据挖掘形式的出现带来了机遇和挑战。本文主要阐述了大数据和数据挖掘的定义和特点以及大数据环境下的数据挖掘,简单介绍了数据挖掘在大数据环境下的主要应用领域和对基于云计算的大数据挖掘的研究,论述了大数据环境下数据挖掘所面临的机遇和挑战。32108 毕业论文关键词:大数据;数据挖掘;云计算 The Opportunities and Challenges of Data mining in the Environment of the Big data Abstract: The emergence of Big data caused great inconvenience to information retrieval and Data mining. Under the environment of Big data, the demand to data query of the means and methods of Data mining is rising. Traditional Data mining methods can not satisfy this requirement. It is more convenient, more system appeared in the form of data mining brings opportunities and challenges. This article mainly expounds the definition and features of Big data and Data mining and Data mining in the environment of Big data, introduces the main application field of data mining in the Big data environment and the Data mining research based on cloud computing, this paper discusses opportunities and challenges of Data mining in the Environment of Big data. Key Words:Big data; Data mining; Cloud computing 目 录 摘 要 1 引言 1 1.大数据及数据挖掘 2 1.1大数据 2 1.2数据挖掘的基本介绍 2 2.大数据与数据挖掘的关系 3 2.1大数据时代的数据挖掘 3 2.2大数据时代数据挖掘的意义 4 3.基于大数据的数据挖掘 4 3.1大数据挖掘的主要方法 4 3.2 大数据挖掘面临的机遇和挑战 5 4.基于云计算的大数据挖掘研究 9 4.1云计算的定义 9 4.2 基于云计算的海量数据挖掘 9 5. 总结 10 参考文献 11 致 谢 12 大数据环境下数据挖掘面临的机遇和挑战 引言 随着信息时代的到来,人类自身所产生的数据正成倍的增长。信息的成倍增长给信息查询带来了极大的不便,人们突然发现想找到自己所需的、有用的数据变的越来越困难。现如今的数据库系统能够实现对数据的很多有用的操作,数据挖掘技术的产生对于解决发现存在于数据之间的关系和规则难,无法根据已知数据预测未来发展趋势等这些问题有很大的帮助。这就给数据挖掘工作带来机遇的同时也提出了挑战。 1.大数据及数据挖掘 1.1大数据 大数据正如浪潮般席卷世界的同时,已成为当今的研究热点并应用于各个领域,如科学技术、人文、教育、经济、医疗还有社会的其他各个领域。大数据是指数据量很大、数据类别特别复杂的,不能用传统数据库存储,管理和处理的数据集。在文克托.迈尔•舍恩伯格和肯尼斯•库克耶的著作《大数据时代》这本书中有介绍到大数据的4V特点,即Volume(大量),Velocity(高速)、Variety(多样)、Veracity(真实)。大数据时代一个最显著的特征就是数据量已经达到了人类无法想像的程度。IDC经过多年的研究,得出这一结论:每年全球产生的数据量正按指数增长的趋势上升,约每两年翻一番,增长速度基本符合摩尔定律。人们正以极度高涨的热情在与数据进行交互,大数据时代来临了。 (责任编辑:qin) |