大数据成就了一个新时代的转型。我们不停地制造数据、分享数据、消费数据,它成为了我们的生活必需品,关于它的概念也由此应运而生,并一步步地、深刻地影响着我们的日常生活生产方式。因此,我们需要了解它,应用它。麦肯锡在《大数据:创新、竞争和生产力的下一个前沿》一书中对大数据界定为大小超出了传统数据库软件工具的抓取、存储、管理和分析能力的数据群。[5]该定义明确指出大数据是数据群,一个数据总量超出现有技术以及硬件设施的数据群体,他很明确地向我们展示了大数据是什么,也明确地指明了大数据研究的方向。
(二)大数据的特性
综上麦肯锡对大数据的诠释,以及至今为止,各组织及个人对大数据进行的研究,总结大数据有以下四大特性:
海量化数据(Volume)——数据总量庞大且增长飞快。随着信息技术的发展,数据的生产和储存需求飞速增长,全球数据总量激增,计量单位也已攀升至ZB级别。IDC公司于2011年6月发表的数据报告中明确指出,仅2011年全球各类数据总量1。8ZB左右,预测今后每两年全球各类数据总量至少将翻一番,可见数量之大,增长之快。
多样化结构(Variety)——数据品种繁多、来源丰富。数据的品种不再仅限于传统的、单一的格式化数据,只要是来自互联网或是通过互联网传播的博客、图片、地理位置信息、视频、病毒编码等等所有你所能想到的能在互联网上进行交流的信息都将会成为大数据的一员。
高速化处理(Velocity)——要求数据的处理速度飞速,必须达到实时处理的程度。它遵循一秒定律,必须要在一秒内处理所有数据并得到结果,否则就将成为过期的或无效的数据。这也是大数据时代与传统数据时代的开发技术上的本质性区别。
低密度价值(Value)——数据具有稀缺性、不确定性和多样性。大规模的数据当中只有很少的一部分数据有直观价值,但也正因为大数据稀缺、不确定及多元化而导致有价值的这一小部分才是大数据运用的正真价值所在。
当然,这四大特性也仅是目前公认的大数据特征,在众多的研究中,还有其他特征,比如:真实性,即使数据去伪存真,创造更真是的价值;数据粘度,权衡数据间的关联性;数据有效性……这些特性的研究价值是不可估量的,它们可以为我们提供研究方向,补充大数据,从而引发新一轮的探就,或许未来就会成为大数据众多特征的一员。
(三)大数据的功能论文网
1。大数据的平台功能。大数据的平台功能是从大数据的技术层面和物理层面产生的,它主要功能是解决数据的存储、整合与分析等问题。大数据平台收集大量的数据,这些数据只要求数量而不要求质量,然后按特定的要求和渠道建成数据群,再通过可以高速处理数据的计算机按照人的意志来处理特定的数据群,最后将结果反馈给人们。
2。大数据的预测功能。这是大数据应用的核心,[ ]它的工作原理就是把海量的数据以数学算法的方式来计算出事件发生的可能性,从而实现对未来的预测。
以与我们生活息息相关的气象预报为例,它就引入了云计算和大数据应用服务。中国气象服务局收集的主要数据有:60多年以来的各项气象数据;全国观测站、卫星、雷达等探测到的各项气象数据;短期或中长期的天气各项数据以及国际交互获取的气象观测数据等等。[2]如今智能手机在这方面做的很有预见性,他们将气象服务“移植”到手机上,通过手机定位,能够随时随地精确显示出天气变化,个人可以轻松地掌握天气的走向。 大数据时代政府治理能力面临的挑战及对策(2):http://www.youerw.com/guanli/lunwen_202408.html