大数据系统和分析技术综述(PDF 20页)

内容摘要
近几年,大数据迅速发展成为科技界和企业界甚至世界各国政府关注的热点.《Nature》和《Science》等相
继出版专刊专门探讨大数据带来的机遇和挑战.著名管理咨询公司MKXZ称:“数据已经渗透到当今每一个行业
和业务职能领域,成为重要的生产因素.人们对于大数据的挖掘和运用,预示着新一波生产力增长和消费盈余浪
潮的到来” [1] .美国政府认为大数据是“未来的新石油”,一个国家拥有数据的规模和运用数据的能力将成为综合
国力的重要组成部分,对数据的占有和控制将成为国家间和企业间新的争夺焦点.大数据已成为社会各界关注
的新焦点,“大数据时代”已然来临.
什么是大数据,迄今并没有公认的定义.从宏观世界角度来讲,大数据是融合物理世界(physical world)、信息
空间和人类社会(human society)三元世界的纽带,因为物理世界通过互联网、物联网等技术有了在信息空间
(cyberspace)中的大数据反映,而人类社会则借助人机界面、脑机界面、移动互联等手段在信息空间中产生自己
的大数据映像 [2,3] .从信息产业角度来讲,大数据还是新一代信息技术产业的强劲推动力.所谓新一代信息技术
产业本质上是构建在第三代平台上的信息产业,主要是指大数据、云计算、移动互联网(社交网络)等.IDC 预测,
到 2020 年第三代信息技术平台的市场规模将达到 5.3 万亿美元,而从 2013 年~2020 年,IT 产业 90%的增长将由
第三代信息技术平台驱动.从社会经济角度来讲,大数据是第二经济(second economy [4] )的核心内涵和关键支撑.
第二经济的概念是由美国经济学家 Auther 在 2011 年提出的.他指出由处理器、链接器、传感器、执行器以及
运行在其上的经济活动形成了人们熟知的物理经济(第一经济)之外的第二经济(不是虚拟经济).第二经济的本
质是为第一经济附着一个“神经层”,使国民经济活动能够变得智能化,这是 100 年前电气化以来最大的变化.
Auther还估算了第二经济的规模,他认为到2030年,第二经济的规模将逼近第一经济.而第二经济的主要支撑是
大数据,因为大数据是永不枯竭并不断丰富的资源产业.借助于大数据,未来第二经济下的竞争将不再是劳动生
产率而是知识生产率的竞争.
..............................