1. 首页
  2. 数据挖掘

【连载】《大数据时代的历史机遇》(15)美国政府的手笔

提要:

1. 美国奥巴马政府对信息科技的重视,超过历史上任一时期。数据改变了美国,是驱动美国转型的力量。

2. 美国的“大数据研究与发展计划”与 20 年前的“信息高速公路”计划一脉相承。

3. 美国发展大数据的思路是“众人拾柴火焰高”,国防部、能源部、卫生研究院、国家科学基金、地质勘探局、NASA等部门提出尖端项目,产业界、学术界、非营利性组织、资本市场通力合作,共同推动大数据的发展与深化。

美国是信息革命的领军人

美国是最早预见和推动信息革命的国家。早在 1946 年,美国军方就研制出世界上第一台电子计算机——“电子数字积分计算机”,并在 1969 年由美国国防部高级研究计划局建立计算机互联网 Internet 的最早雏形——ARPAnet。随后,在美国总统克林顿和副总统阿尔·戈尔的大力推动下,美国政府于1993 年 9 月推出“国家信息基础设施”计划(NationalInformation Infrastructure,简称 NII,亦称“信息高速公路”) 。计划的核心内容由建设覆盖全美的宽带高速信息网、利用信息资源、研发传输编码与网络标准、开发制造信息设备、培养信息人才等几部分构成,旨在将美国所有的政府机构、公司、医院、学校、图书馆等不同机构以及每个家庭连接起来,建立一个计算机化的全国性高速信息网络。

美国“信息高速公路”计划开启了互联网时代,使人们的沟通、工作和生活方式发生了巨大的变革,同时也推动了信息技术和信息产业的快速发展,为美国赢得了新的经济增长点和长达十多年的快速发展期,成就了美国在互联网上的全球霸主地位。

美国沿“信息高速公路”,狂飙到“大数据”

美国奥巴马政府在 2012 年 3 月正式启动“大数据研究和发展” 计划,该计划涉及美国国防部、美国国防部高级研究计划局、美国能源部、美国国家卫生研究院、美国国家科学基金、美国地质勘探局等 6 个联邦政府部门,宣布将投资 2 亿多美元,用以大力推进大数据的收集、访问、组织和开发利用等相关技术的发展,进而大幅提高从海量复杂的数据中提炼信息和获取知识的能力与水平。该计划并不是单单依靠政府,而是与产业界、学术界以及非营利组织一起,共同充分利用大数据所创造的机会。这也是继 1993 年 9 月美国政府启动“信息高速公路” 计划后,国家层面发力在信息领域的又一次“狂飙猛进”。

图2-2: 美国从“信息高速公路计划”过渡到“大数据计划”

随着网路技术、计算机技术以及通信技术的快速发展,人类社会的数据总量呈现指数级增长,根据 Google 前 CEO 现董事会主席埃里克•施密特的说法,截至 2003 年,人类社会总共创造了 5EB 的数据,而现在仅需要两天就能创造相同的数据量,这对数据的收集、运输、存储、分析利用和安全等技术应用和数据的管理工作提出了更高的要求和更大的挑战。信息作为三大社会资源之一(另外两个是物质和能量),如何充分利用信息资源、如何更经济更快速地从海量、不同结构类型的复杂数据中快速提取价值成为关键。

美国前总统克林顿开展的“信息高速公路”计划是通过高速率的通讯网络搭建人们的信息交流网络,进而带动经济的快速发展,该计划促使海量数据的产生,却未能实现对数据资源进行充分利用,尤其是在大数据时代的今天,海量数据的具有巨大价值被白白浪费。根据2011年美国总统科学技术顾问委员会提出的一份建议显示,大数据相关技术具有重要战略价值,但美国联邦政府对其研发投资却明显不足。而通过“大数据研究和发展”计划可以深度挖掘大数据的潜在巨大价值,带动产业的升级换代。从这个角度说,“大数据研究和发展”与“信息高速公路”计划可谓一脉相承,层层推进。

美国将“大数据”上升至国家意志,影响深远

以奥巴马为首的美国政府推出“大数据研究和发展”计划,将大数据发展战略从商业行为上升到国家意志的层面,这将对未来十年科技与经济的发展带来深远的影响。推动美国快速发展。

“数”中自有黄金屋。

大数据如果得到充分合理的开发利用,对个人、企业、政府乃至整个社会都具有极大的价值。美国推出的“大数据研究和发展”计划将对美国综合国力、国家安全、大数据技术、社会经济等方面产生巨大的影响。

增强国家综合国力。美国政府充分意识到了大数据的价值和意义,将其定义为“未来的新石油”,并指出一个国家拥有数据的规模、活性以及解释运用的能力将成为其综合国力的重要组成部分,对数据的占有和控制甚至会成为继陆权、海权、空权之外的另一种国家核心资产,成为世界各国之间的新博弈。由于以中国为代表的新兴国家的迅速崛起,美国在经济、政治等方面的影响力和控制力大幅下降,国家霸主地位面临巨大的挑战,大数据研究和发展计划有利于提高美国对数据资产的掌控能力,进而抢占新的国际战略制高点。

维护国家安全。信息网络突破了传统的地域条件的束缚,在全球范围内实现了信息的快速高效流动,促进了人类社会的发展,但同时也带来了巨大的安全隐患。尤其是经济、政治、军事和科技等方面的核心机密信息的安全问题具有极高的战略意义,21 世纪国家信息安全的地位和作用不亚于传统的国防军事。如 2010 年 11 月,超过 25 万份由美国大使馆发出的机密电报被公开,泄露了美国在政治、军事战略等方面的机密信息,并引发了全球性的外交危机,这便暴露了国防部安全方面的诸多问题。美国国防部高级研究计划局在这次大数据研究方面给予了大量的投入,具体包括解决大规模数据集的异常检测和特征化的多尺度异常检测,旨在开发新技术检测军事计算机网络与网络间谍活动的网络内部威胁、加密数据的编程计算及视频图像的检索和分析工具等项目,这将大大提升美国应对大数据时代国家信息安全挑战的能力。

推动大数据技术发展。高速增长的海量、复杂的大数据对传统技术提出新的挑战,研发大数据相关的核心技术成为当务之急。美国国家科学基金会以大数据关键技术的突破作为大数据项目的重点,与美国国家卫生研究院对大数据进行联合招标,包括管理、分析、可视化以及从大量多样数据集中提取有用信息等核心技术。此外,美国国家科学基金会还积极推进各项大数据相关措施,包括鼓励大学开发交叉学科课程,培养大数据人才,提供资金支持本科生使用复杂数据图形和可视化技术的培训等。上述的系列措施将有利于美国打造在大数据提取、分析等核心技术方面的竞争优势。

推广大数据应用,打造新的经济增长点。美国能源部推进高性能存储系统、千万亿次数据分析处理以及生物和环境研究计划,美国国家卫生研究院推进千人基因组计划数据的云端免费开放,美国地质勘探局推进地理系统科学的大数据,这些项目加快了大数据在能源、医学和地质等领域的应用及价值开发。据麦肯锡《大数据:创新、竞争和生产力的下一个前沿领域》研究报告显示,大数据为美国医疗服务业每年创造 3000 亿美元的经济价值。与此同时,在美国政府的推动下,企业、科研院校以及非营利机构将纷纷加入其中,进而形成利益相关者全体成员系统化共进的局面。目前 EMC、IBM、惠普、微软、Oracle等 IT 巨头积极通过并购实现技术整合,推出大数据相关产品和服务;同时也出现了 Splunk、Clustrix、Junar、DataSift 等大数据新兴公司,大数据市场正在积蓄巨大的商机。据 IDC 报告预测,大数据技术与服务市场将从 2010 年的 32 亿美元攀升至2015 年的 169 亿美元,年增长率高达 40%,是整个 IT与通信工业增长率的 7倍,将成为新的经济增长动力。

引领全球,开启大数据时代

美国推出“大数据研究和发展”计划之后,日本政府重新启动曾在日本大地震后一度搁置的 ICT战略研究,将重点关注大数据应用。联合国也随后发布了《大数据促发展:挑战与机遇》的白皮书,全球范围内对大数据的关注达到了前所未有的热度,各类计划如雨后春笋般纷纷破土而出,大数据革命风起云涌。

2012 年 5 月,日本总务省信息通信政策审议会下设的 ICT 基本战略委员会召开会议,战略委员会大数据研究主任、京东大学教授森川博之强调,美国在大数据技术上处于领先,其Google、Amazon 等网络企业在大数据应用领域方面有很强的优势,日本非常有必要在大数据方面制定综合性的战略。随后,日本文部科学省在 7 月发布了以学术云为主题的讨论会报告。文部科学省指出为迎接大数据时代学术界面临的挑战,将重点推进大数据收集、存储、分析、可视化、建模、信息综合的各阶段研究,构建大数据利用的模型。

2012 年 7 月,联合国在发布的白皮书中指出大数据时代已经到来,大数据对于联合国和各国政府都是一次历史性的机遇报告讨论了如何利用大量丰富的数据资源帮助政府更好地响应社会需求,指导经济运行,并建议联合国成员国建设“脉搏实验室”,挖掘大数据的潜在价值。印度尼西亚在首都雅加达建立的“脉搏实验室”由澳大利亚提供资助,将于 2012 年 9 月投入运行;此外,乌干达也率先在首都坎贝拉建立了“脉搏实验室”。

目前大数据仍属于一个新兴前沿的概念,中国尚未从国家层面明确提出大数据的相关战略,但 2011 年 11 月中国工业和信息化部发布的物联网“十二五”发展规划中,提出四项关键技术创新工程,分别是信息感知技术、信息传输技术、信息处理技术和信息安全技术,其中的信息处理技术包括了海量数据存储、数据挖掘、图像视频智能分析,而这些技术都与大数据密切相关。同时,以广东为代表的地方政府率先启动大数据战略,坚持开放共享,推动大数据发展和社会创新。

大数据作为国家核心资产,是国家之间新的竞争焦点。在大数据领域的落后,意味着失守产业战略的制高点,意味着数字主权无险可守,意味着国家安全将在数字空间出现漏洞。相信在美国政府“大数据研究和发展”计划的影响下,欧盟、中国等大型经济体在不久的将来必将出台引导性、倾斜性的政策,以抢占大数据的战略制高点,围绕大数据的新一轮竞争呼之欲出。

事实上,历史上曾经上演过类似的一幕。1993 年美国“信息高速公路”计划一出台就引起了各国的强烈反应。日本政府在 1993 年6 月发布拟建大规模超高速“研究信息流通新干线”计划,决心通过高速通信线路将全国研究机构与大学连接起来,并于1994 年 5 月前后提出了日本版“信息高速公路”计划——《通信基础结构计划》和《通向 21 世纪智能化创新社会的改革》两个报告,决定分成三个阶段逐步实施网络建设。欧洲也不甘落后,在 1993 年 6 月哥本哈根欧盟首脑会议上,欧盟主席德洛尔首次提出“构建欧洲信息社会”的倡议,随后在同年 12 月,欧盟发布了旨在“振兴经济,提高竞争能力和创造就业机会”的白皮书。白皮书中明确提出构建欧洲版“信息高速公路”的设想,并成立了专门的工作小组负责计划的推进。此外,加拿大、韩国、新加坡等发达国家为争夺高新技术的发展优势,迎接 21 世纪的发展挑战,也都纷纷选择立即跟进,投入巨额资金,推出各自国家的“信息高速公路”计划,在全球范围内掀起一场热潮。

大数据本质上是人类社会数据积累从量变到质变的必然产物,是在“信息高速公路”基础上的进一步升级和深化,对人类社会的发展具有极其重大的影响和意义。根据现有形式,我们完全可以断言,全球性的大数据发展浪潮即将到来。

PPV课其他精彩文章:


0、回复“活动”查看PPV课社区百日掘金活动-积分兑换Iphone 5s、MINI金条

1、回复“干货”查看干货 数据分析师完整知识结构

2、回复“答案”查看大数据Hadoop面试笔试题及答案

3、回复“设计”查看这是我见过最逆天的设计,令人惊叹叫绝

4、回复“可视化”查看数据可视化专题-数据可视化案例与工具

5、回复“禅师”查看当禅师遇到一位理科生,后来禅师疯了!!知识无极限

6、回复“啤酒”查看数据挖掘关联注明案例-啤酒喝尿布

7、回复“栋察”查看大数据栋察——大数据时代的历史机遇连载

8、回复“数据咖”查看数据咖——PPV课数据爱好者俱乐部省分会会长招募

9、回复每日一课查看【每日一课】手机在线视频集锦

原文始发于微信公众号(PPV课数据科学社区):【连载】《大数据时代的历史机遇》(15)美国政府的手笔

原创文章,作者:ppvke,如若转载,请注明出处:http://www.ppvke.com/archives/25743

联系我们

4000-51-9191

在线咨询:点击这里给我发消息

工作时间:周一至周五,9:30-18:30,节假日休息