第一章 大数据与侦查
第一节 大数据时代
半个世纪以来,随着科学技术的迅猛发展,计算机技术全面融入社会生活,信息爆炸已经积累到了开始引发社会变革的程度,许多领域,如光学观测、光学监控、健康医护、传感器、用户数据、互联网和金融公司以及供应链系统都产生了海量的数据。这些数据不仅使世界充斥着比以往更多的信息,而且其增长速度也在加快,其中隐藏着巨大的机会和价值,在许多领域带来变革性的发展。因此,大数据研究领域吸引了全球产业界、政府和学术界的广泛关注。早在20世纪90年代,被誉为“数据仓库之父”的比尔·恩门(Bill Inmon)就提及“大数据”(Big Data)概念。随着信息技术革命与经济社会活动的交融发展,数据信息空前发展,移动互联、社交网络、电子商务等极大拓展了互联网的边界和应用范围,各种数据正在迅速膨胀。譬如无所不在的移动设备、射频识别(Radio Frequency Identification, RFID)、无线传感器每分每秒都在产生数据,数以亿计用户的互联网(社交、搜索、电商)、移动互联网(如微博)、物联网(传感器、智慧地球)、车联网、GPS、医学影像、安全监控、金融(银行、股市、保险)、电信(通话、短信)时时刻刻在产生巨量的交互,都在疯狂地产生着数据。就此,在以“云计算相遇大数据”为主题的EMC World 2011会议上,EMC抛出了“大数据”概念。如今,这个概念几乎应用到了所有人类智力与发展的领域中。著名管理咨询公司麦肯锡称:“数据已经渗透到当今每一个行业和业务职能领域,成为重要的生产因素。人们对于大数据的挖掘和运用,预示着新一波生产力增长和消费盈余浪潮的到来。”美国政府认为大数据是“未来的新石油”,大数据已成为社会各界关注的新焦点,“大数据时代”已然来临。
信息技术革命与经济社会活动的交融催生了大数据。根据国际数据中心(IDC)作出的估测,数据一直都在以每年50%的速度增长,也就是说每两年就增长一倍(大数据摩尔定律),并且大量新数据源的出现导致了非结构化、半结构化数据爆发式的增长,这意味着人类在最近两年产生的数据量相当于之前产生的全部数据量。这不是简单的数据增多的问题,而是全新的问题。
大数据是经济社会、现实世界、管理决策的片断记录,蕴含着碎片化信息。随着分析技术与计算技术的突破,解读这些碎片化信息成为可能,这是大数据成为一项新的高新技术、一类新的科研范式、一种新的决策方式乃至一种文化的缘由。
一个国家拥有数据的规模和运用数据的能力将成为综合国力的重要组成部分,对数据的占有和控制将成为国家间和企业间新的争夺焦点。大数据已成为国家创新战略、国家安全战略以及国家信息网络安全战略的交叉领域和核心领域。当前,国际社会对大数据的普遍关注度已超越大数据本身和衍生的新技术。大数据作为一种新技术、新方法,正在改变人类处理问题的思维、理念、模式。面对大数据的到来,无论是美国的“大数据研究和发展计划”,还是日本的“智慧日本ICT战略”;无论是英国的“2015—2018年数字经济战略”,还是德国的“数字议程(2014—2017)”,都体现出了国际社会接纳、应对大数据技术的积极态度。
2015年,中华人民共和国国务院出台了《促进大数据发展行动纲要》(国发〔2015〕50号),作出了建设数据强国的战略规划,将大数据的应用与发展提升到了顶层设计的高度,从国家大数据战略视角明确,大数据是以容量大、类型多、存取速度快、应用价值高为主要特征的数据集合,正快速发展为对数量巨大、来源分散、格式多样的数据进行采集、储存和关联分析,从中发现新知识、创造新价值、提升新能力的新一代信息技术和服务业态。
目前,国际社会对大数据的普遍关注度已超越大数据本身和衍生的新技术。拥有大数据是时代特征,解读大数据是时代任务,应用大数据是时代机遇。大数据作为一个时代、一项技术、一个挑战、一种文化,正在走进并深刻影响我们的生活,必须理性认识大数据,准确把握其带来的机遇,科学应对其带来的挑战,用大智慧实现大数据的大价值。