摘要:近 年来,伴随着信息技术的高速发展,数据成为促进现代经济社会发展的关键因素。发达国家纷纷将大数据纳入国家战略,加快大数据布局。在此背景下,纵观全球大 数据产业发展现状,不难发现发达国家都将大数据纳入到国家战略,纷纷加快大数据布局,大数据产业链日趋完善,市场前景十分广阔。大数据之所以具有重要的战 略地位,是因为数据已成为促进现代社会经济发展的关键因素。鉴于此,我国要加快实施大数据国家战略,加快数据开放共享步伐,制定有力的数据安全保障体系, 积极推进科技应用创新,尽快形成产业链协同创新的生态环境。
关键词:大数据产业,信息技术,技术创新,信息战略
伴 随着信息技术的高速发展,数据已成为和材料、能源一样的国家战略资源,世界各国竞相布局大数据。面对汹涌而至的大数据浪潮,全球大数据产业发展现状如何? 趋势如何?为什么大数据具有如此重要的战略地位?在全球大数据之战中我国如何抢占先机?理性反思和研究这些问题,对我国加快实施大数据国家战略,促进大数 据产业健康有序发展具有极其重要的意义。
一、大数据产业在政府强力推进中保持蓬勃发展
近年来,各国政府对大数据重视程度日益凸显,大数据产业生态体系日趋完善,市场规模增长迅猛,大数据产业即将步入发展快车道。
1.大数据正受到发达国家高度重视。为抢占大数据产业发展的制高点,欧美等发达国家都将大数据纳入到国家发展战略,纷纷在资金和政策上支持大数据研究和发展,力图以大数据推动国民经济和社会发展。如美国政府发布了《大数据研究和发展计划》,斥资2亿美元用于大数据研究;英国政府积极推进数据开放计划,预计在大数据和节能计算研究上投资1.89亿英镑;法国政府发布了《数字化路线图》,宣布投入1150万欧元研发7个大数据市场项目;日本公布了新IT战略——“创建最尖端IT国家宣言”,明确提出要加强大数据技术在医疗、交通等公共领域的应用;韩国政府表示将统一建设大数据中心,为大数据企业提供服务;澳大利亚政府发布了《公共服务大数据战略》,制定了六条“大数据原则”,旨在运用大数据分析支撑公共服务改革。
2.大 数据产业链分析。大数据产业链贯穿数据生成、采集、存储、应用的整个生命周期。借助生态学的观点,大数据产业链可由基础层、应用层构成。其中,基础层涉及 到数据采集、数据预处理、数据存储与管理、大数据处理平台、数据安全等;应用层涉及到基础算法、商业算法、共性工具、共性平台、行业应用等。当前,几乎所 有IT巨头都在积极布局大数据业务,大数据产业生态体系日益完善。在基础层,以IBM、Oracle、微软、EMC、SAP、惠普等公司为代表,提供“硬件+软件+数据服务”的整体解决方案。在应用层,以谷歌、脸谱、亚马逊、淘宝、百度等公司为代表,基于海量用户信息,提供个性化广告推介等精准化营销。国外大数据产业带来的经济效益正逐步显现。据统计,大数据为美国的医疗服务业每年节省3000亿美元,为制造业在产品开发、组装等环节节省50%的成本;为欧洲的公共部门管理每年节省2500亿欧元;为全球个人位置数据服务提供商贡献1000亿美元[1]。
3.大数据将持续保持快速增长态势。伴随着市场的逐步成熟与发展,大数据因其巨大的市场需求和商业价值,正在成为撬动信息产业乃至整个经济社会变革的新引擎。目前,大数据在电子商务、金融、电信、社交等行业领域已出现规模化应用,大规模应用的普及即将来临。据统计,2013年大数据在全球共带来340亿美元的IT开支,较2012年的43亿美元增长近7倍,预计2016年这一数据将达到2320亿美元[2]。据矢野经济研究所报告显示,日本大数据产业市场规模2013年为2600亿日元,未来七年将持续保持高速增长,年均增长率为22.3%,预计在2020年将达到1万亿日元。
二、大数据产业具有举足轻重的战略性地位
大数据已成为提升国家核心竞争力的有力工具,通过实施大数据战略,不仅可以提升社会生产力、创造新的经济社会价值,而且可以加快创新能力建设、促进传统产业升级和新兴业态涌现。
1.大数据是国家核心战略资源。大数据与云计算以数据为材料,计算为能源,共同引领又一次生产力的大解放,引发了继信息化和互联网后又一次信息革命高峰[3]。国家重大战略问题都与大数据应用密切相关,包括国家社会稳定相关的舆情监控和预警,与国民经济发展相关的经济运行状态分析与预测,与环境气候相关的大气污染分析处理等。从生产要素的角度来讲,大数据已成为国民经济和社会发展的基础性、战略性资源[4], 是一个国家数字主权的充分体现。大数据的可获取性、流动性及对数据的分析处理能力成为决定国家核心竞争力的重要因素。网络空间的数据主权将是继海、陆、 空、天后大国博弈的新角力场。在大数据领域的落后,将意味着产业制高点的失守,数字主权的失守,甚至国家安全也会受到危及。因此,大数据将对国家社会稳定 产生直接影响,研究制定我国大数据战略应尽快提上议事日程。
2.大 数据引发知识技术创新模式变革。传统科研创新方法大都采用鱼骨图、假设检验、故障树等发现问题产生的原因,寻找薄弱点,以此来寻求解决途径。大数据时代, 知识技术创新模式正在从这种求因果向重相关发生转变。一是在小数据世界中,由于样本容量小而且采集数据的成本高,使相关分析的条件受到局限,而在大数据背 景下,可得数据少的局限性将消失,发现事物相关性也变得更加容易。二是因果关系与个体认知方式密切相关,不同文化背景、生长环境、及教育水平的人对事物判 断的“因”和“果”不同,因此对世界的认识是不客观的[5]。相关关系以大量确凿的数据为基础,使人们更加清晰真实地认识客观世界。因此,各领域各行业的科研人员可以充分利用大数据快速挖掘事物间的相关性,更加客观准确地预测事物发展的方向和趋势,从而以更高效的方式实现知识技术创新。
3.大数据促进传统产业升级和新兴业态涌现。大数据的广泛应用对产业结构优化和软化具有积极影响。对于传统农业,大数据应用在播种、施肥、杀虫、收割、仓储、育种等环节,可实现农业生产流通精细化。对于传统工业,数据已经成为工业化和信息化深度融合的关键枢纽[6],大数据在新材料研发、生物制药、设备维修等领域的运用,近年来,我国政府对大数据重视程度日益凸显,市场规模增长迅猛,新技术新应用层出不穷,大数据产业加快发展的基础和条件基本具备。
近年来,我国大数据取得一定的发展,正逐渐由探索起步期进入实践推进阶段,全社会对大数据的认识显著加深,产业支撑能力和应用能力持续增强,成功案例不断涌现,大数据发展将迈出实质性步伐。
将 使新产品的研发、设计、生产及工艺测试改良等流程发生革命性变化,可以大幅提升企业研制生产效率。对于传统服务业,大数据已成为金融、电子商务等行业背后 的金矿。大数据不仅是传统产业升级的助推器,也是孕育新兴产业的催化剂。数据已成为和矿物、化学元素一样的原始材料,未来大数据将与制造业、文化创意等传 统产业深度融合,进而衍生出数据服务、数据化学、数据材料、数据制药、数据探矿等一系列战略性新兴产业。
图1 2013-2020年日本大数据产业市场规模及增长情况
数据来源:根据矢野经济研究所报告整理,2014年3月。
三、我国大数据产业发展现状
近年来,我国政府对大数据重视程度日益凸显,市场规模增长迅猛,新技术新应用层出不穷,大数据产业加快发展的基础和条件基本具备。
近年来,我国大数据取得一定的发展,正逐渐由探索起步期进入实践推进阶段,全社会对大数据的认识显著加深,产业支撑能力和应用能力持续增强,成功案例不断涌现,大数据发展将迈出实质性步伐。
1.政 策环境逐步优化。我国对大数据发展日益重视。政府部门也纷纷作出重要部署,国务院、发改委、工信部、科技部、国家统计局等部委都已通过专项支持、项目支 持、研发合作等方式稳步推进大数据发展。继广东宣布“率先启动大数据战略”以来,上海、重庆、天津滨海新区、贵州省也都发布了各自的行动计划或规划纲要。 山东省成立了国内首家农业大数据产业技术创新战略联盟,将通过加强对农业相关信息和数据的分析研究,为政府决策、产业发展提供了有力支撑。中关村成立了大 数据交易产业联盟,发布了《关于加快培育大数据产业集群推动产业转型升级的意见》和《中关村数海大数据交易平台规则》(征集意见稿),汇聚大数据创新资源,进一步完善有利于大数据产业发展的政策环境。然而,我国发布大数据战略的部门和地区仍然不多,国家级大数据发展战略规划尚还未提上议事日程。
2.市场规模快速增长。据统计,2013年我国大数据产业市场规模为34.3亿元,同比增长率超100%,未来一段时间将持续快速增长,预计到2016年,市场规模将达269.8亿元。随着我国企业级用户的数据拥有量快速增多,对大数据的应用需求也持续旺盛。据IT168大数据应用与趋势专项调查数据显示,我国每月新增数据规模在500G以上的企业已由2012年的16.67%,增长到18.11%;当前已经部署大数据的企业达到21.89%,计划1年内部署的占27.92%。
大数据分析成为企业级IT投资重点。目前,我国企业级用户的数据分析工作,无论在分析数据种类还是分析频率上都远远落后于欧美用户,日分析占比仅为6.8%,近实时和实时分析占比仅为3.2%,相对欧美市场日分析占36%、近实时和实时分析53%距离很大。
大数据的商业价值日益凸显。在金融行业,中心银行信用卡中心通过大数据分析系统进行了实时决策和精准营销,运营效率大幅提升,运营效率得到全面提升,每次营销活动配置平均时间从2周缩短到2-3天,交易量增加65%,不良贷款比率同比减少了0.76%。在电信行业,中国电信通过大数据组织管理系统,使用户在几千亿条记录中的检索时间缩短到一秒钟之内。在零售业,农夫山泉通过大数据分析技术使销售额提升了约30%,使库存周转从5天缩短到3天,同时数据中心的能耗降低了80%。
3.新技术新应用层出不穷。国内企业正在积极探索大数据技术的研发和业务应用服务,涌现出一系列创新成果,诞生了一批创新型企业。南大通用、武汉达梦、浪潮、华为等企业推出了数据仓库、数据库一体机等产品。基于大数据统计分析,阿里巴巴推出了网络零售价格指数(iSPI),百度与中科院合作编制了消费者信心指数(CCI)、通货膨胀指数。拓尔思、亿赞普等企业面向特定领域研发数据分析工具,提供了创新型数据服务。企业在大数据技术与应用方面的积极探索将会推动大数据的加速普及。
表1 主要国家2013年大数据发展与应用推进情况
|
国家 |
年份 |
具体举措 |
|
美国 |
2009.02 |
发布《开放透明政府备忘录》,宣布在政府网站提供更多的互动式资源,吸引用户积极参与政府决策过程的直接互动 |
|
2009.05 |
正式启用官方公共数据资源分享网站(data.gov) |
|
|
2010.07 |
发布《开放政府计划》,提出按照开放、参与、合作三原则,推动建立开放透明的政府机构 |
|
|
2012.05 |
发布《数字政府:建设21世纪更好服务美国人民的信息平台》,提出新时期美国电子政务三大战略目标、一个概念模型和四大战略举措 |
|
|
2013.02.06 |
美国国家科学基金会(NSF)等10家国际研究基金会宣布启动第3轮“数据挖掘挑战”计划,以激励社会及人文科学中的计算密集型研究的发展 |
|
|
2013.05 |
发布《开放数据政策——将信息作为资产进行管理》,确认信息资源的重大战略意义,提出美国政府的战略行动任务 |
|
|
2013.05 |
发布《实现政府信息公开化和机器可读取化总统行政命令》,要求政府信息资源必须以开放化和机器可读化作为基本形态 |
|
|
新加坡 |
2006.06 |
发布《“智慧国家2015”国家数据战略规划》,从数据基础设施、政府服务、人才培养、技术研发和立法等角度,推动公共数据生态的完善 |
|
2012 |
公布了《个人资料保护法》(PDPA),旨在防范对国内数据以及源于境外的个人资料的滥用行为 |
|
|
英国 |
2009.12 |
前首相布朗在伦敦“Smarter government”集会上,声明将发布更多的政府数据,并用一站式网站呈现 |
|
2010.01 |
英国政府开放数据门户网站Data.gov.uk正式投入使用 |
|
|
2013.01 |
商业、创新和技能部宣布,将注资6亿英镑发展8类高新技术,大数据独揽其中的1.89亿英镑 |
|
|
2013.05 |
首个综合运用大数据技术的医药卫生科研中心在牛津大学成立 |
|
|
2013.08 |
发布《英国农业技术战略》,今后对农业技术的投资将集中在大数据上 |
|
|
法国 |
2011 |
就开放数据政策作出了官方声明 |
|
2012.12 |
法国总理让-马克·艾罗在公共行动现代化部际委员会(CIMAP)首次会议上阐述了法国开放数据政策的主要原则 |
|
|
2013.02 |
在政府数字政策研讨会上,法国政府提出了开放政府数据路线图 |
|
|
2013.03 |
在《数字化路线图》中列出了五项将会大力支持的战略性高新技术,“大数据”是其中一项。将投入1150万研发7个大数据市场项目 |
|
|
2013.11 |
出台《八国集团开放数据宪章行动计划》,在行动计划中,法国政府作出了四项承诺,作为开放政府数据政策的发展重点 |
|
|
澳大利亚 |
2009 |
启用Data.gov.au作为政府信息目录的开放数据平台 |
|
2013.08 |
澳大利亚政府信息管理办公室(AGIMO)发布《公共服务大数据战略》,以六条“大数据原则”为支撑 |
|
|
加拿大 |
2011.03 |
发布《开放政府战略》 |
|
2012.04 |
发布《开放政府行动计划》 |
|
|
2014.02 |
在国际开放数据日,根据《开放数据宪章》发布其开放数据行动方案 |
|
|
印度 |
2012 |
批准了国家数据共享和开放政策,目的是促进政府拥有的数据和信息得到共享及使用,制定一站式政府数据门户网站data.gov.in |
|
日本 |
2013.06 |
安倍内阁公布新IT战略“创建最尖端IT国家宣言”,全面阐述2013-2020年期间以发展开放公共数据和大数据为核心的日本新IT国家战略 |
|
韩国 |
2013.07 |
科学、通信和未来规划部表示将与国家信息社会局(NIA)共建大数据中心,希望其能够成为服务大数据企业的一个实验基地 |
|
八国集团 |
2013.06 |
签署《开放数据宪章》,表示愿意进一步向公众开放可机读的政府数据 |
|
欧盟 |
2013.06 |
颁布对2003年《公共部门信息再利用》指令的修订指令 |
四、我国大数据产业面临的挑战
纵观全球大数据产业生态体系,在发达国家大数据蓬勃发展的背后,我国大数据正面临一系列问题,阻碍产业化进程。
1.数据开放共享度低。数据开放共享是促进大数据产业发展的重要举措。截至2014年3月,全球已有70个国家和地区推进政府数据开放。我国政府也在做着开放数据的努力,但开放程度仍远不及世界领先国家。据开放知识基金会发布的普查结果显示,2013年我国政府数据开放综合排名第35位。事实上,我国政府部门掌握着全体社会80%的信息资源,但这些信息资源由于部门或区域利益分别被不同的部门控制,且不同部门的数据标准不一致,导致信息流的上游环节处于封闭状态,不能有效地释放和共享。
表2 我国部分部委和地方大数据发展支持情况
|
部门/地方 |
具体举措 |
|
工信部 |
发布《信息化和工业化深度融合专项行动计划》,提出促进工业大数据集成应用 |
|
|
发布《物联网发展专项行动计划(2013-2015年)》,要求加快大数据关键技术研发和产业化,突破物联网大数据处理与智能信息管理关键技术,推动物联网与大数据等新兴业态的融合发展 |
|
发改委 |
通过“高技术服务业研发及产业化专项”支持大数据分析软件开发和服务创新 |
|
|
通过“移动互联网及第四代移动通信(TD-LTE)产业化专项”支持移动互联网大数据关键技术研发及产业化 |
|
|
通过“国家信息安全专项”支持大数据平台安全管理产品研发和云计算与大数据安全应用试点示范 |
|
科技部 |
启动国家863项目“面向大数据的先进存储结构及关键技术” |
|
统计局 |
与阿里巴巴、百度、中国联通、一号店、58同城等11家涉足大数据的领军企业签署大数据战略合作协议,探讨如何在政府统计上应用大数据 |
|
上海 |
