李芏巍：大数据的发展历程

2020-07-20

   大数据的兴起和大力发展下,大数据广泛渗透到各行各业，成为每一个领域重要的生产要素。大数据技术应用挖掘和运用海量数据，预示着新型经济增长模式到来。大数据重要性和必要性是“牵一发而动全身”，大数据思维“链”式数字产业价值链之根，这一前沿理念正成为引领每一个行业的新未来。

   描述大数据的发展历程。2018年5月李芏巍在贵阳，由贵州省总工会大型企业工会主席卢富华陪同下,参加召开的“中国国际大数据产业博览会”。面对一堆资料介绍感触蛮深,梳理参考文献写下两篇文章。第一篇：2018年5月25日，中物策(指笔者)“大数据的发展历程”在《物流策划www.56cehua.cn 》发表。第二篇：2018年5月28日，文章引言表明全球首次将“大数据”划分为四大阶段，即“大数据”出现阶段,“大数据”热门阶段，“大数据”时代特征阶段和“大数据”爆发期阶段。中物策物流策划师(指笔者).“破译明代刘伯温六百年前预言,全球大数据看中国，中国大数据看贵州”《物流策划www.56cehua.cn 》发表。文章中特别提到, “全球大数据看中国，中国大数据看贵州”。笔者给贵州打出最新的广告词,这是笔者继5月25日“大数据的发展历程”发布，全球首次将“大数据”发展历程划分为四大阶段一文后又一篇以大数据为主题内容的文章。此后,多网站转载。

1、“大数据”出现阶段(1980-2008年)      

   “大数据”一词在1980年名未来学家阿尔文·托夫勒著的《第三次浪潮》书中将“大数据”称为“第三次浪潮的华彩乐章”。1997年美国宇航局研究员迈克尔·考克斯和大卫·埃尔斯沃斯首次使用“大数据”这一术语来描述20世纪90年代的挑战：模拟飞机周围的气流——是不能被处理和可视化的。数据集通常之大,超出了主存储器、本地磁盘，甚至远程磁盘的承载能力。称之为“大数据问题。”      

   2002年在“9.11”袭击后,美国政府为阻止恐怖主义已经涉足大规模数据挖掘。前国家安全顾问约翰·波因德克斯特领导国防部整合现有政府的数据集，组建一个用于筛选通信、犯罪、教育、金融、医疗和旅行等记录来识别可疑人的大数据库。一年后国会因担忧公民自由权而停止了这一项目。2004年9.11委员会呼吁反恐机构应统一组建“一个基于网络的信息共享系统”，以便能快处理应接不暇的数据。“大数据”在云计算出现之后才凸显其真正价值，谷歌(Google)在2006年首先提出云计算的概念。2007–2008年随着社交网络的激增，技术博客和专业人士为“大数据” 概念注入新的生机。“当前世界范围内已有的一些其他工具将被大量数据和应用算法所取代”。《连线》的克里斯·安德森认为当时处于一个“理论终结时代”。一些政府机构和美国的顶尖计算机科学家声称,“应该深入参与大数据计算的开发和部署工作,因为它将直接有利于许多任务的实现。”2008年9月《自然》杂志在推出了名为“大数据”的封面专栏。

2、“大数据”热门阶段(2009-2011年)      

   从2009-2010年“大数据”成为互联网技术行业中的热门词汇。2009年印度建立了用于身份识别管理的生物识别数据库；2009年联合国全球脉冲项目已研究了对如何利用手机和社交网站的数据源来分析预测从螺旋价格到疾病爆发之类的问题。      

   卿春.“大数据生态与行业应用方案研究”《学术论文联合比对库 2017年9月15日一文和12785745.罗以洪.“贵州大数据战略行动促进供给侧结构性改革研究”《学术论文联合比对库》2018年5月18日一文介绍].2009年，美国政府通过启动Data.gov网站的方式进一步开放了数据的大门，该网站的超过4.45万量数据集被用于保证一些网站和智能手机应用程序来跟踪信息，这一行动激发了从肯尼亚到英国范围内的政府们相继推出类似举措；2009年，欧洲一些领先的研究型图书馆和科技信息研究机构建立了伙伴关系致力于改善在互联网上获取科学数据的简易性。2010年肯尼斯库克尔发表大数据专题报告《数据，无所不在的数据》；2011年2月扫描2亿年的页面信息,或兆兆字节磁盘存储,只需几秒即可完成。IBM的沃森计算机系统在智力竞赛节目《危险边缘》中打败了两名人类挑战者。后来纽约时报配音这一刻为一个“大数据计算的胜利。”“大数据时代已经到来”出现在2011年6月麦肯锡发布了关于“大数据”的报告，正式定义了大数据的概念，后逐渐受到了各行各业关注；2011年12 月，工信部发布的物联网十二五规划上，把信息处理技术作为4项关键技术创新工程之一被提出来，其中包括了海量数据存储、数据挖掘、图像视频智能分析，这些是大数据的重要组成部分。

3、“大数据”时代特征阶段(2012-2016年)     

   随着2012年[英]维克托路迈尔-舍恩伯格(是最早洞见大数据时代发展趋势的数据科学家之一)及[英]肯尼斯路库克耶的《大数据时代》一书出版，把大数据的影响分作了三个不同的层面来谈，分别是思维变革、商业变革和管理变革。“大数据”这一概念乘着互联网的浪潮在各行各业中扮演了举足轻重的角色。      2012年，大数据一词越来越多地被提及，人们用它来描述和定义信息爆炸时代产生的海量数据，并命名与之相关的技术发展与创新。数据正在迅速膨胀并变大，它决定着的未来发展，随着时间的推移，人们将越来越多的意识到数据的重要性。      

   2012年1月瑞士达沃斯召开的世界经济论坛上，大数据是主题之一，会上发布的报告《大数据，大影响》宣称，数据已经成为一种新的经济资产类别。2012年，美国奥巴马政府在白宫网站发布了《大数据研究和发展倡议》，这一倡议标志着大数据已经成为重要的时代特征；2012年3月22日，奥巴马政府宣布2亿美元投资大数据领域，是大数据技术从商业行为上升到国家科技战略的分水岭；2012年美国颁布了《大数据的研究和发展计划》；英国发布了《英国数据能力发展战略规划》；日本发布了《创建最尖端IT国家宣言》；韩国提出了“大数据中心战略”；世界一些国家也制定了相应的战略和规划。2012年7月，联合国在纽约发布了一份关于大数据政务的白皮书《大数据促发展，挑战与机遇》，总结了各国政府如何利用大数据更好地服务和保护人民。2012年7月，为挖掘大数据的价值，阿里巴巴在管理层设立“首席数据官”一职，负责全面推进“数据分享平台”战略，并推出大型的数据分享平台——“聚石塔”，为天猫、淘宝平台上的电商及电商服务商等提供数据云服务。（1）中国的大数据元年(2013年)。     

   2013年称为中国的“大数据元年”，虽说大数据概念存在已有时日，却因为互联网和信息行业的发展而引起人们关注，这一年大数据开始在我国逐渐展开，以势不可挡的姿态进入人们的思想意识，并在社会的各个领域探索与落地实践。阿里巴巴2013年1月1日转型重塑平台、金融和数据三大业务。阿里是最早提出通过数据进行企业数据化运营的企业。2013年在全球70个开放数据国家和地区中,中国仅位列第35位。2013年英国政府宣布注资6亿英镑发展8类高新技术，其中，1.89亿英镑用来发展大数据技术，旨在开放欧盟公共管理部门的所有信息。大数据掀起的变革,正在对现有的生产力和生产关系构成重要影响。      

   提到大数据，贵州首当其冲，俨然已经成为大数据代言人。2013年9月8日，贵阳市人民政府与中关村科技园区管理委员会在贵阳签署战略合作框架协议，双方共同打造的“中关村贵阳科技园”揭牌，拉开了贵阳发展大数据的序幕。历史有巧合，也有必然。正是2013年，被学界一致认同为“大数据元年”。此后，中关村和贵阳市开展了更为密切的合作，而贵州省把大数据当作可以实现工业结构快速更新的“一号工程”。(2)数谷概念(2014年)。     

   2014年3月，贵州在北京宣布大数据产业启航；2014年4月，世界经济论坛以“大数据的回报与风险”主题发布了《全球信息技术报告（第13版）》；2014年5月，美国白宫发布了2014年全球“大数据”白皮书的研究报告《大数据：抓住机遇、守护价值》；2014年6月，贵州省政府成立贵州省大数据产业发展领导小组，时任省委书记陈敏尔亲自担任组长；2014年，贵阳贯彻省委、省政府《关于加快信息产业跨越发展的意见》，印发了《贵阳市大数据产业行动计划》，系统研究全市大数据产业规划、布局、政策和落地的相关支持条件；《关于以大数据为引领加快建成创新型中心城市的意见》等政策措施陆续出台，支持大数据及关联企业发展壮大；2014年贵州省萌发提出了“中国数谷”概念，推出《关于加快建成“中国数谷”的实施意见》，希望借助大数据产业实现工业结构的快速更新。2014年数据开放运动已覆盖全球44个国家。2014年，“大数据”首次出现在当年的《政府工作报告》中。《报告》中指出，要设立新兴业创创新平台，在大数据等方面赶超先进，引领未来产业发展。2014年，国务院通过《企业信息公示暂行条例（草案）》，要求在企业部门间建立互联共享信息平台，运用大数据等手段提升监管水平，“大数据”成为国内热议词汇。(3)“大数据”上升为国家战略。    

   2015年2月，工信部将贵阳正式列为全国唯一的大数据产业发展试点示范区；2015年4月，国内首个大数据交易所在贵阳挂牌成立；2015年5月，包括阿里马云、腾讯马化腾、富士康郭台铭、小米雷军等科技红人齐聚这里的大数据峰会。马云说：十年以后的经济变局也许是贵州惹的“祸”。2015年6月，中国国家主席习近平走进贵阳市大数据广场，听取大数据产业介绍说：“贵州发展大数据确实有道理。”贵州省会城市贵阳给自己的定位是“数据之都”。2015年，大数据上升到国家战略层面，我国政府于2015年8月通过了《关于促进大数据发展的行动纲要》；2015年10月26日至29日，党的十八届五中全会召开,公报提出要实施“国家大数据战略”，这是大数据第一次写入党的全会决议，标志着大数据战略正式上升为国家战略，五中全会开启了大数据建设的新篇章。     

   2016年2月，经国家发展改革委、工业和信息化部、中央网信办批复，同意贵州省建设国家大数据(贵州)综合试验区，这是首个国家级大数据综合试验区；2016年5 月25日，中国大数据产业峰会暨中国电子商务创新发展峰会在贵阳开幕，国务院总理李克强出席开幕式并作主旨演讲，他对贵州发展大数据给予肯定：贵州在这里把“无”生了“有”，在信息产业里，在大数据、云计算、互联网所代表的新一代互联网发展趋势的背景下，所有的国家和地区只要经过自己的努力，都可以站在同一条起跑线上，落后的地方甚至可以抢占先机。2016年12月18日工业与信息化部《大数据产业发展规划（2016-2020年）》正式印发。《中国大数据发展调查报告》称，2016年中国大数据市场规模为168.0亿元，增速达到45%;预计2017-2020 年增速保持在30%以上。

4、“大数据”爆发期阶段(2017-2025年)      

   2017年，在政策、法规、技术、应用等多重因素的推动下，基本形成了跨部门数据共享共用的格局。京、津、沪、渝、冀、辽、贵、晋等省市政府相继出台了大数据研究与发展行动计划，整合数据资源，实现区域数据中心资源汇集与集中建设。根据2017中国开放数据指数显示，在这些陆续开放共享政府大数据的省市中，上海、青岛、贵阳、广州、东莞位列总排名前五名，上海、贵阳、青岛位列数据层前五名，佛山、哈尔滨、上海位列平台层前五名。广东、福建、浙江、河南、上海等16个地区均依据当地发展现状制定相应的大数据相关政策，近20个地方政府陆续推进大数据应用平台建设。在北京、上海、贵阳开展了大数据标准试点示范。全国至少有已有13个省成立了21家大数据管理机构，已有35所本科学校获批“数据科学与大数据技术”本科专业，62所专科院校开设“大数据技术与应用”专科专业，申报数据科学与大数据技术本科专业的学校达到293所。      

   2017年，大数据已经渗透到人们生活的方方面面，我国大数据产业的发展也进入爆发期。2017年2月8日，贵阳市向首批16个具有引领性和标志性的大数据产业集聚区和示范基地进行授牌，作为国家大数据综合试验区核心区 。《2017中国地方政府数据开放平台报告》发布，全国首个《政府数据共享开放（贵阳）总体解决方案》通过评审，2017年国家大数据(贵州)综合试验区首批107家重点企业名单，国家大数据标准解读，全国首部政府数据共享开放地方性法规诞生，《中国大数据发展调查报告（2017年）》发布，首次写入政府工作报告的“数字经济”；《贵阳市大数据标准建设实施方案》印发，《工业大数据白皮书（2017版）》发布，《“十三五”国家信息化规划（关于大数据在内）》发布；2017年11月，我国首个由行业主管协会起草的大数据人才培养发展方向的通识性标准——《中国大数据人才培养体系标准》正式发布，2017年11月22日，贵阳市委市政府出台《关于加快建成“中国数谷”的实施意见》，贵阳成为全国大数据创新策源地；12月8日中共中央政治局就实施国家大数据战略进行第二次集体学习，中国国家主席习近平在主持学习时强调，实施国家大数据战略加快建设数字中国。     

   2018年达沃斯世界经济论坛等全球性重要会议都把“大数据”作为重要议题，进行讨论和展望。“大数据”是2018年达沃斯世界经济论坛的热词之一。2018拉斯维加斯消费电子展（CES）上，美国消费技术协会总裁兼首席执行官加里·夏皮罗、英特尔首席执行官布莱恩·克尔扎尼奇等都表示，大数据将对人类生活产生深远影响，大数据是未来科技浪潮发展不容忽视的巨大推动力量，2018年许多国家的政府对大数据产业发展有着高度的热情。2018年美国希望利用大数据技术实现在多个领域的突破，包括科研教学、环境保护、工程技术、国土安全、生物医药等。其中具体的研发计划涉及了美国国家科学基金会、国家卫生研究院、国防部、能源部、国防部高级研究局、地质勘探局等6个联邦部门和机构。2018年欧盟在大数据方面的活动主要涉及四方面内容：研究数据价值链战略因素；资助“大数据”和“开放数据”领域的研究和创新活动；实施开放数据政策；促进公共资助科研实验成果和数据的使用及再利用。     

   大数据发展浪潮席卷全球。全球各经济社会系统采集、处理、积累的数据增长迅猛，大数据全产业市场规模逐步提升,产业应用将是主旋律。大数据产业商业化进一步深入等七大发展趋势：①开源大数据商业化进一步深化。②打包的大数据行业分析应用开拓新市场。③大数据细分市场规模进一步增大。④大数据推动公司并购的规模和数量进一步提升。⑤大数据分析的革命性方法出现。⑥大数据与云计算将深度融合。⑦大数据一体机将陆续发布。     

   2018年5月23日，深圳举办2018年“大数据审计”专题培训。5月24日，2018上海大数据人工智能创新应用峰会暨第三届上海BOT新零售数据智能创新应用国际大赛发布会在上海市北高新商务中心举行。2018年5月24日，洞悉数据经济最新发布：2018年五个大数据热门岗位，01.信息架构师；02.数据库设计师；03.数据管理员；04.数据库管理员；05.数据科学家；还将会出现数据所有者。(注:原文发表之日梳理参考文献截止至2018年5月24日)     

   大数据的发展随着全球化的不断提高进入加速发展期，大数据技术走向“大数据+行业”融合发展阶段。同时大数据产业保持良好发展势头，渗透融合行业全面展开。

作者简介    

   李芏巍教授，中国物流与供应链著名专家，中国城市发展战略与产业园区策划规划专家，木儿欢中国电商物流研究应用领域实战派领军人物，业界声望与影响极大：被誉为 “中国物流策划第一人”、“中国园区思想者”和全国“案例化”的专家。     

   现职：中物策（北京）工程技术研究院副院长，广州大学建筑设计研究院(物流学科领头人)、中国物流与供应链智库核心专家；兼职国际性、全国性和省级的行业协会、学会、商会等职务若干。李芏巍出版专业著作有物流类、电商类、快递类、产业类、地产类及驿站等近20部，发表学术论文上百篇和全国获奖课题与论文数十篇。