一石激起千层浪,国务院发布的2015第50号文《促进大数据发展行动纲要》刷满了朋友圈,特别是其中提到了大力推动政府部门数据共享,稳步推动公共数据资源开放。2017年底前形成跨部门数据资源共享格局,到2018年实现统一共享平台全覆盖和数据共享及交换。2020年培育10家国际领先的大数据核心龙头企业,500家大数据应用、服务和产品制造企业。
众所周知,大数据商业价值巨大。但是中国大数据的商业价值还没有被充分挖掘。主要的困难在大数据的分散,具有价值的数据大部分集中在在政府内部,垄断国企业,以及互联网巨头之中。分散的数据无法帮助企业拿到具有价值的信息,无法实现大数据的商业变现。政府开放数据,以及大数据交易市场的建立是中国大数据商业价值应用的重中之重。
另外大数据的应用场景和大数据隐私问题,也是大数据商业应用功能的两大问题,不知道数据应用场景,就无法寻找具有价值的数据,就无让数据发挥作用,大数据的应用就会停留在解决数据采集、处理、存储等大数据1.0时代的低级阶段,无法实现大数据商业变现,无法激励企业进一步投资大数据,无法形成数据价值应用的生态循环。大数据隐私问题是所有企业不能回避的问题,到底何种数据可以进行交换,何种数据可以采集和变现,何种数据可以作为商品在市场流通,这些问题既影响个人隐私保护,又影响到企业购买数据产品的积极性,同时也影响了数据企业的发展。
中国大数据企业分为三类,
- 一类是大数据技术公司,为企业提供大数据平台搭建,技术咨询,大数据计算和存储的产品,例如华为、亚信、浪潮等传统IT公司。
- 一类是大数据服务公司,为企业提供基于大数据技术的服务、平台、产品。包括为企业搭建大数据挖掘工具,搜索引擎,分析引擎等大数据处理平台,大数据清洗和挖掘服务例如明略科技, ADMaster,百分点。
- 最后一类是提供数据产品的大数据公司,他们拥有数据,加工生成具有价值的数据,为市场提供标准的数据产品。例如芝麻信用,TalkingData,九次方,星图数据等。
中国大数据市场的数据来源有四种,一种是通过网络爬虫采集的外部数据,大多数提供舆情分析的公司就是通过爬虫技术来进行数据采集的。例如海量数据。一种是提供SaaS服务得到的数据,例如Talkindata。另外一种是靠和运营商或政府合作,通过数据挖掘得到的数据,例如亚信和九次方。最后一种就是自身平台产生的数据(电商、旅游、媒体等互联网企业),包括BAT以及较大的一些互联网公司如360、当当、唯品会、聚美优品、携程、今日头条等。
政府开放数据的意义
开放数据就是政府向社会公布自己所拥有的,并经过脱敏的数据。包括天气数据、GPS数据、金融数据、教育数据、交通数据、能源数据、医疗数据、政府投资数据、农业数据等。这些原始数据本身并没有明显的商业价值,但经过一些公司加工之后,可以产生巨大的商业价值。
开放数据在美国有几千亿美金的市场,包括300亿美金的气象数据,900亿美金的GPS数据,上千亿美金的医疗数据。但政府开放的数据是原始数据,数据自身的商业价值并不大,需要专业的公司对数据进收集,清洗,挖掘,展现,从而形成具有商业价值的数据。在美国有很多公司是依靠加工政府开放数据而实现其商业价值的,例如处理天气数据的Zillow公司,theweatherchannel公司,以及处理GPS数据的Garmin公司,它们的总市值已经超过了一百亿美金。
1、政府开放数据的主要范围
政府收集和制造的科学数据。例如天气数据,政府资助的医疗研究数据。这些数据都可以作为公共资源进行使用。
政府运行的数据,例如政府支出或大型项目运行数据。开放数据一方面可以增加民众对政府的信任,另一个方面可以给一些公司带来商业机遇。
监管行业的数据。这些数据由企业提供给政府,并且经过政府二次加工。这些宏观数据对于产业规划,企业的投资战略都有很大影响。
2、中国政府开放数据之路的挑战
国家对数据治理还没有完成。很多数据没有集中管理,还是处于信息孤岛状态,这些都是开放数据需要解决的问题。数据治理投资巨大,时间周期较长,都是巨大的挑战。
一些开放数据还不是电子形式。例如医疗数据和教育数据,在一些地区还处于纸质记录状态,没有形成电子档案。这些数据的电子化也是一个较大的挑战。
开放数据的脱敏和整合将是一项重大的挑战。特别是国有企业的数据,哪些数据可以公开,哪些数据需要脱敏,如何整合各个地方的数据,这些都是一个挑战
大数据服务公司和大数据人才匮乏。由于大数据市场刚刚开始,市场上缺少大数据人才和大数据服务公司,公开的数据短时间可能很难产生商业价值,这会影响政府和企业开放数据的积极性,不利于形成良性的大数据商业市场,会影响开放数据项目的持续发展。
3、有关开放数据一些建议
人类社会即将进入数字时代,开放数据将会是巨大的生产力。政府已经认识到了开放数据的价值,会持续推动政府和国企的数据开放。即使短时间内开放数据的投资看不到商业价值,但其未来经济价值会促使政府坚持开放数据的政策,持续进行投资。就像中国的高速公路,开放数据是另外一条信息高速公路,将数据转化为资产,转化为巨大的社会生产力,帮助企业实现更大的商业价值。
- 对于数据拥有者的政府,需要在保障公共安全和个人隐私的前提下,完成数据治理和数据整合,逐步向社会开放数据,并提高数据质量,公开面向所有个人和企业,有效利用政府科技资金,让利益相关企业和个人参与到开放数据项目中,鼓励创新,接受外部挑战,利用集体智慧,实现数据最优选择。
- 对于国有企业,需要在保护自身商业利益的前提下开放数据,帮助各自产业链企业的发展。同时开放数据也可以帮助其自身进行产业规划,进行有效投资,发现市场机会和风险,稳健经营,科学决策。企业可以利用开放数据提高生产效率,减少资源浪费,降低决策失误风险。产业链企业的良性发展,也会推动国企自身发展和进化,提高竞争力,优化企业经营,实现产业共赢。
- 对于企业家,开放数据将会作为新的资源,帮助企业进行发展,聚焦新的商业机遇,特别是在开放数据影响较大的保健行业,金融行业,能源行业,教育行业。数据服务公司可以利用开放数据,帮助消费者挖掘数据的潜在价值,为企业和政府提供具有价值的商业数据。对于经营中的公司,可以利用开放数据评价商业伙伴和潜在投资,通过提供数据来树立消费者的忠诚度,学会在透明的商业社会中进行经营,寻找公共或私人合作的机会,专注自身产品和客户,为消费者提供更好的产品和服务。