作为前阿里巴巴***DBA,精通Oracle数据库,在OS、主机、存储领域有丰富经验,对软硬件的系统整合有丰富经验。带领数据库团队期间培养了一批知名数据库专家,现负责支付宝数据平台,专注于分布式存储和并行计算,构建基于hadoop上hive、hbase的系统。本次大会上,冯春培先生分享了支付宝的大数据应用实践。
▲前阿里巴巴***DBA冯春培
科技时代数据已成资产 关键在于运营
科技时代的企业,尤其是IT企业,说起来对于公司资产的定义往往要比传统企业要大的多,因为当今企业中对除了那些有型的和可以用价值衡量的资产外,还有一些是切实存在但很难直观评估价值的数据,但正是这样的矛盾才让当今企业更加关注数据资产的价值。冯春培先生的介绍中我们可以充分体会到一个IT企业对于数据是有着多么厚重的需求和管理目标。
▲数据平台愿景
而管理起这些数据,也正是希望通过这个管理的过程,挖掘数据更加更大的价值。冯春培先生认为通过数据化的运营,能够为企业带巨大的变化,首先是管理和运营模式的升级,数据化运营,重点在运营而非数据,数据是固定的,透过数据看到价值是运营的过程。其次,运营数据的过程能够带来更多的提升:
• 商业模式的升级
• 数据开始成为核心价值
• 重点是数据
云时代数据价值体现——BI解决方案
似乎在今天不提云就不科技,但事实上,因为云的深入应用能够满足更高的可用性和更好的用户体验要求,随之而来的数据的增长也和云本身体量一体“爆发”。支付宝的数据现状分析足以说明这样的现实,按照目前的增长情况,2012年的数据增长预计将会远超过去。而时间马上就要到预测点了,是不是这样我们可以在不久的将来验证这个数据的预测。
在云时代的今天,数据的价值如何充分体现,可以说支付宝在对数据的挖掘上也颇为有意思。从下图上我们可以看到,根据数据维度不同、数据目标不同建立起不同的解决方案,并为相应的解决方案。
看上去似乎满足了方方面的需求但是,冯春培先生也在演讲中表示自己在面临数据时候的压力与挑战:
• 成千上万JOB
• PB级数据
• SLA
• 前台的分与后台的合
• Big data 与 适时计算(T+1 à100ms)
随着业务的开展,更多的问题也在挑战数据管理的工作本身:
• 使用数据的人越来越多
• 数据需求的复杂性增加
• 对数据价值的判断和取舍