《哈佛商业评论》将其9月刊的所有版面都用在了大数据上,并将重点放在了Hadoop上。文中认为,数据科学家将成为有前途的职业,而这些数据科学家也将成为建议公司如何使用大数据技术的专家。
与许多开始创业并领导公司不断发展壮大的人一样,我也经常阅读《哈佛商业评论》。我没有商科学位。由于强迫性阅读障碍(我认为这是早发性老花眼引起的,得了这种眼科疾病意味着你真的已经老了)的原故,我会对从观察对象那里了解到的东西进行仔细研究。对于《哈佛商业评论》来说,对技术的发展进行前瞻很不寻常——我很少看到他们会刊发一些关于Hadoop这类相对较新的开源项目的文章。
Gartner预测大数据在2013年将带来了340亿美元的IT开支,预计到2018年这一数据将增长三倍。我们在今年还发现美国国家安全局(NSA)已经成为了大数据技术的主要使用者。政府可能无法创建一个允许我们大家购买健康保险的网站,但是在创建一个大型国内监视网络方面,他们确实做到了。
我们还看到10gen公司将他们的名字更名为MongoDB,并获得了12亿美元的估值,以及突破9位数资金,这意味着他们可能将进行IPO(首次公开募股)而不是被并购。目前大数据领域内有着充足的资金。其中,Hortonworks获得了5000万美元的融资、DataStax获得了4500万美元融资、Couchbase获得了2500万美元融资。
在过去几年,我们还看到了许多“不得不”开发和部署的技术——Facebook、雅虎、推特和LinkedIn等公司遇到了许多以前未曾预见到的数据与使用问题。尽管这些公司在数据和并发使用量方面甚至超过了某些国家,但是他们常常被视为一时的时尚或是被非关键数据所包围,难以成为主流公司的榜样。
尽管如此,我们还是看到许多相当保守的客户也已经转变态度,开始部署NoSQL技术,尤其是MongoDB技术。在2013年,“日志分析”成为了Hadoop的杀手级应用和今年的试点项目。同时我们也开始看到许多更为严肃的想法被应用到解决方案中和相关问题研究当中。
这一现象并不是地区性的而是全球性的。在巴西,键值存储已经被部署,以用于提升一个大型数据项目中的吞吐量。解决社交媒体和娱乐中出现的问题可能只是大数据解决方案的一个开始,目前它们正在向教育、医疗保健和金融等领域拓展。
此外,我们还发现这一发展势头在去年非常强劲。在2014年,如果甲骨文公司销售代表没有转行成为大数据厂商代表,那么即便是更为保守的IT部门也将不再愿意与当地的甲骨文公司销售代表展开沟通。
(注:本文作者为Andrew Oliver,在InfoWorld.com网站开设有Strategic Developer博客)