两家公有云服务提供商推出了托管版本Hadoop(分布式计算)集群。其中SkyTap宣布与Hadoop分销商Cloudera合作。Joyent与HortonWorks联合在1月23日推出一项基于云的Hadoop服务。
这是厂商通过推出最新技术使自己的产品差异化的最新举措,也是提高大数据分析云应用的最新举措。在这种应用中,实际上有无限的资源根据按使用付费的定价模式向用户提供。
Joyent和SkyTap是基于云的Hadoop提供商领域最新的进入者。这个市场在2013年肯定会变得更加拥挤。SkyTap上周宣布,其Cloudera驱动的Hadoop产品将作为一个拥有三个节点的集群提供,但是,可以升级到50个节点,不需要支付Cloudera的许可证费。这需要订阅SkyTap的服务,起始价为每个月500美元。节点可以升级到8个处理器和32GB内存。
SkyTap服务旨在用于机构原型化(prototype)Hadoop或者使用SkyTap的Hadoop作为自己内部运行的Hadoop集群的一个扩展。SkyTap营销副总裁Brett Goodwin说,如果你有一个内部的Cloudera集群并且有一段时间的额外的容量,你就可以升级这些节点。当Hadoop在虚拟化的硬件上运行的时候,Hadoop一般会出现性能下降的情况。这是大多数机构在自己内部设备上运行全面的用于生产的Hadoop集群的原因。但是,对于测试或者在需求高峰期升级来说,这个云是一个合乎逻辑的选择。
同时,Joyent也在其Hadoop服务方面与HortonWorks合作。 Joyent表示,这项服务在其云中有极好的性能。Joyent称,它有最高性能的托管的Hadoop服务,并且引述Altoros Systems的研究报告称,与类似规模的基础设施相比,Joyent的Hadoop集群的硬盘输入和输出速度要快将近三倍,而价格只是其三分之一。同SkyTap的服务一样,Joyent的用户只需为IaaS资源付费,而不需要支付Hadoop许可证费。
提供基于云的Hadoop服务的厂商并非只有Joyent和SkyTap。许多人认为亚马逊Web服务是公共IaaS(基础设施即服务)市场中的领先者。亚马逊Web服务拥有在线分析引擎Elastic Map Reduce(EMR)。这项服务在EC2(弹性计算云)和S3(简单存储服务)平台上使用一个Hadoop框架来托管这个框架。亚马逊Web服务有为用户使用EMR提供的高容量虚拟机。这种虚拟机拥有48TB存储容量、117GB内存和16个虚拟内核。亚马逊Web服务正在服务方面与MapR和HBase合作。
还有其它许多公司处于推出自己的基于云的Hadoop产品的早期阶段。例如,微软已经在预览HDInsight。这个产品可以在微软Windows或者Azure云中运行,通过Windows Systems Center 2012进行管理。
Rackspace和HortonWorks去年秋季宣布,两家公司将联合开发一个用于公有云和私有云的由OpenStack驱动的服务。但是,这两家公司还没有发布正式的产品。谷歌和MapR已经在合作,但是,也没有推出产品。同时,VMware正在利用其“Project Serengeti”项目研制虚拟化的Hadoop集群。