Yahoo构建私有云应对海量数据

云计算
想像一个每秒响应150万个请求的网站需要怎样的基础设施?这是Yahoo云架构副总裁Todd Papaioannou面临的挑战之一。Todd Papaioannou表示“什么最使我头疼?不是Google。我现在最头疼的问题是虚拟化加速的时间。”

 想像一个每秒响应150万个请求的网站需要怎样的基础设施?这是Yahoo云架构副总裁Todd Papaioannou面临的挑战之一。Todd Papaioannou表示“什么最使我头疼?不是Google。我现在最头疼的问题是虚拟化加速的时间。”

  对于一条重量级的新闻来说,10到20分钟的时间来处理Yahoo流量飙升的问题实在是太长了。例如日本海啸,Osama bin Laden或Michael Jackson死亡的消息。

  这就是为什么Yahoo构建了他们自己的私有云。当然这不意味着Yahoo只是搭建了一些虚拟服务器集群,Yahoo的基础设施规模可扩大或缩小。

  据Papaioannou估计,依靠Amazon EBS(Elastic Block Store)存储,需要20到40分钟来启动VM实例。Yahoo支持超过6.8亿注册用户和超过200PB的数据存储在42000台Hadoop服务器上。同时每天收集和处理1000亿次的事件,并响应每秒1150万的网络请求和累计每月110亿次服务器网页请求。

  Yahoo认为自己提供的是为消费者服务的个人云。提供互联网服务,如照片E-Mail和其他数据存储,并未用户提供搜索,新闻,游戏和视频。其秘密武器是WOO(Yahoo提出互联网是对象集合而不是网页集合”搜索理念推出的一系列新搜索功能命名为“WOO”搜索)。如果用户搜索一个乐队,WOO可显示新闻、视频、歌词等。

  Papaioannou表示这意味着私有云不仅是一个漂亮的营销短语。Yahoo私有云底部是两层的,而基础设施则作为一种服务。Yahoo不对任何人共享其数据中心,其开发的自定义抽象层被称为“Cloud Fabrics”。可以将其看作中计算/数据中心的整个池资源,无需关注物理位置,因为主要负责分配已有的应用任务。另一层是Yahoo所说的秘密武器WOO。

  私有云和私有数据中心永远不会完全消失,Papaioannou认为如果一家公司发展的足够迅速,拥有自己的基础设施比共享更节省成本。对于大多数企业来说,每秒150万的网络请求带来的经济规模是巨大的,云计算是***的选择。

 

责任编辑:鸢玮 来源: CSDN
相关推荐

2017-11-07 06:28:11

2017-03-03 10:18:13

存储云APIGUI

2017-03-01 14:30:48

存储云私有云公有云

2019-07-29 09:37:44

海量数据企业级私有云

2018-11-19 15:06:57

华为云

2012-10-17 09:52:01

2015-01-20 09:40:56

开源私有云

2011-06-08 14:24:11

CitrixOpenStack私有云

2011-08-29 14:33:41

2012-07-06 16:19:23

华为服务器

2010-10-27 10:20:13

私有云

2017-01-19 10:44:54

私有云云计算虚拟化

2020-03-04 15:52:38

OpenStack私有云技术

2016-06-15 14:38:52

京东

2013-02-25 09:22:13

私有云构建云堆栈混合云模型

2011-06-03 09:22:04

OracleOracle应用服务器

2015-12-28 10:01:51

私有云云团队IT技能

2012-04-16 10:16:07

云计算私有云IaaS

2011-11-18 10:04:46

Citrix私有云

2011-07-21 12:58:28

雅虎云计算私有云
点赞
收藏

51CTO技术栈公众号