Yahoo构建私有云应对海量数据

Yahoo构建私有云应对海量数据

2011-07-21 13:14:30
云计算 想像一个每秒响应150万个请求的网站需要怎样的基础设施?这是Yahoo云架构副总裁Todd Papaioannou面临的挑战之一。Todd Papaioannou表示“什么最使我头疼?不是Google。我现在最头疼的问题是虚拟化加速的时间。”

 想像一个每秒响应150万个请求的网站需要怎样的基础设施?这是Yahoo云架构副总裁Todd Papaioannou面临的挑战之一。Todd Papaioannou表示“什么最使我头疼?不是Google。我现在最头疼的问题是虚拟化加速的时间。”

  对于一条重量级的新闻来说,10到20分钟的时间来处理Yahoo流量飙升的问题实在是太长了。例如日本海啸,Osama bin Laden或Michael Jackson死亡的消息。

这就是为什么Yahoo构建了他们自己的私有云。当然这不意味着Yahoo只是搭建了一些虚拟服务器集群,Yahoo的基础设施规模可扩大或缩小。

  据Papaioannou估计,依靠Amazon EBS(Elastic Block Store)存储,需要20到40分钟来启动VM实例。Yahoo支持超过6.8亿注册用户和超过200PB的数据存储在42000台Hadoop服务器上。同时每天收集和处理1000亿次的事件,并响应每秒1150万的网络请求和累计每月110亿次服务器网页请求。

  Yahoo认为自己提供的是为消费者服务的个人云。提供互联网服务,如照片E-Mail和其他数据存储,并未用户提供搜索,新闻,游戏和视频。其秘密武器是WOO(Yahoo提出互联网是对象集合而不是网页集合”搜索理念推出的一系列新搜索功能命名为“WOO”搜索)。如果用户搜索一个乐队,WOO可显示新闻、视频、歌词等。

  Papaioannou表示这意味着私有云不仅是一个漂亮的营销短语。Yahoo私有云底部是两层的,而基础设施则作为一种服务。Yahoo不对任何人共享其数据中心,其开发的自定义抽象层被称为“Cloud Fabrics”。可以将其看作中计算/数据中心的整个池资源,无需关注物理位置,因为主要负责分配已有的应用任务。另一层是Yahoo所说的秘密武器WOO。

  私有云和私有数据中心永远不会完全消失,Papaioannou认为如果一家公司发展的足够迅速,拥有自己的基础设施比共享更节省成本。对于大多数企业来说,每秒150万的网络请求带来的经济规模是巨大的,云计算是***的选择。

网站栏目:Yahoo构建私有云应对海量数据
分享网址:http://www.mswzjz.cn/qtweb/news43/432043.html

温江区贝锐智能技术服务部_成都网站建设公司,为您提供外贸网站建设做网站定制网站品牌网站设计响应式网站企业建站

广告

声明:本网站发布的内容(图片、视频和文字)以用户投稿、用户转载内容为主,如果涉及侵权请尽快告知,我们将会在第一时间删除。文章观点不代表本网站立场,如需处理请联系客服。电话:028-86922220;邮箱:631063699@qq.com。内容未经允许不得转载,或转载时需注明来源: 贝锐智能