优酷网后台的“生死时速”

来源:互联网 发布:c 语言获取arp 包 编辑:程序博客网 时间:2024/04/24 11:37

优酷网后台的“生死时速”

查看评论  发表评论2009年01月12日 13:35分         作者:网界网 宋家雨     来源:

摘要:优酷网Youtube是一个将服务器性能挖掘到极致的企业,在这里平均一天引进两卡车新服务器、淘汰一卡车旧服务器;在这里速度不仅关乎利润,甚至决定着生死。

【CNW.com.cn 专稿】优酷网Youtube是一个将服务器性能挖掘到极致的企业,在这里平均一天引进两卡车新服务器、淘汰一卡车旧服务器;在这里速度不仅关乎利润,甚至决定着生死。

快速崛起的视频网站

根据知名调研机构AC尼尔森公司的数据:优酷网日视频播放量(VV)在2007年12月就突破1亿,每日独立访问用户数量(UV)超过1200万。最新的数据是优酷网的VV已经达到1.5亿,UV超过2500万。“在一定的周期内,硬件平台的性能必将会发挥到极限,但此时用户的需求仍持续性地高速增长,这就需要最新技术和最新产品要跟得上甚至超过我们的步伐。我们每年都会经历几次‘向硬件要性能’的阶段。” 优酷网采购经理赵辉先表示。

“我们重视新技术,例如对SSD(固态硬盘)就很渴望。我们非常看重SSD的I/O能力,其随即读写速度非常高,这是现有所有硬盘都达不到的。我们渴望这种新的硬盘能迅速应用到新的服务器中。” 赵辉说。

目前优酷网采用的是基于Flash的视频点播技术,这与P2P直播/点播有所不同,前者所有流量都来自服务器。因此优酷网相比其他网站,更需要大量存储和流媒体服务器。
 
基于此,优酷网对硬件设备供应商的要求主要有以下几点:

第一, 供货期短。硬件设备的供货是否及时,对发展迅猛的互联网企业而言生死攸关。用赵辉先生的话说,“我们要求供应商能迅速供货,而不是坐等。在互联网行业,等待往往就意味着死亡。”供货期尽可能地短,成为其选择供货商的首要因素。

第二, 产品线完备。一方面,互联网行业是对新技术有着强烈需要的行业,渴望最新的技术能迅速应用到成熟的硬件产品中;另一方面,“适合的就是最好的”,考虑到成本等因素,优酷网还需要一些虽然不是“最好的”,却是最“适合的”产品,这就要求硬件设备供应商的产品线齐全,用赵先生的话说就是,“我们要的设备,供应商都要有。”

第三, 由于运营成本高,性价比也是优酷网需要考虑的重点。最后,由于优酷网的服务器分布在全国各地,远程管理与7X24小时现场服务等优质的技术支持与服务也是优酷网必需的。

服务器应用

目前,优酷网主要采用dell PowerEdge 1950、PowerEdge 860,存储阵列以dell MD1000为主。这些设备的主要配置如下:

PE1950采用英特尔至强5310处理器,4G内存,两块300G SAS硬盘。PE860采用英特尔至强3060处理器,4G内存,一块80G SATA硬盘。MD1000存储阵列则装载有15块750G SATA硬盘。

在体系结构上,优酷网采用分布式的结构,服务器和存储设备分布在全国各地,用户就近访问,获得最快的视频体验。

优酷网将PE1950作为Web服务器和流媒体服务器,分别服务于页面系统与视频系统。页面系统用以展示用户信息、积分、留言及视频的截图、排名、展示等,该系统所用的服务器数量只占20%左右,80%的服务器都是用于视频系统的流媒体服务器,它们通过负载均衡的方式为用户提供流媒体服务。

优酷网视频系统的加速机制较复杂,简单而言,它通过多种方式保证分布在全国各地的用户进行就近访问——用户点击视频请求后,优酷网将根据用户所处地区位置,将离用户最近、服务状况最好的视频服务器地址传送给用户,从而保证用户可以得到快速的视频体验。另外,还有一些服务器作为转码服务器——由于用户上传的视频格式很不统一,大小也不一样,就需要转码服务器首先进行解码,解码后再编码,最后做成flash文件,即统一的Flv格式。转码服务器在做完这些工作后,进行分发,存储,最后再通过流媒体服务器将视频传送给用户。

在存储层方面,与服务器层面的“就近访问”相对应,优酷网的存储则是采用“分布式存储”,即利用“MD1000+PE860”的组合,将视频数据都存储在服务器所处的全国各大城市。MD1000与PE860以DAS(直连存储)的方式相连,作为一个存储单元,每个存储单元之间各自为阵,不存在关联——一台PE860服务器只连接一台MD1000存储器。

该系统的拓扑图

 

后台表现

谈到后台系统表现,优酷网CTO姚键先生表示,服务器系统一直运营良好,他对对戴尔产品的性价比表示满意。姚键指出:由于互联网行业的运营成本相当高,他们对硬件产品的性价比高度关注。戴尔高举“绿色IT”大旗,在能效及环保等指标上一直是业内的佼佼者,这对优酷网的后期运营来说减少了更多的成本,提供了更多的价值。

除此之外,姚键先生对技术支持和服务也表示赞赏。他表示,由于优酷网高访问量、高并发的特征,硬盘处于频繁读写的状态,任何厂商的产品在硬盘方面的损坏率都不可避免地居高不下,但由于服务人员的响应速度极快,他们在这方面并没遇到太多的困扰,比如有时候在半夜会出硬盘故障,天亮前故障就被排除了。

 

 

原创粉丝点击