Stack Overflow架构揭秘（软硬件、人员、数字）(2)

http://os.51cto.com  2011-03-09 09:33  布加迪 编译  51CTO.com  我要评论(0)

• 摘要：从2009年到今天，Stack Overflow的架构已发生了很大的变化。Stack Overflow是全球IT界最受欢迎的技术问答网站之一，目前，其每月不重复的访问用户超过1600万；每月网页浏览量（PV）增长了近6倍，达到9500万。Stack Overflow的架构是相当公开的，本文对相关资料进行了总结分享。
• 标签：Stack Overflow  架构

 

外部组件

不是作为开发工具一部分而包括的代码：

◆reCAPTCHA

◆DotNetOpenId

◆WMD——现在作为开源而开发。详见github网络图

◆Prettify

◆Google Analytics

◆Cruise Control .NET

◆HAProxy

◆Cacti

◆MarkdownSharp

◆Flot

◆Nginx

◆Kiln

◆内容分发网络（CDN）：无，所有静态内容从sstatic.net来提供，这个快速的、无cookie的域用于将静态内容分发到Stack Exchange系列网站。

开发人员和系统管理员

◆14名开发人员

◆2名系统管理员

内容

◆许可证：Creative Commons Attribution-Share Alike 2.5 Generic

◆标准：OpenSearch，Atom

◆主机：PEAK Internet

架构的更多信息和汲取的经验

◆使用了Proxy，而不是使用Windows网络负载均衡（NLB），因为HAProxy成本低廉、易于使用，还是免费的；而且通过Hyper-V，很适合作为网络上的一个512M虚拟机“设备”。它还在服务器的前端工作，所以对服务器来说完全透明；而且作为不同的网络层，更容易排除故障，而不是与你的所有窗口配置混杂在一起。

◆没有使用CDN，因为与捆绑在现有主机方案中的带宽相比，连亚马逊CDN这样“便宜的”CDN其费用都非常昂贵。按照亚马逊的CDN费率和Stack Overflow的带宽使用量，每月至少要付1000美元。

◆备份到磁盘上，便于快速恢复；备份到磁带上，便于历史归档。

◆SQL Server的全文搜索机制集成度非常差，问题多多，功能很弱，所以Stack Overflow改用了Lucene。

◆最受关注的是峰值HTTP请求数字，因为这正是他们需要确保能处理的方面。

◆所有属性如今都在同一个Stack Exchange平台上运行。那意味着Stack Overflow、Super User、Server Fault、Meta、WebApps和Meta Web Apps都在同一个软件上运行。

◆有一些独立的StackExchange站点，因为人们拥有不同的专业技能，这些技能并不适用于不同的主题站点。你也许是世界上最出色的大厨，但并不是说你就有能力修复服务器。

◆Stack Overflow尽量把一切都放到缓存中。

◆匿名用户访问的所有页面通过输出缓存（Output Caching）放到缓存中，随后提供给匿名用户。

◆每个站点有三种不同的缓存：本地缓存、站点缓存和全局缓存。

◆本地缓存：只能通过1对服务器/站点来访问。

◆为了限制网络延迟时间，Stack Overflow使用了本地“一级”缓存（基本上是HttpRuntime.Cache），缓存服务器上最近设定/读取的值。这样就可以把网络上的缓存查找开销减小至0字节。

◆缓存里面含有用户会话和等待的视图数更新等内容。

◆缓存完全驻留在内存中，没有网络或数据库访问。

◆站点缓存：可以由一个站点（任何服务器上）的任何实例来访问。

◆大部分缓存的值进入到这里，热点问题ID列表和用户验收率就是两个典例。

◆缓存驻留在Redis（位于不同的数据库，纯粹为了易于调试）。

◆Redis的速度很快，缓存查找中速度最慢的部分就是读取字节并写到网络上。

◆值被发送到Redis之前先进行压缩。Stack Overflow有许多处理器，大部分数据是字符串，所以得到的压缩比很高。

◆Redis机器上的处理器使用率为0%。

◆全局缓存：全局缓存被所有站点和服务器共享。

◆缓存内容包括收件箱、API使用限额和另外几项真正全局的内容。

◆缓存驻留在Redis中（位于数据库0，同样为了易于调试）。

◆缓存中的大部分项目在超时（通常是几分钟）后过期，从来不被明确删除。需要宣布某个特定的缓存项目无效时，他们使用Redis消息传递机制，向“一级”缓存发布删除通知。

◆知名软件工程师、Fog Creek Software公司首席执行官Joel Spolsky不是微软的忠诚分子，他并不为Stack Overflow做出技术决策，认为微软的许可证是个舍入误差。

◆Stack Overflow为自己的输入/输出系统选择了英特尔X25固态硬盘组成的RAID 10阵列。这个RAID阵列消除了可靠性方面的任何问题；与FusionIO相比，固态硬盘的性能确实很好，而价格又便宜得多。

◆微软许可证的总标价约为24.2万美元。由于Stack Overflow使用Bizspark，所以没在支付总标价，但他们能付的最多也就这么多。

◆英特尔网卡取代了博通网卡和主生产服务器。这解决了他们之前面临的问题：连接中断、数据包丢失和地址解析协议（ARP）表损坏。

 

【51CTO.com译文，转载请注明原文作译者和出处。】

 

原文：Stack Overflow Architecture Update - Now At 95 Million Page Views A Month

【编辑推荐】

1. 系统管理员的软硬件维护清单
2. 浅谈如何将NoSQL引入现有架构系统
3. 大型网站运维之道漫谈