从 Flickr 的 DB 服务器配置说起 Swap
来源:互联网 发布:三星手机照片导入mac 编辑:程序博客网 时间:2024/04/27 23:15
又读了一遍这个 PPT: Federation at Flickr: Doing Billions of Queries Per Day ,发现还是值得咀嚼一下,尽管这"甘蔗"已经被吃过了。
针对主机环境的实践参考
Flickr 数据库的硬件配置一般用 16G 内存,6块 15K 硬盘,RAID 10,在 EM64T 下跑 RHEL 4,运行在 Deadline I/O 调度器 模式 。回写 Cache 用控制器电池而不用磁盘的 Cache。Swappiness 设置为 0 . 。
大内存数据库服务器的 Swap 设置问题
上面提到了 Flickr 是把 Swappiness 设置为 0 ,简单的通过:
echo 0 > /proc/sys/vm/swappiness
个别情况下这样也可能没起作用,因为实际上对 Swap 的调用是由如下的公式计算得到的:
swap_tendency = mapped_ratio/2 + distress + vm_swappiness;
其中 vm_swappiness 默认值是 60.
Linux Kernel 2.6 的诡异行为,当有大量物理内存空闲的时候,Linux 仍会傻乎乎的调用 Swap 空间,这导致有的时候系统性能很差。有人建议如果是 INNODB 的引擎的话,可以用 O_DIRECT 的方式强制直接调用物理内存。但似乎副作用很大(存疑)。
如果关闭 Swap (swapoff -a)的话,又会遇到 OOM 的问题。这是绝对不推荐的。
还有人用的方式是把 Swap 建立到 RAM 盘上。
Swap 的自动校正其实是个老问题,几年前可能超过 4g 的 Linux 服务器都不多,而现在动辄几十 G 的内存配置,应用场景发生了很大变化,Kernel 的算法思路肯定也要调整一些了吧(尽管几年来不断看到有小的 Patch 出来,可好像 RHEL 的 Kernel 还是老样子)。
我在这里抛砖引玉,大家实际应用中应该也遇到类似问题吧? 有什么建议? 还是干脆就不管? 默认情况下其实也能跑...
- 从 Flickr 的 DB 服务器配置说起 Swap
- 从 Flickr 的 DB 服务器配置说起 Swap
- 从Tomcat服务器的日志说起
- 从服务器构建说起(四).Linux下安装配置Oracle
- 从服务器构建说起(四).Linux下安装配置Oracle
- 图解Flickr的服务器架构
- 从DDOS说起:最优的服务器集群方案-PaceMaker
- PHPUnit从零开始(1):从它的安装配置说起
- 从服务器构建说起(二).磁盘阵列RAID
- 从普林斯顿的宽容说起
- 从北京的四合院说起
- 从js的dtree说起
- 从香蕉的果蝇说起
- 从 grep 的用法说起
- 从自己的电脑说起
- 从OpenCV2的Mat说起
- 从Java的Collection说起
- MySQL服务器Swap满了100%导致db很慢很卡
- 两个面试常见的智力题
- 三种方法解决IIS6目录检查漏洞--Windows 2003 Enterprise Edition
- 终于放假拉!
- 《高性能网站建设指南》读后随感
- 在不同环境下调用Spring来管理的Bean.
- 从 Flickr 的 DB 服务器配置说起 Swap
- 求职面试时 面试官的考题大全(84个问题) 对求职者绝对受用
- Flickr 的访问统计实现以及其他
- 在HtmlView中如何改变链接.(在线守候)
- Firefox - 更新 - 3.0.2
- “IHTMLDocument2Ptr”: 未声明的标识符
- 项目中的版本控制
- 列举IE全部Element的代码
- 网络简历 “出挑”七法