mongodb调优那些事（一）-系统设置

第一次使用mongodb来存储数据，没有看mongo的官方文档，所以踩了不少坑，今天终于得空总结了下mongo新手容易犯的错。

不用多说mongodb肯定是部署在linux系统上性能最佳，但是linux系统的一些默认配置却不是mongo建议的。我用的linux操作系统是centos6.5，最近遇到了一个问题是mongodb的索引已经有19g左右但是用mongostat查看mongodb的物理内存使用一直在10g左右徘徊。一开始以为是其他软件占用导致mongo申请不到内存，后面清理完之后mongo的内存依然无法上来，导致有些大集合的查询非常慢尽管查询有走索引。

后面突然想到mongodb启动的时候好像有很多warning，于是去认真看了下发现下面这个问题：
去度娘了下才知道原来linux有根据cpu内核数量来将内存分配给node的大小进行了限制，这个默认的内存分配策略叫numa。至于NUMA的含义，简单点说，在有多个物理CPU的架构下，NUMA把内存分为本地和远程，每个物理CPU都有属于自己的本地内存，访问本地内存速度快于访问远程内存，缺省情况下，每个物理CPU只能访问属于自己的本地内存。对于MongoDB这种需要大内存的服务来说就可能造成内存不足，NUMA的详细介绍，可以参考老外的文章。
理论上，MySQL、Redis、Memcached等等都可能会受到NUMA的影响，需要留意。
解决方法：
1.在原启动命令前面加numactl –interleave=all
如# numactl –interleave=all ${MONGODB_HOME}/bin/mongod –config conf/mongodb.conf
2.修改内核参数
echo 0 > /proc/sys/vm/zone_reclaim_mode

还有一个是hugepage_transport的问题，需要禁用该项。
解决方法：
1.创建文件/etc/init.d/disable-transparent-hugepages，内容如下：

#!/bin/sh### BEGIN INIT INFO# Provides:          disable-transparent-hugepages# Required-Start:    $local_fs# Required-Stop:# X-Start-Before:    mongod mongodb-mms-automation-agent# Default-Start:     2 3 4 5# Default-Stop:      0 1 6# Short-Description: Disable Linux transparent huge pages# Description:       Disable Linux transparent huge pages, to improve#                    database performance.### END INIT INFOcase $1 in  start)    if [ -d /sys/kernel/mm/transparent_hugepage ]; then      thp_path=/sys/kernel/mm/transparent_hugepage    elif [ -d /sys/kernel/mm/redhat_transparent_hugepage ]; then      thp_path=/sys/kernel/mm/redhat_transparent_hugepage    else      return 0    fi    echo 'never' > ${thp_path}/enabled    echo 'never' > ${thp_path}/defrag    unset thp_path    ;;esac

2.make it executable

#sudo chmod 755 /etc/init.d/disable-transparent-hugepages

3.Configure your operating system to run it on boot

#sudo chkconfig --add disable-transparent-hugepages重启即可，重点在下面这段使其启动时执行if test -f /sys/kernel/mm/transparent_hugepage/enabled; then  echo never > /sys/kernel/mm/transparent_hugepage/enabledfiif test -f /sys/kernel/mm/transparent_hugepage/defrag; then  echo never > /sys/kernel/mm/transparent_hugepage/defragfi