2017-06-23 dba日记，ORACLE TFA组件消耗CPU诊断和处理案例

背景：
通过数据库资源监控软件看到，有一个集群数据库RAC各个节点的的CPU都会莫名奇妙地有5%瞬间增加到10%，并且还是有规律的出现，为什么出现这种情况呢？
分析：
具体化：每隔5分钟,数据库名为RAC的各个节点的CPU都会增加5%的使用率，其它RAC数据库节点并不会出现这种情况。
数据收集：1.确认具体出现的的时间范围，发现一天24小时，每小时会出现这种重复且有规律的现象。
  2. 排查数据库的内部作业。的确有些作业是每5分钟运行一次，但这些作业是固定在某一节点上运行的。
  3. 登录到数据库主机，使用top 或 glance连续观察10分钟，发现每隔10几到20秒，就会有4个JAVA进程销毁，同时有一个JAVA进程建立，除此之外还有PERL进程，并且每个进程都占用个体CPU 20%的时间，且有ROOT用户调用，整体CPU使用率上升5%左右。《《《《《《《发现可疑点。基本与观察到的CPU表现吻合
数据分析：
结合1,2的数据分析，发生的时长、发生的地点与观察到的CPU表现不吻合，
数据3，基本与观察到的CPU表现吻合，但不明白该进程是的功能是做什么的。
迭代分析：
具体化：数据3的现象是由什么造成的？这些进程的主要处理什么工作。
数据收集：1）ps -ef | grep perl ; ps -ef | grep java  ，发现perl 进程在调用oracle tfa
          2) 进一步收集相关的案例，百度和GOOGLE一下，发现有类似的案例，tfa占用主机CPU 。主要终止TFA的运行就可以了。
数据分析：1）RAC是一个11.2.0.4的数据库，默认安装了TFA，并且自启动。
  2）TFA是一个oracle自动收集日志及调用OSWATCH收集系统资源的组件，并且一天24小时，全天候运行。
 3）网上有同类案例。
结论：
oracle rac 11.2.0.4，各个节点在grid下自动启动了TFA进程，定时收集ORACLE日志信息，导致主机CPU每隔10到20秒的CPU升高5% .
解决方案：
使用root用户登录到各节点执行如下命令：
./grid/bin/tfactl disable
./grid/bin/tfactl stop