實例解析:挑燈看故障
我們有一臺Sun E250服務(wù)器，主要用作WWW發(fā)布用。一直以來運行比較穩(wěn)定，但是前一段時間重啟了該服務(wù)器一次后，發(fā)現(xiàn)這臺服務(wù)器前面板的6個LED指示燈中中間的那兩個指示燈常亮，而以前沒有發(fā)現(xiàn)這種現(xiàn)象，基本上可以定位為告警指示。我到SUN的網(wǎng)站上下載了E250服務(wù)器的手冊，查了一下，了解到那個扳手一樣的LED指示燈(圖1)
圖1
在系統(tǒng)運行時亮表示檢測到系統(tǒng)錯誤(任何可能的錯誤)。那個溫度計一樣的LED指示燈(圖2)亮表示系統(tǒng)溫度過高。
圖2
知道了LED指示燈帶給我們的錯誤信息以后，我們就開始從機房的環(huán)境溫度、操作系統(tǒng)故障這兩方面來著手解決問題。
機房環(huán)境溫度：
我們機房是采用中央空調(diào)和獨立空調(diào)兩套空調(diào)系統(tǒng)，可以有效的保證室內(nèi)的環(huán)境溫度，即使在夏天最熱的時候，也可以將溫度調(diào)節(jié)到二十度左右，而且和這臺WWW服器并排放在一齊的還有兩臺同型號的服務(wù)器，它們就沒有溫度過高的告警。
操作系統(tǒng)故障：
通過查看/var/adm下的messages文件，發(fā)現(xiàn)確實有溫度過高的日志記錄
以下是引用片段： Aug 31 19:17:18 ns unix: WARNING: TEMPERATURE WARNING: 63 degrees celsius at location CPU0 Aug 31 19:23:33 ns unix: NOTICE: TEMPERATURE NORMAL: all sensors back to normal readings |
再查看/var/log目錄下的syslog文件，發(fā)現(xiàn)有大量重復(fù)的告警信息出現(xiàn)，如下：
以下是引用片段： Aug 31 14:35:45 ns sendmail[19588]: NOQUEUE: [202.112.174.17] did not issue MAIL/EXPN/VRFY/ETRN during connection to MTA |
由此可以基本上判斷出是由于這個主機被當(dāng)作了垃圾郵件的轉(zhuǎn)發(fā)器，被某些惡意主機大量利用sendmail程序發(fā)送郵件造成了系統(tǒng)負(fù)擔(dān)過重(我們的郵件服務(wù)器(同樣是是Solaris操作系統(tǒng)，已經(jīng)利用增加SMTP認(rèn)證功能有效的杜絕了垃圾郵件的轉(zhuǎn)發(fā)，但是這臺WWW服務(wù)器默認(rèn)啟動了sendmail郵件服務(wù)，但是又沒有實現(xiàn)SMTP認(rèn)證功能。在Solaris7中文版中是無法成功的配置SMTP認(rèn)證的，我們的郵件服務(wù)器是在升級到Solaris8以后才配置成功SMTP認(rèn)證，我們的WWW服務(wù)器目前還沒有升級到Solaris8，這個漏洞造成了WWW服務(wù)器的負(fù)擔(dān)過重，而這個頻繁使用的進程竟然是發(fā)送垃圾郵件)，好了，知道這個問題，我們就可以從手解決了。
第一步，利用ps -ef | grep sendmail查出sendmail的進程號，再用“kill 進程號”命令殺掉sendmail進程。
第二步，不讓sendmail進程隨系統(tǒng)啟動自動啟動，用以下命令實現(xiàn)：
以下是引用片段： cd /etc/rc2.d mv S88sendmail s88sendmail |
以上兩步完成后，再去WWW服務(wù)器那兒一看，告警指示燈就不亮了，經(jīng)過了近一個星期的觀察，也沒有再出現(xiàn)類似的告警。這個問題成功解決。
【編輯推薦】
