近日，以“'全景·靈動·云'”為主題的，華勝天成Mocha BSM Visto產品發布全國巡展在京啟動，發布會上來自人民日報社技術部運行管理處副處長居曉軍就人民日報社的IT運維管理實踐作了分享，IT168記者就居曉軍人民日報的IT運維實踐做了相關的整理報道，以饗讀者。

《人民日報》的IT運維之路

眾所周知《人民日報》是中國第一大報，《人民日報》是日報，要求每天按時出報，很顯然對IT運維要求是非常高。

《人民日報》信息系統總體架構包括硬件支撐平臺，也就是包括網絡、主機、數據庫、存儲、業務支撐平臺，大致分為新聞采編中心、辦公管理中心、數據中心。報社的系統是這些在十多年中陸續建設的，因此選用的廠和產品也是種類繁多的，目前我們的操作系統包括ax4.3，Solaris，Windows2003，中間件包括J2ee，iis，交換機 是思科和華為產品，我們還有安全設備，網絡結構我們報社有一個特點，各個部門辦公室它是分散在一個大院的不同樓宇，因此網絡結構是一個新型結構，各個樓宇都有自己的交換機，而且每個樓宇各樓層有自己的樓層交換機。

▲人民日報技術部運行管理處副處長 居曉軍

據居曉軍介紹，《人民日報》的信息系統具備以下幾個特點：

一、是業務系統數量較多，實時性強;

二、是主機和應用種類比較多;

三、網絡系統比較復雜，設備分散不集中;

四、業務對IT系統要求極高;

五、報社的信息系統發展比較迅速。

IT現狀以及IT運維的問題

一、系統復雜，規模大，上層是各種業務系統，中間是各種平臺操作系統還有各種數據庫，頂層又有網絡安全系統，因此對管理人員的要求也是非常高的，要求每個管理員既要管理業務系統，還要精通服務器管理、數據器管理、網絡安全管理，還有系統出現問題時，要在很短時間內找到問題，并解決問題，運維的壓力是非常大的。

人民日報社技術部有50個人，其中有30多個人是技術人員，運維工作是24小時不間斷工作，IT運維人員除了要擔負夜間出報系統運維工作，還要擔負白天辦公系統、財務系統等其他業務系統，那可以說以現在的人手維護好這么大規模的一個IT系統，在體力上和心理上壓力都是可想而知的。

二、是要從整體角度把握系統運行狀況，要分析哪里存在隱患，比如這一時刻系統所有服務器CPU壓力、內存情況、數據庫的訪問數量，還有各個交換機甚至具體到某個端口數據流量的統計、分析。人工去完成這樣的工作是很難的，還比如某業務系統反映速度慢了，如果要想找到系統的瓶頸，到底是CPU、內存，還是存儲或者是并發訪問機制，這些都是遇到的難題之一。

三、管理員少，雖然也采取了值班多次巡檢制度，但沒有好的自動化監控手段，發生故障實施程度比較低，還會接受用戶的反饋。比如用戶反映每個頁面打不開，這時管理員才會去解決問題，但是這種被動局面，我們不希望發生的。我們的目標是在用戶反映之前發現問題、解決問題，讓用戶感覺不到系統出現過故障，這樣才算是一個比較好的運維服務。

四、提高故障定位的準確度，要縮短解決故障的時間，因為系統比較復雜，服務器、交換機數量比較多，甚至有些設備還是十年前的產品，因此發生這個故障也是在所難免的。在發生故障以后，如何在最短時間內從200多臺服務器、交換機的幾千個關鍵指標中，迅速找到故障所在，是我們最迫切要實現的目標。比如曾經發生過某次故障，采編系統無法登陸了，這時候系統管理理人員首先要檢查是否是頁面服務器發生故障，然后再檢查IS、Sybase數據庫，還有各樓層交換機，對這些因素進行排查，一圈下來需要耗時半個多小時。

因此，我們必須用先進技術手段來全方位的運維水平，也就是全方位、全地域、全天候、全功能、高質量的、主動式自動監控管理，實現我們的要求，這是運維目標。根據需求分析，2009年我們對業務系統、監控軟件進行市場調研，發現有不少軟件、硬件滿足需求，但是經過比較，我們認為在很多方面摩卡系統管理軟件具有一定的優勢，經過系統測試，我們取得了比較良好的效果，然后我們決定部署。

針對于這些人民日報社IT運維的現狀，居曉軍指出，早在2010年 4月在《人民日報》開始摩卡業務系統部署，經過一個月安裝測試，實現了摩卡業務管理系統對報社全業務系統，包括100多臺服務器、60多臺網絡IT安全設備，還有數據庫，經過三個月運行，系統運行良好，在2010年8月通過驗收，摩卡的業務管理系統主要實施五個模塊：

一是網絡監控模塊;

二是主機和數據庫管理;

三是時間響應管理;

四是業務服務管理;

五是機房監控及報警管理。

實施效果

實現監控界面的圖形化，把監控對象比較抽象的各種關鍵指標用圖形或者表格的形式表現出來，簡單易懂，一目了然，提高了管理效率。

在數據庫方面，因為我們比較關注數據庫的連接時間，這直接影響到用戶的使用，如果連接時間超過一秒，用戶感覺會比較慢。我們可以看到，在7天內最大連接時間沒有超過150毫秒，而且當前連接時間已經有16毫秒，用戶感覺速度應該是比較快、比較正常的。

其次是實現了將服務器、數據庫等設備的性能，還有變化趨勢用圖像、圖表表示出來。對服務器等設備實現監控，只是運維工作的開始，而不是全部，運維工作要想做得好，就要做到從全局掌控，能夠準確排查出問題，進而能達到提前預防的目標。

日常運維過程中出現故障，及時準確定位的效果。出現故障不可怕，那么可怕的什么?居曉軍認為， 在IT運維中可怕的是不知道故障發生了或者找不到故障是什么引起的，進而造成問題擴大化。

針對這一問題，人民日報社是這樣解決的，我們把所有關注的主機放到一張雷達掃描圖里，如果主機宕機了，在這張雷達圖里會顯示成一個紅點，運維人員會立刻接到短信通知，馬上進行處理，可以說有了這個功能，運維人員的心里會踏實一些。

最后一點，是我們做到了換位思考，從用戶體驗出發，提高服務質量。系統好不好用，速度快不快，誰最有發言權?不是系統管理人員，而是用戶。我們報社各業務系統都采用BS模式，用戶工作時瀏覽器與服務器的享用時間非常重要，直接影響到用戶感受。項目實施以后，我們實現了可以用直觀的圖像方式，從用戶角度展現我們提供的IT服務質量，通過模擬用戶登陸頁面，將這個環節所有的時間進行統一分析，還可以清楚知道用戶從登陸開始到進入系統總共用了多長時間，哪些時間是最影響用戶體驗度，進而想辦法加以改進，提高服務質量。

總的來說，系統在人民日報社的實施實現我們的預期目標，全局掌控，預防為主，詳細分析，排查瓶頸，及時定位，快速處理，協同配合，有效提升人民日報應用管理水平，增強技術支撐和保障能力。

對于未來，為了更好提供更優質運維服務，在現有基礎上我們準備做如下幾件事情： 首先，將單機展示改為多屏和多窗口展示，建立集中監控中心以及更強大業務監控系統，不斷提高運維管理水平。