如何判別分布式系統的優劣

如今，分(fen)布式(shi)系(xi)統(tong)正在對各行業(ye)產生巨大影響，已經進入(ru)軍隊(dui)、公(gong)安、氣象、交通、電力等(deng)重要機(ji)構(gou)的指揮中(zhong)心、監控中(zhong)心，為用戶(hu)系(xi)統(tong)可視化、對接和互聯互通帶(dai)來強大的應用，分(fen)布式(shi)系(xi)統(tong)的優劣(lie)判別，主要看以下七個方面(mian)：

一、看核心技術

分(fen)布(bu)(bu)(bu)式(shi)產(chan)品的(de)(de)(de)核心基礎是音視頻網絡編解(jie)碼(ma)算(suan)法(fa)，優(you)秀的(de)(de)(de)編解(jie)碼(ma)算(suan)法(fa)是一(yi)(yi)(yi)款好的(de)(de)(de)分(fen)布(bu)(bu)(bu)式(shi)產(chan)品誕生(sheng)的(de)(de)(de)前提(ti)。通過(guo)了(le)解(jie)一(yi)(yi)(yi)款分(fen)布(bu)(bu)(bu)式(shi)產(chan)品采(cai)用的(de)(de)(de)核心技(ji)術(shu)算(suan)法(fa)，可以(yi)快速的(de)(de)(de)初(chu)步判(pan)定一(yi)(yi)(yi)款分(fen)布(bu)(bu)(bu)式(shi)產(chan)品的(de)(de)(de)性能優(you)劣，從而選擇最適(shi)合的(de)(de)(de)分(fen)布(bu)(bu)(bu)式(shi)產(chan)品。市場上主(zhu)流(liu)的(de)(de)(de)分(fen)布(bu)(bu)(bu)式(shi)根據其技(ji)術(shu)特點(dian)與產(chan)生(sheng)時間(jian)可以(yi)劃分(fen)為以(yi)下3種，第(di)一(yi)(yi)(yi)代(dai)深壓(ya)縮分(fen)布(bu)(bu)(bu)式(shi)技(ji)術(shu)、第(di)二(er)代(dai)淺壓(ya)縮分(fen)布(bu)(bu)(bu)式(shi)技(ji)術(shu)與第(di)三代(dai)雙引擎分(fen)布(bu)(bu)(bu)式(shi)技(ji)術(shu)。

1、第一代深壓縮分布式

深壓縮分(fen)布式(shi)(shi)產品是(shi)以(yi)H.264 和(he) H.265算法為主(zhu)的(de)第一代分(fen)布式(shi)(shi)產品類型，也(ye)是(shi)市面上主(zhu)流(liu)的(de)分(fen)布式(shi)(shi)產品類型，它的(de)優勢是(shi)占用帶寬低、具備完善的(de)功(gong)能、采用標(biao)準視頻編(bian)解碼(ma)協(xie)議，劣(lie)勢是(shi)畫(hua)面損失較大、畫(hua)面延時較大。

2、第二代淺壓縮分布式

淺壓縮(suo)分布式(shi)是區別于深壓縮(suo)分布式(shi)的第二(er)代分布式(shi)，主要針(zhen)對性的解(jie)決了深壓縮(suo)分布式(shi)產(chan)品(pin)顯(xian)示畫面質(zhi)量差、延時(shi)高等問(wen)題，優勢在于畫面質(zhi)量好、傳輸延時(shi)低，劣勢是占用(yong)帶寬大(da)、標準化程度低。

3、第三代雙引擎分布式

雙(shuang)引擎分布(bu)(bu)式通過采(cai)用雙(shuang)分布(bu)(bu)式核(he)心的(de)設計，首次將前兩(liang)代分布(bu)(bu)式產品特點優勢進行整合(he)。一方(fang)面(mian)通過“淺壓縮核(he)心”實現視頻高質量無損顯示效(xiao)(xiao)果、低(di)延時傳輸、完善了多種使用功能；同時具(ju)備“深壓縮核(he)心”在保持淺壓縮顯示效(xiao)(xiao)果的(de)同時，解(jie)決了實際使用中與市面(mian)上(shang)H.264/H.265設備兼容、低(di)網絡帶寬(kuan)下遠距離視頻分享的(de)需求。

二、看功能覆蓋

隨著顯控市場的(de)逐步發展，各行業對于音(yin)視頻顯控的(de)應用也(ye)愈加復雜(za)。考量一(yi)款分布式產品的(de)優劣，其(qi)(qi)中(zhong)很關鍵(jian)的(de)一(yi)點，便是(shi)看其(qi)(qi)是(shi)否覆(fu)蓋了行業常用的(de)功(gong)(gong)(gong)能需求。各分布式廠商往往提(ti)供了多種(zhong)功(gong)(gong)(gong)能應用，但(dan)其(qi)(qi)中(zhong)真正具備考量意義與(yu)值得評估的(de)主要有以下三(san)大功(gong)(gong)(gong)能：網絡信(xin)號切換(huan)功(gong)(gong)(gong)能、大屏拼接顯示功(gong)(gong)(gong)能與(yu)實時坐席控制(zhi)功(gong)(gong)(gong)能。

1、網絡信號切換功能

音視頻的(de)網(wang)絡(luo)編解(jie)碼(ma)能力是分布式系統產品最重要的(de)基礎能力。主要功(gong)能包(bao)括(kuo)：不(bu)同種(zhong)類的(de)音視頻信(xin)號傳輸(shu)(shu)、不(bu)同分辨率的(de)音視頻信(xin)號傳輸(shu)(shu)、畫面無黑(hei)場、無中間狀態切換、音頻視頻獨立傳輸(shu)(shu)切換等(deng)。

2、大屏拼接顯示功能

分布式(shi)大屏拼接(jie)(jie)顯(xian)示(shi)功能主要包(bao)括：大屏拼接(jie)(jie)功能、大屏多畫面顯(xian)示(shi)、畫中畫顯(xian)示(shi)、任意布局調整、預(yu)案快速(su)切換、大屏底圖顯(xian)示(shi)、信號預(yu)覽(lan)、大屏狀態回顯(xian)、大屏滾動字幕(mu)等。

3、實時坐席控制功能

分布式(shi)坐席(xi)協作功能(neng)可以快速便捷的(de)解決(jue)坐席(xi)間信息共享(xiang)和(he)處(chu)理的(de)問題，其(qi)主要核心(xin)功能(neng)包(bao)括：“一人(ren)多機”控制(zhi)(zhi)，“人(ren)機分離(li)”遠端PC實(shi)時(shi)控制(zhi)(zhi)，坐席(xi)與大(da)屏(ping)的(de)視(shi)頻互動，坐席(xi)與坐席(xi)間的(de)視(shi)頻互動，UKey、硬(ying)盤(pan)、攝(she)像(xiang)頭、打印機等(deng)USB設(she)備識別，信號源(yuan)實(shi)時(shi)預(yu)監等(deng)。

三、看畫面還原度

基于指(zhi)揮中(zhong)心、控制室等分(fen)布式(shi)系統應(ying)用(yong)場景對超高圖像畫(hua)(hua)質呈現的(de)(de)需(xu)求，畫(hua)(hua)面(mian)還原度(du)也(ye)是衡(heng)量分(fen)布式(shi)系統優劣(lie)的(de)(de)一大(da)標準。好的(de)(de)分(fen)布式(shi)系統采用(yong)業界領(ling)先(xian)的(de)(de)圖像處理(li)引(yin)擎技術，確保所有視音頻信號實(shi)時處理(li)顯示(shi)，同(tong)時顯示(shi)畫(hua)(hua)面(mian)不(bu)偏(pian)色、不(bu)丟失細節、不(bu)出現黑屏(ping)/馬賽克(ke)。分(fen)辨分(fen)布式(shi)產品(pin)的(de)(de)畫(hua)(hua)面(mian)還原度(du)主要有兩種(zhong)方法：

1、專業靜態測試圖片

通(tong)過對比原始(shi)畫面(mian)與編(bian)解碼(ma)畫面(mian)的(de)差(cha)異(yi)，進行測(ce)試(shi)，在圖片全(quan)屏顯示的(de)情況下(xia)：是否(fou)(fou)會出現線(xian)條虛化(hua)、甚至(zhi)完(wan)全(quan)丟失問(wen)題；文字內(nei)容、花紋(wen)是否(fou)(fou)保留完(wan)整；色(se)彩(cai)(cai)是否(fou)(fou)豐富、色(se)彩(cai)(cai)變化(hua)是否(fou)(fou)平滑；圖像4:4:4是否(fou)(fou)清晰可(ke)見。

2、高清動態畫面測試

播放快速變化、內容復(fu)雜、色(se)彩鮮艷的(de)視(shi)頻，通(tong)過肉眼觀察，是否出現畫面(mian)模糊(hu)、馬賽克、畫面(mian)卡頓(dun)、黑屏等問(wen)題。

四、看大屏同步性

指揮(hui)(hui)調(diao)度離不開可視化，尤(you)其對于指揮(hui)(hui)中心而(er)言，高清圖像呈(cheng)現、實時同(tong)步(bu)傳(chuan)(chuan)輸尤(you)為關鍵。部分(fen)分(fen)布式產品由(you)于每個(ge)節(jie)點畫面傳(chuan)(chuan)輸至拼接大屏(ping)(ping)的時間(jian)不同(tong)，會直接導致大屏(ping)(ping)幕顯示不同(tong)步(bu)及圖像抖動、撕裂的現象出(chu)現，非常影(ying)響用戶的觀看體驗。分(fen)布式系統(tong)的同(tong)步(bu)性(xing)優(you)劣可通過專業的測(ce)(ce)試(shi)視頻及方法進行(xing)測(ce)(ce)試(shi)：

1、專業視頻播放

多塊拼接屏(ping)播放同(tong)(tong)一個(ge)視頻(pin)（推(tui)薦專(zhuan)業測試視頻(pin)），對(dui)比畫面中(zhong)顯示的(de)(de)(de)動態線(xian)條、秒(miao)(miao)表與(yu)(yu)幀(zhen)號(hao)(hao)的(de)(de)(de)差異。將播放測試視頻(pin)的(de)(de)(de)信號(hao)(hao)源，顯示在大屏(ping)的(de)(de)(de)不(bu)同(tong)(tong)屏(ping)幕上。通(tong)過(guo)相(xiang)機進行拍照或者慢(man)動作攝影，對(dui)比不(bu)同(tong)(tong)屏(ping)幕上顯示的(de)(de)(de)秒(miao)(miao)表數值、與(yu)(yu)畫面幀(zhen)率序號(hao)(hao)是(shi)否(fou)為同(tong)(tong)一幀(zhen)、同(tong)(tong)一毫秒(miao)(miao)。如果出現幀(zhen)序號(hao)(hao)不(bu)同(tong)(tong)，則大屏(ping)不(bu)同(tong)(tong)步。根據(ju)對(dui)應的(de)(de)(de)秒(miao)(miao)表時差，可(ke)以明確不(bu)同(tong)(tong)步的(de)(de)(de)嚴重(zhong)程度。

2、快速動態圖像播放

在不具備(bei)條件(jian)的(de)情(qing)況下，也可以通過(guo)播放快速運動的(de)動作(zuo)視頻、人物(wu)視頻等進行肉眼觀察。好的(de)分布式系統應采用專業(ye)的(de)同步(bu)顯示(shi)(shi)技術，在畫面細節(jie)豐富(fu)、切換(huan)迅速的(de)情(qing)況下，依(yi)然可以保證卓越的(de)同步(bu)性(xing)與圖像顯示(shi)(shi)質量(liang)，保證視頻每一幀輸(shu)出均可以完(wan)全同步(bu)。

五、看坐席延時性

視頻信(xin)號(hao)(hao)(hao)由(you)信(xin)號(hao)(hao)(hao)源傳(chuan)輸(shu)至坐席顯示的過程中不可避免的會出(chu)現(xian)(xian)顯示延遲的現(xian)(xian)象(xiang)，延遲時(shi)間從幾十毫秒到幾百毫秒甚(shen)至更(geng)長，然而(er)鍵盤(pan)(pan)鼠(shu)標(biao)(biao)等控(kong)制信(xin)號(hao)(hao)(hao)的傳(chuan)輸(shu)延時(shi)遠(yuan)小于視頻信(xin)號(hao)(hao)(hao)的傳(chuan)輸(shu)延時(shi)，使(shi)得坐席控(kong)制中出(chu)現(xian)(xian)屏幕顯示畫面(mian)慢(man)于實際鼠(shu)標(biao)(biao)數據傳(chuan)輸(shu)的現(xian)(xian)象(xiang)，尤(you)其是當鼠(shu)標(biao)(biao)鍵盤(pan)(pan)配合視頻畫面(mian)對信(xin)號(hao)(hao)(hao)源進(jin)行控(kong)制、操作時(shi)由(you)于圖像的變化跟不上人的動作以及大(da)腦(nao)的反應，會出(chu)現(xian)(xian)鼠(shu)標(biao)(biao)無法控(kong)制、點(dian)擊不精確等現(xian)(xian)象(xiang)，極大(da)的影響(xiang)用戶的操作體驗。測(ce)試方法有：

1、專業延時測試視頻

通過專(zhuan)業的(de)演示(shi)測(ce)試視頻(pin)可以(yi)(yi)快速(su)精確的(de)判斷分布(bu)式系統的(de)延時(shi)。使(shi)用相(xiang)機水平拍攝(she)“原始圖(tu)(tu)像”與(yu)“KVM坐席圖(tu)(tu)像”，對比原始圖(tu)(tu)像與(yu)分布(bu)式傳輸(shu)圖(tu)(tu)像的(de)“時(shi)間(jian)差”即可得到分布(bu)式傳輸(shu)的(de)具(ju)體數值。由于不同相(xiang)機的(de)快門(men)曝光時(shi)間(jian)與(yu)網絡(luo)固(gu)有差異，可以(yi)(yi)采用多張(zhang)圖(tu)(tu)片(pian)取平均(jun)值的(de)方(fang)式確定(ding)延時(shi)。

2、實際操作體驗

在沒有條件的情況下，可以通過(guo)鼠標(biao)實操，來體(ti)驗(yan)延(yan)時差異。具體(ti)方法包括：

（1）連續(xu)晃動鼠標，查看鼠標靈敏度；

（2）快速移動(dong)鼠標點擊某(mou)處，查看是否(fou)可以精確點擊到目標位(wei)置；

（3）通過(guo)鍵盤鍵入文本內容(rong)，查看字(zi)符顯示速度。

分布式(shi)系統應在保障高品質圖像傳(chuan)(chuan)輸(shu)質量(liang)的(de)前提(ti)下(xia)，大幅度降(jiang)低(di)音視頻(pin)編解(jie)碼(ma)傳(chuan)(chuan)輸(shu)所產生的(de)視頻(pin)延時，保證原始信(xin)號(hao)畫面(mian)實時傳(chuan)(chuan)輸(shu)、音視頻(pin)實時同步(bu)傳(chuan)(chuan)輸(shu)以及坐席鼠標操作流暢。

六、看集中管控

隨著科學(xue)技術的(de)不斷發展(zhan)，指(zhi)揮中(zhong)心、控(kong)制(zhi)中(zhong)心、監控(kong)中(zhong)心、數據中(zhong)心、會議室等場景的(de)信息化(hua)系(xi)統(tong)愈加復雜，是否可以(yi)將(jiang)多個(ge)獨(du)立(li)系(xi)統(tong)進行統(tong)一(yi)(yi)管(guan)控(kong)也是衡量分布式系(xi)統(tong)優劣(lie)的(de)一(yi)(yi)大標準。好(hao)的(de)分布式系(xi)統(tong)應該將(jiang)多個(ge)獨(du)立(li)的(de)系(xi)統(tong)進行統(tong)一(yi)(yi)接入和(he)管(guan)控(kong)，并通過(guo)觸控(kong)終端設備(bei)實(shi)現(xian)統(tong)一(yi)(yi)的(de)指(zhi)揮調(diao)度，為(wei)客(ke)戶帶來自(zi)由方便(bian)、快(kuai)捷準確、靈活可視(shi)的(de)操作(zuo)體驗。集(ji)中(zhong)管(guan)控(kong)主要看這幾個(ge)要點：

1、視頻可視化操作

視(shi)頻控制可(ke)視(shi)化是集中(zhong)管控的(de)(de)(de)(de)基礎功能(neng)需求，不(bu)僅要在操(cao)作(zuo)過(guo)程(cheng)中(zhong)能(neng)夠查看信號源的(de)(de)(de)(de)預(yu)監以及大屏幕的(de)(de)(de)(de)回顯(xian)畫面，還要可(ke)以對(dui)預(yu)案的(de)(de)(de)(de)布局進行實時預(yu)覽，從而方便操(cao)作(zuo)人員(yuan)的(de)(de)(de)(de)畫面調(diao)取和預(yu)案切換，減少誤操(cao)作(zuo)的(de)(de)(de)(de)幾(ji)率。

2、音頻可視化調節

除了視(shi)頻系統(tong)以外，音頻系統(tong)也是分布式系統(tong)控制中(zhong)的(de)(de)重要部分。用(yong)戶在音頻調節時(shi)，經常(chang)需要實時(shi)查看(kan)全部通道(dao)的(de)(de)實時(shi)音量大小及靜音狀態(tai)，這樣(yang)才(cai)能進行(xing)精準的(de)(de)操作。此(ci)外，每個通道(dao)的(de)(de)實時(shi)電平反饋(kui)也是用(yong)戶進行(xing)操作的(de)(de)重要參考，音頻調節的(de)(de)可視(shi)化可以給用(yong)戶帶來直觀的(de)(de)操作控制體驗。

3、環境可視化控制

除了分布(bu)式系(xi)統內(nei)(nei)的音視頻設(she)備(bei)，周(zhou)邊(bian)環(huan)境(jing)中(zhong)的燈光、屏幕、電(dian)源(yuan)等(deng)周(zhou)邊(bian)設(she)備(bei)，也是系(xi)統集(ji)中(zhong)管(guan)控(kong)的重要(yao)對(dui)象(xiang)。如(ru)果不能(neng)在(zai)同一個界面中(zhong)進行管(guan)控(kong)，就失去了集(ji)中(zhong)管(guan)控(kong)的意義。對(dui)于系(xi)統內(nei)(nei)的各(ge)類設(she)備(bei)，不僅要(yao)能(neng)準確(que)的控(kong)制各(ge)類設(she)備(bei)的開關，還要(yao)能(neng)夠實時(shi)查(cha)看各(ge)個設(she)備(bei)的運行狀態，實現真正的環(huan)境(jing)控(kong)制可視化。

4、多用戶同步控制

分(fen)布式系(xi)統的(de)“分(fen)布”不僅(jin)僅(jin)體現在(zai)音(yin)視頻節點(dian)的(de)分(fen)布，還體現在(zai)控(kong)(kong)(kong)制(zhi)(zhi)終端的(de)分(fen)布。因此(ci)，多用戶之間如何(he)進行協作控(kong)(kong)(kong)制(zhi)(zhi)，就(jiu)成為了分(fen)布式系(xi)統集中(zhong)管控(kong)(kong)(kong)的(de)關鍵。系(xi)統應能將(jiang)各個用戶進行統一管理，并將(jiang)控(kong)(kong)(kong)制(zhi)(zhi)反饋實時(shi)同(tong)步(bu)在(zai)各個管理員(yuan)的(de)終端界面上，這樣才能夠準(zhun)確的(de)進行協作控(kong)(kong)(kong)制(zhi)(zhi)。

七、看運維管理

智(zhi)能化的(de)(de)(de)運(yun)(yun)維(wei)管(guan)理就像人體(ti)的(de)(de)(de)免疫(yi)系統(tong)一樣(yang)不可(ke)(ke)或缺，它(ta)可(ke)(ke)以圍繞業務系統(tong)進行日常(chang)安(an)全監測(ce)，掌握系統(tong)的(de)(de)(de)各項指標(biao)，并根據指標(biao)作出“健康”與否的(de)(de)(de)判斷(duan)；對檢測(ce)到的(de)(de)(de)設(she)(she)備(bei)(bei)運(yun)(yun)行不正常(chang)狀態(tai)或者設(she)(she)備(bei)(bei)故障發(fa)(fa)生(sheng)預警，并及時通知運(yun)(yun)維(wei)管(guan)理人員進行維(wei)護。這種運(yun)(yun)維(wei)方式側重于(yu)設(she)(she)備(bei)(bei)故障隱患和(he)(he)缺陷的(de)(de)(de)早期發(fa)(fa)現和(he)(he)處理，提高了設(she)(she)備(bei)(bei)的(de)(de)(de)穩定性和(he)(he)可(ke)(ke)靠(kao)性。專業的(de)(de)(de)運(yun)(yun)維(wei)管(guan)理解決(jue)方案涵蓋如(ru)下要點：

1、動態展示系統連接的拓撲圖

與(yu)分布(bu)式相關的周邊(bian)系統，尤其是網絡系統，都(dou)(dou)與(yu)最(zui)終畫面(mian)上屏的響(xiang)應速度(du)、圖像質量、操作(zuo)延遲、拼接同步性等(deng)效果息息相關。分布(bu)式節(jie)點(dian)通(tong)過(guo)交(jiao)換機、路(lu)由(you)器等(deng)網絡設備連接，任何(he)一(yi)個網絡節(jie)點(dian)故障、掉線，都(dou)(dou)會使得某路(lu)畫面(mian)黑(hei)屏，這時(shi)需要能夠及時(shi)定位(wei)到故障點(dian)，才可以(yi)在(zai)最(zui)短(duan)時(shi)間內(nei)解決網絡故障。

因(yin)此分布(bu)式(shi)(shi)系統的(de)運維(wei)管(guan)理(li)軟件需要能提供一個動態變化的(de)設備(bei)(bei)連接拓撲(pu)圖(tu)(tu)，通過拓撲(pu)圖(tu)(tu)直觀地看到(dao)分布(bu)式(shi)(shi)設備(bei)(bei)及周邊設備(bei)(bei)的(de)在線狀(zhuang)態與故障狀(zhuang)態，不用(yong)實際到(dao)現(xian)場排查，就(jiu)可以反饋(kui)給用(yong)戶到(dao)底(di)是哪(na)個環節(jie)發生問題。

2、圖形化查看設備詳細運行指標

除了設(she)備(bei)的(de)在線與否之(zhi)外，為了更好的(de)掌握(wo)系統(tong)運(yun)(yun)(yun)行狀態與趨勢(shi)，設(she)備(bei)的(de)詳細運(yun)(yun)(yun)行指標也同樣關(guan)鍵，如各個分(fen)(fen)(fen)布式(shi)(shi)節點的(de)輸(shu)入輸(shu)出分(fen)(fen)(fen)辨(bian)率(lv)、幀(zhen)率(lv)、視頻傳輸(shu)速率(lv)等。與分(fen)(fen)(fen)布式(shi)(shi)設(she)備(bei)連(lian)接的(de)交換機(ji)，也需要實時了解其運(yun)(yun)(yun)行時間(jian)、溫度、CPU占(zhan)用(yong)(yong)率(lv)、內(nei)存占(zhan)用(yong)(yong)率(lv)、某端口流(liu)量(liang)、抖(dou)(dou)動、丟包(bao)率(lv)等。只(zhi)有掌握(wo)了這些信息，才能在發生畫面抖(dou)(dou)動、卡頓、錯位等“軟問題”時，精準定位到(dao)問題所在，降低分(fen)(fen)(fen)布式(shi)(shi)系統(tong)可(ke)能受到(dao)的(de)外界環境干擾。

3、具備故障告警與預警提示

傳統(tong)(tong)的(de)運維模式(shi)(shi)通常是(shi)被動(dong)式(shi)(shi)的(de)，即(ji)用(yong)戶(hu)發(fa)現(xian)(xian)問(wen)(wen)(wen)(wen)題，再(zai)排查問(wen)(wen)(wen)(wen)題所在(zai)。而現(xian)(xian)代化(hua)的(de)分(fen)(fen)布式(shi)(shi)運維更(geng)(geng)應該是(shi)主(zhu)動(dong)式(shi)(shi)的(de)，即(ji)系統(tong)(tong)一旦發(fa)生(sheng)故障，分(fen)(fen)布式(shi)(shi)系統(tong)(tong)要能(neng)(neng)主(zhu)動(dong)以頁面的(de)彈窗(chuang)、聲音或(huo)(huo)郵(you)件、短信(xin)等渠道，為(wei)用(yong)戶(hu)做(zuo)出告警提(ti)示(shi)，即(ji)使用(yong)戶(hu)不再(zai)指(zhi)揮中心或(huo)(huo)會議室內，也能(neng)(neng)通過手機(ji)等方式(shi)(shi)遠程掌握分(fen)(fen)布式(shi)(shi)系統(tong)(tong)的(de)狀態(tai)。另外，智能(neng)(neng)化(hua)的(de)運維管理應不僅(jin)僅(jin)是(shi)發(fa)生(sheng)問(wen)(wen)(wen)(wen)題、解決問(wen)(wen)(wen)(wen)題，更(geng)(geng)應該利用(yong)大數據等手段，記(ji)錄系統(tong)(tong)運行數據，并對未來趨勢進行預(yu)測，在(zai)設備(bei)可能(neng)(neng)發(fa)生(sheng)某個問(wen)(wen)(wen)(wen)題之前(qian)，前(qian)置性的(de)做(zuo)出預(yu)警提(ti)示(shi)，真正(zheng)提(ti)高分(fen)(fen)布式(shi)(shi)系統(tong)(tong)的(de)穩(wen)定性。

4、建立完善并有記錄的運維工作流程

擁有(you)了設備的(de)監測與告警，用戶可以最短時間內掌握系(xi)統(tong)故障點，但如何解決這(zhe)些故障，依舊是一(yi)個(ge)值得深究的(de)問題(ti)。分(fen)布式系(xi)統(tong)具有(you)無限的(de)擴展性(xing)與覆蓋度，往往部(bu)署在大地域中。管理分(fen)布式的(de)運(yun)維人(ren)員(yuan)也常常不是一(yi)個(ge)人(ren)，而是上(shang)下級(ji)單位、各個(ge)機構(gou)多(duo)人(ren)配合。

效率最高的運維解決方案是多人分工配合，如管理員在指揮中心對整個分布式系統監管，發現故障點后，遠程指導操作員實際到現場處理，并可通過系統實時判斷問題是否解決。這就需要分布式系統提供(gong)一個科學的運維工作流程，從發現問(wen)題(ti)、派工單下發、到現場解決(jue)與問(wen)題(ti)反饋，運維人員(yuan)只需按照標準化的運維流程來操(cao)作，并在系統內記(ji)錄(lu)相關工作信息，即可高(gao)效率的完成運維管理工作。

5、覆蓋系統級別的統計與分析

真正的(de)分布式運維(wei)管(guan)理(li)是一門系(xi)統性的(de)科學與工作，應(ying)該做到“精(jing)細(xi)化運維(wei)”。所謂“精(jing)細(xi)化運維(wei)”，即不(bu)僅僅對設(she)備運行狀(zhuang)態進行監管(guan)，也要收集(ji)并(bing)記錄運維(wei)工作流中的(de)告警響(xiang)應(ying)時間(jian)、工單(dan)解決時間(jian)、故障(zhang)處理(li)時間(jian)等信(xin)息(xi)，同時通過數據的(de)挖掘與關(guan)聯(lian)，對各類設(she)備的(de)故障(zhang)率(lv)、高風險參數、視(shi)頻(pin)質量影響(xiang)率(lv)等進行分析(xi)，生成(cheng)綜合性的(de)多維(wei)度(du)系(xi)統運行報表，幫助用(yong)戶持續改善分布式系(xi)統的(de)運維(wei)管(guan)理(li)工作與應(ying)用(yong)方式。