自(zi)從數(shu)(shu)(shu)據(ju)(ju)中(zhong)(zhong)心引(yin)入了(le)(le)云(yun)計算、虛(xu)擬化等大(da)咖技術，立刻變了(le)(le)模(mo)樣，這(zhe)些技術大(da)幅提升了(le)(le)數(shu)(shu)(shu)據(ju)(ju)中(zhong)(zhong)心的(de)(de)(de)運行效率(lv)，給數(shu)(shu)(shu)據(ju)(ju)中(zhong)(zhong)心帶(dai)來了(le)(le)諸多好處(chu)(chu)。不(bu)過，任(ren)何(he)事情都(dou)有(you)兩面性，我們在享受新技術帶(dai)來的(de)(de)(de)益處(chu)(chu)時(shi)，也給數(shu)(shu)(shu)據(ju)(ju)中(zhong)(zhong)心運維(wei)的(de)(de)(de)管(guan)理帶(dai)來了(le)(le)不(bu)便，需要(yao)管(guan)理對象(xiang)的(de)(de)(de)數(shu)(shu)(shu)量(liang)、規模(mo)及復雜度均(jun)(jun)呈(cheng)現指數(shu)(shu)(shu)級增長(chang)，傳統人(ren)(ren)(ren)工干預、保姆式管(guan)理監(jian)控(kong)與故障處(chu)(chu)理的(de)(de)(de)方(fang)式肯(ken)定(ding)無法滿足要(yao)求了(le)(le)。比如對于公(gong)有(you)云(yun)及大(da)型私有(you)云(yun)，服(fu)務(wu)(wu)(wu)器數(shu)(shu)(shu)量(liang)往(wang)往(wang)可(ke)以(yi)達到(dao)數(shu)(shu)(shu)萬到(dao)數(shu)(shu)(shu)十(shi)萬、百(bai)萬規模(mo)，各(ge)類系統云(yun)服(fu)務(wu)(wu)(wu)及租戶的(de)(de)(de)業務(wu)(wu)(wu)應用(yong)負(fu)載數(shu)(shu)(shu)量(liang)，也達到(dao)了(le)(le)數(shu)(shu)(shu)以(yi)百(bai)萬乃(nai)至千(qian)萬級的(de)(de)(de)程度，這(zhe)樣全靠人(ren)(ren)(ren)工維(wei)護不(bu)現實，必須引(yin)入自(zi)動(dong)化、智能化運維(wei)的(de)(de)(de)管(guan)理模(mo)式，將人(ren)(ren)(ren)均(jun)(jun)維(wei)護管(guan)理效率(lv)從平均(jun)(jun)每人(ren)(ren)(ren)數(shu)(shu)(shu)十(shi)臺服(fu)務(wu)(wu)(wu)器，提升到(dao)平均(jun)(jun)每人(ren)(ren)(ren)數(shu)(shu)(shu)千(qian)臺服(fu)務(wu)(wu)(wu)器。運維(wei)的(de)(de)(de)管(guan)理不(bu)能成為數(shu)(shu)(shu)據(ju)(ju)中(zhong)(zhong)心上云(yun)發(fa)展的(de)(de)(de)絆腳石，也要(yao)跟得(de)上數(shu)(shu)(shu)據(ju)(ju)中(zhong)(zhong)心的(de)(de)(de)發(fa)展。本文將著重介紹幾種現代運維(wei)中(zhong)(zhong)運用(yong)的(de)(de)(de)新技術手段。

自動化人工故障修復機制

  數(shu)據(ju)(ju)(ju)(ju)中(zhong)(zhong)(zhong)心(xin)(xin)(xin)難(nan)免會(hui)出(chu)現(xian)(xian)這(zhe)樣那樣的(de)(de)問題，靠人工(gong)發(fa)現(xian)(xian)不(bu)(bu)僅(jin)速度慢，而且容易(yi)誤判(pan)。不(bu)(bu)妨將這(zhe)個(ge)(ge)(ge)識別(bie)工(gong)作(zuo)交由軟件來(lai)處理。首先，要(yao)(yao)建(jian)立一(yi)(yi)個(ge)(ge)(ge)故(gu)(gu)(gu)(gu)(gu)(gu)(gu)障(zhang)(zhang)模(mo)式(shi)庫，長期(qi)積(ji)累(lei)各(ge)種曾經(jing)或(huo)者(zhe)可(ke)(ke)能會(hui)出(chu)現(xian)(xian)的(de)(de)故(gu)(gu)(gu)(gu)(gu)(gu)(gu)障(zhang)(zhang)預判(pan)、識別(bie)，這(zhe)個(ge)(ge)(ge)故(gu)(gu)(gu)(gu)(gu)(gu)(gu)障(zhang)(zhang)庫內容要(yao)(yao)實時保持更(geng)新，不(bu)(bu)斷(duan)將一(yi)(yi)些新的(de)(de)故(gu)(gu)(gu)(gu)(gu)(gu)(gu)障(zhang)(zhang)類型(xing)和(he)經(jing)驗輸入進去。其次(ci)，將故(gu)(gu)(gu)(gu)(gu)(gu)(gu)障(zhang)(zhang)判(pan)斷(duan)的(de)(de)方法告知軟件設備，由軟件自(zi)動(dong)完(wan)成判(pan)斷(duan)，軟件根據(ju)(ju)(ju)(ju)從(cong)數(shu)據(ju)(ju)(ju)(ju)中(zhong)(zhong)(zhong)心(xin)(xin)(xin)各(ge)個(ge)(ge)(ge)設備收集上(shang)來(lai)的(de)(de)運行參數(shu)，與故(gu)(gu)(gu)(gu)(gu)(gu)(gu)障(zhang)(zhang)模(mo)式(shi)庫里保存(cun)的(de)(de)參數(shu)進行對(dui)比，如果發(fa)現(xian)(xian)有(you)相(xiang)同的(de)(de)，認為是數(shu)據(ju)(ju)(ju)(ju)中(zhong)(zhong)(zhong)心(xin)(xin)(xin)出(chu)故(gu)(gu)(gu)(gu)(gu)(gu)(gu)障(zhang)(zhang)了。最后(hou)，數(shu)據(ju)(ju)(ju)(ju)中(zhong)(zhong)(zhong)心(xin)(xin)(xin)可(ke)(ke)以采(cai)(cai)取告警方式(shi)通(tong)知運維(wei)(wei)人員，也可(ke)(ke)以由軟件執行一(yi)(yi)鍵式(shi)修(xiu)(xiu)復(fu)(fu)(fu)(fu)。這(zhe)個(ge)(ge)(ge)取決于業務的(de)(de)重要(yao)(yao)性(xing)以及數(shu)據(ju)(ju)(ju)(ju)中(zhong)(zhong)(zhong)心(xin)(xin)(xin)故(gu)(gu)(gu)(gu)(gu)(gu)(gu)障(zhang)(zhang)經(jing)驗積(ji)累(lei)的(de)(de)豐富性(xing)，萬一(yi)(yi)恢(hui)復(fu)(fu)(fu)(fu)動(dong)作(zuo)錯(cuo)誤，可(ke)(ke)能會(hui)引發(fa)二次(ci)故(gu)(gu)(gu)(gu)(gu)(gu)(gu)障(zhang)(zhang)，給(gei)數(shu)據(ju)(ju)(ju)(ju)中(zhong)(zhong)(zhong)心(xin)(xin)(xin)帶來(lai)更(geng)大的(de)(de)損失，所以修(xiu)(xiu)復(fu)(fu)(fu)(fu)機制一(yi)(yi)定(ding)要(yao)(yao)慎(shen)重，非(fei)緊急的(de)(de)業務故(gu)(gu)(gu)(gu)(gu)(gu)(gu)障(zhang)(zhang)不(bu)(bu)建(jian)議采(cai)(cai)用自(zi)動(dong)修(xiu)(xiu)復(fu)(fu)(fu)(fu)，待人員確(que)認之后(hou)再去手工(gong)執行修(xiu)(xiu)復(fu)(fu)(fu)(fu)。實際(ji)上(shang)，云計算的(de)(de)引入增(zeng)加了數(shu)據(ju)(ju)(ju)(ju)中(zhong)(zhong)(zhong)心(xin)(xin)(xin)故(gu)(gu)(gu)(gu)(gu)(gu)(gu)障(zhang)(zhang)自(zi)動(dong)檢測和(he)修(xiu)(xiu)復(fu)(fu)(fu)(fu)的(de)(de)難(nan)度，所有(you)的(de)(de)應用業務都(dou)已和(he)物理硬件設備脫離(li)，形成了一(yi)(yi)個(ge)(ge)(ge)純軟件的(de)(de)虛(xu)擬世界，復(fu)(fu)(fu)(fu)雜的(de)(de)虛(xu)擬系統給(gei)故(gu)(gu)(gu)(gu)(gu)(gu)(gu)障(zhang)(zhang)的(de)(de)排查和(he)分辨(bian)都(dou)帶來(lai)了難(nan)度，這(zhe)給(gei)自(zi)動(dong)化(hua)人工(gong)故(gu)(gu)(gu)(gu)(gu)(gu)(gu)障(zhang)(zhang)修(xiu)(xiu)復(fu)(fu)(fu)(fu)帶來(lai)了極(ji)大挑戰(zhan)。不(bu)(bu)過(guo)，數(shu)據(ju)(ju)(ju)(ju)中(zhong)(zhong)(zhong)心(xin)(xin)(xin)運維(wei)(wei)走自(zi)動(dong)化(hua)的(de)(de)路已不(bu)(bu)可(ke)(ke)避免，過(guo)多的(de)(de)人力成本對(dui)于任何一(yi)(yi)個(ge)(ge)(ge)高速擴(kuo)張(zhang)的(de)(de)數(shu)據(ju)(ju)(ju)(ju)中(zhong)(zhong)(zhong)心(xin)(xin)(xin)都(dou)無法承受。

日志和監控信息集中管理與控制

  傳統(tong)數(shu)據(ju)中(zhong)心(xin)中(zhong)，各軟硬(ying)件(jian)系統(tong)的(de)(de)日志(zhi)監(jian)控(kong)(kong)信(xin)息往(wang)往(wang)相對零散孤(gu)立，沒(mei)有(you)實(shi)(shi)(shi)現與業務(wu)和用戶的(de)(de)自動(dong)關聯，當出(chu)(chu)(chu)現故障時(shi)(shi)，甚至(zhi)還(huan)需(xu)要(yao)(yao)依此(ci)登錄到每臺(tai)(tai)設(she)備(bei)上去(qu)排查，效(xiao)率低下。在有(you)些(xie)(xie)(xie)數(shu)據(ju)中(zhong)心(xin)雖然(ran)(ran)部(bu)(bu)署了(le)網管系統(tong)、日志(zhi)服務(wu)器，依然(ran)(ran)需(xu)要(yao)(yao)人工檢查。當數(shu)十萬(wan)的(de)(de)設(she)備(bei)同時(shi)(shi)輸出(chu)(chu)(chu)日志(zhi)時(shi)(shi)，海量的(de)(de)數(shu)據(ju)根本沒(mei)有(you)辦(ban)法進(jin)行檢查，這(zhe)(zhe)時(shi)(shi)就(jiu)要(yao)(yao)統(tong)一(yi)對這(zhe)(zhe)些(xie)(xie)(xie)信(xin)息進(jin)行分析和判(pan)斷(duan)(duan)。很多數(shu)據(ju)中(zhong)心(xin)建設(she)運(yun)維管理云(yun)平臺(tai)(tai)，就(jiu)是(shi)(shi)要(yao)(yao)將這(zhe)(zhe)些(xie)(xie)(xie)海量數(shu)據(ju)進(jin)行統(tong)一(yi)處理，依然(ran)(ran)是(shi)(shi)通(tong)過提(ti)前設(she)定(ding)判(pan)斷(duan)(duan)條件(jian)，然(ran)(ran)后(hou)發現不(bu)符合常(chang)規(gui)的(de)(de)日志(zhi)及時(shi)(shi)進(jin)行告(gao)警(jing)。云(yun)平臺(tai)(tai)的(de)(de)判(pan)斷(duan)(duan)條件(jian)忽略了(le)日志(zhi)告(gao)警(jing)的(de)(de)設(she)備(bei)差異(yi)，只(zhi)關心(xin)對業務(wu)有(you)影響(xiang)的(de)(de)日志(zhi)信(xin)息，設(she)計一(yi)些(xie)(xie)(xie)特有(you)的(de)(de)判(pan)斷(duan)(duan)故障的(de)(de)條件(jian)，這(zhe)(zhe)些(xie)(xie)(xie)條件(jian)需(xu)要(yao)(yao)和各種設(she)備(bei)廠商溝通(tong)好(hao)，證實(shi)(shi)(shi)這(zhe)(zhe)些(xie)(xie)(xie)判(pan)斷(duan)(duan)是(shi)(shi)有(you)效(xiao)的(de)(de)，然(ran)(ran)后(hou)在云(yun)平臺(tai)(tai)中(zhong)部(bu)(bu)署。云(yun)平臺(tai)(tai)的(de)(de)功能很強大，僅僅是(shi)(shi)依靠設(she)備(bei)主動(dong)輸出(chu)(chu)(chu)日志(zhi)來診斷(duan)(duan)是(shi)(shi)遠遠不(bu)夠(gou)的(de)(de)，它還(huan)可以主動(dong)從數(shu)據(ju)中(zhong)心(xin)的(de)(de)任何一(yi)個環(huan)節(jie)采集監(jian)控(kong)(kong)信(xin)息，這(zhe)(zhe)些(xie)(xie)(xie)監(jian)控(kong)(kong)信(xin)息可以實(shi)(shi)(shi)時(shi)(shi)反映(ying)整個數(shu)據(ju)中(zhong)心(xin)系統(tong)運(yun)行的(de)(de)綜合狀態，一(yi)旦出(chu)(chu)(chu)現異(yi)常(chang)的(de)(de)參(can)數(shu)或者有(you)變(bian)化的(de)(de)數(shu)值(zhi)，就(jiu)要(yao)(yao)引起警(jing)惕，輸出(chu)(chu)(chu)告(gao)警(jing)。

大數據的機器學習機制

  傳統(tong)數(shu)據(ju)(ju)中(zhong)心的(de)(de)(de)(de)故(gu)障發現與修復建議(yi)的(de)(de)(de)(de)處理，主要(yao)(yao)依賴云平(ping)臺收集的(de)(de)(de)(de)日志和監控(kong)信息，通過運(yun)(yun)維(wei)人(ren)(ren)(ren)員長(chang)期積(ji)累的(de)(de)(de)(de)歷(li)史經驗進(jin)行判(pan)斷(duan)，人(ren)(ren)(ren)的(de)(de)(de)(de)行為是(shi)最不可(ke)靠的(de)(de)(de)(de)，很多(duo)時(shi)候經驗都是(shi)錯誤(wu)的(de)(de)(de)(de)，而(er)機(ji)器(qi)(qi)(qi)(qi)(qi)則不會(hui)出(chu)(chu)錯，只要(yao)(yao)你給(gei)它足夠(gou)的(de)(de)(de)(de)學(xue)習(xi)(xi)(xi)信息，它就可(ke)以做(zuo)出(chu)(chu)正確(que)(que)(que)的(de)(de)(de)(de)判(pan)斷(duan)。最近Master很火(huo)，Master是(shi)一款會(hui)下圍(wei)棋的(de)(de)(de)(de)機(ji)器(qi)(qi)(qi)(qi)(qi)人(ren)(ren)(ren)，在最近的(de)(de)(de)(de)圍(wei)棋比賽中(zhong)，取得了(le)60勝1和的(de)(de)(de)(de)成績(ji)，1和還(huan)是(shi)因(yin)為掉(diao)線被系統(tong)判(pan)和，落敗(bai)者包括聶衛(wei)平(ping)等頂尖(jian)圍(wei)棋高手，這(zhe)說(shuo)明(ming)只要(yao)(yao)給(gei)設備足夠(gou)的(de)(de)(de)(de)學(xue)習(xi)(xi)(xi)時(shi)間(jian)，它的(de)(de)(de)(de)智慧可(ke)以遠(yuan)遠(yuan)超(chao)過人(ren)(ren)(ren)類。運(yun)(yun)維(wei)的(de)(de)(de)(de)管理也(ye)可(ke)以引入機(ji)器(qi)(qi)(qi)(qi)(qi)學(xue)習(xi)(xi)(xi)技術，通過對數(shu)據(ju)(ju)中(zhong)心運(yun)(yun)維(wei)海量數(shu)據(ju)(ju)的(de)(de)(de)(de)分析(xi)，利(li)用大(da)(da)數(shu)據(ju)(ju)建模，自動(dong)(dong)化地、智能(neng)化地挖掘出(chu)(chu)更多(duo)高價(jia)值的(de)(de)(de)(de)、運(yun)(yun)維(wei)人(ren)(ren)(ren)員認知范(fan)圍(wei)外的(de)(de)(de)(de)故(gu)障模式(shi)與系統(tong)優(you)化模式(shi)，從而(er)進(jin)一步提升系統(tong)運(yun)(yun)維(wei)的(de)(de)(de)(de)效(xiao)率。通過大(da)(da)數(shu)據(ju)(ju)機(ji)器(qi)(qi)(qi)(qi)(qi)學(xue)習(xi)(xi)(xi)，對大(da)(da)規(gui)(gui)模運(yun)(yun)維(wei)場景(jing)下的(de)(de)(de)(de)性能(neng)與故(gu)障規(gui)(gui)律分析(xi)、趨勢預測及故(gu)障根因(yin)識別定位(wei)，提升機(ji)器(qi)(qi)(qi)(qi)(qi)自動(dong)(dong)化運(yun)(yun)維(wei)的(de)(de)(de)(de)能(neng)力，最終其將超(chao)過人(ren)(ren)(ren)工運(yun)(yun)維(wei)的(de)(de)(de)(de)判(pan)斷(duan)準確(que)(que)(que)性，就像(xiang)機(ji)器(qi)(qi)(qi)(qi)(qi)人(ren)(ren)(ren)下圍(wei)棋一樣，最終機(ji)器(qi)(qi)(qi)(qi)(qi)運(yun)(yun)維(wei)數(shu)據(ju)(ju)中(zhong)心也(ye)要(yao)(yao)大(da)(da)大(da)(da)超(chao)過人(ren)(ren)(ren)們(men)自動(dong)(dong)去(qu)做(zuo)。人(ren)(ren)(ren)們(men)只要(yao)(yao)去(qu)研究如何讓這(zhe)些機(ji)器(qi)(qi)(qi)(qi)(qi)正確(que)(que)(que)學(xue)習(xi)(xi)(xi)，學(xue)習(xi)(xi)(xi)好(hao)就可(ke)以了(le)。

  顯(xian)而易(yi)見(jian)，云數(shu)據(ju)(ju)(ju)(ju)中(zhong)(zhong)(zhong)(zhong)心(xin)(xin)新的(de)自(zi)(zi)(zi)動(dong)化(hua)運(yun)(yun)維(wei)(wei)技術(shu)(shu)(shu)(shu)特點主要(yao)是(shi)：自(zi)(zi)(zi)動(dong)化(hua)、自(zi)(zi)(zi)學習(xi)。由(you)機(ji)器自(zi)(zi)(zi)我學習(xi)，自(zi)(zi)(zi)動(dong)完(wan)成數(shu)據(ju)(ju)(ju)(ju)中(zhong)(zhong)(zhong)(zhong)心(xin)(xin)的(de)運(yun)(yun)維(wei)(wei)和故障修復。未(wei)來的(de)數(shu)據(ju)(ju)(ju)(ju)中(zhong)(zhong)(zhong)(zhong)心(xin)(xin)雖然規模更(geng)大，系統更(geng)復雜(za)，但(dan)在運(yun)(yun)維(wei)(wei)的(de)管(guan)理(li)上要(yao)從簡，實現自(zi)(zi)(zi)動(dong)化(hua)運(yun)(yun)維(wei)(wei)管(guan)理(li)。數(shu)據(ju)(ju)(ju)(ju)中(zhong)(zhong)(zhong)(zhong)心(xin)(xin)運(yun)(yun)維(wei)(wei)將人的(de)因(yin)素排除，讓數(shu)據(ju)(ju)(ju)(ju)中(zhong)(zhong)(zhong)(zhong)心(xin)(xin)形成一(yi)個(ge)完(wan)全的(de)自(zi)(zi)(zi)治(zhi)系統，實現成為真正的(de)無人數(shu)據(ju)(ju)(ju)(ju)中(zhong)(zhong)(zhong)(zhong)心(xin)(xin)。當然，數(shu)據(ju)(ju)(ju)(ju)中(zhong)(zhong)(zhong)(zhong)心(xin)(xin)的(de)自(zi)(zi)(zi)動(dong)化(hua)運(yun)(yun)維(wei)(wei)還有(you)很(hen)(hen)長的(de)路要(yao)走，沒有(you)哪個(ge)數(shu)據(ju)(ju)(ju)(ju)中(zhong)(zhong)(zhong)(zhong)心(xin)(xin)能夠(gou)真正脫離(li)人工參與。這就像自(zi)(zi)(zi)動(dong)駕(jia)駛汽車技術(shu)(shu)(shu)(shu)發展一(yi)樣(yang)(yang)，技術(shu)(shu)(shu)(shu)復雜(za)，并徹底改變了現有(you)的(de)生活方式，要(yao)人們(men)接(jie)受需要(yao)很(hen)(hen)長時日。對于數(shu)據(ju)(ju)(ju)(ju)中(zhong)(zhong)(zhong)(zhong)心(xin)(xin)也(ye)一(yi)樣(yang)(yang)，自(zi)(zi)(zi)動(dong)化(hua)運(yun)(yun)維(wei)(wei)技術(shu)(shu)(shu)(shu)雖好，但(dan)仍不夠(gou)成熟，很(hen)(hen)多人持觀(guan)望的(de)態度，但(dan)愿(yuan)未(wei)來這類技術(shu)(shu)(shu)(shu)可(ke)以(yi)很(hen)(hen)快完(wan)善起來。