中國的(de)基礎網絡環境(jing)之(zhi)(zhi)復雜堪居(ju)世(shi)界(jie)各國之(zhi)(zhi)首(shou)，隨著視頻、直播、游戲、語音、電(dian)商等流(liu)量大(da)、用戶體驗(yan)要(yao)求高(gao)(gao)、用戶分布地域(yu)廣的(de)互聯網應用場景，以單點部署方式早已無法滿足業(ye)務的(de)需求，分布式應用部署方式已經成為(wei)(wei)保障業(ye)務高(gao)(gao)可用的(de)必(bi)然之(zhi)(zhi)選。隨之(zhi)(zhi)而(er)來(lai)的(de)可用性監(jian)控成為(wei)(wei)分布式系(xi)統的(de)一大(da)難題。
以某頂級(ji)IDC服(fu)務商同時也是(shi)國(guo)內最(zui)大(da)的第三方(fang)獨(du)立(li)為(wei)例，該服(fu)務商將全國(guo)的劃分(fen)(fen)為(wei)三個層(ceng)(ceng)次，即(ji)以北(bei)上廣(guang)等核(he)心(xin)城(cheng)(cheng)市為(wei)核(he)心(xin)層(ceng)(ceng)，以互聯網大(da)省、骨(gu)干(gan)城(cheng)(cheng)市為(wei)骨(gu)干(gan)層(ceng)(ceng)，以二(er)三級(ji)城(cheng)(cheng)市為(wei)邊緣(yuan)層(ceng)(ceng)。其客(ke)戶根據(ju)應用等級(ji)及用戶分(fen)(fen)布(bu)區(qu)域，通(tong)過(guo)在全國(guo)范圍的科學選點，將應用分(fen)(fen)別部(bu)署在不(bu)同層(ceng)(ceng)級(ji)的城(cheng)(cheng)市數(shu)據(ju)中(zhong)心(xin)，以降低總部(bu)署成本，提升用戶體驗，同時在自(zi)身(shen)IT運(yun)維和客(ke)戶服(fu)務保障過(guo)程中(zhong)積累了豐富的分(fen)(fen)布(bu)式系統高(gao)可用監控經驗。
簡(jian)單易(yi)用(yong)的內(nei)部應用(yong)系統監控
眾所周知，當企業(ye)部(bu)署了分布式系統(tong)，IT設備(bei)數(shu)量和系統(tong)規模(mo)就會(hui)呈幾何級數(shu)迅速(su)增長，運維部(bu)門(men)規模(mo)往往落后(hou)于系統(tong)增速(su)，而(er)原有(you)單點監控(kong)系統(tong)的轉型并非(fei)易事。下(xia)面就以這家(jia)IDC服務商為(wei)例，從內、外兩個維度探(tan)討(tao)一下(xia)高(gao)可用IT監控(kong)系統(tong)的建設。
在內網(wang)監(jian)控(kong)方面(mian)，注(zhu)重的(de)是內部(bu)IT設備的(de)可用(yong)性。運維部(bu)門陸續使用(yong)過Smokeping，Open-falcon，cacti之類監(jian)控(kong)系統(tong)，最終都不了了之：Smokeping依(yi)賴的(de)包、組件過多(duo)，安裝搭建配置繁瑣，圖(tu)形參數較多(duo)，需要(yao)查(cha)閱大量文(wen)檔；Open-falcon部(bu)署測試(shi)了0.2.0版本，雖然(ran)機制不錯(cuo)，但易用(yong)性有待提(ti)高；cacti主要(yao)用(yong)于(yu)收(shou)集歷史數據和(he)畫(hua)圖(tu)，但在監(jian)視大量上跑的(de)服務(wu)是否正(zheng)常(chang)、告(gao)警方面(mian)，雖有插件支持，但效果很不理想。
之后(hou)，運維部門選擇(ze)了入(ru)門容易(yi)、上手(shou)簡單、開源免費的(de)Zabbix。Zabbix易(yi)于(yu)管理(li)(li)和配(pei)置(zhi)，減(jian)輕日常管理(li)(li)的(de)工作量，豐富的(de)數據采(cai)集(ji)方式(shi)和API接口(kou)可以(yi)讓用戶(hu)靈活進行(xing)數據采(cai)集(ji)，而分布式(shi)系統架(jia)構可以(yi)支持監控更(geng)多的(de)IT設備。
通(tong)過(guo)Zabbix監控(kong)大(da)網(wang)出口(kou)對全國ping延(yan)遲的(de)綜合(he)匯總(zong)頁面：
用Grafana簡單包裝一下，可以看(kan)到(dao)的詳細運行數(shu)據：
內外(wai)兼(jian)修(xiu)的外(wai)網(wang)高(gao)可用監控(kong)
、虛擬化技術的(de)廣泛應用(yong)，分布(bu)式系統的(de)后端IT設備和(he)服務(wu)的(de)穩定性逐步提高，而復(fu)雜的(de)用(yong)戶(hu)網絡接入環(huan)境、IDC機房鏈路、CDN加速等環(huan)節(jie)對業務(wu)質(zhi)量的(de)影響越來越大(da)。很多時(shi)候(hou)，造成用(yong)戶(hu)體(ti)驗<a href="//lctw.com.cn">安防器材批發佳和(he)服務(wu)不(bu)可用(yong)的(de)原因(yin)都是外部的(de)，而這是部署在IT系統內部的(de)Zabbix無法監控(kong)的(de)。
因此，運維部門需要(yao)一套更(geng)準確(que)、更(geng)全(quan)面的(de)(de)入向(xiang)監(jian)(jian)控(kong)（外(wai)部監(jian)(jian)控(kong)）來保障(zhang)業(ye)(ye)務的(de)(de)高可(ke)用。監(jian)(jian)控(kong)寶是享(xiang)譽國(guo)內運維圈的(de)(de)IT性(xing)(xing)能(neng)監(jian)(jian)控(kong)神器，通過(guo)覆(fu)蓋全(quan)國(guo)所(suo)有省份(fen)和(he)世界主要(yao)國(guo)家的(de)(de)300多個分布式監(jian)(jian)測(ce)節(jie)點，對外(wai)部網(wang)絡鏈路(lu)進(jin)(jin)行(xing)穩定性(xing)(xing)和(he)可(ke)用性(xing)(xing)的(de)(de)實時監(jian)(jian)控(kong)和(he)秒級(ji)告(gao)警服(fu)務。監(jian)(jian)控(kong)寶支持http/https、ping、udp、tcp、smtp、traceroute等主流數據(ju)傳輸協議，能(neng)夠準確(que)測(ce)量鏈路(lu)質量、CDN效果及DNS狀態，為企(qi)業(ye)(ye)的(de)(de)互聯網(wang)業(ye)(ye)務進(jin)(jin)行(xing)全(quan)網(wang)、全(quan)地域性(xing)(xing)能(neng)趨勢(shi)分析(xi)。
監(jian)(jian)控寶除了網站監(jian)(jian)控外，還包含服(fu)務器監(jian)(jian)控、API監(jian)(jian)控、中間件(jian)和數據(ju)庫監(jian)(jian)控，無需部(bu)署，無任何侵入式插件(jian)，即可獲得第(di)一手全面實時(shi)的監(jian)(jian)控數據(ju)。同(tong)時(shi)，監(jian)(jian)控寶覆(fu)蓋(gai)最全面的告(gao)警通知方(fang)式，包括郵件(jian)、短信(xin)、電話(hua)語(yu)音、App Push、URL回調等。而且，監(jian)(jian)控寶根據(ju)每月監(jian)(jian)測數據(ju)，出具權威的第(di)三方(fang)SLA證(zheng)書，幫助企業對(dui)CDN質量、云服(fu)務質量和業務質量進行有效評估。
除(chu)此之(zhi)外，監(jian)控(kong)(kong)(kong)寶通過API實現Zabbix等監(jian)控(kong)(kong)(kong)平臺的(de)告警<a href="//lctw.com.cn">安(an)防器(qi)材批發(fa)據(ju)的(de)接入(ru)和(he)(he)聚(ju)合，并在定制化(hua)開發(fa)的(de)可視化(hua)大(da)屏上進行統(tong)一監(jian)控(kong)(kong)(kong)和(he)(he)統(tong)一告警，從而實現IT系統(tong)健(jian)康和(he)(he)業務監(jian)控(kong)(kong)(kong)的(de)統(tong)一管理。得益于(yu)監(jian)控(kong)(kong)(kong)寶和(he)(he)Zabbix，這家中國最大(da)的(de)第三方獨立數據(ju)中心實現了分布式(shi)系統(tong)高可用監(jian)控(kong)(kong)(kong)的(de)內(nei)外兼(jian)修(xiu)。