企業(yè)通過成熟的技術(shù)實施和實施IT運(yùn)維管理。 IT運(yùn)維技術(shù)可以分四個階段逐步落地：人工運(yùn)維能力、平臺化運(yùn)維能力、數(shù)據(jù)化運(yùn)維能力、智能化運(yùn)維能力。相反，實現(xiàn)智能運(yùn)維能力的前提是具備人工化、平臺化、數(shù)據(jù)化的能力。企業(yè)應(yīng)根據(jù)自身運(yùn)維發(fā)展階段和實際運(yùn)維需求，分階段實施相關(guān)技術(shù)能力。

一、IT運(yùn)維業(yè)務(wù)面臨挑戰(zhàn)

隨著中國聯(lián)通“大鏈接”戰(zhàn)略的深入實施，業(yè)務(wù)規(guī)模快速下滑，內(nèi)外部競爭日趨激烈復(fù)雜，IT技術(shù)快速演進(jìn)，中國聯(lián)通的頂?shù)拙€和內(nèi)外部客戶負(fù)責(zé)公司信息系統(tǒng)部門的IT運(yùn)維管理。對執(zhí)行效率和精細(xì)化運(yùn)營管理能力提出了更高的要求和挑戰(zhàn)：

為適應(yīng)瞬息萬變、新業(yè)務(wù)層出不窮的市場形勢，中國聯(lián)通提出“嚴(yán)節(jié)約、降本、增效”行動，引入人工智能技術(shù)，建立低成本高效的操作系統(tǒng)，推進(jìn)“IT代人”戰(zhàn)略，在日益激烈的同質(zhì)化競爭中占據(jù)主動。在 2019 年 IT 工作思路中，中國聯(lián)通提出“以積極賦能和發(fā)展 IT 為主線，大力推進(jìn) IT 支撐向 IT 運(yùn)營轉(zhuǎn)變”、“著力提升智能化運(yùn)營能力、 IT運(yùn)維能力重點發(fā)展目標(biāo)明確方向。隨著信息部門系統(tǒng)的云化、容器化、集中化、微服務(wù)化等架構(gòu)調(diào)整，“系統(tǒng)架構(gòu)和業(yè)務(wù)調(diào)用關(guān)系復(fù)雜，運(yùn)維管理難度降低”的痛點也得到實時跟進(jìn)。這個運(yùn)維系統(tǒng)。 ，不斷調(diào)整自身發(fā)展規(guī)劃，向“大運(yùn)維、一體化運(yùn)營、專業(yè)化、實踐敏捷、智能運(yùn)營、卓越體驗”的理念演進(jìn)，為生產(chǎn)提供更好的運(yùn)維支持服務(wù)系統(tǒng)。

二、【痛點與難點】

5G網(wǎng)元控制平面、傳輸前饋、傳統(tǒng)（2G/3G/4G）運(yùn)維平臺，難以支撐5G網(wǎng)絡(luò)資源的集中統(tǒng)一配置管理和運(yùn)維； 5G網(wǎng)絡(luò)實現(xiàn)產(chǎn)業(yè)提供的SDN 服務(wù)，現(xiàn)有運(yùn)維平臺無法實現(xiàn)端到端的部署、運(yùn)維和交付； 5G網(wǎng)絡(luò)的多層編排協(xié)同，目前還沒有可視化的運(yùn)維管理；對于垂直應(yīng)用，難以理解行業(yè)端到端的客戶體驗和應(yīng)用、服務(wù)、網(wǎng)絡(luò)的智能運(yùn)維； 5G商用廣泛，缺乏AI手段實現(xiàn)網(wǎng)絡(luò)故障預(yù)警、業(yè)務(wù)切換和故障恢復(fù)。

三、[實踐路徑]

基于能力梳理和方向規(guī)劃，提出1個愿景、3個核心、5個階段、3個基石的“1+3+5+3”智慧運(yùn)維能力體系。

(1）1愿景：IT運(yùn)營創(chuàng)造價值是構(gòu)建智能運(yùn)維體系的根本愿景。

(2）三個核心：穩(wěn)定性和準(zhǔn)確性、用戶滿意度和風(fēng)險防范是智慧運(yùn)維體系建設(shè)的三個核心價值。

(3）5個階段：“初始階段-標(biāo)準(zhǔn)化階段-手動化/可視化階段-中級智能階段-中級智能階段”是智慧運(yùn)維體系建設(shè)中各項能力的演進(jìn)路線。

(4）三大基石：工作規(guī)劃、文化修養(yǎng)、能力提升，是智慧運(yùn)維體系建設(shè)的三大基石。

(1）數(shù)據(jù)采集層：對于應(yīng)用監(jiān)控層面的采集，可以通過UDP合約傳輸、、Java等方式獲取運(yùn)維指標(biāo)。建立和采集業(yè)務(wù)指標(biāo)等。

(2）數(shù)據(jù)處理層：Flink流處理作為數(shù)據(jù)處理引擎，首先提供低延遲、高吞吐、實時處理能力，以及更多的監(jiān)控、智能分析等系統(tǒng)。完美支持各種應(yīng)用場景，同時Flink還支持批處理等常用數(shù)據(jù)預(yù)處理、清洗、過濾等方式的需求。

(3）數(shù)據(jù)存儲層：各種數(shù)據(jù)根據(jù)需要和分工存儲在不同的介質(zhì)上，以達(dá)到最佳的效率和最佳的搭配等效果。(4）@ >數(shù)據(jù)通道層：根據(jù)運(yùn)維工作和運(yùn)維數(shù)據(jù)的特點，選用分布式發(fā)布-訂閱消息中間件Kakfa作為通用數(shù)據(jù)通道，以其易擴(kuò)展、高吞吐的特點，組件間數(shù)據(jù)共享并且可以實現(xiàn)微服務(wù)。通過Kafka進(jìn)行分發(fā)。

(5）微服務(wù)層：后端功能微服務(wù)化，根據(jù)業(yè)務(wù)監(jiān)控、人工運(yùn)維、應(yīng)用配置管理、智能分析、日志管理等定義微服務(wù)的范圍和邊界。 ，以及通過API網(wǎng)絡(luò)段對外開放的能力。

(6）API網(wǎng)段層：API網(wǎng)段采用框架，API網(wǎng)段負(fù)責(zé)對外提供統(tǒng)一的外部訪問入口，并提供合約聚合、路由分發(fā)、負(fù)載均衡、內(nèi)部為前端服務(wù)配置服務(wù)、總線消息等功能，進(jìn)而實現(xiàn)微服務(wù)的服務(wù)隔離、線性擴(kuò)展和有效監(jiān)控。（7）后端應(yīng)用層：后端選擇一個輕量級的，高性能，組件化的框架，適合運(yùn)維這些都是數(shù)據(jù)驅(qū)動的web界面。

四、【實際療效】

五、【實現(xiàn)IT智能化運(yùn)維能力】

1.手動運(yùn)維能力

日常IT運(yùn)維工作中存在大量重復(fù)性任務(wù)。這些任務(wù)有的復(fù)雜冗長，有的嚴(yán)重依賴執(zhí)行順序，有的需要等待各種條件滿足才能執(zhí)行。雖然IT運(yùn)維管理技術(shù)在不斷提高，但實際上IT運(yùn)維人員并沒有真正得到解放。目前，很多企業(yè)的系統(tǒng)啟動和關(guān)閉、系統(tǒng)更新升級、應(yīng)急操作等大部分工作都是手動完成的。雖然簡單的系統(tǒng)變更或軟件復(fù)制粘貼升級，往往需要運(yùn)維人員逐一登錄各個設(shè)備進(jìn)行手動更改。尤其是在云平臺、大數(shù)據(jù)、海量設(shè)備的情況下，工作量可想而知。此類變更和檢測操作在IT運(yùn)維中每天都會發(fā)生，占用了大量的運(yùn)維資源。通過手動操作工具，將運(yùn)維人員從簡單重復(fù)的工作中解放出來，降低誤操作風(fēng)險，帶來系統(tǒng)穩(wěn)定性、安全性和效率的提升。應(yīng)用場景如下：

(1）日檢手動化：日檢內(nèi)容簡單，但占用IT運(yùn)維人員大量時間。日檢人工巡檢可以改變硬件狀態(tài)、設(shè)備負(fù)載、系統(tǒng)人工檢查時間、C盤空間、線路流量、數(shù)據(jù)庫表空間使用情況、網(wǎng)絡(luò)設(shè)備端口狀態(tài)、流量等，生成滿足用戶要求的檢查報告。

(2）手動配置管理：手動從生產(chǎn)環(huán)境中提取配置庫信息，手動更新到配置庫中，保持配置庫與生產(chǎn)環(huán)境的一致性。實現(xiàn)手動更新和同步需要對應(yīng)用系統(tǒng)進(jìn)行標(biāo)準(zhǔn)化改造，如標(biāo)準(zhǔn)化安裝路徑、統(tǒng)一版本等，有助于工具提取應(yīng)用配置項的基本信息，最終實現(xiàn)配置項和屬性的手動更新。

(3）手動應(yīng)用部署：使用手動平臺圖形化流程編輯器創(chuàng)建組件流程。根據(jù)平臺提供的插件，可實現(xiàn)與流行工具的集成，部署即可無需任何編程即可快速定義邏輯。可以使用相同的流程將相同的應(yīng)用程序部署到多個環(huán)境。這進(jìn)一步有助于節(jié)省時間和提高效率，以及早期驗證應(yīng)用程序和部署過程。手動平臺可以同時在數(shù)千臺機(jī)器上運(yùn)行部署過程。

(4）容災(zāi)切換操作手動化：通過容災(zāi)操作流程手動批量執(zhí)行容災(zāi)切換流程。通過-為業(yè)務(wù)系統(tǒng)構(gòu)建雙活模式。主動數(shù)據(jù)中心，實現(xiàn)手動切換，減少停機(jī)時間。

2.平臺運(yùn)維能力

運(yùn)維工作相當(dāng)復(fù)雜，包括網(wǎng)絡(luò)、服務(wù)器、操作系統(tǒng)、數(shù)據(jù)庫、發(fā)布、變更、監(jiān)控、故障排除、運(yùn)行環(huán)境信息維護(hù)等。同時面對日益復(fù)雜和龐大的企業(yè)IT架構(gòu)，IT運(yùn)維需要在不同架構(gòu)、不同平臺之間實現(xiàn)IT資源的優(yōu)化配置和高效管理，從而實現(xiàn)整個系統(tǒng)的穩(wěn)定運(yùn)行，滿足相應(yīng)的企業(yè)業(yè)務(wù)場景。當(dāng)需求出現(xiàn)時，可以應(yīng)對用戶量和數(shù)據(jù)量的快速膨脹。

因此，平臺化運(yùn)維的目標(biāo)是針對不同的業(yè)務(wù)形態(tài)，對企業(yè)IT架構(gòu)進(jìn)行有針對性的管控和集成管理，利用大數(shù)據(jù)和基于PaaS的平臺能力進(jìn)行底層運(yùn)維技術(shù)和業(yè)務(wù)能力。封裝、輕量級運(yùn)維技術(shù)工具體系進(jìn)入運(yùn)維APP場景應(yīng)用，逐步集成運(yùn)維工具。應(yīng)用場景如下：

(1）日志采集平臺：采集各個應(yīng)用形成的本地日志數(shù)據(jù)并匯總。一方面方便查看和定位問題；趨勢分析為有效規(guī)避提供依據(jù)風(fēng)險失敗并指導(dǎo)決策。

(2）應(yīng)用性能監(jiān)控平臺：包括多級應(yīng)用性能監(jiān)控、應(yīng)用性能故障快速定位、應(yīng)用性能綜合優(yōu)化三個模塊。可使用事務(wù)處理過程監(jiān)控、模擬等指實現(xiàn)點對點應(yīng)用檢測，檢測應(yīng)用系統(tǒng)的各個組件，快速定位系統(tǒng)故障，并進(jìn)行修復(fù)或提出修復(fù)建議，準(zhǔn)確分析各個組件占用系統(tǒng)資源的情況，及時了解庫存和產(chǎn)品生產(chǎn)進(jìn)度it運(yùn)維技術(shù)，從而實現(xiàn)利益最大化。

(3）統(tǒng)一資源配置管理平臺：只有這樣才能集中管理不同環(huán)境、不同應(yīng)用集群的配置，實時推送配置變化，保證底層數(shù)據(jù)配置項通過統(tǒng)一管理資源和配置準(zhǔn)確。

(4）應(yīng)用部署平臺：只為了部署容器和物理機(jī)，支持線上線下服務(wù)、定時任務(wù)和靜態(tài)文件的部署，提供部署資源管理、運(yùn)行環(huán)境搭建、部署流程定義和部署執(zhí)行跟蹤，可用于金絲雀發(fā)布和藍(lán)綠部署。應(yīng)用部署平臺可以提高業(yè)務(wù)迭代率，避免失敗，提高產(chǎn)品發(fā)布節(jié)奏。

3.數(shù)據(jù)運(yùn)維能力

由于用戶數(shù)和業(yè)務(wù)量的下降，數(shù)據(jù)量也迅速處于井噴發(fā)展階段。 IT運(yùn)維數(shù)據(jù)化能力由此成為企業(yè)能力發(fā)展的重要方向。 IT運(yùn)維數(shù)字化是利用數(shù)據(jù)采集、數(shù)據(jù)存儲、數(shù)據(jù)處理、可視化等全數(shù)據(jù)系統(tǒng)對運(yùn)維過程進(jìn)行評估，以確認(rèn)IT運(yùn)維目標(biāo)的實現(xiàn)和程度。日常運(yùn)維場景很多，看起來很復(fù)雜。畢竟與對穩(wěn)定、安全、高效這三個基本價值的更高追求是分不開的。通過基于數(shù)據(jù)的運(yùn)維能力，IT運(yùn)維可以為企業(yè)決策提供強(qiáng)有力的支持，實現(xiàn)穩(wěn)定、安全、效率提升、成本合理控制。應(yīng)用場景如下：

(1）知識圖譜：使用統(tǒng)一語言定義運(yùn)維數(shù)據(jù)，通過實體與實體之間的關(guān)系表達(dá)運(yùn)維對象，整合運(yùn)維領(lǐng)域的實體關(guān)系，生成一個知識圖譜。運(yùn)維領(lǐng)域關(guān)系包括但不限于產(chǎn)品、服務(wù)、集群、服務(wù)器、網(wǎng)絡(luò)、IDC等。

(2）數(shù)據(jù)庫室：是一個面向主題的、集成的、相對穩(wěn)定的、反映歷史變化的、用于支持管理決策的數(shù)據(jù)集合。數(shù)據(jù)庫室為用戶提供決策支持和歷史數(shù)據(jù)的當(dāng)前數(shù)據(jù)。數(shù)據(jù)，這是傳統(tǒng)運(yùn)營數(shù)據(jù)庫中難以或不可能獲取的數(shù)據(jù)。 機(jī)房技術(shù)是將運(yùn)營數(shù)據(jù)有效地整合到一個統(tǒng)一的環(huán)境中，為決策數(shù)據(jù)訪問提供各種技術(shù)和模塊，目的是讓用戶能夠查詢到所需的信息更快、更方便，并提供決策支持。

(3）數(shù)據(jù)中心：建設(shè)面向運(yùn)維領(lǐng)域的數(shù)據(jù)中心，資源數(shù)據(jù)、告警數(shù)據(jù)、績效數(shù)據(jù)、業(yè)務(wù)數(shù)據(jù)、日志數(shù)據(jù)、工單數(shù)據(jù)、指標(biāo)數(shù)據(jù)等統(tǒng)一管理，撥號數(shù)據(jù) 為下層運(yùn)維分析場景提供統(tǒng)一的數(shù)據(jù)訪問路由、數(shù)據(jù)服務(wù)目錄、數(shù)據(jù)訪問管理、數(shù)據(jù)可視化等功能，打破“數(shù)據(jù)孤島”，深度挖掘運(yùn)營通過整合關(guān)聯(lián)和對外開放的數(shù)據(jù)價值。識別前端數(shù)據(jù)需求，整合后端數(shù)據(jù)，處理和輸出數(shù)據(jù)，構(gòu)建數(shù)據(jù)中心級數(shù)據(jù)服務(wù)共享平臺。通過數(shù)據(jù)整理，數(shù)據(jù)源規(guī)劃、數(shù)據(jù)處理整合，對現(xiàn)有數(shù)據(jù)進(jìn)行處理和整合，通過數(shù)據(jù)服務(wù)實現(xiàn)數(shù)據(jù)監(jiān)控和資源利用分析。

(4）數(shù)據(jù)可視化：通過數(shù)據(jù)的可視化呈現(xiàn)，幫助運(yùn)維人員直觀、方便、快速地分析問題，同時也提供了一系列工具組件供運(yùn)維人員跟進(jìn)快速進(jìn)行視圖編輯、多層次下鉆分析、多維度關(guān)聯(lián)分析、報表整理、海量數(shù)據(jù)縱橫數(shù)據(jù)對比等，傳統(tǒng)運(yùn)維體驗數(shù)字化改造，大幅改善問題故障排除、風(fēng)險檢測和知識沉淀。

4.智能運(yùn)維能力

由于IT運(yùn)維支撐的業(yè)務(wù)規(guī)模不斷下降，越來越多的運(yùn)維場景和問題難以用傳統(tǒng)的運(yùn)維方式解決。同時，IT運(yùn)維效率也逐漸無法滿足系統(tǒng)要求。為此，如何解放運(yùn)維自身的效率，解決傳統(tǒng)運(yùn)維方式難以解決的問題，成為企業(yè)發(fā)展轉(zhuǎn)型的一大挑戰(zhàn)。運(yùn)維智能化能力是指將人類的知識和運(yùn)維經(jīng)驗與大數(shù)據(jù)和機(jī)器學(xué)習(xí)技術(shù)相結(jié)合，制定出一系列智能策略，然后集成到運(yùn)維系統(tǒng)中，實現(xiàn)運(yùn)維通過智能運(yùn)維平臺完成工作。

目前，運(yùn)維智能化應(yīng)用場景主要有：

(1）故障預(yù)測：主動容錯技術(shù)，基于對系統(tǒng)歷史狀態(tài)和當(dāng)前行為的分析it運(yùn)維技術(shù)，可以生成告警預(yù)測的結(jié)果模型，判斷系統(tǒng)是否已經(jīng)正式形成故障，并協(xié)助系統(tǒng)盡快避免故障或采取措施。可以發(fā)現(xiàn)，可以預(yù)知報警。故障預(yù)知可以使運(yùn)維人員在日常工作中由被動響應(yīng)變?yōu)橹鲃樱瑥亩岣呦到y(tǒng)的整體運(yùn)行質(zhì)量。

(2）故障自愈：故障自愈過程包括感知、止損決策、止損三個階段。感知階段取決于監(jiān)控系統(tǒng)的故障檢測能力，補(bǔ)貨階段取決于流量調(diào)度系統(tǒng)的調(diào)度能力。故障自愈可以提高企業(yè)的服務(wù)可用性，減少故障處理的人為投入，實現(xiàn)從人工處理到無人值守故障的過渡。

(3）手動擴(kuò)縮容：可以根據(jù)應(yīng)用負(fù)載手動調(diào)整集群容量以滿足需求。當(dāng)集群中有Pods由于資源不足而難以調(diào)度時，擴(kuò)容手動觸發(fā)，降低人工成本。當(dāng)滿足節(jié)點空閑等伸縮條件時，手動觸發(fā)伸縮，節(jié)省資源成本。

(4）智能問答知識庫：知識庫的最新形式，具有知識挖掘、知識管理、知識關(guān)聯(lián)、知識推理與建模、智能檢索、自學(xué)訓(xùn)練等功能。智能知識庫 改變故障處理方式，不僅提高了故障上報的準(zhǔn)確性，而且簡化了信息交換的中間環(huán)節(jié)，有效減少故障處理時間，提高工作效率。

(5）智能發(fā)布變更：可否管理大規(guī)模發(fā)布變更流程，具有手動部署、分層發(fā)布、智能變更策略等功能。用戶通過UI配置整個變更流程的執(zhí)行策略/API ，專用執(zhí)行系統(tǒng)解析策略，手動執(zhí)行批次及其變更。分層發(fā)布將變更過程定義為基于強(qiáng)度組的多個階段，并在每個階段引入人工檢測案例。階段變更可以有效提高管理和通過引入智能模板生成、智能變更檢測等智能策略，降低使用門檻，提高可復(fù)用性，減少了人力。操作錯誤率。

六、[未來洞察]

(1）端到端業(yè)務(wù)體驗：主要涉及客戶體驗、應(yīng)用體驗、網(wǎng)絡(luò)體驗、接入設(shè)備體驗的工具和平臺。

(2）智能運(yùn)維：針對B域和O域，提供微服務(wù)修復(fù)、編排修復(fù)、切片修復(fù)、智能預(yù)警、智能優(yōu)化、故障自愈、持續(xù)集成、持續(xù)部署和持續(xù)測試;

(1）運(yùn)維層：三橫一縱、B域運(yùn)維、O域運(yùn)維、邊緣估計運(yùn)維、端到端運(yùn)維。

(2）能力分層：業(yè)務(wù)運(yùn)維、技術(shù)運(yùn)維、管理運(yùn)維。