隨著數字化轉型的深入，基于中臺和PaaS架構的一體化運維建設也在各行各業快速展開，但是如何將運維平臺本身的能力與企業已有的工具能力進行中臺化整合、工具場景如何聯動，是個復雜而龐大的工程。

01. 背景

華夏銀行圍繞“移動化”、“開放化”、“智能化“、”平臺化”制定了“智慧金融、數字華夏”的規劃愿景，但如何支撐華夏銀行整體的數字化轉型，更快地響應前端的業務訴求，華夏銀行運維團隊面臨著大量新技術、新應用、新架構的挑戰：

為更好的支撐數字化轉型，華夏銀行明確運維平臺化建設的目標：圍繞自身業務特點，抽象運維所需底層的能力，通過構建通用能力的平臺，橫向覆蓋大家都認知的監、管、控各個領域，縱向支撐組織架構的應用管理、系統管理和網絡管理，實現：

• 最大化復用運維的在權限、配置、自動化、作業等通用能力構建場景；而不是重復建設工具來支撐場景；
• 平臺具備整合場景的能力，可以通過運維開發等手段，將底層能力在上層場景需要時調用；
• 橫向在監管控、縱向上在網絡、系統、應用均可以支撐和響應快速變化的業務需求；提供更好更快的運維支持能力；

建設目標明確后，我們基于藍鯨打造了屬于華夏銀行的平臺——iDo平臺?！癉o”有兩層含義：一是響應平臺的理念，即“做”，而不僅僅是“說”，提倡動手實干；二是低成本的運維開發工具“DevOps”，摘取字母“D”和“o”。

基于藍鯨打造的iDo平臺，底層是管控平臺進行運維對象的統一納管，使工具平臺與運維對象之間能夠建立有效連接，中間層為作業、配置、數據平臺為代表的運維通用能力，除藍鯨自身的能力之外，也可以進行能力的拓展和優化將華夏原有的自動化、運維管理等能力融入進來。以API為脈絡和紐帶，連接起平臺本身和周邊工具的能力和數據，達到場景貫通的目的。

同時，藍鯨通用的開發框架可以支撐行內依據自身需求開發應用工具，應用工具的不斷建設也會反哺到能力中心，形成互相螺旋式提升狀態，能力會不斷地完善，場景會越來越豐富。

02. 基于藍鯨的運維平臺化建設

1）平臺層統一對接

① 認證掃碼

在引進藍鯨之前銀行內部已經建設大量的運維相關應用和系統，引進藍鯨平臺之后，首先要做的就是進行人員組織架構的對接、同步，并通過認證掃碼登錄，通過與認證系統（ITIL、企業微信等）做統一認證、接入，目前可以實現通過掃碼的方式快速登陸平臺，同時行內的統一的組織架構信息，也給后續的權限管理提供了很多便利；

② 接入

目前生產運維接入了300+的業務系統，納管了12000+主機。通過能力中心的建設，共有400+API，同時基于平臺通過場景建設了100+SaaS工具，并且這些規模數量還在不斷增加；

③ 消息

iDo通過和短信網關、企業微信等通知方式的對接，將日常運維中的審批信息、告警信息、待辦信息等等都實現了移動端的消息覆蓋，讓運維人員即使人不在值班中心也不會漏下任何的故障和工作信息；

④ 企業級管理

華夏在全國有40多家一級分行，幾千個營業網點，目前iDo以完成了從上到下的統一管理，這里面平臺的以業務劃分，統一管理又相互獨立的模式發揮了很大的作用，因為各分行有自己的運維人員，統一管理便于總行的整體的運營明確下一步建設優化方向，獨立的應用又可以讓分行運維人員依據實際的業務訴求進行個性化的調整；

2）平臺化配置管理

配置管理在業內是建設的難點。華夏銀行也有配置管理系統。在平臺化建設后：

首先，同步數據、模型。行內重要的模型主要有業務系統、人員、IP等；

第二，進行流程上的控制。對配置管理做了流程上的對接，包括設備的上下線，人員的調整等，保證配置管理的準確性；

第三，改造原有CMBD API在用接口，統一封裝到API網關中，與藍鯨的CMDB功能一起做了統一的服務；

第四，數據消費。數據消費是目前CMDB建設的重點，通過強消費、場景化的建設，對CMDB的數據進行消費。這也是一個循環的模式，即有些不準確的CMDB數據，會通過消費場景來反映CMDB的準確性，確保CMDB數據的準確；

第五，自動采集項。自動采集也是CMDB建設的重點，由于很多數據單靠靜態的管理，且沒有在消費的場景里，容易導致數據采集不準確。通過自動采集插件反哺到CMDB中，從而確保數據采集的實時數據，實時反映CMDB的配置信息情況。同時通過可視化的展示不斷完善數據的準確性以及數據采集插件，讓插件繼續豐富。

3）平臺化監控管理

利用平臺能力補足監控的不足，同時基于平臺統一的開放能力，實現統一監控的匯聚等等。

華夏銀行最早使用的監控產品是IBM、ITM。隨著國產化趨勢，“去IOE”行動，行內業務系統需同步進行信創化改造，使用國產化信創設備，因此銀行使用藍鯨監控，去逐步替代ITM的基礎監控，通過藍鯨對信創的基礎監控實現統一納管。

除IBM、ITM基礎監控外，還有：

• 藍鯨監控、自定義監控、撥測、日志、關鍵字等監控，目前都在大規模使用；
• 云監控，行內自研的應用監控，是根據行內的應用監控規范、基于藍鯨能力開發的應用監控；
• 第三方監控，比如APM監控、端到端的監控等。

行內監控極其分散，通過藍鯨統一的開發框架，開發了統一的告警中心。接入藍鯨監控、存量的ITM監控、云監控及交易監控，進行統一的告警匯聚、分級、收斂、處置、通知等，即在平臺上集合了所有監控，并具有可視化大屏展示。

統一監控告警中心在華夏銀行服務臺以及各個項目組是一個非常受歡迎的產品。有了統一的告警的功能后，大家能夠及時地查看系統的運行情況；同時基于統一告警進行了根因定位、故障畫像等相關方面的研究，也已經開始投入應用了。

4）雙Agent模式解決國產化自動化難題

在自動化（控）方面，華夏銀行原來的自動化產品是用國外的BMC，在使用過程中會遇到國產化兼容的難題。通過藍鯨Agent、BMC Agent這種雙Agent模式，解決了國產化自動化的難題。

在雙Agent模式下，通過藍鯨的自動化能力去納管國產化設備，并且兩種Agent同時運行。雙Agent模式支持在業務無任何感知的情況下進行國產化的替換，最大化兼容了穩定性和自主可控的要求。

隨著國產化新設備的上線，銀行將圍繞業務生命周期，逐步切換到藍鯨Agent，同時保持用戶的使用習慣。目前已有30+套國產化架構的業務系統通過藍鯨進行自動化投產和變更，未來將通過增量業務逐漸進行替換，實現國產化的適配。

5）容器自動化管理

行內華為云X86、華為云ARM、道客云均是通過容器實現自動化管理。每個容器云廠商有各自的管理模式，難以統一管理。通過容器的自動化管理，可對不同廠商、不同架構的容器云進行統一的容器管理，包括應用定義、多集群的納管集群的運維、容器應用的運維等等。

典型的管理場景舉例介紹：

① 平臺化資源交付

平臺能力層有強大的開發能力，能串聯自動化、流程、CMDB三方面能力實現資源交付的申請。整個可視化的流程編排可以增加API、審批流程的管理，全部實現線上化審批。舉個簡單的例子，堡壘機場景會增加主機、權限以及密碼托管等，只靠提單來完成資源交付會很繁瑣，但通過平臺化的資源交付，審計堡壘機時依托平臺的開放能力，把API和審批流程串起來，在用戶申請后，堡壘機的管理員只需通過API加流程完成，替代手工操作，資源交付的效率大大地提升了。

另外，通過可視化方式呈現資源交付的成功率、交易量、交易類別等多維度的數據，直觀呈現服務運營的價值，即平臺資源化。平臺資源化會有各種服務，現能通過平臺化的流程管理，實現可視化編排。

② 平臺能力中心可持續交付的服務

藍鯨加上企業自有系統服務的封裝，使得平臺層的內容場景豐富，API流程控制、統計等能力增強。目前平臺能力中心主要的業務功能是能力的上傳、申請以及使用等。

首先，能力自定義、自服務上傳。如希望把原來第三方系統放到統一能力中心，那可通過能力中心的SaaS應用，實現注冊、申請，最終上線到統一的能力中心。

第二，使用人員的申請。目前的使用人員不局限于運維，也有部分的應用運維人員、系統運維人員以及開發人員，他們通過平臺能力中心，申請各自所需的能力，然后再去組裝SaaS應用。

如下是接口授權調用的邏輯。在申請時SaaS相關的信息、使用申請、使用說明、申請時限等都會反映到流程中，通過審批后會再反映到用戶的實際調動中。

前端的使用統計。主要是統計成功率、使用次數、SaaS的調用使用量以及接口的使用量等。

6）一個iDo平臺可以帶來“百花齊放”, 平臺有100+SaaS工具

網絡層面是相對獨立、專業的運維領域，分行的網絡告警是通過平臺提供服務。目前行內網絡團隊通過底層能力，將告警統一接入到平臺上，基于平臺開發了SaaS服務。

在系統層面，藍鯨本身是應用視角的平臺，而系統層面會注重整體視角。行內通過賦予用戶權限，例如提供50套系統的權限，通過API對這50套系統獲取數據，再在這上面做一層以系統為視角的SaaS應用?，F銀行的一些系統類、數據庫統一管理的視角的SaaS，便是基于這個方式實現的。如數字魔方，TongEasy分析、GTP智能運維，也都是系統層面統一運維的SaaS應用。

在應用層面。交易的成功率、交易量、響應時間、數據庫連接都是基于自研的云監控去完成。核心/借記卡監控也是屬于應用監控的范疇。

因此，我們是基于這一個平臺提供的統一能力，不斷地豐富各個層面的場景，從而實現華夏銀行的運維平臺化的建設。

03. 經驗總結和未來的展望

引入藍鯨平臺后，從搭平臺框架、融合協同、場景拓展演進，最終實現iDo平臺智能化。

通過本次平臺化建設，助力運維價值升級：

① 打破傳統運維的思維

通過平臺工具建設，解放運維繁瑣的工作，實現運維管理橫向擴展，借助平臺能力實現原來難以實現的場景，提升自身的價值；

② 需求開發周期迅速縮短

通過平臺快速試飛的應用開發場景，新的需求開發周期會迅速縮短；

③ 迅速提升運維人員能力

運維不再是一個簡單重復的工作，通過對平臺能力的抽象、平臺開發框架的工具文化的賦能，運維開發對運維人員是一條很好的轉型之路；

④ 為業務發展提供更多的決策依據

依靠騰訊藍鯨在運維行業的引領，我行的金融運維產品可以對外輸出，體現更高的價值。

運維得天獨厚的一個優勢，是我們能夠獲取實時的數據，更貼近地去體現業務的價值，并通過平臺化能力及快速開發模式來輔助運營，為業務發展提供更多的決策依據。