2019年AIOPS趨勢下的CMDB建設方向、思考與實踐.pdf

1、全球敏捷運維峰會廣州站AIOPS趨勢下的CMDB建設方向、思考與實踐全球敏捷運維峰會廣州站05 總結和展望01 問題和挑戰02 重新認識CMDB03 下一代CMDB建模思路04 應對之道方案和實踐Agenda：全球敏捷運維峰會廣州站什么是CMDB?百度百科：配置管理數據庫(Configuration Management Database,CMDB)是一個邏輯數據庫，包含了配置項全生命周期的信息以及配置項之間的關系(包括物理關系、實時通信關系、非實時通信關系和依賴關系)。配置管理問題管理告警管理監控管理事件管理變更管理流程管理維基百科：CMDB是與IT系統所有組件相關的信息庫。它包含IT基礎架

2、構配置項的詳細信息，CMDB的概念源自ITIL。CMDB是ITIL框架的配置管理流程中的基礎部分。CMDB的實現一般需要“聯合”，即從其它數據源，如資產管理系統，獲取數據并納入CMDB中，期間數據的控制權仍然在數據源。CMDB記錄配置項，以及它們的重要屬性和之間的關系CMDB是構建其它ITIL流程的基礎全球敏捷運維峰會廣州站哪些人關注CMDB?元數據管理 資產配置 監控運維運維人員 資產采購 資產盤點 資產退庫運營人員 配置查詢 資產報表 資源使用率研發人員 資產報表 資產審計 流程審批管理人員全球敏捷運維峰會廣州站問題和挑戰隨著業務發展，應用和資產數量上升明顯配置項完全自定義擴展，無代碼侵入

3、性細粒度，精確的cmdb管理配置項擴展精細化管理CMDB作為ITIL的基礎組件，為其他組件提供數據支撐資產數量多中臺化資產種類雜業務關系管理生命周期管理成本管理資產審計資產變化頻繁市場上CMDB平臺面臨的共性問題基于服務樹CMDB，是CMDB系統價值體現的關鍵容器化、系統上云導致資產變化頻繁，資產配置以及資產負責人變化頻繁IT基礎設施環境復雜，種類豐富資產全生命周期管理全球敏捷運維峰會廣州站問題和挑戰資產流向缺乏控制，無法充分合理使用資產設備，導致不必要的浪費。資產流向資產盤點以及統計帶來很大成本以及數據的不可靠性資產盤點目前京東物流運營著數萬臺機器及各種IT資產，如果不詳細記錄這些機器明細，

4、無法做到機器資源利用率的準確查看，導致部分機器資源利用浪費。成本控制沒有準備的資產數據，導致運維自動化，無法全面和準備的涵蓋。自動化程度低沒有統一的數據管理平臺，以及資產管理條例。無法確認申請資源的合理性，對申請的審批和核實，也沒有對應的操作記錄，對于資產的核實審計帶來不便。審計合規目前運維需要對線上服務器批量操作，如果服務器的記錄的不全和不準確，導致遺漏和誤操作的問題。給運維提高了操作風險。操作風險010203060405痛點我們面臨的問題全球敏捷運維峰會廣州站靈魂拷問：有沒有一個簡單的CMDB？有沒有一個準確的CMDB？有沒有一個功能齊全的CMDB？有沒有一個使用體驗良好的CMDB？有沒有

5、一個能解決問題的CMDB？有沒有一個能解決ITIL，DevOPS，敏捷，精益思維的CMDB？全球敏捷運維峰會廣州站05 總結和展望01 問題和挑戰02 重新認識CMDB03 下一代CMDB建模思路04 應對之道方案和實踐Agenda：全球敏捷運維峰會廣州站重新認識CMDB虛擬化敏捷開發精益軟件ITOM云計算DevOpsITSMITIL監控平臺運維平臺容器化資源優化CMDB資產審計AIOPS全球敏捷運維峰會廣州站我心中的CMDB元數據庫管理精確的元數據管理為其他平臺提供數據支撐提升工作效率保證數據準確，與其他工具結合提升效率降低操作風險數據來源準確符合合規查詢完善的審計流程，實現流程化、標準化降

6、低IT成本資源集中化管理，結合監控平臺進行資源優化智能化場景支持為AIOPS落地提供數據支撐全球敏捷運維峰會廣州站05 總結和展望01 問題和挑戰02 重新認識CMDBAgenda：03 下一代CMDB建模思路04 應對之道方案和實踐全球敏捷運維峰會廣州站總體規劃智能化數據化平臺化資源層阿基米德JDosJimdbESMySQL公有云云主機容器RedisRDS區域庫房物理機網絡MySQLRedis大數據HadoopJDQJRCHbase配置管理資產管理機房管理應用管理字典管理日志分析應用日志調用鏈日志NginxITSM管理事件管理發布管理問題管理變更管理混合云CMDB應用運維庫房運維規避問題火眼

7、監控紅綠燈監控大屏調用鏈常用命令文件操作環境檢測軟件部署性能分析固資系統對接配置管理解決問題智能告警數據分析數據挖掘自定義統計報表監控數據分析接入服務API網關單點登錄權限管理Portal工單系統相對成熟中間件統一支撐平臺安全支持安全規范安全掃描發現問題根因分析故障樹KPI聚類配置掃描系統監控分揀國際化WMS數據相關JDDL數據蜂巢監控平臺告警中心通知中心報表中心網絡監控網絡探查流量監控監控大屏網絡巡檢設備探活監控環境監控AIOPS智能處理決策樹異常檢測趨勢分析事件分析異常反饋深度學習知識庫故障預測性能預測容量規劃預算規劃任務管理值班管理項目管理知識庫安全插件重點功能運維體系規劃DevOps平

8、臺易發平臺集成TestOPS資源申請編譯、打包自動化部署資源彈性調度平臺自定義規則動態縮容流量切換自動擴容JFSJMQESK8SUDBA可視化監控大屏自定義大屏全球敏捷運維峰會廣州站CMDB體系建設規劃CMDB流程管理審計管理申請管理計費管理運維門戶Devops平臺中間件平臺業務支撐平臺監控平臺運維平臺Portal門戶持續集成平臺架構平臺基礎服務平臺資產管理平臺全球敏捷運維峰會廣州站CMDB體系建設思路關系梳理流程梳理標準建立資產梳理1.業務拓撲；2.邏輯拓撲；3.業務樹；4.事件依賴；5.配置項依賴；智能分析配置項管理標準集自動掃描元數據管理智能化資源池管理位置管理關聯分析依賴樹自學習審批管

9、理變更管理事件管理資產管理問題管理流程管理監控管理入庫標準變更標準報廢標準壽命預測自學習智能報表故障預測知識庫預算建議標準審核流程化標準化資產管理應用管理低高成熟度全球敏捷運維峰會廣州站CMDB建模思路指標1指標2指標3指標4指標5應用1應用2應用3應用4應用5應用內應用間業務關系構建(初始化)聯動分析故障分類告警可能的原因故障1告警1,告警2,告警3,原因1,原因2,原因3故障2告警1,告警2,原因1,原因2故障n告警2,告警3,原因2,原因3基于故障知識庫的告警關聯分析指標1指標2指標3指標4指標5應用1應用2應用3應用4應用5應用內應用間可能的業務關系指標1指標2指標3指標4指標5應用1

10、應用2應用3應用4應用5應用內應用間最終的業務關系根因業務告警關聯分析知識庫基于智能告警分析的業務樹構建過程全球敏捷運維峰會廣州站CMDB建模思路專注變化應用配置項任務提供應用維度的管理事件問題變更告警CI管理分類管理字典信息 配置擴展資產同步 變更消息審計任務 掃描任務關注擴展性、準確性數據通信、對外接口全球敏捷運維峰會廣州站基于CMDB的AIOPS場景探索 智能告警分析 根因分析 應用異常分析 關聯異常分析 自動關系推導 故障預測 反饋文本聚類 咨詢客服機器人 數據庫參數調優 全球敏捷運維峰會廣州站05 總結和展望01 問題和挑戰02 重新認識CMDBAgenda：03 下一代CMDB建模

11、思路04 應對之道方案和實踐全球敏捷運維峰會廣州站CMDB建設方案Topological model增強影響規則硬件軟件業務應用云資源整合服務拓撲網絡視圖應用軟件視圖業務視圖對外接口報表(變更,，比較，統計,等.)管理其他平臺變更跟蹤基礎資源關系映射資產建模平臺數據同步Repository全球敏捷運維峰會廣州站CMDB建設方案。擴展屬性1擴展屬性2擴展屬性n。擴展屬性1擴展屬性2擴展屬性nCMDB配置項管理+專有屬性基本屬性。資產標簽1資產標簽2資產標簽n+資產標簽全球敏捷運維峰會廣州站服務樹 簡單，從邏輯上簡化資產間的物理連接關系，服務樹可以更好地專注于映射關系的處理。靈活，服務樹的層級之間

12、的關系并不是固定的，而是由一個一個的資產標簽組合而來。那么整個服務樹的關系定義就會非常靈活。彈性，除了維護邏輯的關系之外，同時支持另一類標簽，用來標示資源的屬性。比如【機器狀態】【機器idc】等?？梢灾С指嗑S度的篩選。全球敏捷運維峰會廣州站CMDB建設方案平臺接口部件掃描Open APICMDB監控平臺資產管理Agent掃描任務資產集同步運維平臺字典集模塊交互全球敏捷運維峰會廣州站CMDB流程梳理 資產上架流程 資產錄入流程 服務器申請 服務器下架 服務器報廢/維修 機房管理流程 開/關倉流程 資產配置變更 服務器異動 應用申請 應用下線 應用配置變更。全球敏捷運維峰會廣州站資產生命周期管理

13、閉環應用申請資產申請應用上線資產監控資產下線應用下線資產變更資產告警全球敏捷運維峰會廣州站自動發現自動發現業務接口業務接口（消息）（消息）流程化流程化定時同步定時同步自動發現是降低維護成本的一種有效方式，提供固定IP段、協議參數等信息自動掃描資產信息以及資產配置信息資產配置信息變化頻繁，在資產變更時發送廣播消息(或通過接口)通知其他子系統同步變更，保證資產變化實時同步運維資產信息變更的場景化流程梳理，比如說開關倉，服務器開關機/斷電，服務器下架等等，這些流程需要與laos等平臺打通，建立標準化變更流程人工維護人工維護結合現有的IT運維流程，在某些場景下通過人工變更把CMDB信息維護準確，比如主機所屬負責人變更、人員異動、機器異動等，可以通過人工直接變更完成資產數據來源多樣化，目前有來自j-one/cap/dbs/中間件等其他平臺的資產配置信息，通過定時同步的方式作為補充手段CMDB準確性全球敏捷運維峰會廣州站05 總結和展望01 問題和挑戰02 重新認識CMDBAgenda：03 下一代CMDB建模思路04 應對之道方案和實踐全球敏捷運維峰會廣州站總結和展望AIOPS保證資產準確性為構建運維中臺打好基礎站在AIOPS角度考慮CMDBCMDB發展展望全球敏捷運維峰會廣州站THANK YOU！