sysAK(青囊)介紹：系統運維工具集-OpenAnolis 龍蜥社區論壇（16頁）.pdf

1、sysAK(青囊)介紹張毅阿里云高級技術專家系統運維工具集Contents目錄01What is sysAK02典型工具介紹03開源What is sysAK01系統監控針對各種系統資源(CPU、內存、網絡、文件IO、內核管理結構等)提供更精細化的資源監控，幫助業務運維實現細粒度的運維調度，高效的運用資源診斷典型問題如負載異常、網絡抖動、內存泄漏、io毛刺、性能瓶頸、應用異常等，針對性的提供工具，同時盡量減少工具的專業性，讓用戶更易使用和解讀。主要針對3種情況提供系統介入能力：故障注入、系統恢復和故障隔離System Analyse Kit來自于阿里百萬服務器的多年運維經驗，通過對這些經驗進行

2、抽象總結出典型場景，針對不同的運維需求提供了一系列工具，形成統一的產品進行服務。工具集包含了很多強大的底層系統運維能力，這些工具融合到了阿里巴巴不同產品的運維平臺中，實現高效的自動化運維。系統診斷系統介入兼顧專業與普通用戶專業工具集聚合多個專業工具多層次自動聚合分析，輸出普通用戶關心的結果減少侵入性高性能實現工具集整體資源(CPU、內存)控制框架易集成可單功能發布Json格式輸出可作為第三方運維平臺插件更多特點典型工具介紹02Load分析內存資源分析IO壓力分析CPU壓力分析進程堆棧分析Load高自動分析工具loadtask系統錯誤分析在線分析模式異常自動分析模式Load高原因以及觸發問題的t

3、op任務資源依賴內存泄漏分析數據特征分析Rcu異常檢測跟蹤分配釋放函數找出泄漏對象內核內存泄漏自動分析工具memleakSlab泄漏Buddy泄漏泄漏的對象及分配函數現場Vmalloc泄漏用戶態鎖競爭分析工具ulockcheck鎖競爭類型持有過長持有者長時持有監控競爭激烈競爭熱點分析結果持有過長持有者時長排序持有者堆棧詳情競爭頻繁睡眠堆?；鹧鎴D睡眠類型/頻率網絡時延檢測工具PingTrace數據聚合，給出時延精確原因PingTrace客戶端自定義數據全鏈路時延分析網絡鏈路報文時間戳系統中斷延遲調度延遲PingTrace服務端應用性能瓶頸快速界定工具appscan進程內存使用探測進程cpu占用率

4、探測進程agefault頻率探測內存回收影響分析內存碎片影響分析內核態占用分析用戶態占用分析阻塞點分析其他干擾(中斷、搶占等)分析CPU內存文件訪問探測進程直接io頻率探測IO帶寬分析IO 異常影響分析文件IO進程網絡行為探測進程網絡流量分析網絡連接狀態分析網絡帶寬分析網絡丟包影響分析網絡判斷對應資源使用上是否存在瓶頸運維知識庫ossre_clientossre_client已知問題識別系統指標檢查主機健康巡檢系統配置檢查ossre是一個自動化的OS診斷專家系統，其client端集成到了sysAK中，為后端中心服務器提供數據，同時也可離線處理部分問題。開源03開放的技術架構Ko構建Python appLinux kernelmodule工具編譯框架C構建Go構建Bpf appEbpf構建Shell scriptApp(c/go)sysAK開發架構通用庫C libGo moduleKernel api開源sysAK已在龍蜥社區開源，歡迎加入系統運維SIG、跟蹤診斷SIG一起共建。https:/