07-企業搬站之旅-- 企業級存儲產品助力核心業務系統上云- 彭亞雄（25頁）.pdf

1、彭亞雄阿里云智能高級產品專家阿里云智能高級產品專家-企業級存儲產品助力客戶核心業務系統上云企業搬站之旅彭亞雄彭亞雄上云已成為企業加速數字化轉型的催化劑43%的企業把全部業務放在云上70%的企業把一半以上業務放在云上60%的企業用云支撐主營業務網站50%+企業用云支撐核心業務系統數據來源：數據來源：The trust report cloud computing in China(2018)，IEEE中國/阿里研究院上云的關鍵在于核心業務上云存儲容量存儲性能高級數據服務簡單數據服務OLTP數據庫CRMERPOA辦公Email開發測試醫療影像備份視頻監控日志分析歸檔數據倉庫內存數據庫高性能計算大數

2、據媒體影像應用軟件容器客戶使用傳統線下存儲陣列的痛點運維復雜度費用時間擴展性 項目招投標周期長 設備運輸到貨時間長 安裝調試時間冗長 線下機房成本 一次性投資成本 長周期預先投入 軟件/硬件維保 專業存儲管理員 備份容災管理 數據安全可控 業務連續性設計 供應商/品牌鎖定 型號受限 容量性能無法線性增長邊緣存儲完整的混合云存儲產品統一數據管理平臺云網關備份日志服務智能媒體管理容災與恢復閃電立方在線遷移離線遷移軟件定義存儲存儲陣列完整的存儲基礎服務塊存儲8種規格文件存儲3種類型3種規格表格存儲2種規格對象存儲3種規格分布式存儲平臺阿里云提供業界最齊全的存儲產品，幫助客戶核心業務上云真實案例分享-

3、看看他們是怎樣把業務遷移上云的ESSDESSDESSDESSDESSDESSDESSDESSDESSD專線PC/移動客戶端訪問加速服務CDNP2POSS接入層多可用區部署SLBECSECSECS業務數據層RedisRDSMongoIDCLVSNginxtomcatPHP-fpm接入層阿里云多可用區部署多可用區部署ESSD云盤助力某視頻直播客戶全站上云項目背景 某視頻直播行業客戶，需要通過上云來滿足高速增長的業務發展，客戶規劃目標全站上云。痛點與挑戰 客戶在IDC使用帶RAID卡的本地盤，上云后普通云盤無法滿足禮物交易、流量配置、聊天室等業務日志的時延要求（業務時延低于20ms），影響客戶上云進

4、展。解決方案 采用ESSD云盤全面承載核心業務日志信息數據，滿足穩定低時延、高吞吐的性能需求，業務時延降低近90%，接近客戶線下本地盤業務表現。業務收益 ESSD云盤提供穩定低時延、高吞吐能力，滿足核心業務日志的性能需求，替換后系統監控報警次數降為零；ESSD云盤具備9個9數據高可靠性，支持彈性擴容，實現存儲資源隨業務發展而靈活擴展，運維更簡單；ESSD助力 振華重工 核心ERP系統部署上云業務挑戰解決方案&業務收益振華重工集團將 S/4 HANA等 SAP核心應用部署在阿里云；帶動振華集團 OpenText、UEM、智慧集團等項目上云，推動子公司 S/4HANA應用上云HANA+ESSD云盤

5、，性能是業界同類產品的 710倍，是線下的5倍以上，充分加速業務上云業務背景 振華重工主要生產港口用大型集裝箱機械和礦石煤炭等散貨裝卸機械，遍布全世界 101 個國家和地區，連續二十多年位居港口機械行業市場份額全球第一。SAP 上云項目是企業數字化轉型的突破口，振華重工經過近半年調研和多方評估，最終將包括 SAP S/4HANA 在內的核心業務系統部署在公有云上，ERP 一期項目于 19 年 4 月正式上線。數字化轉型無從下手，希望減少 IT固定資產投入，精簡運維人員 HANA吞吐量要求高，數據保護要求高，高端存儲陣列成本高昂 安全等保要求高，線下同城和異地災備方案成本過高 海外分支機構訪問，

6、必須保證網絡安全，GDPR法案合規“此次 ERP 項目成功上線堅定了振華重工通過云計算來協助企業實現數字化轉型的信心，作為數字化轉型過程中最核心部分 ERP 系統部署在公有云上的策略是完全正確的?！?振華重工 CIO 朱建國極速NAS加速某財經資訊門戶實時行情交易系統上云極速NAS容器集群VPCPOD1POD2POD3股民業務需求：每天股市開盤前啟動容器集群，加載股票實時行情數據對外提供查看服務；容器啟動時需要從共享存儲NAS上并發讀取海量小文件數據，同時要求容器在極端時間內啟動，避免影響開盤后行情查詢；方案優勢：采用NAS共享文件存儲，只需要一份數據拷貝，多個容器集群可以共享訪問數據 極速N

7、AS低時延高IOPS的小文件處理能力，可以保障在5分鐘內同時拉起10個POD。CPFS文件存儲助力中科院國家天文臺FAST項目阿里云并行文件系統托起PB級數據天文臺業務背景 在中國天文臺FAST探尋脈沖星項目中，FAST望遠鏡作為全球頂尖的望遠鏡，要求下機數據速率超高、時間超長，形成海量的原始數據，并以最短的時間完成對原始數據的分析。需求與挑戰 超高穩定性：全年不間斷的接收望遠鏡的下機完整數據，滿足眾多計算節點的讀寫請求，提供高效穩定的讀寫服務；超大容量：以目前數據率最高的觀測模式，連續一個月每天不間斷的接收數據，存儲系統需提供至少PB級別容量，滿足爆發式增長數據動態擴容需求；超高讀寫帶寬：通

8、過眾多計算節點對海量數據進行實時分析，需要極致讀寫帶寬解決方案 CPFS提供高效穩定的讀寫服務，百PB級別存儲容量，百GB讀寫帶寬，充分加速原始數據實時分析線下線下 IDCIDC1Gbps專線數據上云CPFS 并行文件系統拉取訓練OSS對象存儲阿里云機房阿里云機房數據歸檔本地存儲數據采集數據采集清洗標注清洗標注云上訓練云上訓練GPU集群本地服務器業務需求：線下數據采集與標注采集的數據導入到客戶 IDC 的存儲中，并進行清洗標注數據專線上云標注后的數據，從客戶IDC 通過專線上傳到阿里云 OSS云上訓練與數據歸檔需要訓練的數據，從 OSS 導入到 CPFS，利用 GPU 和 CPFS 文件系統的

9、強大處理能力，在云端進行模型訓練訓練完成后，數據歸檔到 OSS 進行長期保存方案優勢：采用CPFS共享文件存儲，提供統一的命名空間，用戶只需要一份數據拷貝，即可在數據清洗標注，訓練、推理等不同階段訪問一個數據存儲，簡化架構CPFS配合客戶端緩存機制提供6070w的IOPS，解決千萬小圖片讀取性能的問題。高達幾十GB/s的聚合IO吞吐，解決數據并發讀取時的IO瓶頸問題CPFS文件存儲 加速某AI客戶云上訓練處理ESSD&極速NAS&CPFS加速應用上云，業務增值利器ESSD 商業化規模部署 全球超過16個可用區開放售賣地域9可用區域16美國西部美國東部歐洲中東印度新加坡香港日本印度尼西亞澳大利亞

10、馬來西亞中國南方中國北方中國東部全球首款百萬級IOPS云盤正式步入成熟售賣階段北京上海杭州深圳成都張北香港印度英國ESSD按照性能區分不同規格，性能與容量解耦第一檔第一檔第二檔第二檔第三檔第三檔IOPS 上限值50 000IOPS 上限值100 000IOPS 上限值1 000 000支持在線升配同樣的性能加速，不同的性能上限單盤最大容量32TB單盤最大容量32TB單盤最大容量32TBESSD相比于SSD云盤，時延降低70%，加速數據庫類業務性能規格SSD云盤ESSD云盤對比測試腳本讀時延(ms)0.52380.1829降低65%fio bs=4k iodepth=1 ioengine=lib

11、aio numjobs=1 runtime=1000 rw=randread寫時延(ms)0.62360.1127降低82%fio bs=4k iodepth=1 ioengine=libaio numjobs=1 runtime=1000 rw=randwrite對時延敏感型業務會有明顯的性能提升，如數據庫等業務類型時延降低70%+MongoDBRedis/HBaseElasticsearchLogstash/KibanaSAP HANABW/NetWeaver企業級商用軟件SQL數據庫NoSQ數據庫實時業務分析MySQL/PostgreSQLSQL Server/Oracle典型業務場景

12、MySQL TPS提升2倍，時延降低60%4,4106,3475,81211,06218,35916,43905000100001500020000oltp_write_onlyoltp_insertoltp_update_indexSSD云盤 650GBESSD云盤 650GB232397871280100200300400500Avg Latency95%LatencySSD云盤650GBESSD云盤650GBoltp_write_onlylatencyTPS測試結果典型業務場景 SAP HANA 啟動時間縮短60%HANA System ReplicationHAASCS（主）ASCS（

13、備）S/4 PASS/4 AASHANA（主）HANA（備）HAVPC區域1ESSDESSD6121499040080012001600SAP HANA Load帶寬性能（MBps）SSD云盤ESSD云盤寫時延降低60%+帶寬提升1.5倍3661390100200300400SAP HANA log 寫時延（ms）SSD云盤ESSD云盤通過快照實現簡單高效的數據備份和異地容災能力可用區RegionECS實例云盤（boot）云盤（data）快照Region1Region2云盤(boot)快照鏡像鏡像ECS實例copy云盤（data）ECS實例云盤(boot)云盤(data)可用區可用區Regio

14、n快照云盤云盤相同Region內，快照存儲在OSS集群中，與塊存儲服務獨立部署利用快照跨AZ復制能力，當某個AZ不可用時，通過快照快速創建云盤進行業務恢復通過快照轉鏡像服務，批量創建ECS實例通過鏡像復制能力，能夠實現異地備份基于指定時間點的快照進行回滾云盤，無需重新創建云盤基于Lazyload模式，秒級恢復。無需等待全部數據復制到云盤即可使用在線回滾，無需停機服務極速型NAS 高性能企業應用存儲文件系統快照滿足企業級客戶需求數據快照海量小文件場景隨機讀寫 30K IOPS高IOPS最低500us 穩定時延支撐時延敏感型應用百微秒級時延數據落盤加密滿足安全合規性要求數據加密針對海量小文件場景提

15、供百微秒級低時延和高IOPS訪問能力極速型NAS典型應用場景Nginx、PHP高性能網站和WEB服務Dev/Test、GitHub代碼托管和CI集成Kubernets、ECI容器服務高性能共享存儲 時延增加導致的服務器負載升高 小文件操作響應速度慢，cp、ls、mv等操作卡頓 系統運行緩慢，網站加載速度慢不必再為下列問題煩惱：百微秒級穩定時延下小文件操作性能提升13%92%0%10%20%30%40%50%60%70%80%90%100%load average實時日志分析服務器負載極速型分布式NAS秒360010203040506070Magento電商網站響應速度極速型分布式NAS響應速度

16、提升20倍服務器負載下降7倍測試場景：Magento電商網站頁面加載響應時延測試場景：多臺ECS實時日志寫入到NAS文件存儲CPFS 專為HPC高性能計算設計的存儲系統ComputeComputeComputeHigh Performance Compute ClusterCPFS Storage ClusterStorageStorageServerServerStorageStorageServerServerStorageStorageServerServerHigh Speed Network 高性能和高擴展性 支持數萬個客戶端計算節點 數百GB的聚合I/O吞吐量 完全托管，即開即用 提供標準的POSIX/MPI接口CPFS典型應用場景小文件多，大小文件混合成千上百臺機器同時訪問，計算任務數多高吞吐，高IOPS，低延時需求容量性能可以向上擴展AI訓練影視渲染基因測序仿真測試油氣勘探氣象分析OLTP數據庫決策分析應用軟件備份/歸檔阿里云存儲，滿足企業上云對數據的一切需求