《鄭美玲-高效生產力工具處理自動化(GPA)技術新進展.pdf》由會員分享,可在線閱讀,更多相關《鄭美玲-高效生產力工具處理自動化(GPA)技術新進展.pdf(47頁珍藏版)》請在三個皮匠報告上搜索。
1、P1鄭美玲產品工程師平臺產品線組件內核產品管理與營銷工程團隊北京超圖軟件股份有限公司2024年6月26日,北京高效生產力工具處理自動化(GPA)技術新進展P2p提供可視化界面,通過拖拽串聯分析處理工具,快速構建GIS業務模型p實現業務流程化、執行自動化Geoprocessing Automation支撐多行業場景空間數據分析處理高效工具處理自動化(GPA)P3降低技術門檻,輕松上手無懼業務需求復雜多變,快速交付優化業務流程,減少開發復用成本處理自動化為您帶來便利P4目錄更完備的GPA技術更強大的GPA能力更高效的分布式處理123P5P5更完備的GPA技術01P6全新Web UI900+工具變量
2、列表、分組模型元數據局部執行即時取消發展歷程2019-202110i202311i2022桌面處理自動化處理自動化服務Geo AI、大數據工具三維工具等條件、迭代、變量iPortal GPA App 1000+工具Spark 升級工具性能優化計劃執行模型庫加密2024iPortal 數據注冊數據拖拽建模讀寫更多類型數據任務排隊調度Spark 多進程P7模型基礎處理自動化(GPA)全功能概覽工具箱單機GPA工具分布式GPA工具AI GPA工具自定義GPA工具邏輯控制變量行內變量替換迭代循環條件過濾分組嵌套可視化建模處理自動化建模(SuperMap iDesktopX)處理自動化服務(SuperM
3、ap iServer)處理自動化建模WebApp(SuperMap iPortal)模型管理模型文件模型庫模型執行界面點擊執行計劃執行服務接口調用數據庫型數據源文件型數據源web數據源實時數據P8SuperMap iDesktopX 處理自動化建模菜單欄工作空間可視化建模視圖工具箱P9SuperMap iServer 處理自動化建模菜單欄工具箱可視化建模視圖參數面板P10SuperMap iPortal 處理自動化建模數據資源目錄P11P11更強大的GPA能力02P12回顧GPA關鍵特性低代碼可編程l 可視化建模界面l 模型可共享、易復用l 邏輯判斷、迭代循環l 計劃執行l 工具多可擴展l 1
4、000+預定義工具l 多語言自定義擴展l 模型嵌套l 高性能l 分布式l 內存緩存l Spark升級l 單機工具算法改造l P13GPA能力增強模型構建模型執行與調用模型管理與分享P14GPA能力增強模型構建模型執行與調用模型管理與分享P15支持直接拖拽數據目錄中的數據到建模頁面作為節點,后續可以連接GPA工具作為數據輸入參數,無需手動配置,提升建模易用性,且能在處理流程中更好地掌握數據信息模型構建數據作為節點添加到建模頁面iDesktopXiPortalP16模型構建對接多源數據文件型數據源 CSV、JSON、GeoJSON、ShpFile、FileGDB、MDB Tiff 數據庫數據源 O
5、racle、MongoDB、ES PostgresSQL、PostGIS、Yukon 達夢、瀚高、人大金倉 分布式存儲 HDFS 華為云對象存儲 阿里云對象存儲 P17支持直接對接多類型矢量、柵格文件做分析,而無需進行導入分析完的結果也可以直接寫出為相應格式,減少數據格式轉換對接多類型矢柵數據進行分析處理柵格處理分析矢量處理分析TIFFSHP/GDB無需導入TIFFSHP/GDB直接寫出P18對接Web柵格數據進行分析處理影像服務GPA服務對指定范圍的Web柵格數據進行分析處理更多柵格影像分析:水文分析坡度、坡向剖面填挖方柵格統計P19模型構建豐富的預定義工具影像管理分布式250+地圖瓦片空間
6、統計分析地理編碼柵格分析三維分析矢量分析數據導入數據導出數據處理機器學習空間查詢制圖與服務發布1000+預定義工具Processing AutomationP20 三維數據(24):模型瓦片續生成、生成材質資產 影像處理(12):影像去霧、影像云修補、DSM水體填值 影像管理(3):導出影像服務集合VRT文件 影像AI(1):提示分割 空間處理分析(2):cressman插值、波段計算 分布式(2):拓撲規則、距離計算 新增工具40+影像處理、影像AI、三維、空間分析、分布式分析等更多工具持續更新P21 滿足遙感數據流程化分析處理需求,新增支持對影像數據進行波段計算新增影像數據進行波段計算黑臭
7、水體識別提取P22增強拓撲質檢規則321.7403012小時無結果1.248.4534.837w線對象(無尖銳角)84w線對象(無尖銳角)723w線對象(無尖銳角)同行業產品SuperMap處理時間(單位:秒)高效易用面向數據質檢業務,新增線面尖銳角檢查規則,即選即用優化線無打折、面內無縫隙、面內無重疊等規則,滿足實際需求P23GPA能力增強模型構建模型執行與調用模型管理與分享P24建模頁面點擊執行模型執行與調用 計劃執行(定時/監聽)http服務接口調用調用方式P25模型執行覆蓋同名結果數據集避免冗余的中間結果造成數據源膨脹,減輕數據存儲壓力重復執行業務模型流程時不需要修改參數,提高工作效率
8、P26模型計劃執行定時執行監聽文件變化執行流數據傳輸監聽P27模型計劃執行PostGIS船舶實時數據接收解析處理定時觸發實時數據獲取入庫P28集成業務系統進行服務接口調用集成業務系統進行服務接口調用多并發多并發如何調度?如何調度?P29模型調用新增任務排隊調度能力避免服務器過載增加按優先級排隊的模式,保障緊急業務優先執行任務1任務2高優先級任務等待調度管理器運行根據優先級提交任務任務3P30模型調用新增任務排隊調度能力避免服務器過載增加按優先級排隊的模式,保障緊急業務優先執行P31GPA能力增強模型構建模型執行與調用模型管理與分享P32 全新的模型管理模式模型庫 桌面端GPA 和Web GPA
9、均支持通過模型庫的方式進行模型管理,兩端互通 將構建的多個單模型匯集到相關業務模型庫,便于集中管理和分享復用更便捷、更安全的模型管理與分享 .gpaml 模型庫文件P33設置授權碼,有效保護用戶模型資產模型管理與分享模型庫授權管理可執行可查看可修改P34設置授權碼,有效保護用戶模型資產模型管理與分享模型庫授權管理可執行P35小結GPA能力增強 數據直接拖拽 對接多類型格式數據 對接服務數據 新增40+工具 結果同名覆蓋 計劃執行統計 排隊調度執行 模型庫 授權管理模型構建模型執行與調用模型管理與分享P36P36更高效的分布式處理03P37Spark部署模式集群模式 local(單進程)模式lo
10、cal(多進程)模式P38 Spark local(多進程)模式,在本機啟動多進程模擬分布式環境,實現算力資源高效利用,提升大數據處理分析性能 推薦百萬級數據在桌面端產品直接使用單機多進程模擬分布式600萬+圖斑600萬+圖斑疊加分析結果600萬+圖斑 單機配置:56核 256GB省級基礎地理信息中心實測PostGIS4h0.5hlocal 單進程local 多進程耗時縮短至1/8P39 通過優化計算時的內存管理,以及PostGIS數據引擎的分布式讀寫,省級以上千萬圖斑對千萬圖斑全量疊加分析性能提升的難題得到突破性進展千萬級圖斑疊加分析性能提升耗時約44分鐘集群總配置:140核 280GB疊加
11、分析P40支撐多省自然資源復雜業務快速交付數據體量大、特征復雜 全省千萬級圖斑 參數化、多部件、導洞 幾何拓撲錯誤 業務規則復雜 多次空間疊加 字段計算與賦值 匯總統計 處理效率低 分區縣計算 人工值守 短期無法出成果 結果算不準 疊加后面積精度不高 易出錯P4166分31分同行業產品SuperMap支撐多省自然資源復雜業務快速交付2023地類圖斑(2388萬)城鎮村等用地(329萬)疊加分析結果(3063萬)2022地類圖斑(3448萬)集群總配置:2*(88核 512GB)PostGIS省級耕地流量分析業務字段計算屬性匯總ECQL查詢耗時縮短一半P42支撐多省自然資源復雜業務快速交付耕地保護責任制考核相關數據核算永農核實處置與變更分析進出平衡考核土地利用變化監測支撐XX省國土資源測繪院、XX國土勘測規劃院、XX省第二測繪院P43支持設置Spark全局環境參數 方便同一臺機器構建的GPA模型一鍵復用Spark環境參數配置全局環境參數全局參數復用P44小結分布式處理增強 更高的分析處理性能 更高的硬件資源利用率 更便捷的環境配置方式P45總結空間處理分析首選入口低代碼、高性能,提升工作效率助力行業伙伴打造高品質解決方案P46SuperMap GIS在線技術支持渠道P47Thank You All