《3D-AIGC與AI圖形學開啟元宇宙未來》_鄧釋天_清華大學長三角研究院AI計算機圖形學首席科學家.pdf

《《3D-AIGC與AI圖形學開啟元宇宙未來》_鄧釋天_清華大學長三角研究院AI計算機圖形學首席科學家.pdf》由會員分享，可在線閱讀，更多相關《《3D-AIGC與AI圖形學開啟元宇宙未來》_鄧釋天_清華大學長三角研究院AI計算機圖形學首席科學家.pdf（39頁珍藏版）》請在三個皮匠報告上搜索。

1、2023WESTLAKE西湖論劍數字安全大會3D-AIGC與AI圖形學開啟元宇宙未來3D-AIGC and Al Graphics Opening the Future of the Metaverse鄧釋天D.Pantheon清華大學長三角研究院A計算機圖形學首席科學家Chief Scientist of Yangtze River Delta Research Instiitute Tsinghua University#page#D.PANTHEONAIGC機理解析AIGC產業重塑A1AIGC啟智賦能隨著技術選代、數據規模擴大和機器學習的深化，未來AIGC不僅能夠通過自動化分析和處AIG

2、CSELECTED理大量數據，提供更加準確和全面的信息，輔助人類做出更加明智的決策和判斷并協助制定規則和臘施，還可以賦能人類的智力，協助人類更好地理解和應對復雜的問題，并幫助人類開拓新的知識領域，發現未曾發現的知識、規律和現象啟發人類智慧。未來需要促進人機協同提升，加強教育提高公眾認知，加強信息保護，確保AIGC的安全性，才能充分發揮AIGC的積極作用推動人類進步和發展。#page#BWESTLAKED.PANTHEON深度神經網絡模型AIGC-機理解析機器翻譯、文本生成、語言模型等任務和對話系統CNN.（卷積神經網絡）是常用于圖像處理和計算機視覺任務的網絡模型包括語言模型、語音識別、圖像描述

3、、音樂生成等領域摘要、問答系統、信息分類#page#23WESTLAKD.PANTHEON實現更強的自動化與智能化碧強人機互動體驗能解決方案與決策支持系統4提高產品與服務的個性化S意與產品升級提升管理與服務的精細化計算、自動微分和優化器，使得模型的訓練和優化變得更加高AIGC產業重塑效和簡單。技術被用來定義和優化模型的損失函數，以及計算模型的輸出可以處理圖像、音頻和視頻數據，但它并沒有專門用于處理徑的技術模型和算法。AIGC只是web2.0技術升級AIGC主要是雖然AIGC可以為Web2.0應用提供一些支持和應用場景，但人檢識別技術，也無法實現3實時的元宇宙虛擬人應用，因此相對于3D人臉識別技

4、術，AIGC只是web2.0技術的升級，無法為Web3.0應用提供份認證和交互體驗#page#D.PANTHEON.Web2.0-Face Recognition3DAIGC識別理論的重構3DAIGC元宇宙技術入口O3D-AIGC滿足自動化識別對包括人臉在內的特征進行分類3D-AIGC3提取三維數據并分析生成高質量的3DAI數字資產AI沉浸式實時交互FaceRecognition人臉識別進行深度辯識的生物識別技術，3D成像是他的終極模態被認為是生物特征識別領域甚至人工智能領域最困難的研究課題。隨著元宇宙及互聯網數字科技的發展人臉識別技術備受前沿科技領域及眾多互聯網科技企業的關注。#page#W

5、eb2.0-FaceRecognition谷歌最新的亞毫秒級的人臉檢測算法BlazeFace:PortraitoflucyParrywifeofAd.63%6matchJohnwollastor1.改進SSD目標檢測算法，從而可以利用GPU加速2.用改進的聯合分辯率（tieresolution）策略來替代非極大抑制（Non-maximum suppression）3.擴大感受視野域（ReceptiveField）的大小黑盒模型結構使其推理過程難以解釋和推導，難以在web3.0開放和分布式環境下保障隱私與安全。其識別范圍和應用場景Art M難以擴展至web3.0提出的復雜任務與公共安全領域。作為

6、獨立識別模型難以有機集成至web3.0的互聯互通系統之中，與web3.0技術發展步伐難以匹配。#page#Web2.0 -Face RecognitionHH0.2既有的政策法規和技術標準難以指導和監管web3.0環境下人臉識別技術的應用，需要構建輯新的機制來推動其健康發展?？傊?web2.0人臉識別技術在數據采集、模型構建、環境適應、任務延展、系統嵌入、標準監管等方面，難以直接滿足web3.0的技術與應用需求。需要在算法、數據、計算等方面實現重大創新，方才有望在web3.0環境下發揮實質作用#page#2023WESTLAKE西湖論劍數字安全大會3DAIGC通過標注特征點，模擬結構光等手段實

7、現高精度三維抓取無附著的三維數據，運用AI圖形學適應物理環境3D-AIGC研發中的二代采用點云等三維數據，會避免傳統人臉識別對高質量人臉區域照片的依賴，進而增強數據采集的靈活性與效率。技術集成3DAIGC模型采用可解釋性更強的機器學習方法，其參數和結構更易于理解與調整，適合開放和分布式的web3.0環境。#page#2023WESTLAKE西湖論劍數字安全大會3DAIGC識別理論的重構2D人臉特征點識別3D空間抓取2D鏡頭采集分解空間信息，構建深度特征點發展了整體回歸樹機器學習識別算法3D-AIGC技術集成3D空間成像基于AI的特征構建通過學習樣本特征，自動生成高精度模型智能信息發明基于稀疏化

8、的SIFT(ScalelnvariantFeatureTransform）方法實時重建3D空間模型#page#2023WESTLAKE西湖論劍數字安全大會3DAIGC識別理論的重構人臉模型的3D空間位置信息為SS=（x）xzne目標模型為Scw：通過對不同角度分量的主成分進行加權擬合得到目標模型PS5是形狀向量的因子系數向量，表示平均形狀。形狀信息的前m個主成分向量組成的矩陣動態特征提取在垂直方向上通過切塊獲得，切分為N21個塊，每個塊N分別有一個相應的特征權值a（0d1,iN-na=（i2N-其中，a可由訓練優化得到。在上一步獲得的空間3D信息的基礎上，采用稀疏化算法，僅用少量特征點計算即可

9、在不丟失主要信息的前提下擬合整個面部深度#page#2023WESTLAKE西湖論劍數字安全大會3DAIGC識別理論的重構鄧釋天發明了半監督交互學習方法，根據用戶自定義部分的操作以及預制的樣本數據來動態學習發型、表情、妝容、形體、服飾的參數，智能生成3D人物的相應模型。#page#2023WESTLAKE西湖論劍數字安全大會N=5.=13DAIGC通過標注特征點，模擬結構光等手段實現數據，運用AI圖適應物理環境。研發中的二代采用點取無附著的進而增強數據采集的靈活性與效率。3DAIGC模型采用可解釋性更強云等三維數據，會避免傳統人臉識別對高質量人臉區域照片的適合開放和分布式的web3.0環境。的

10、機器學習方法，其參數和結構更易于一元#page#3DAIGC元宇宙技術入口多角度留下的人物照片數據，只要手機即可采集#page#2023WESTLAKE西湖論劍數字安全大會3D AIGC元宇宙技術入口01D.Panttheon3DAIGC三維數字成像，AI生命數據永久存儲#page#2023WESTLAKE西湖論劍數字安全大會3DAIGC元宇宙技術入口#page#2023WESTLAKE西湖論劍數字安全大會3D AIGC元宇宙技術入口第三代的3DAIGC的數據表達方式和計算機方法還可以較好地保障個人隱私與安全。3DAIGC技術在識別范圍和應用場景方面擁有更大潛力可望在公共安全等web3.0領域

11、發揮關鍵作用#page#3DAIGC元宇宙技術入口生成“人口”是開啟元宇宙的入口，作為新一代技術，3DAIGC首先完成了用戶的虛擬分身，各項技術實現深度融合，構建統一的智能識別體系。其算法和系統有利于推進相關技術標準和政策法規的制定與完善。在數據采集算法模型、環境適應、系統集成、應用拓展等方面，有利于在web3.0環境下發揮核心作用。#page#D.PANTHEON3DAI圖形學多維核心技術虛擬交互與沉浸體驗的SAAS3DAI圖形學web3.0安全新主張3D-AI圖形學A圖形學革命性創新是多學科有機融合，將呈現出“真實感”、“智能化”和“虛擬社會”等特征，要實現這樣的目標，包含3D-AIGC相

12、關學科的進一步創新與融合仍是關鍵所在。#page#2023WESTLAK原創高仿真-3D實時演染、動態物理仿真、靜態模型資源生成超仿真數字人成像動態物理模擬技術集廠角色肢體骨路IK/FK動畫和不同人體肌肉組織結構，外部環境自動適配PBA物理骨能系統紙娃娃系統物理模擬，剛體、柔體碰撞角色表情動作實時驅動，肌肉組織拓撲聯動，ID材質微表面卷積變形聯動毛發系統代理物體消染#page#ECU人工智能自動成像AI自動數字形象生成技術集稀疏化的SIFT發明基于稀疏化的SIFT(ScaleInvariantFeatureTransform）基于AI的特征構建通過學習樣本特征自動生成高精度模型智能信息2D人臉

13、特征點識別發展了整體回歸樹機器學習識別算法3D空間抓取SVM(SupportVectorMachine）訓練y軸角度等信息#page#ECU基于于物理世界模擬的低多邊拓撲結構感知PBR實時演染高質量交互效果私有即時演算技術集天量紋理技術自研矢量紋理多材質UV集皮膚表面次表面散射技術使用預計分曲線技術呈現高真實感的皮膚表面散射效果基于極向量的角色皮膚光照技術在PBR光照流程中引入極向量概念，解決了皮膚背光演染及各向異性呈現的物理光照信息缺失#page#ECU面部妝容技術多重材質溫染技術，支持實時材質疊加，實現豐富的3D面部妝容DIY層柔體力學技術布料演算的數字化仿真通過特殊的預處理策略，集合多層

14、區域分解遞推，使用并行計算實現實時多層柔體布料解算基于發絲的實時演染并基于Spriing-Mass原理創建實時毛發物理系統#page#湖論劍數字安虛擬交互與沉浸體驗的SAAS3D元宇宙引擎SAAS化成功需要在技術、產品、用戶、生態、運營和商業多個維度取得顯著進步，這需要持續投入與創新并以客戶與市場為中心不斷優化與提高。只有在這些標準上不斷提高與突破其SAAS服務才可能真正成熟并產生較強的技術、生態與商業影響力，最終獲得主導地位。這需要一個漫長的過程，但必須堅定方向保持持續進步。#page#2023WESTLAKE西湖論劍數字安全大會跨越恐飾谷肉眼不可辯識12低多邊形呈現上億拓撲回歸樹算法人臉識

15、別0.3S極速建模追染超常規864萬倍速輕量化技術，緩存640KBCPU頻率1.5GHz#page#2023WESTLAKE西湖論劍數字安全大會目前知名的虛擬人偶制作和經紀公司中，普遍采用傳統制作方式限于單點技術。TECHNOLOGY在低配置上的高配呈現，以及可落地的3D數字AP店生成技術，為行業筑起一道高技術壁壘，將用于快速構筑高質量的數字資產。#page#電a面產品化與運營也而持設SaaS服務體系，為開發者擎的SAAS業務才有可能蓬勃發展#page#2023WESTLAKE西湖論劍數字安全大會#page#2023WESTLAKE西湖論劍數字安全大會#page#2023WESTLAKE西湖論

16、劍數字安全大會#page#2023WEST#page#即可退3DAI圖形學web3.0安全新主張3D圖形學構建Web3.0安全數字基礎設施1.提供數字身份和資產管理的最佳場景，構建開放元宇宙技術，實現數字空間互聯互通和資產跨鏈2.可輕松接入區塊鏈網絡，與數字身份和數字人民幣等Veb3.0技術深度融合3.實現跨鏈數據共享和互操作，提高Web3.0生態連通性。4.3D人臉識別技術具有較高安全性和生物防護能力，3D元宇宙引擎提供展示和使用場景，兩者結合實現Web3.0安全認證和資產管理。5.通過區塊鏈實現去中心化和跨鏈互操作，發揮技術優勢，構建Web3.0安全數字基礎設施#page#2023WEST

17、LAKE西湖論劍數字安全大會總結AIGC+3DAIGC+AI圖形學+區塊鏈等前沿技術的深度結合，將催生出一代超越當前網絡安全水平的新型基礎設施與安全系統?；ヂ摼W的信息交互發展是個逐步提高信息維度的過程。從一維文字信息到加入時間維度的動態視頻信息，下一步將是實現三維空間信息的實時傳輸和交互，未來是AI3叫重交互的Web3.0，點是線上賦能實體經濟，但這一過程還需要技術和基礎設施的進一步發展。隨著5G和虛擬現實等技術的商用，維信息和時互動也正在成為新的信息技術增長點。THANKLAIGC有機結合3DAIGC、AI計算機圖形學，這無疑將推動一場激動人心的技術變革計算和5G技術構建超大規模的虛擬世界與高度仿真的數字社會，共同打造真實而有趣的數字化商業體驗。實現這樣的愿景需要國家推動產業融合與創新，增強我國網絡空間的安全實力與數字主權。丞待建立元宇宙進入的科學標準和安全規范，并加速產業化與市場應用，進而提高網絡安全產業鏈整體實力和數字經濟競爭力。我國將在數字身份認證與網絡安全領域獲得競爭優勢。