《黃鵬-破局升維革新大模型時代的數字員工.pdf》由會員分享,可在線閱讀,更多相關《黃鵬-破局升維革新大模型時代的數字員工.pdf(40頁珍藏版)》請在三個皮匠報告上搜索。
1、破局破局 升維升維 革新革新大大模型時代的數字員工模型時代的數字員工重塑業務流程、知識體系和組織范式重塑業務流程、知識體系和組織范式/科大訊飛科大訊飛 黃鵬黃鵬自我介紹(自我介紹(About MeAbout Me)AIAI技術賦能的思考者和實踐者。希望讓技術賦能的思考者和實踐者。希望讓AIAI如水般智慧,善利萬物,賦能千行百業。如水般智慧,善利萬物,賦能千行百業??拼笥嶏w科大訊飛 企業數字化業務群研發部總監企業數字化業務群研發部總監 黃鵬黃鵬先后參與并主導開發推薦系統、企業級大數先后參與并主導開發推薦系統、企業級大數據平臺和據平臺和AIAI中臺的架構設計與升級。專注于中臺的架構設計與升級。專注
2、于平臺架構設計和中間件開發。平臺架構設計和中間件開發。目前帶領團隊應用目前帶領團隊應用LLMLLM與與RPARPA技術開發技術開發AI AI AgentAgent產品,推動大模型技術在企業級場景產品,推動大模型技術在企業級場景的實際應用。的實際應用。一、數字員工業務背景概述一、數字員工業務背景概述二、大模型:破局與升維之鑰二、大模型:破局與升維之鑰三、大模型賦能數字員工創新實踐三、大模型賦能數字員工創新實踐四、數字員工價值探索與四、數字員工價值探索與未來圖景未來圖景目錄目錄ContentContents s一、一、數字員工業務背景數字員工業務背景概述概述起源于企業數字化轉型發問起源于企業數字化
3、轉型發問 企業需要將數字技術整合到業務所有領域將數字技術整合到業務所有領域,從根本上改變為客為客戶提供價值的方式戶提供價值的方式 根據企業的數字化成熟度,不同的不同的企業在不同的階段:在線化、集成化、數字化、智能化在線化、集成化、數字化、智能化 科大訊飛作為人工智能國家隊,使命是“讓機器能聽會說,能理讓機器能聽會說,能理解會思考,用人工智能建設美好世界解會思考,用人工智能建設美好世界”如何利用好自身能力,實現公司使命,將AIAI技術深度整合到各技術深度整合到各行業業務中行業業務中,改變企業的運營模式,為客戶創造價值數字化企業與傳統企業的主要不同特征(信息來源:普華永道思略特分析)數字化企業與傳
4、統企業的主要不同特征(信息來源:普華永道思略特分析)智慧大腦?智慧大腦?AIAI加持?先從哪個階段開始做?為什么?如何做?加持?先從哪個階段開始做?為什么?如何做?數字化轉型核心思路及目標數字化轉型核心思路及目標企業數字化轉型企業數字化轉型“六化模型六化模型”(資料來源:賽迪智庫整理)(資料來源:賽迪智庫整理)DAMADAMA(數據管理協會國際標準數據管理協會國際標準)數字化轉型核心思想數字化轉型核心思想:業務與技術的雙向動力業務與技術的雙向動力 、數據數據驅動決策驅動決策、整合與協同整合與協同、流程自動化與智能化等等流程自動化與智能化等等業務與技術業務與技術“雙向奔赴雙向奔赴”,推進企業朝著
5、,推進企業朝著“六化六化”目標目標邁進邁進架構原則、愿景和需求架構原則、愿景和需求預備階段預備階段架構原則架構原則架構愿景架構愿景業務戰略業務戰略技術戰略技術戰略業務原則、目的和業務原則、目的和驅動力驅動力架構愿景架構愿景利益關系者利益關系者架構需求架構需求需求需求約束約束假設假設差距差距業務架構業務架構信息系統架構信息系統架構技術架構技術架構動機動機組織組織功能功能驅動力驅動力目標目標目的目的測度測度組織組織位置位置施動者施動者角色角色業務服務業務服務流程、事件流程、事件控制、產品控制、產品功能功能數據實體數據實體邏輯數據構件邏輯數據構件物理數據構件物理數據構件信息系統服務信息系統服務邏輯應
6、用構件邏輯應用構件物理應用構件物理應用構件數據數據應用應用平臺服務平臺服務邏輯技術構件邏輯技術構件物理技術構件物理技術構件架構實現架構實現機會及解決方案、遷移規劃機會及解決方案、遷移規劃工作包工作包架構契約架構契約實施治理實施治理標準標準指引指引規格規格TOGAFTOGAF企業架構企業架構立足于企業根本立足于企業根本 從源頭審視技術從源頭審視技術企業架構(企業架構(EAEA)諸如)諸如TOGAFTOGAF,雖然提供了全面的、可復用的企業架構框架和方法論,但依然存在不足,雖然提供了全面的、可復用的企業架構框架和方法論,但依然存在不足,如架構脫離業務需求,面對業務變化敏捷性不足如架構脫離業務需求,
7、面對業務變化敏捷性不足立足于企業根本立足于企業根本 從源頭審視技術從源頭審視技術企業業務流隨著需求的變化而更新,業務流的更新勢必導致接口的變化。定制型接口的弊端是需要相關系統的企業業務流隨著需求的變化而更新,業務流的更新勢必導致接口的變化。定制型接口的弊端是需要相關系統的原廠家修改接口代碼實現,這樣往往會導致業務的卡頓和故障率原廠家修改接口代碼實現,這樣往往會導致業務的卡頓和故障率集成接口眾多,設計與維護管理集成接口眾多,設計與維護管理工作繁重工作繁重需求出自業務,實現來自技術,存在整體性設計需求出自業務,實現來自技術,存在整體性設計問題問題從業務人員視角出發從業務人員視角出發 定義數字員工產
8、品定義數字員工產品精心服務(服務化延伸)精心服務(服務化延伸)精準供應(網絡化協同)精準供應(網絡化協同)精益生產(智能生產)精益生產(智能生產)數字化數字化轉型轉型123654研發協同(設計生產一體化)研發協同(設計生產一體化)需求鏈接(客戶協同)需求鏈接(客戶協同)精細核算(精細化管理)精細核算(精細化管理)運營分析服務開發.文檔表格會議紀要設計圖.文檔文檔信息信息郵件郵件表格表格人和系統互動人和系統互動人和人互動人和人互動信息信息數據數據表格表格文檔文檔經驗經驗邏輯邏輯邏輯邏輯模型模型系統和系統系統和系統人和信息載體人和信息載體APIAPI數據數據人人邏輯邏輯文檔文檔表格表格經驗經驗流程
9、流程產物產物活動活動以人為本,聚焦流程,梳理企業業務流程運轉中的人、文、數等要素。挖掘人際互動中的隱性知識,將流程經驗智以人為本,聚焦流程,梳理企業業務流程運轉中的人、文、數等要素。挖掘人際互動中的隱性知識,將流程經驗智慧顯性化,助力業務流程數字慧顯性化,助力業務流程數字化,激發組織效能,點燃創新活力化,激發組織效能,點燃創新活力星火數字員工星火數字員工平臺平臺網頁自動化網頁自動化桌面自動化桌面自動化操作系統操作系統AIAI能力組件能力組件人機交互人機交互鼠標鍵盤鼠標鍵盤RPARPA基礎組件基礎組件企業高質量發展,員工高效率工作企業高質量發展,員工高效率工作通用通用LLM模型模型能源、電力、醫
10、療、煙草、政務、電商零售等行業,財務、人資、供應鏈等部門流程編排流程編排流程管控流程管控流程調度流程調度流程執行流程執行通用通用OCROCR語音轉寫語音轉寫流程生成、智能錄制、批量數據抓取一鍵啟停,多種觸發方式遠程調度,API集成卓越中心,無人值守客戶端數據處理數據處理文本文本摘要摘要語音合成語音合成機器翻譯機器翻譯AIAI能力組件能力組件文檔處理文檔處理循環判斷循環判斷表格處理表格處理指令微調的指令微調的信息抽取模型信息抽取模型任務理解與結構任務理解與結構模型模型多模多模感知模型感知模型AI模型模型融合融合RPARPA、AIAI、LLMLLM等技術,打造新一代的生成式數字員工平臺?;诖竽P?/p>
11、和企業數據知識資產,支持以輕量化方式構建各類等技術,打造新一代的生成式數字員工平臺?;诖竽P秃推髽I數據知識資產,支持以輕量化方式構建各類數字員工,提高企業生產力和創新力數字員工,提高企業生產力和創新力助力企業構建數字員工助力企業構建數字員工 實現流程數字化轉型實現流程數字化轉型星火數字員工平臺概覽星火數字員工平臺概覽低代碼拖拽,實現與系統、文檔、數據等流程過程低代碼拖拽,實現與系統、文檔、數據等流程過程信息交互信息交互集成圖文識別、自然語言集成圖文識別、自然語言理解、大模型等理解、大模型等能力能力執行過程錄制,生成流程執行過程錄制,生成流程片段片段二、大模型:破局與升維二、大模型:破局與升維
12、之鑰之鑰數字員工價值被認可數字員工價值被認可 但挑戰依然存在但挑戰依然存在交付工程師交付工程師變變化化需求變化需求變化環境變化環境變化業務人員業務人員業務分析師業務分析師需求梳理需求梳理拖拽式開發拖拽式開發上線運維上線運維版本更新版本更新描述需求描述需求應用場景受限應用場景受限魯棒性較低魯棒性較低使用門檻仍然使用門檻仍然較高較高多人協作完成多人協作完成需要具備編碼思維需要具備編碼思維可維護技術要求高可維護技術要求高懂業務、懂系統懂業務、懂系統經驗要求豐富經驗要求豐富元素識別難元素識別難自動化邊界有限自動化邊界有限非結構信息處理弱非結構信息處理弱環境依賴強環境依賴強如何解決以上問題?如何解決以上
13、問題?非直接的業務思維工具上手門檻流程中潛在的編碼思維需要人介入的圖文校驗依靠專家經驗非結構數據處理業務知識傳遞環境變動環境變動大模型技術火爆大模型技術火爆 為問題帶來希望為問題帶來希望Scaling LawsScaling Laws:模型能力隨參數規模指數級增長(:模型能力隨參數規模指數級增長(規模效應)規模效應)Next Token PredictionNext Token Prediction:增強上下文:增強上下文感知,為開發能夠全面理解和交互的感知,為開發能夠全面理解和交互的AGIAGI提供了重要的技術和理論基礎提供了重要的技術和理論基礎 隨著Loss的下降,一些下游任務的性能可能會
14、出現突變,出現涌現現象涌現現象,即模型智慧涌現智慧涌現,這種現象無法通過尺度定律進行準確預測。這項經驗,刷新了人們對模型涌現能力的認知。Scaling Laws 量化了模型性能模型性能與訓練數據規模訓練數據規模、模型架構模型架構等設計要素之間的關系,為模型開發、資源分配和選擇合適的訓練數據提供了寶貴的指導。Loss Loss隨著模型大小、數據集大小和用于訓練的計算量的增隨著模型大小、數據集大小和用于訓練的計算量的增加而平穩下降加而平穩下降模型規模擴展的模型規模擴展的選項選項 OpenAI 研究員 Jack Rae 在斯坦福研討會上通過其演講“Compression for AGI”強調大語言模
15、型的本質,其實是一個性能強大的數據無損壓縮器,大語言模型的本質,其實是一個性能強大的數據無損壓縮器,LLM LLM=Compression=Compression 壓縮理論壓縮理論從數學上證明了大語言模型的目的,并不是嘗試不是嘗試“擬合擬合”訓練集訓練集,而是無損地找到訓練集所代表的本質規律無損地找到訓練集所代表的本質規律(概率分布概率分布),從而可以生成出哪怕在訓練集之外的內容。NNCP v2:Lossless Data Compression withNNCP v2:Lossless Data Compression withTransformerTransformer Fabrice B
16、ellard Feb 6,2021 Fabrice Bellard Feb 6,2021Understanding the Next Word PredictionUnderstanding the Next Word Prediction周邊延展思考:語言符號信息學周邊延展思考:語言符號信息學Prediction and Entropy of Printed EnglishPrediction and Entropy of Printed EnglishBy C.E.SHANNONBy C.E.SHANNON 1950 1950語言符號信息學:語言符號信息學:結合了語言學、信息理論、計算機科
17、學等多個學科的理論和方法,以探索語言作為信息傳遞系統的功能和效率結合了語言學、信息理論、計算機科學等多個學科的理論和方法,以探索語言作為信息傳遞系統的功能和效率 如何將語言的抽象概念轉換為可以由計算機系統處理的符號,以及如何從這些符號中恢復原始的語言信息如何將語言的抽象概念轉換為可以由計算機系統處理的符號,以及如何從這些符號中恢復原始的語言信息 使用信息論的概念,如熵(使用信息論的概念,如熵(entropyentropy)和互信息()和互信息(mutual informationmutual information),來量化語言單位中攜帶的信息量),來量化語言單位中攜帶的信息量 香農在香農在1
18、9481948年定義了信息熵概念,并于年定義了信息熵概念,并于19501950年通過預測實驗研究英語的熵和冗余度,利用語言統計知識,為信年通過預測實驗研究英語的熵和冗余度,利用語言統計知識,為信息度量和傳輸提供理論支持。息度量和傳輸提供理論支持。信息論創始人,克勞德艾爾伍德香農(Claude Elwood Shannon,1916年4月30日2001年2月26日)信息熵:H(X)=-p(x)*log2(p(x),其中 p(x)是事件 x 發生的概率。A Symbolic Analysis Of Relay And Switching CircuitsA Symbolic Analysis Of
19、 Relay And Switching CircuitsBy C.E.By C.E.SHANNONSHANNON 1936 1936周邊延展思考:知識表征與心智意識周邊延展思考:知識表征與心智意識知識表征:知識表征:知識表征是智能體用于代理或替代世界事物的方式,允許通過符號操作而非實際行動來進行思考。知識表征是智能體用于代理或替代世界事物的方式,允許通過符號操作而非實際行動來進行思考。它包括一套本體論承諾,定義智能體如何用術語思考世界。它包括一套本體論承諾,定義智能體如何用術語思考世界。知識表征形成了關于智能推理的理論,包括推理的基本看法、允許的推理集和推薦的推理集。知識表征形成了關于智能推
20、理的理論,包括推理的基本看法、允許的推理集和推薦的推理集。語言乃是世界的一個語言乃是世界的一個“圖像圖像”,語言表征是對世界的一種,語言表征是對世界的一種“代理代理”它也是人類用以思考世界的表達式中它也是人類用以思考世界的表達式中介。介。從認知心理學、腦科學、哲學等角度,再看“語言”、“知識”、“心智”、“意識”:維特根斯坦在邏輯哲學論中提出,語言是世界的語言是世界的“圖像圖像”(語言圖像論)(語言圖像論),是實在的一個模型,這與知識表征中的代理概念相呼應。認知心理學將知識知識視為心智中儲存的信息心智中儲存的信息,這些信息指導我們的行為和決策指導我們的行為和決策。腦科學研究如何通過神經網絡存儲
21、和檢索信息,揭示了記憶形成和知識構建的生物學基礎記憶形成和知識構建的生物學基礎。心智是指個體的思維、感知、記憶和決策能力的總和個體的思維、感知、記憶和決策能力的總和。認知心理學通過研究這些過程來理解心智的工作機制。腦科學探索心智活動的生物基礎,研究大腦如何處理和響應外部信息。哲學則考慮心智的本質和存在方式,探討心智與身體的關系以及心智如何影響我們對世界的認識。在認知心理學中,意識通常被視為個體對自己思想、感受、環境和存在的主觀感知和自我意識。腦科學試圖解釋意識如何在大腦中產生,研究涉及識別與意識活動相關聯的特定腦區和神經網絡。以上觀點共同構成了對語言、知識、心智和意識的多維視角,揭示了它們在人
22、類認知和社會互動中的復雜作用和基本角色。以上觀點共同構成了對語言、知識、心智和意識的多維視角,揭示了它們在人類認知和社會互動中的復雜作用和基本角色。周邊延展思考:周邊延展思考:貝葉斯理論與貝葉斯理論與認知心理學認知心理學貝葉斯理論與認知心理學:貝葉斯理論與認知心理學:認知心理學研究人類的感知、記憶、思考和語言等認知過程。它是認知心理學研究人類的感知、記憶、思考和語言等認知過程。它是通過使用心理測量、行為觀察和通過使用心理測量、行為觀察和神經成像等方法來分析認知活動。關注如何從感官輸入到信息處理再到行為輸出的整個過程。神經成像等方法來分析認知活動。關注如何從感官輸入到信息處理再到行為輸出的整個過
23、程。人類認識研究自然、開展社會實踐,包括現在的人工智能都遵循著,做出假設、收集數據、判斷決人類認識研究自然、開展社會實踐,包括現在的人工智能都遵循著,做出假設、收集數據、判斷決策、觀察結果、修正假設的周而復始的類似過程。策、觀察結果、修正假設的周而復始的類似過程。貝葉斯理論通過先驗概率和似然性來解釋人類如何基于經驗進行感知和推理。貝葉斯理論通過先驗概率和似然性來解釋人類如何基于經驗進行感知和推理。它描述了人們如何利它描述了人們如何利用先驗知識和觀察到的證據來形成對世界的認知和判斷。用先驗知識和觀察到的證據來形成對世界的認知和判斷。后驗概率:新的認知后驗概率:新的認知posteriorposte
24、rior似然函數似然函數likelihoodlikelihood先驗概率:舊的認知先驗概率:舊的認知priorprior大模型技術創新,升維數字員工核心能力大模型技術創新,升維數字員工核心能力1.1.柏拉圖表征假說:語言作為思想與世界的橋梁柏拉圖表征假說:語言作為思想與世界的橋梁 大模型學習的高維語義空間,與柏拉圖所說的理式世界高度類似 大模型將詞語映射到豐富的語義表征,實現了語言符號到真實世界的關聯 數字員工借助大模型構建的語義表征,獲得了深度語言理解與認知推理能力,可以更好地理解用戶需求,提供智能服務2.2.多模態統一建模:打破數字員工感官藩籬多模態統一建模:打破數字員工感官藩籬 傳統數字
25、員工難以處理非結構化數據如圖像、語音等,導致感知能力受限 大模型支持文本、圖像、語音等多模態數據的統一建模 跨模態對比學習等技術,實現不同模態信息的融合與映射 多模態大模型賦予數字員工更全面的感知能力,拓展其應用邊界,實現更自然的人機交互大模型技術創新,升維數字員工核心能力大模型技術創新,升維數字員工核心能力3.3.知識增強學習知識增強學習:為數字員工注入專家級認知為數字員工注入專家級認知 傳統數字員工難以有效利用領域知識,面對復雜專業問題時常常束手無策 大模型在海量文本數據上預訓練,習得了廣泛的世界知識 將大模型與行業知識庫、知識圖譜相融合,可以為數字員工裝載行業專家知識 知識增強的數字員工
26、能夠開展專業領域的分析、推理與決策,提供更加精準、智能的服務4.4.持續學習持續學習:讓數字員工像人一樣不斷進化讓數字員工像人一樣不斷進化 傳統數字員工難以適應數據分布變化,面對新場景、新任務時需要重新訓練 大模型具備持續學習能力,可以在部署后持續吸收新數據,優化和擴充自身能力 持續學習范式下,數字員工可以不斷積累經驗,日漸精進,適應環境變化 元學習、少樣本學習等新范式,進一步提升了數字員工持續學習、快速適應的能力,使之更加智能化、人性化三、大模型賦能數字員工創新三、大模型賦能數字員工創新實踐實踐大模型賦能大模型賦能 促進數字員工躍遷促進數字員工躍遷隱性知識,可以轉化為顯性知識傳統的信息化系統
27、,以NUI交互新形態出現從擁有know-what到擁有know-how進階擴充人類現有的邊界知識(生物、醫藥、科學.)傳統的局部自動化,終將會端到端自動化人機共存的新倫理將大模型深度融入現有產品,對現有架構重新設計將大模型深度融入現有產品,對現有架構重新設計大模型賦予數字員工智能大腦大模型賦予數字員工智能大腦語義理解語義理解對話管理對話管理數據分析能力數據分析能力代碼生成能力代碼生成能力文本生成能力文本生成能力任務型技能類理解任務型技能類理解閑聊類理解閑聊類理解知識問答類理解知識問答類理解范圍外的泛化理解與遷移能力范圍外的泛化理解與遷移能力上下文理解上下文理解對話生成對話生成思維鏈跟蹤思維鏈跟
28、蹤記憶管理記憶管理數據處理數據處理數據理解數據理解代碼理解代碼理解代碼自動編寫代碼自動編寫自然語言生成自然語言生成個性化文本生成個性化文本生成文本修訂文本修訂對話策略對話策略數據可視化數據可視化系統環境感知系統環境感知實時環境感知實時環境感知動態決策動態決策自我適應自我適應思維鏈與記憶存儲思維鏈與記憶存儲從實際業務使用角度出發從實際業務使用角度出發 開始構思核心功能開始構思核心功能業務員描述需求業務員描述需求 業務流業務流自動生成自動生成 業務流程自動生成業務流程自動生成功能清單自動生成功能清單自動生成RPARPA腳本自動生成腳本自動生成參數自動填充參數自動填充核心能力提煉流程助手智能數據問答
29、功能智能數據問答功能 對話式獲取分析對話式獲取分析結果結果輸入query大模型-解析query大模型-生成分析結果RPA-圖表結果展示借鑒借鑒AI Agents AI Agents 打造全新一代數字員工打造全新一代數字員工UFO(UI-Focused Agent)是一個以ui為中心的雙代理框架,通過在單個或跨多個應用程序中無縫導航和操作來滿足Windows操作系統上的用戶請求。微軟微軟UFOUFO:專為:專為 Windows Windows 定制定制瀏覽器截圖用戶指令歷史動作網頁源碼“actionaction”:”clickclick“,“refref”:”6 6”WebGUM同時觀察網頁截圖
30、和HTML頁面,并輸出網頁漫游動作,如點擊和輸入。通過在大量演示數據上聯合微調語言模型和視覺Transformer,實現了WebGUM的訓練。谷歌谷歌WebGUMWebGUM:基于多模態的瀏覽器:基于多模態的瀏覽器AgentAgent具有200多個日常工具,同時支持自定義python代碼生成,并可供拓展插件智能體;港大團隊港大團隊OpenAgentsOpenAgents:可擴展:可擴展AgentAgent平臺平臺對業內大模型能力進行充分驗證對業內大模型能力進行充分驗證業內大模型能力場景驗證測試結果業內大模型能力場景驗證測試結果模型能力評測結果表模型能力評測結果表結論:結論:通用場景代價較較大,
31、短期不可達,特定場景微調后可達通用場景代價較較大,短期不可達,特定場景微調后可達SOTASOTA星火數字員工平臺新一代架構星火數字員工平臺新一代架構AgentAgent大腦大腦流程模板流程模板行行業垂類領域客戶定制業垂類領域客戶定制企查查商戶狀態信息查企查查商戶狀態信息查詢詢機器人機器人京東購物機器人京東購物機器人語音識別引擎語音識別引擎ASRASR語音合成引擎語音合成引擎TTSTTSIVRIVRFreeswitchFreeswitch小紅小紅書書輿情分析機器人輿情分析機器人訂單訂單狀態跟蹤機器人狀態跟蹤機器人基礎插件庫地圖地圖天氣天氣基線基線RPARPA構建構建客戶案例累積客戶案例累積基礎插
32、件商城基礎插件商城編排層執行層星火大模型用戶金融同業盯金融同業盯市市機器人機器人銀行銀行業業務曬務曬單單機器人機器人音樂音樂計算機計算機新聞新聞導航導航抖抖音輿情分析音輿情分析機器人機器人京東購物機器人京東購物機器人某銀行稅務查某銀行稅務查詢機器人詢機器人異常系統報警機器人異常系統報警機器人病人隨訪信息整理病人隨訪信息整理機器人機器人亞馬亞馬遜商品比價遜商品比價抖音數據監測抖音數據監測公司財報分析公司財報分析天氣分析天氣分析星火數字員工平臺星火數字員工平臺控制臺控制臺第三方搭建控制臺第三方搭建控制臺用用戶戶/專專業人員搭業人員搭建建流程邏輯流程邏輯-畫畫布配置布配置PDFPDF摘要總結摘要總結
33、領域領域的知識庫的知識庫后臺知識庫后臺知識庫釘釘釘產品說明書釘產品說明書百度百科數據庫百度百科數據庫亞馬遜亞馬遜操作手冊操作手冊某銀行客戶案例演示:某銀行客戶案例演示:企查查征信查詢企查查征信查詢核心思路:核心思路:低維的操作、邏輯判斷等聚合成低維的操作、邏輯判斷等聚合成RPARPA機器人或流程片機器人或流程片段,抽象成高維可調用的能力或應用,更利于收斂段,抽象成高維可調用的能力或應用,更利于收斂 大模型負責對業務需求、數據內容進行理解、分析,大模型負責對業務需求、數據內容進行理解、分析,輸出智能化的處理邏輯,驅動機器人去執行輸出智能化的處理邏輯,驅動機器人去執行 常規部分由常規部分由AI A
34、gentAI Agent自動執行,關鍵決策節點或信息自動執行,關鍵決策節點或信息由人類介入,提供判斷和把控,實現人機協同由人類介入,提供判斷和把控,實現人機協同數字員工數字員工技術助力技術助力會議全流程數智化升級會議全流程數智化升級會前會前會中會中會后會后星火大模型和會議場景深度結合,涌現新思路、新方案,賦能會議會前、會中、會后全流程,助力會議數智化升級,同時星火大模型和會議場景深度結合,涌現新思路、新方案,賦能會議會前、會中、會后全流程,助力會議數智化升級,同時通過統計和分析會議數據,輔助領導層管理決策通過統計和分析會議數據,輔助領導層管理決策。本地會議本地會議+遠程會議遠程會議+智慧會議室
35、智慧會議室 提取要點,全局提取要點,全局getget記錄內容記錄內容提取會議記錄關鍵詞、全文摘要、章節重點、發言人內容總結。一鍵紀要和待辦生成一鍵紀要和待辦生成通過大模型生成技術,一鍵生成會議紀要和會議待辦。智能轉寫智能轉寫/翻譯翻譯會議語音智能轉換為文字,方便參會人員查看和編輯;多語言翻譯,進行涉外交流;智能日程管理智能日程管理全局管理用戶日程,重點事件不遺忘,重要會議不沖突。智能通知提醒智能通知提醒多類型通知方式自定義通知策略 智能預約智能預約智能檢測參會人會議沖突情況。依據會議類型和習慣推薦會議室。智能統計分析智能統計分析對會議內容和參會人的數據進行分析,分析和評估會議效果。智能輔助會議
36、記錄編輯智能輔助會議記錄編輯對會議記錄進行結構、邏輯、語言等方面進行調整和優化。會議協作會議協作賦能會中應用,提升會中協作效率;賦能數字員工躍遷賦能數字員工躍遷 我們正在進行我們正在進行隱性知識,可以轉化為顯性知識傳統的信息化系統,以NUI交互新形態出現從擁有know-what到擁有know-how進階擴充人類現有的邊界知識(生物、醫藥、科學.)傳統的局部自動化,終將會端到端自動化人機共存的新倫理將大模型深度融入現有產品,對現有架構重新設計,我們在將大模型深度融入現有產品,對現有架構重新設計,我們在路上路上四、四、數字員工價值探索與未來圖景數字員工價值探索與未來圖景以流程規劃中心為內核以流程規
37、劃中心為內核 激活數字員工基因激活數字員工基因 4321流程知識激活流程知識激活業務流程進化業務流程進化企業運營充滿活力企業運營充滿活力流程基因升級流程基因升級通過知識庫管理、人才管理與個知識庫管理、人才管理與個性化管理法性化管理法等方式激活企業已有的知識資源規劃器調度企業運營流程,人機協同,重新定義業務流程運行,重新定義業務流程運行,帶來顛覆性提效帶來顛覆性提效利用大模型記憶、歸納、學習能大模型記憶、歸納、學習能力力,持續挖掘、優化現有流程基因,讓企業充滿活力企業充滿活力企業基因迭代更新、持續挖掘,流程運轉智能、高效提升,員工及部員工及部門價值躍遷,組織運營充滿活力門價值躍遷,組織運營充滿活
38、力構建企業可持續進化的企業大腦構建企業可持續進化的企業大腦企業大腦企業大腦(構建企業級專家經驗/知識系統)企業數據資產企業數據資產(充分利用企業現有數據資產)生產數據經營數據客戶數據數字員工數字員工(聰明大腦(聰明大腦+敏捷雙手,敏捷雙手,打造企業各崗位的數字化助手)打造企業各崗位的數字化助手)企業辦公場景企業辦公場景(降本、增效、提質)降本、增效、提質)MaaS平臺Agent平臺知識工匠平臺文本生成語言理解知識問答邏輯推理數學能力代碼能力多模態能力高質量發展外事外事后勤后勤會議會議寫作寫作PPTPPT制作制作文檔問答文檔問答數字數字員工形象持續員工形象持續豐富豐富AIAI智能互動問答智能互動
39、問答“面對面”實時智能交互提供場景智能回答支持自定義問答知識庫形態豐富多樣形態豐富多樣同時具備2D/3D形象支持換膚和換裝支持融合人臉支持半身、全身、站姿、坐姿個性化形象(打造城市名片)個性化形象(打造城市名片)年齡、性別、穿著裝扮支持多種情緒極具新鮮感與獨特性表情生動自然表情生動自然A.I.自動預測情感面部表情自然生動支持自定義動作、標準動作庫個性化聲音(打造城市名片)個性化聲音(打造城市名片)可復刻真人聲音提供百種不同類型音庫資源MOS分達到4.5多種語言表達多種語言表達支持中、英、日、韓、泰、越等17國語言支持藏語、維語、彝語3種民族語言支持廣東話、四川話、山東話等11種方言多種情緒多種
40、服裝站姿坐姿多語種多分頻專屬聲音形象服飾形象背景多軌混編橫屏豎屏結合虛擬人技術,讓數字員工有更具象化的載體結合虛擬人技術,讓數字員工有更具象化的載體形象形象AIAI人格人格賦予數字員工以賦予數字員工以“靈魂靈魂”決策組件決策組件情感組件情感組件記憶組件記憶組件通過模擬海馬體海馬體等腦功能機制,賦予AI代理諸如短期記短期記憶、長期記憶、遺忘和條件憶、長期記憶、遺忘和條件反射等能力反射等能力通過模擬杏仁核杏仁核與額葉額葉機制,賦予AI代理性格、情性格、情緒、情感、語氣和語調等特緒、情感、語氣和語調等特征征通過大模型算法迭代算法迭代與推推理理,賦予AI代理任務處理、任務處理、決策、判斷和響應能力決策
41、、判斷和響應能力通過模擬人類大腦功能大腦功能與大型語言模型相結合,虛擬數字人被賦予了類似于人類的人格反應,包括:長期穩定的記憶力、長期穩定的記憶力、多樣化的個性、豐富的情感多樣化的個性、豐富的情感和擬真的語氣擬真的語氣最后:有機械者必有機事,有機事者必有哲心最后:有機械者必有機事,有機事者必有哲心!心智、語言和機器徐英瑾超能查派電影機器不再像過去一樣是冰冷的器具數字員工不僅可以完成需求,還能理解人類情感需求莊子天地篇:有機械者必有機事,有機事者必有機心數字員工與人類攜手,共同推動著社會的進步。這何嘗不是一種數字員工與人類攜手,共同推動著社會的進步。這何嘗不是一種 天人合一天人合一 的現代詮釋呢的現代詮釋呢?擁抱變革,為數字員工創新鋪路擁抱變革,為數字員工創新鋪路 Embrace change and pave the way for innovation for digital employees.Embrace change and pave the way for innovation for digital employees.THANKSTHANKS