端側處理+云端調用,技術端可支撐通用 IoT/邊緣 AI/云端 AI 功能。本次與字節的合作中,樂鑫可以通過 Wi-Fi 調用云端提供的智能體服務。方案可以理解為:“一站式硬件”(已有豐富解決方案的端側音視頻處理)+“端到端大模型”(通過低延遲抗干擾的 RTC 技術,設備端到云端的大模型應用可實現真人感的實時通話)。其中,通用 IoT 功能主要包括連接、控制、屏顯、攝像頭等;邊緣 AI 功能主要包括支持語音喚醒、語音控制、人臉和物體識別等;云端 AI 功能主要為依托于豆包等大模型實現生成式內容輸出,不論輸出形式是語音或是屏幕顯示。
端側處理+云端調用,技術端可支撐通用 IoT/邊緣 AI/云端 AI 功能。本次與字節的合作中,樂鑫可以通過 Wi-Fi 調用云端提供的智能體服務。方案可以理解為:“一站式硬件”(已有豐富解決方案的端側音視頻處理)+“端到端大模型”(通過低延遲抗干擾的 RTC 技術,設備端到云端的大模型應用可實現真人感的實時通話)。其中,通用 IoT 功能主要包括連接、控制、屏顯、攝像頭等;邊緣 AI 功能主要包括支持語音喚醒、語音控制、人臉和物體識別等;云端 AI 功能主要為依托于豆包等大模型實現生成式內容輸出,不論輸出形式是語音或是屏幕顯示。