《騰訊音樂娛樂集團:2023音質AIGC的應用與實踐報告(24頁).pdf》由會員分享,可在線閱讀,更多相關《騰訊音樂娛樂集團:2023音質AIGC的應用與實踐報告(24頁).pdf(24頁珍藏版)》請在三個皮匠報告上搜索。
1、音質AIGC的應用與實踐分享人:何禮部門:騰訊音樂天琴實驗室時間:2023年11月DataFun.騰訊音樂娛樂集團Z卡#page#01.音樂分離BSRNN基本原理音樂分離技術體系音樂分離業務應用02.音樂超分03.臻品母帶什么是母帶母帶模型母帶應用DataFun.7熟訊意質熱壓熱團#page#對標國際、引領國內的QQ音樂音質音質音效全面介紹QQ音樂Apple Music192kHz/24bit192kHz/24bitMaster采樣率/位深通道數臻品母帶2.0高解析度無損臻品母帶2.02192kHz/24bit最高最高2音質Hi-Res無損品質最高192kHz/24bitSQ48kHz/24b
2、it48kHz/24bit2SQ無損音質音質最高48kHz/24bitHQ高音質44.1kHz/16bitHQ320kbps ogg256kbpsaac標準音質44.1kHz/16bit杜比全景聲最高7.1.448KHz/24bit立體聲立體聲音效臻品音質2.0空間音頻臻品全景聲最高5.144.1kHz/16bit音效2臻品音質2.096kHz/24bit臻品全景聲&全景聲杜比全景聲社比全景聲ui.T*在不壓縮的情況下,碼率=采樣率*位深*通道數,碼率越高音質越好QQ音樂vsApple MusicQQ音樂音質音效體系#page#音質AIGC音樂流媒體平臺的3個核心問題音質AIGCQQ音樂這些年
3、的音質優化之路格式音樂分離品鑒檢測有歌聽。(版權、曲庫)1.音樂超分能找到歌。(搜索、推薦)2.3.聽得舒心。(音質)標準算法臻品母帶播放DataFun.7#page#01音樂分離atdrun7電機育樂熱樂集團#page#近年音樂分離發展歷史BSRNNHybrid Demucs頻域ResUNetDecouple+時域+頻域頻域Spleeter頻域Conv-TasNet時域20202018202120232022xotaFin7#page#BSRNN基本原理核心思想對頻域切分不同子帶時域幀間序列建模頻域子帶間序列建模DataFun.7#page#音樂分離技術體系音樂聲伴分離人聲伴奏樂器分離鋼琴鼓
4、貝斯其他無混響無和聲人聲吉他DataFun.7F#page#音樂分離業務應用1臻品全景聲基于音樂6軌分離制作全景聲SVIP核心權益臻品全景聲那個你裝立體聲制作全景聲流程DataFun7#page#音樂分離業務應用2-4TME聚星&TMEStudio&啟明星面向用戶提供音樂分離服務,包含聲伴分離、6軌分離TME聚量尋找你的專屬好聲音音樂定制、詞曲交易、商演代膏我是客戶我是音樂人83騰訊音樂啟明星0用戶指歌曲商城AIGC音樂創作歌曲宣推活動中心個人中心張TME Studio騰訊音樂螺各出00:00:00/00:02:51C十導入音樂啟明星人聲和伴奏estl.wav全部音軌為音樂創造者音樂從業者提供
5、一站式音樂制作意傳服務#page#音樂分離業務應用5-716:2616:26全民K歌臨境音效音軌調節樂器5軌分離,diy音效VIP核心權益門微S33881全民K歌五維打分5千聲分離,打分模板制作9887.80全民K歌伴奏庫34我知道了伴奏分離,補充K歌伴奏庫確定使用發布時不讓別人看到我的評DataFun.臨境音效萬維形#page#音樂分離業務應用8-1014:17懶人聽書長音頻消伴千聲分離,消除長音頻背景噪聲、音樂AIGC-X千聲分離,判斷歌曲人聲是否AI生成40.1熱血爽文一極速聽修羅武神含歌聲的音樂音頻人聲分寓服務僅含歌聲的音頻賣唱率值道修羅武神+衣照)啟明星音色試唱個聲伴分離,干聲SVC
6、,MIX生成demoG專理號武神重歸懶人聽書長商城學件#page#音樂分離業務應用11-12原始歌曲低頻公益歌聲多軌配器音樂分離歌聲基頻分布分析配器執分析6軌分離,針對聽損人士的歌曲增強與補償降調熱音音調過高降頻ToB一光子工作室remix,干聲分離,商務合作聽損程度WDRC高頻聽損歌曲低頻公益系統方案光子工作室群ZDataFun.#page#音樂分離業務應用13行業首創歌聲合成無混響無和聲干聲分離,用于歌聲合成原曲保留混響和聲干聲分離保留混響和聲聽感好無混響無和聲干聲分離無混響和聲,聽感好競品(UVR5)福保留混響去除和聲香音嚴重,聽感差DataFun.Z#page#總結BSRNN基本原理頻
7、域切分子帶,時域、頻域序列建模音樂分離技術體系聲伴分離、6軌分離、無混響和聲干聲分離音樂分離業務應用子模塊:臻品全景聲、全民K歌臨境音效、全民K歌五維打分、AIGC-X、啟明星音色試唱、低頻公益、歌聲合成ToC:TME聚星、TMEStudio、啟明星、懶人聽書長音頻消伴、全民K歌伴奏庫ToB:光子工作室xDataFun.7F#page#02音樂超分7電迅意樂熱壓集團DataFun.#page#20:04進心原理&應用家基本原理業務應用升級到96kHz/24bitHi-Res音質臻品音質2.0STFTLFC實時處理bCm8ior臻品音質2.0anglepuon1FU如愿LFCphase臻品高質2
8、.0PhasHFCphaseEsimndISTFTDataFun.Figurel:Schematicoverview ofihe proposedsystemZF#page#03臻品母帶DaiFun7電國意樂熱壓集知#page#什么是母帶?行業首創臻品母帶了歌曲制作流程作曲編曲錄制混音母帶歌曲不同品質Master:192kHz/24bitSQ:最高48kHz/24bit,與母帶差異在于高頻有損編碼:320kmp3等,與母帶差異在于高低頻不同品質頻響要線taFun7#page#母帶模型臻品母帶1.0從O到1192kHz低頻模型上采樣高頻模型臻品母帶1.0SQ/MP3-分別進行低頻修復&高頻還原低
9、頻修復高頻還原臻品母帶1.0生成流程臻品母帶2.0192kHzSQ/MP344.1kHz上采樣母帶模型臻品母帶2.0統一優化目標:同時進行低頻修復&高頻低頻修復&高頻還原還原臻品母帶2.0生成流程減小推理耗時3DatoFun7#page#性能對比頻譜分析SQ(上采樣高頻更加飽滿自然頻譜對比頻響分析頻響曲線更加平滑sDataFun.2頻響對比#page#10:1610:160業務應用G酷光火廠酷光廠上線效果如爆,相比1.0,2.0上線后,PV、UV、人均時長均顯著增長艾服用臻品母帶2.0超級會員獨家尊享讓產合還原更加極致如愿超會驅動、提升口碑SQ無損品質(48.3M)HQ高品質(8.2M)標準品質(2.8M)sDataFun7#page#總結什么是母帶?歌曲制作完后的最初版本,192kHz/24bit母帶模型,相比1.0,2.0采用統一模型進行低頻修復&高頻還原2.0主客觀指標、推理耗時優于1.0業務應用相比1.0,2.0上線后PV、UV、人均時長顯著增長超會驅動、提升口碑sDataFun7#page#創造音樂無限可能CREATING ENDLESSOPPORTUNIT IES WITH MUSIC騰訊音樂娛樂集團DataFun.ZFTENCENT MUSIC ENTERTANMEN#page#