AR 眼鏡剛問“對(duì)面是什么樓”,后端的 MLLM-SC 框架就在 10 ms 內(nèi)畫出一張“語(yǔ)義注意力熱圖”:建筑輪廓被標(biāo)成深紅,優(yōu)先級(jí)調(diào)到最高,其他背景一律降碼率。高維多模態(tài)數(shù)據(jù)不再“平均用力”,任務(wù)相關(guān)的像素、語(yǔ)音、坐標(biāo)被語(yǔ)義引擎拎出來走“快車道”,無關(guān)內(nèi)容自動(dòng)降檔,6G 空口瞬間多出 30 % 可用帶寬。
這套“設(shè)備—邊緣”協(xié)同系統(tǒng)把多模態(tài)大模型塞進(jìn)邊緣服務(wù)器,當(dāng)用戶輸入圖像+語(yǔ)音+任務(wù)請(qǐng)求時(shí),提示工程+上下文學(xué)習(xí)先拆意圖,再驅(qū)動(dòng)雙路徑語(yǔ)義編碼器——重要特征走高質(zhì)量路徑,次要信息進(jìn)低分辨率通道;即便信道突然掉檔,關(guān)鍵區(qū)域依舊 1080 P 保真。接收端用 VAE 做粗重建、條件擴(kuò)散模型做精修,還能按終端算力動(dòng)態(tài)切換“高清重建”或“AI 補(bǔ)幀”模式,弱網(wǎng)環(huán)境也能實(shí)時(shí)合成高質(zhì)量全息畫面。
實(shí)驗(yàn)室實(shí)測(cè)里,AR 導(dǎo)航、沉浸式會(huì)議、車聯(lián)網(wǎng)三維地圖同時(shí)跑在 500 MHz 毫米波小區(qū):采用 MLLM-SC 后,平均端到端時(shí)延從 28 ms 降到 18 ms,塊錯(cuò)誤率下降 42 %。團(tuán)隊(duì)下一步把強(qiáng)化學(xué)習(xí)塞進(jìn)語(yǔ)義決策,讓多智能體在協(xié)同駕駛、城市級(jí)元宇宙等場(chǎng)景中“邊通信邊策略優(yōu)化”,目標(biāo)是把 6G 的“體驗(yàn)密度”再提升一個(gè)量級(jí)。


產(chǎn)品與服務(wù)
聯(lián)系站長(zhǎng)
關(guān)于我們