当AR眼镜刚问出“对面是什么楼”时,后端的MLLM-SC框架便在10毫秒内生成了一张“语义注意力热图”:建筑轮廓被标记为深红,优先级调至最高,其他背景信息则一律降码处理。高维多模态数据不再是“均匀用力”——与任务相关的像素、语音、坐标等关键信息,通过语义引擎筛选后进入“快车道”,无关内容则自动降档,最终在6G空口中瞬间释放出额外30%的可用带宽。
这套“设备-边缘”协同系统将多模态大模型嵌入边缘服务器。当用户同时输入图像、语音和任务请求时,提示工程与上下文学习模块会先解析意图,再驱动双路径语义编码器:重要特征走高质量路径,次要信息则进入低分辨率通道。即使信道突然中断,关键区域依然能保持1080P的保真度。接收端借助VAE进行粗重建,再通过条件扩散模型精细修复,还能根据终端算力动态切换“高清重建”或“AI补帧”模式,确保弱网环境下依然能实时合成高质量的全息画面。
在实验室实测中,AR导航、沉浸式会议、车联网三维地图三项服务同时运行于500MHz毫米波小区:采用MLLM-SC框架后,端到端平均时延从28毫秒降至18毫秒,块错误率下降42%。团队下一步计划将强化学习机制融入语义决策层,让多智能体在协同驾驶、城市级元宇宙等复杂场景中实现“边通信边策略优化”,目标是把6G的“体验密度”再提升一个量级。
