沉浸式通信是IMT-2030(6G)列出的6G重要应用场景之一,已成为科技和产业革命国际争夺的制高点。沉浸式应用包含以数字孪生工厂、虚实融合生活、多模态大模型等为代表的新兴媒体服务,具有强交互、沉浸式、智能化的特点,这些特点要求了网络及媒体服务需要提供超高通信能力、超强算力、智能算法处理能力。经典的网媒分离范式下,通信、计算、算法三大能力存在瓶颈,难以支撑沉浸式通信发展。因此,移动网络和移动多媒体技术国家重点实验室提出网媒融合这一沉浸式通信下的变革性技术,旨在突破“管道化”传统思维,集成“通感智算存”统一调度能力,研究网络传输与媒体产生、呈现的融合,实现全局动态最优,最终跨越三大性能瓶颈。网媒融合体系架构具有三方面特点,一是网媒底层能力的融合,即网媒通信、感知、智能、计算、存储能力统一度量与调度;二是网媒上层架构的融合,即新兴媒体服务和网络资源实时双向感知与匹配,AI赋能网媒间内容的生成、传输与呈现;三是网媒间贯穿信息服务全生命周期的一体化优化设计,实现全局动态最优。
网媒融合研究当前面临诸多挑战。网媒融合基础理论如何突破?网媒融合一体化架构如何设计?网媒融合的新兴媒体内容生产,以及网络感知、编码、计算、传输的关键技术如何突破?网媒融合的示范应用如何落地?为此,本期以网媒融合为主题,共收录了11篇文章,针对网媒融合中的关键技术开展讨论。
本期开篇是丁文华院士团队撰写的《元宇宙初探:概念内涵、技术体系及发展建议》,文章从元宇宙的必备要素、技术支撑、应用场景这3个方面进行深入阐述分析,并从技术突破、规则制定、产业布局、人才培养等方面对元宇宙的未来发展提出相关建议。《面向边缘智能的通信计算一体化研究》围绕通信网与算力网“网媒融合”下,信道衰落和噪声可能会带来的聚合失真等问题开展研究。《语义编码与经典信道编码融合研究》对基于联合信源信道编码的语义通信系统进行了理论分析,研究了后续将语义通信应用于经典通信框架的基础方法。《人工智能驱动的跨模态语义通信系统》提出了基于人工智能的跨模态语义通信系统架构、核心思想,关键技术、实践应用、以及存在的挑战。《具身智能机器人技术》提出了一种智能制造中的具身智能机器人技术,介绍了网媒融合下的一种应用场景。《用于混合现实的三维场景生成技术》介绍了近年来三维场景生成的各项技术方法,以及混合现实场景下三维场景生成的现状,并对其发展趋势进行了分析与展望。《基于流式路径追踪的实时真实感渲染技术》从GPU的线程调度和内存访问两个角度出发,提出了一种基于流式路径追踪的实时真实感渲染方案。《新一代智能编码关键技术——生成式编码》介绍了概念图像编码、概念视频编码、跨模态语义编码等生成式编码方法,总结了各智能视频编码技术的发展趋势与挑战。《从2B到4B——电信行业与垂直行业的供需协同倍增发展》从无线专网、5G 2B的发展趋势与挑战出发,提出向4B(For Business)转变来重塑垂直行业5G发展体系。《3D IC系统架构概览》介绍了网媒融合芯片设计中,芯片3D架构在性能、功耗等方面的优势,也分析了3D架构在物理实现、封装测试、工艺能力等方面的挑战。《XR网业协同技术》提出了网媒融合下面向XR业务的网业协同技术,构建基于XR业务的低时延、大带宽和高可靠的广义确定性网络。
本期作者主要来自对网媒融合领域有深入研究的知名高校、企业,从关键理论、技术挑战等方面介绍了网媒融合最新研究成果。希望本期内容能为读者提供有益的启示与帮助,并在此对所有作者的大力支持和审稿专家的辛勤指导表示由衷的感谢!