9月1日，值2021世界5G大會(huì)召開時(shí)，原國家廣播電視總局副總工程師杜百川在5G新視聽論壇上以直播聯(lián)線的方式做了“3GPP AR/VR/MR/XR標(biāo)準(zhǔn)化”為題的報(bào)告。
杜百川首先解釋了擴(kuò)展現(xiàn)實(shí)（XR eXtended Reality），其也就是虛擬現(xiàn)實(shí)（VR）、增強(qiáng)現(xiàn)實(shí)（AR）、混合現(xiàn)實(shí)（MR）以及尚未開發(fā)的沉浸式技術(shù)的總稱。
今年3月發(fā)布的“ITU-R先進(jìn)沉浸式感官媒體系統(tǒng)”中增加了“感官媒體”描述，未來沉浸式技術(shù)場景不僅僅是音頻和視頻的形式，還加上了觸覺，所以便稱為是感官媒體。“高級沉浸式感官媒體系統(tǒng)（AISM）”允許用戶通過高級沉浸式視聽系統(tǒng)得到以前所未有的臨場感和沉浸式體驗(yàn)。其可以欺騙大腦感知系統(tǒng)，重建視聽現(xiàn)實(shí)并允許用戶自然地與虛擬場景交互。ITU-R已將“先進(jìn)沉浸式感官媒體系統(tǒng)的廣播節(jié)目制作、交換和展現(xiàn)”列入了建議（或報(bào)告計(jì)劃），預(yù)計(jì)可在2023年完成。
AISM主要包括三個(gè)大的方面：高視覺質(zhì)量、高音頻質(zhì)量、直接用戶接口，可以提供360度的立體觀看體驗(yàn)。舉例而言，電視和AR的集成，不同位置的電視表演者、家人和朋友可呈現(xiàn)為三維組合，觀眾看電視的時(shí)候就像和電視表演者、家人以及朋友共享同一個(gè)空間，使用AR眼鏡顯示的時(shí)候，這些人物都是能呈現(xiàn)為真人尺寸的精確控制，所以就顯得極為生動(dòng)。
需要注意AR的要求比VR更高，因?yàn)閂R是單獨(dú)的虛擬場景，AR或者M(jìn)R都要用虛擬場景、現(xiàn)實(shí)場景的結(jié)合，因此就有場景的描述元素，包括連接到本地和遠(yuǎn)程的傳感器，以及這些元素的壓縮集成機(jī)制，還需要連接到地圖和壓縮媒體的遠(yuǎn)程資源。AR應(yīng)用格式側(cè)重于提供增強(qiáng)現(xiàn)實(shí)展現(xiàn)而不是客戶端或服務(wù)器過程的數(shù)據(jù)格式。
在“3GPP TR 26.998 V0.8.0 Release 17（2021-05）”中有關(guān)于“5G眼睛型AR/MR設(shè)備的支持”，相關(guān)內(nèi)容主要是器件功能架構(gòu)、通用參考器件功能架構(gòu)等。
5G中的XR出現(xiàn)于“ETSI TR 126.928 V16.1.0 Release 16（2021-01）”，其報(bào)告定義涉及沉浸式、現(xiàn)場感、交互內(nèi)容、5G系統(tǒng)、交互類型、用于XR的5G功能、5G當(dāng)中的QOS等等，還有如3D背景的離線共享、實(shí)時(shí)XR共享、XR多媒體流媒體，多方呼叫等等。
3GPP上的VR媒體業(yè)務(wù)出現(xiàn)于“ETSI TR 126.918 V16.0.0 Release 16(2020-11)”，主要規(guī)定5G當(dāng)中的媒體業(yè)務(wù)，包括視頻系統(tǒng)、FOV、光學(xué)像素、VR視頻系統(tǒng)的獲取、球面粘貼和投影、音頻系統(tǒng)、業(yè)務(wù)架構(gòu)、流媒體架構(gòu)等等，包括相應(yīng)的媒體應(yīng)用，比如大型活動(dòng)主播、VR流媒體、基于3GPP分發(fā)360度內(nèi)容庫、社交電視和VR電影等等。
移動(dòng)流媒體應(yīng)用的VR出現(xiàn)于“ETSI TS 126.118 V16.2.1 Release 16(2021-05)”，包括VR架構(gòu)和接口，比如參考系統(tǒng)、端到端的架構(gòu)、客戶端的參考架構(gòu)、渲染方案、工作點(diǎn)和媒體類，包括媒體宣傳的操作點(diǎn)和測試點(diǎn)，以及音頻渲染、視頻怎么做、音頻怎么做、VR怎么表達(dá)、VR的指標(biāo)等等。
VR相關(guān)用戶體驗(yàn)QoE參數(shù)和指標(biāo)出現(xiàn)于“ETSI TR 126.929 V16.1.0 Release 16(2020-11)”，目前還沒有形成標(biāo)準(zhǔn)，正在討論當(dāng)中，用戶體驗(yàn)因素主要是三個(gè)方面：內(nèi)容、網(wǎng)絡(luò)和設(shè)備，VR體驗(yàn)相關(guān)的QoE標(biāo)準(zhǔn)，報(bào)告到網(wǎng)絡(luò)進(jìn)一步分析的方式，其中和VR服務(wù)指標(biāo)相關(guān)的研究側(cè)重于設(shè)備參考模型，研究可能影響VR業(yè)務(wù)體驗(yàn)的關(guān)鍵性性能標(biāo)準(zhǔn)和指標(biāo)，確定與虛擬現(xiàn)實(shí)、用戶體驗(yàn)相關(guān)的SX4標(biāo)準(zhǔn)，設(shè)備定義和VR體驗(yàn)相關(guān)的新的傳輸標(biāo)準(zhǔn)。
