“數(shù)字人”虛實共生、“跨時空”視聽多維、傳統(tǒng)文化“數(shù)字永生”——

數(shù)字媒體如何豐富人類視聽體驗？

超寫實數(shù)字人小諍成為全球首位數(shù)字航天員，在航天新聞報道、知識科普等領(lǐng)域和年輕人群建立了溝通；“故宮最大裸眼3D文物”實現(xiàn)了22倍高清放大文物，讓觀眾在千里之外也可體驗到實物展也難以感受的豐富細(xì)節(jié)；“光影煥新智能修復(fù)引擎”技術(shù)讓張國榮“跨時空”舉行了高清演唱會……數(shù)字媒體領(lǐng)域正處在快速發(fā)展和變革之中。

未來，隨著技術(shù)的不斷創(chuàng)新和發(fā)展，數(shù)字媒體領(lǐng)域?qū)尸F(xiàn)出更為多元、豐富、創(chuàng)新的發(fā)展態(tài)勢，給人類帶來更加豐富的視聽體驗和商業(yè)機會。騰訊研究院發(fā)布報告認(rèn)為，2022年，文化科技的應(yīng)用整體呈現(xiàn)虛實共生、視聽多維、跨界應(yīng)用等新的趨勢。

亮點1

AI作畫領(lǐng)域被引爆

生成式AI技術(shù)為AIGC（人工智能生成內(nèi)容）注入新動能，變革了大眾內(nèi)容生產(chǎn)與交互范式。

AIGC即“人工智能生成內(nèi)容”（AI-generated Content），代表著AI技術(shù)向創(chuàng)造力的躍遷。2022年無疑是生成式AI的“高光時刻”：例如，AI生成內(nèi)容的質(zhì)量、類型的豐富性得到了極大提升，并且進(jìn)一步提升了 AIGC 內(nèi)容的多樣性，文字轉(zhuǎn)圖像、文字轉(zhuǎn)視頻、靜態(tài)圖片轉(zhuǎn)3D動態(tài)場景、3D內(nèi)容創(chuàng)建等應(yīng)用類型不斷涌現(xiàn)。例如，OpenAI的DALL-E 2、Stable Diffusion、MidJourney等可以生成圖片的AIGC模型引爆了AI作畫領(lǐng)域，讓AIGC加速進(jìn)入公眾視野，各主流互聯(lián)網(wǎng)公司也紛紛推出自己的圖片、視頻生成模型。

同時，AI大模型的發(fā)展能夠給大眾內(nèi)容生產(chǎn)“提質(zhì)增效”，AIGC應(yīng)用為文化藝術(shù)創(chuàng)作提供了創(chuàng)意輔助工具，甚至降低了文化藝術(shù)創(chuàng)作門檻，或?qū)⒋偈刮幕a(chǎn)與消費進(jìn)一步“大眾化”。游戲設(shè)計師杰森·艾倫使用Midjourney模型生成的《太空歌劇院》就成為首個獲獎的AI生成藝術(shù)。

亮點2

綜藝、晚會廣泛應(yīng)用虛擬制作技術(shù)

2019年上線的美劇《曼達(dá)洛人》在拍攝過程中采用了突破性的虛擬制作方法，為內(nèi)容制作領(lǐng)域帶來了革命性的影響。虛擬制作主要借助LED和游戲引擎打造虛擬場景，并與拍攝現(xiàn)場的真實人物實時融合。

2022年，隨著虛擬制作硬件成本下降、技術(shù)成熟，虛擬制作在國內(nèi)的應(yīng)用提速，尤其在綜藝、晚會等領(lǐng)域?qū)崿F(xiàn)了廣泛的應(yīng)用。例如，2022年，河南衛(wèi)視“奇妙游”系列節(jié)目通過“5G+XR”技術(shù)實現(xiàn)舞臺與虛擬場景特效的結(jié)合，將河南歷史文化中最耀眼的元素與精彩的歌舞、戲曲、武術(shù)等藝術(shù)表演結(jié)合起來。

另一方面，虛擬制作技術(shù)增強了實時交互體驗，塑造了“虛擬化在場+實時互動”的內(nèi)容直播效果。2022年騰訊冬奧會節(jié)目《贏戰(zhàn)冰雪》邀請了數(shù)字人“星瞳”在演播室參與賽事解說，借助遠(yuǎn)程動捕技術(shù)和自研的“交互連線系統(tǒng)”，使“星瞳”與真人嘉賓同臺互動長達(dá)8小時，豐富了傳統(tǒng)的演播室內(nèi)容效果。

亮點3

數(shù)字人社會服務(wù)場景廣泛拓展

伴隨數(shù)字人生產(chǎn)效能的提升，2022年高保真數(shù)字人、超寫實數(shù)字人、AI數(shù)字人在多方向的應(yīng)用進(jìn)一步成熟，為行業(yè)效率提升、服務(wù)升級提供人性化的工具，引發(fā)了數(shù)字人社會應(yīng)用的新爆發(fā)。

2022年，伴隨數(shù)字人生產(chǎn)效能的提升，社會生活與服務(wù)場景下的“數(shù)字人含量”實現(xiàn)爆發(fā)式增長。

一方面，高保真數(shù)字人、超寫實數(shù)字人提升了信息交互的沉浸感，為新聞報道、直播、綜藝等領(lǐng)域提供了創(chuàng)新業(yè)務(wù)形態(tài)、吸引年輕人的突破口。例如新華社聯(lián)手NExT Studios打造的全球首位數(shù)字航天員小諍，作為超寫實數(shù)字人實現(xiàn)了逼真、細(xì)膩的外形塑造，在航天新聞報道、知識科普等領(lǐng)域和年輕人群建立溝通，成為數(shù)字人助力媒體融合的典型案例。

另一方面，AI驅(qū)動的數(shù)字人能夠在各類場景提供接近真人的服務(wù)，成為傳媒、文旅、金融等行業(yè)數(shù)字化轉(zhuǎn)型的“加速器”。2022年，數(shù)字人整合語音交互、自然語言理解、圖像識別等AI能力，成為“數(shù)字員工”，進(jìn)入傳媒、文旅、金融、電子商務(wù)等領(lǐng)域，承擔(dān)資訊播報、文旅導(dǎo)覽、坐席客服等多元角色。例如，央視頻AI手語主播“聆語”參與國際冰雪賽事，首次實現(xiàn)了AI手語解說賽事直播，可以用手語表達(dá)超過160萬個詞匯和短語。在企業(yè)服務(wù)領(lǐng)域，結(jié)合行業(yè)知識圖譜，數(shù)字人能夠通過不斷的自學(xué)習(xí)、自適應(yīng)提升服務(wù)能力，助力企業(yè)數(shù)字化轉(zhuǎn)型力，越來越多的“數(shù)字員工”開始走進(jìn)千行百業(yè)。

亮點4

3D數(shù)字建模助力傳統(tǒng)文化“數(shù)字永生”

通過3D數(shù)字建模對文化遺產(chǎn)進(jìn)行數(shù)字化生成，真實再現(xiàn)或者還原已經(jīng)消失在歷史長河中的遺跡，這種文化數(shù)字化的路徑在2022年步入應(yīng)用爆發(fā)期。文化遺產(chǎn)的3D還原走向更加精細(xì)、逼真，具有沉浸感，開辟了傳統(tǒng)文化“數(shù)字永生”的新路徑，也進(jìn)一步拉近大眾與文化遺產(chǎn)之間的距離。

故宮和騰訊聯(lián)合主辦的沉浸式數(shù)字體驗展，向大眾展示了“故宮最大裸眼3D文物”，讓文物實現(xiàn)22倍高清放大，使觀眾體驗到實物展也難以感受的豐富細(xì)節(jié)，同時打破物理空間限制，將故宮文物展覽“搬運”到距離故宮博物院兩千余公里外的廣東深圳，以數(shù)字技術(shù)助力文化遺產(chǎn)煥發(fā)新的活力。

亮點5

超高清視頻實現(xiàn)“經(jīng)典重生”

2022年，演唱會在“云模式”下重新構(gòu)建了內(nèi)容的供給與分發(fā)方式，探索出相對成熟的市場模式。其中，“超高清視頻技術(shù)+社交推薦技術(shù)”的結(jié)合，還原了線下演出的沉浸感、實時性、社交性三大優(yōu)勢，也引發(fā)了演出市場的現(xiàn)象級熱點。

一方面，超高清視頻技術(shù)的成熟，保障了線上演唱會的高質(zhì)量內(nèi)容供給，為用戶提供了接近現(xiàn)場般的觀看體驗。同時，智能超高清視頻修復(fù)技術(shù)進(jìn)一步豐富了超高清內(nèi)容的供給。在超高清內(nèi)容生產(chǎn)端，長期存在著超高清內(nèi)容制作、經(jīng)典老片及視頻轉(zhuǎn)高清的成本高、效率低等痛點，通過AI視頻修復(fù)技術(shù)，能夠使大量畫質(zhì)欠佳的經(jīng)典文化作品“經(jīng)典重生”。

例如，2022年微信視頻號聯(lián)合騰訊多媒體實驗室、TME live推出的張國榮《熱·情》演唱會，采用多媒體實驗室研發(fā)的“光影煥新智能修復(fù)引擎”，利用該引擎的智能分析、畫質(zhì)修復(fù)、畫質(zhì)增強、智能編碼四大模塊，修復(fù)了因時間跨度大帶來的劃痕、噪點、失真、色彩等問題，使演唱會內(nèi)容的分辨率提升了6倍。

另一方面，直播技術(shù)與社交推薦技術(shù)的結(jié)合，提升了演唱會的線上分發(fā)效率，進(jìn)一步還原線下演出的實時性、社交性等優(yōu)勢。直播能通過實時的表演賦予受眾 “參與感”和“共享感”。

亮點6

游戲引擎成長為“新型工業(yè)軟件”

2022年，游戲產(chǎn)業(yè)在硬件和軟件突破的加持下，向?qū)崿F(xiàn)更大規(guī)模、更流暢、更逼真的實時3D體驗進(jìn)發(fā)，也推動游戲引擎實現(xiàn)了更廣泛的跨界應(yīng)用。

一方面，游戲引擎能支持文化創(chuàng)意活動，豐富沉浸式體驗，并有望打造文化領(lǐng)域通用、開放的技術(shù)能力。例如，2022年北京冬奧會開幕式的表演創(chuàng)意先在游戲引擎中進(jìn)行模擬呈現(xiàn)、預(yù)覽調(diào)整，然后才落地真實世界，有效提升了內(nèi)容制作、表演協(xié)同的效率。

文保場景中，敦煌研究院聯(lián)合騰訊推出“數(shù)字敦煌”項目，通過數(shù)字照掃、游戲引擎、云游戲等游戲技術(shù)，毫米級高精度復(fù)現(xiàn)了敦煌藏經(jīng)洞及其百年前室藏6萬余卷珍貴文物的盛況，生動演繹藏經(jīng)洞及文物背后的千年文化故事。北京文物局發(fā)起的“數(shù)字中軸”項目，通過高清數(shù)字照掃及多種游戲技術(shù)的結(jié)合，還原了北京中軸線文化遺產(chǎn)的風(fēng)貌。“數(shù)字中軸·小宇宙”產(chǎn)品將于2024年6月上線，打造全新的沉浸式觀展體驗，讓大眾足不出戶就能體驗北京中軸線背后豐富的歷史文化。

2023年，由國家文物局指導(dǎo)、敦煌研究院和騰訊聯(lián)合打造的“數(shù)字藏經(jīng)洞”，運用游戲技術(shù)首次毫米級高精度數(shù)字化還原莫高窟藏經(jīng)洞及其文物、壁畫細(xì)節(jié)，打造風(fēng)格化沉浸式深度互動體驗，讓用戶一鍵“穿越”到晚唐、北宋、清末等歷史時期的敦煌，親身“參與”藏經(jīng)洞從洞窟開鑿、室藏萬卷、重現(xiàn)于世、文物流散到再次聚首的整個歷程。（記者 陳斯）

來源：北京青年報

責(zé)任編輯：李賽男