直擊上海電視節(jié)！當(dāng)虹視聽大模型為內(nèi)容生產(chǎn)注入AI活力

又到“白玉蘭飄香”時(shí)。6月24日-28日，第29屆上海電視節(jié)在申城舉行。25日下午，當(dāng)虹科技亮相本屆上海電視節(jié)白玉蘭電視論壇暨電視市場活動(dòng)系列技術(shù)研討會(huì)。

在高新視聽與AIGC技術(shù)研討會(huì)上，來自國家廣播電視總局、上海交通大學(xué)、阿里云以及當(dāng)虹科技等單位的專家學(xué)者和技術(shù)精英，圍繞AIGC技術(shù)的前沿發(fā)展、關(guān)鍵技術(shù)以及應(yīng)用案例進(jìn)行分享。

當(dāng)虹科技智能媒資產(chǎn)品線總經(jīng)理范濤作主題演講，分享了當(dāng)虹科技BlackEye多模態(tài)視聽大模型如何提升視聽媒體的制播效率和內(nèi)容吸引力。

01 注入AI活力，提升制播效率

當(dāng)虹科技BlackEye多模態(tài)視聽大模型為用戶提供了強(qiáng)大的視頻編輯和創(chuàng)作能力——支持AI橫屏轉(zhuǎn)豎屏、高能集錦（智能花絮）、文生視頻等豐富功能。

范濤表示，新媒體時(shí)代，手機(jī)豎屏看視頻已成為眾多用戶的習(xí)慣。但是在節(jié)目拍攝現(xiàn)場，攝像機(jī)機(jī)位空間有限。而且，系統(tǒng)搖臂、圓軌、滑軌等4K特種機(jī)位的畫面需要橫屏拍攝。這也就是為什么不直接架設(shè)原生豎屏機(jī)位，而是需要“橫轉(zhuǎn)豎”。

傳統(tǒng)的豎屏節(jié)目制作方式往往是通過人工裁切，將16:9“橫屏”內(nèi)容轉(zhuǎn)成 9:16“豎屏”內(nèi)容，耗時(shí)耗力。

大模型的融入將為節(jié)目制作帶來更多AI動(dòng)力。有限空間、有限人員的情況下，實(shí)現(xiàn)電視橫屏與新媒體豎屏直播的同步制作。

當(dāng)虹科技BlackEye多模態(tài)視聽大模型提供“AI橫轉(zhuǎn)豎”算法，對現(xiàn)場的機(jī)位信號(hào)進(jìn)行實(shí)時(shí)分析、裁剪，生成豎屏信號(hào)，結(jié)合原生豎屏機(jī)位，由導(dǎo)演組現(xiàn)場進(jìn)行制作，實(shí)現(xiàn)豎屏內(nèi)容呈現(xiàn)。

范濤向大家演示了一段AI豎屏制作的羽毛球賽事：畫面更加聚焦于運(yùn)動(dòng)員主體，接發(fā)球等各種戰(zhàn)術(shù)細(xì)節(jié)豐富呈現(xiàn)，為觀眾提供了更有觀賞度和沉浸感的比賽觀看體驗(yàn)。

針對多人場景，如何選擇合適的C位出鏡一直是個(gè)難題。BlackEye大模型基于豐富的節(jié)目素材訓(xùn)練數(shù)據(jù)，通過分析人物主體的位置及大小等信息，進(jìn)行主體的判斷和選擇，從而實(shí)現(xiàn)精準(zhǔn)追蹤。

02 拓展創(chuàng)意空間，提升內(nèi)容吸引力

當(dāng)虹科技BlackEye大模型集合了視聽合作伙伴的海量內(nèi)容數(shù)據(jù)與原創(chuàng)先進(jìn)算法優(yōu)勢，幫助媒體工作者創(chuàng)作更有吸引力的內(nèi)容。

例如，利用大模型的生成式算法實(shí)現(xiàn)三維建模，不需要架設(shè)一圈高精度攝像機(jī)采集360°的實(shí)景數(shù)據(jù)，用手機(jī)拍幾張靜態(tài)照片或者一段視頻，就能生成一個(gè)三維模型，降低建模和渲染成本。

又或者，當(dāng)BlackEye大模型“看”到一段體操比賽視頻，就能理解視頻內(nèi)容，分析運(yùn)動(dòng)軌跡，輸出流暢的慢動(dòng)作鏡頭。觀眾可以看清每一個(gè)動(dòng)作，重溫精彩時(shí)刻。

范濤介紹說：“類似畫質(zhì)增強(qiáng)、三維建模、慢動(dòng)作等算法，正在體育賽事制播、直播帶貨、綜藝文化晚會(huì)節(jié)目制作等場景中大顯身手?！痹诖竽Ｐ偷尿?qū)動(dòng)下，視聽媒體還有更多創(chuàng)意空間可以拓展。