中關(guān)村論壇見證新里程碑:當(dāng)虹科技多模態(tài)視聽大模型BlackEye重磅首發(fā)!
4月27日下午,在北京市廣播電視局和北京經(jīng)濟(jì)技術(shù)開發(fā)區(qū)管理委員會(huì)聯(lián)合主辦的“2024中關(guān)村論壇·超高清視聽科技創(chuàng)新發(fā)展論壇”上,當(dāng)虹科技與北京經(jīng)濟(jì)技術(shù)開發(fā)區(qū)聯(lián)合發(fā)布BlackEye大模型基座及應(yīng)用場景,并當(dāng)場簽署了合作協(xié)議。
作為國家級(jí)科技創(chuàng)新交流合作平臺(tái),中關(guān)村論壇匯聚了全球科技與產(chǎn)業(yè)界的創(chuàng)新共識(shí),其成果發(fā)布環(huán)節(jié)備受矚目。此次論壇期間,國家廣電總局副局長朱詠雷、北京市委副書記劉偉,以及來自國家廣電總局、中央廣播電視總臺(tái)、北京市委宣傳部的領(lǐng)導(dǎo)和專家,共同見證了BlackEye多模態(tài)視聽大模型發(fā)布。
BlackEye是當(dāng)虹科技響應(yīng)國家“人工智能+”政策號(hào)召背景下的成果,其目標(biāo)是:通過大模型推動(dòng)超高清與AIGC融合發(fā)展,努力為視聽傳媒高質(zhì)量發(fā)展貢獻(xiàn)力量。
BlackEye融合了多種深度神經(jīng)網(wǎng)絡(luò)組件,包括Transformer、Diffusion等組件,通過文本、圖像、視音頻、三維模型等多種模態(tài)的編碼、解碼、多模態(tài)潛空間對(duì)齊、多模態(tài)語言推理及生成等技術(shù),實(shí)現(xiàn)不同模態(tài)信息之間的推理和預(yù)測生成。
會(huì)上,依托BlackEye多模態(tài)視聽大模型生成的AI視頻短片《BlackEye:讓每一個(gè)視聽的想象都成為現(xiàn)實(shí)》驚艷全場,該短片憑借卓越的畫面連貫性、超高清畫質(zhì)及立體震撼的三維聲效,贏得了在場觀眾的高度贊譽(yù)。
從“青萍之末的風(fēng)”到“吹皺一池春水”,從“微瀾之間的浪”到“驚濤拍岸”,不管是遠(yuǎn)景、近景,還是全景、特寫,這個(gè)基于BlackEye生成的AI短片,都體現(xiàn)出其對(duì)物理世界豐富的理解能力。
BlackEye深度整合了視頻、音頻、圖像、文本和三維模型等跨模態(tài)內(nèi)容的推理與生成能力,包括文本生成、文生視頻、圖生視頻等生成式算法,以及AI視覺增強(qiáng)、AI橫豎轉(zhuǎn)換、AI智能集錦等編輯式算法。這些技術(shù)的融合應(yīng)用,可為視聽傳媒、空間計(jì)算、工業(yè)視覺和智能座艙等行業(yè)提供完整的創(chuàng)新解決方案。
在中關(guān)村論壇期間,當(dāng)虹科技還加入了由國家廣電總局廣科院牽頭成立的“廣電AIGC大模型創(chuàng)新聯(lián)合體”,標(biāo)志著公司將在超高清、AIGC、大模型方向繼續(xù)與業(yè)界一流單位聯(lián)合創(chuàng)新、共謀發(fā)展。