直擊上海電視節！當虹視聽大模型為內容生產注入AI活力

又到“白玉蘭飄香”時。6月24日-28日，第29屆上海電視節在申城舉行。25日下午，當虹科技亮相本屆上海電視節白玉蘭電視論壇暨電視市場活動系列技術研討會。

在高新視聽與AIGC技術研討會上，來自國家廣播電視總局、上海交通大學、阿里云以及當虹科技等單位的專家學者和技術精英，圍繞AIGC技術的前沿發展、關鍵技術以及應用案例進行分享。

當虹科技智能媒資產品線總經理范濤作主題演講，分享了當虹科技BlackEye多模態視聽大模型如何提升視聽媒體的制播效率和內容吸引力。

01 注入AI活力，提升制播效率

當虹科技BlackEye多模態視聽大模型為用戶提供了強大的視頻編輯和創作能力——支持AI橫屏轉豎屏、高能集錦（智能花絮）、文生視頻等豐富功能。

范濤表示，新媒體時代，手機豎屏看視頻已成為眾多用戶的習慣。但是在節目拍攝現場，攝像機機位空間有限。而且，系統搖臂、圓軌、滑軌等4K特種機位的畫面需要橫屏拍攝。這也就是為什么不直接架設原生豎屏機位，而是需要“橫轉豎”。

傳統的豎屏節目制作方式往往是通過人工裁切，將16:9“橫屏”內容轉成 9:16“豎屏”內容，耗時耗力。

大模型的融入將為節目制作帶來更多AI動力。有限空間、有限人員的情況下，實現電視橫屏與新媒體豎屏直播的同步制作。

當虹科技BlackEye多模態視聽大模型提供“AI橫轉豎”算法，對現場的機位信號進行實時分析、裁剪，生成豎屏信號，結合原生豎屏機位，由導演組現場進行制作，實現豎屏內容呈現。

范濤向大家演示了一段AI豎屏制作的羽毛球賽事：畫面更加聚焦于運動員主體，接發球等各種戰術細節豐富呈現，為觀眾提供了更有觀賞度和沉浸感的比賽觀看體驗。

針對多人場景，如何選擇合適的C位出鏡一直是個難題。BlackEye大模型基于豐富的節目素材訓練數據，通過分析人物主體的位置及大小等信息，進行主體的判斷和選擇，從而實現精準追蹤。

02 拓展創意空間，提升內容吸引力

當虹科技BlackEye大模型集合了視聽合作伙伴的海量內容數據與原創先進算法優勢，幫助媒體工作者創作更有吸引力的內容。

例如，利用大模型的生成式算法實現三維建模，不需要架設一圈高精度攝像機采集360°的實景數據，用手機拍幾張靜態照片或者一段視頻，就能生成一個三維模型，降低建模和渲染成本。

又或者，當BlackEye大模型“看”到一段體操比賽視頻，就能理解視頻內容，分析運動軌跡，輸出流暢的慢動作鏡頭。觀眾可以看清每一個動作，重溫精彩時刻。

范濤介紹說：“類似畫質增強、三維建模、慢動作等算法，正在體育賽事制播、直播帶貨、綜藝文化晚會節目制作等場景中大顯身手。”在大模型的驅動下，視聽媒體還有更多創意空間可以拓展。