圖片由鈦媒體APP拍攝
AI視頻大模型進(jìn)化的使命之一，是顛覆現(xiàn)有工業(yè)級影視制作。Sora第一批想打動的客戶，是好萊塢的專業(yè)人士（好像也不大成功）。
不過，比起國外導(dǎo)演、編劇以集體罷工的形式對抗AI，國內(nèi)本土的影視工作者，“不妨先試試看”的心態(tài)更為明顯。
去年3月底，Sora剛正式問世1個多月，第十一屆中國網(wǎng)絡(luò)視聽大會上，作為國家隊的代表，湖南廣電首曝了大模型的進(jìn)展，稱內(nèi)部很早就搭建了“芒果大模型”，聚焦在應(yīng)用層。
這一消息的發(fā)布，比后來的躋身AI視頻大模型應(yīng)用一線梯隊的海螺AI、可靈AI和即夢AI還要早。而后，抖音（即夢AI）和快手（可靈AI）也借勢率先上線了全流程的AI短劇和AI電影。
把“敢為人先”刻進(jìn)骨子里的芒果TV，一向很懂用戶真心要的是什么，然而，外界卻很少感知到其大模型能力落地C端的成果。
一年時間過去了，在今年舉辦的第十二屆中國網(wǎng)絡(luò)視聽大會期間，鈦媒體APP見到了芒果TV副總裁、CTO盧海波，與他聊了聊視頻大模型，虛擬拍攝和超高清等當(dāng)前廣電行業(yè)關(guān)心的前沿技術(shù)話題。
芒果TV副總裁、CTO 盧海波，圖片由鈦媒體APP拍攝
在他看來，消費級AI視頻應(yīng)用，有很多平臺提供了一些工具，普通人可以做出一些趣味性的視頻，已經(jīng)很普及了。
但是，專業(yè)影視制作要求高，更多的是要創(chuàng)新，而不是模式化和套路化生成，以目前大模型的能力，還不能滿足真實影視制作需要。
“AI影視內(nèi)容的成熟，是需要一段時間的。目前很多AIGC制作內(nèi)容做出來，很多只是滿足于‘做出來’，它的品質(zhì)其實不是很高。”盧海波鈦媒體APP說。
他認(rèn)為，如果只是做出一些很普通的內(nèi)容，就價值不大，大家不會去電影院看它，也不會為它付費，那么，可能只是收獲了“一些流量上的商業(yè)價值而已，在互聯(lián)網(wǎng)領(lǐng)域”。
“我們芒果TV的AI大模型，一開始就定位于做專業(yè)的工業(yè)級視頻制作，所以我們是沒有暫時沒有對外部發(fā)布這個能力。”他說，真正到可以“出來說”的時候，是觀眾已經(jīng)看不出作品是靠AI做的。
他用了一個比較形象的比喻：“即便我們內(nèi)部很多AI制作的效果，可以說是非常好了，但我們依然不敢說這句話，是因為覺得還沒到這個階段，就像是冷兵器時代快結(jié)束的時候，出現(xiàn)了一把什么槍，雖然子彈打得很遠(yuǎn)，但是用起來很麻煩，還不如人家很優(yōu)秀的弓箭手。”
即便如此，芒果TV在AI上投入的決心，比想象的還要多。
去年7月，芒果TV自主研發(fā)的“芒果大模型”通過了中央網(wǎng)信辦的生成式人工智能備案，是廣電行業(yè)首批備案的大模型。
芒果大模型垂直于廣電行業(yè)的數(shù)據(jù)，主要落地的場景是，節(jié)目創(chuàng)意策劃、內(nèi)容生成、角色擬人對話等功能，覆蓋了視聽領(lǐng)域70多個業(yè)務(wù)場景，開發(fā)20多款產(chǎn)品。
2024年，芒果TV付費會員數(shù)增至7331萬，年收入首次突破了50億元，部分得益于AI的驅(qū)動。
盧海波稱，現(xiàn)在，芒果TV幾乎所有的業(yè)務(wù)都要全面AI化，不僅包括主業(yè)的內(nèi)容生產(chǎn)制作商，同時還有內(nèi)容電商、數(shù)字文博和出海等衍生出來的新興業(yè)務(wù)，還要重點打造一批垂類大模型。
芒果TV現(xiàn)場展示的除了大模型，還有內(nèi)容電商與IP衍生品，圖片由鈦媒體APP拍攝
“我們的財務(wù)跟我說，這些技術(shù)投入，只要你們認(rèn)為是值得的，可以說是沒有上限，因為我們認(rèn)為這是必然要投入的，而且投入會非常大。”盧海波說。
強(qiáng)烈的決心已經(jīng)拋出了，但顯然，大家都清楚一個現(xiàn)狀，比起全球頂級的科技大廠和流媒體巨頭，未來一段時間內(nèi)以每年千億級資金投入，參與打造這一場有史以來最猛烈的AI軍備競賽，芒果TV眼中的“不設(shè)上限”，可能都入不了主線戰(zhàn)局。
芒果TV的AI影視內(nèi)容創(chuàng)作還在初期階段，底層算法和模型能力更多地聚焦于本土化場景，優(yōu)先級是服務(wù)于現(xiàn)有的業(yè)務(wù)及其商業(yè)化，再加上，是上市公司，還會受制于盈利壓力。
與此同時，當(dāng)前廣電系統(tǒng)整體面臨著歷史遺留的結(jié)構(gòu)性包袱，傳統(tǒng)業(yè)務(wù)逐漸式微，轉(zhuǎn)型、改制、人才流失的消息頻出。
也許重重壓力之下，AI既是救命稻草，也可能成為新的增長引擎。
與其他視頻平臺不同的是，芒果TV具有“國有屬性+市場化運作”的特殊基因。
因此，除了打造AI大模型相關(guān)的能力，今年，芒果TV還要完成一道廣電系統(tǒng)的大作業(yè)題：三年前，國家廣電總局提出，到2025年底，標(biāo)清頻道基本關(guān)停，高清電視成為電視基本播出模式，超高清電視頻道和節(jié)目供給形成規(guī)模。
標(biāo)清頻道關(guān)停是硬性要求，也給終端設(shè)備提出了更新的需求。政策要求到2025年，有線電視網(wǎng)絡(luò)和IPTV的標(biāo)清機(jī)頂盒逐步淘汰，全面普及超高清智能機(jī)頂盒。
這一目標(biāo)，使得各級廣電機(jī)構(gòu)手頭一個緊要任務(wù)是，加速技術(shù)轉(zhuǎn)型，比如，升級播出設(shè)備和調(diào)整傳輸網(wǎng)絡(luò)等，與此同時，超高清內(nèi)容對帶寬和存儲的需求會大幅增加。
芒果TV是超高清視頻內(nèi)容制作和播出的試點單位之一。
對此，芒果TV智能研究中心第一副總經(jīng)理宋施恩對鈦媒體APP介紹說，一方面，芒果TV新出品的自制頭部內(nèi)容，均按照國產(chǎn)超高清標(biāo)準(zhǔn)生產(chǎn)，后續(xù)會全面普及4K超高清。
另一方面，芒果TV會將存量視頻內(nèi)容通過AI算法，轉(zhuǎn)化為超高清的格式。去年，芒果TV已經(jīng)完成了1.8萬小時的轉(zhuǎn)化，今年還計劃完成3.7萬小時的轉(zhuǎn)化。
相較之前，AI的引入，能夠降低芒果TV的超高清的制作成本，但在傳輸端的投入，還是很有壓力。
盧海波對鈦媒體APP透露，去年，僅去年綜藝節(jié)目《歌手2024》一季的節(jié)目量，通過超高清直播，就新增了3000萬元的帶寬成本。
“這是很高的，大家都沒想到的數(shù)字，而且是額外產(chǎn)生的成本。我們一方面希望給大家?guī)砀玫囊暵狊w驗，另一方面，也希望我們作為試點單位，能夠得到一些資金與政策上的支持。”盧海波說。
鈦媒體APP：芒果TV希望在AIGC上做一些工業(yè)級的實踐，在AIGC視頻上，去年行業(yè)內(nèi)已經(jīng)有一些關(guān)于AI短劇和AI電影的項目落地了，但是目前看到芒果TV沒有類似的案例出來，這是出于什么考慮？
盧海波：我說一下我個人的看法。我覺得AI影視內(nèi)容的成熟，是需要一段時間的。目前很多AIGC制作內(nèi)容做出來，很多只是滿足于“做出來”，它的品質(zhì)其實不是很高，這就不太好判斷。
如果我們只是做出一些很普通的內(nèi)容來，但是價值不大，大家也不會去電影院去看，也不會為它付費，那可能你可以去做一些流量上的商業(yè)價值而已，在互聯(lián)網(wǎng)領(lǐng)域。
還有一個，估計有很多家公司也說，我又做出什么內(nèi)容來了，是不是過程中感覺都很好？你不知道的，只有他自己知道，是不是真的很爽，然后會很便利？這也是不知道的，我認(rèn)為它還沒有到達(dá)非常完美的階段。
芒果TV是在內(nèi)容上面應(yīng)用的AI。我可以分享一個故事，我們內(nèi)部審片的時候，他們問，這個片子用到很多AI技術(shù)，為什么沒看到？
其實在這里面，我們的AI生成的內(nèi)容片段，已經(jīng)跟當(dāng)前的實際拍攝做了深度的融合，別人感知不到相關(guān)的一些痕跡，所以是這樣的一個狀態(tài)。
AI制作的內(nèi)容，需要一個量變到質(zhì)變的過程，現(xiàn)在并沒有到質(zhì)變，它不能夠很壓倒性地替換。其實很多AI制作的內(nèi)容，“AI感”會很重。這并不代表我們做得不好。
即便我們內(nèi)部很多AI制作的效果，可以說是非常好了，但我們依然不敢說這句話，是因為覺得還沒到這個階段，就像是冷兵器時代快結(jié)束的時候，出現(xiàn)了一把什么槍，雖然子彈打得很遠(yuǎn)，但是用起來很麻煩，還不如人家很優(yōu)秀的弓箭手。
所以，反而我們是扎扎實實在下功夫做了練內(nèi)功，在大量的視頻里面制作里面去做嘗試，我們已經(jīng)有很多節(jié)目里面的視頻是用了很多AI內(nèi)容的。
但是有一天，當(dāng)大部分是靠AI來制作，而且我們很滿意，效果很好，把人的創(chuàng)造性和AI的執(zhí)行效率結(jié)合起來，我就覺得可以說是正式進(jìn)入了AIGC時代了。
比如說，我們的紀(jì)錄片《中國官箴2》，里面有大量的內(nèi)容其實是用AI做的，別人看不出來，但是我們不會說，這個是一個AIGC紀(jì)錄片。
鈦媒體APP：芒果大模型的方向主要在視頻生成，關(guān)于視頻大模型，去年因為Sora和Suno等革命性變化，大家看到多模態(tài)是一個很有前景的賽道，但是到了今年，外界感覺到這個方向有點降溫，大家談?wù)摳嗟氖俏谋就评砟Ｐ秃蜕疃人伎贾惖脑掝}，你怎么看待這個變化？
盧海波：我個人覺得多模態(tài)是個基礎(chǔ)。沒有多模態(tài)，大家做的東西都會差不多，多模態(tài)可能是更決勝負(fù)的一個領(lǐng)域。其實我們芒果TV內(nèi)部也經(jīng)常說，AI也分1.0和2.0的時代。
早在沒有大模型的時候，我們就在積累我們的多模態(tài)數(shù)據(jù)了，我們在四五年前就啟動了一些項目，叫新型的媒資庫、媒資結(jié)構(gòu)，我們完全按我們自己的格式重新定義我們的內(nèi)容，其實我們的畫面每一幀我們都分析過的。
說實話，我們可以從海量的內(nèi)容里找到任何一個人，如果你哪天參加了我們一個節(jié)目，作為觀眾被拍進(jìn)去了，我們要找到你很容易的。不管是歷史內(nèi)容，還是現(xiàn)在的內(nèi)容，我們都記錄下來了。
還有場景、物體、商品的廣告、品牌等各種維度的信息，我們都做了海量的積累，這些都用于我們內(nèi)容的推薦，內(nèi)容的創(chuàng)作，廣告的投放等很多方面。
現(xiàn)在有了推理模型，就是在這個基礎(chǔ)上多了一把鐵鍬，會更好地挖掘這些資源。我們認(rèn)為那些多模態(tài)的模型，是我們芒果TV一個寶貴的財富，我們有很好的算料。
鈦媒體APP：芒果大模型現(xiàn)階段重點打磨或者突破的方向是什么？
盧海波：其實會有幾個部分。我們當(dāng)前在做的，是我們的一個垂類的多模態(tài)大模型，它是面對我們整個廣電的業(yè)務(wù)場景，打造的一個產(chǎn)業(yè)大模型。
然后，我們其實更側(cè)重于一個內(nèi)容生產(chǎn)者的角色，雖然我們方方面面做了很多技術(shù)創(chuàng)新，但是可能相對別人來說，我們更在意內(nèi)容生產(chǎn)這個領(lǐng)域，因為這是我們的核心業(yè)務(wù)。
我們在補足的，一方面是針對我們的業(yè)務(wù)場景來打造我們的產(chǎn)業(yè)模型，其次，會補足當(dāng)前通用模型在一些場景運營里面不足的能力，比如說，一些人物的大幅動作連貫性、說話嘴型等問題，要用我們自己打造的模型來解決。
然后，我們還在優(yōu)化我們的模型的推理速度。我們發(fā)現(xiàn)，文生圖，或者文生視頻，特別是圖生視頻，它的推理速度很慢的，我們現(xiàn)在跟一些高校合作，比如，上海交大，看看怎么把模型推理進(jìn)行加速。
鈦媒體APP：最近大家討論AI Agent和Agentic AI也比較多，一些觀點認(rèn)為，這是AI大模型現(xiàn)階段和下一個階段的重點，你怎么看待這樣的趨勢？
盧海波：這些本身都是基于大模型的能力，有一定的自主的感知和決策能力的智能體。其實是把我們的大模型能力，針對不同的業(yè)務(wù)和場景做應(yīng)用的載體，或者是把這樣的技術(shù)框架做廣泛的應(yīng)用。
我們在內(nèi)部也打造了不少的智能體，有些是用來幫助我們節(jié)目人員的，有些是幫助其他人員的。我們現(xiàn)在也計劃在我們平臺發(fā)布相關(guān)的計劃。
其實我們?nèi)ツ昃痛蛟炝嗣⒐悄芷脚_，已經(jīng)搭建了針對我們公司業(yè)務(wù)場景、運營場景、辦公場景和內(nèi)容策劃場景，打造了70多種不同的智能體，我們的一些內(nèi)容生成，都是通過這些智能體來搭建的，這些是對內(nèi)使用的。
接下來，我們也計劃做面向我們平臺用戶的智能體。用戶來我們平臺是為了消費內(nèi)容、尋找內(nèi)容、與內(nèi)容互動，或是進(jìn)行“二創(chuàng)”等。
對普通用戶來說，如果有個助手，有個屬于他的智能體幫助他，他就會更有更好的觀影體驗。對我們的平臺來說，用戶也會更活躍，也會消費我們更多的內(nèi)容。
鈦媒體APP：現(xiàn)在各大視頻平臺都在力推虛擬拍攝，芒果TV也在做虛擬拍攝，你們的核心優(yōu)勢是什么？
盧海波：我們做虛擬拍攝重點解決的一個問題是，我們要用非常低的成本拍出影視級的效果，主要是從幾個方面來做。
第一，怎么樣解決資產(chǎn)的問題，包括我們的AIGC生成三維模型，包括我們使用AIGC生成的場景，解決我們建模的時效，或者是類似的問題。
第二，是設(shè)備，我們現(xiàn)在是想用綠幕拍攝的方式達(dá)到XLED屏的拍攝效果。
第三，在算法層面，我們重點會解決虛實的融合的問題。比如說，我們近期也會打造的燈光的數(shù)字孿生的系統(tǒng)，它是在棚內(nèi)就可以來模擬打光，來指導(dǎo)我們真實拍攝。
真實拍攝的時候，我們的燈光布置，光線的技術(shù)很重要，如果虛擬拍攝能夠解決虛實融合的燈光問題的話，效果會更好。
鈦媒體APP：光線是虛擬拍攝一個比較核心的技術(shù)難點？
盧海波：對。我們一方面會致力于虛擬拍攝的核心難點的攻堅，另一方面，我們會研發(fā)相關(guān)的知識的系統(tǒng)軟件。
因為任何一個工作只要做得久，就會有很多的細(xì)節(jié)的積累，知識經(jīng)驗的積累，我們都會把它積累到軟件里面去。
這使得以后我們的人員哪怕水平?jīng)]那么高，生產(chǎn)效率也會很高，我們既然要做這件事，就不會只追求一兩項技術(shù)突破，而是將整個流程的綜合能力沉淀到軟件中。
所以，我們在研發(fā)了一個軟件，包括燈光的設(shè)置等，相關(guān)的預(yù)演等。因為虛擬拍攝的時候，人還要提前去走位，或者很多類似這樣的工作。
一般科技公司想不到這一點的，我們拍得多就知道，這些事情很耗時間，很耗人力，我們就用虛擬人去走位，解決這個問題。
這就是我們軟件的一個功能點，它可能不是一個什么非常尖端的技術(shù)，但是做了就對這個行業(yè)有好處。
在實操的過程，把大家的難點，或者需要解決的問題，形成了一套資源、一個產(chǎn)品，來節(jié)約大家的制作和拍攝的時間。
還有一個，是剛才講的大模型，其實芒果TV發(fā)展這么多年，為什么要走自主研發(fā)的路線？因為好多外面通用的能力，包括之前的AI能力，后來的大模型的能力，我們用于實戰(zhàn)，就會發(fā)現(xiàn)它有這樣、那樣的不足，它是個通用的產(chǎn)品，所以并不好用，我們就自研，或者在開源的基礎(chǔ)上把它加強(qiáng)。
但凡我們自己做的領(lǐng)域有一些特定場景里面，我們普遍會比外面的商業(yè)通用大模型，能力要強(qiáng)出不少，比如說，AIGC生成照片或者是視頻，我們生成的動作幅度就會更大、更高清。因為發(fā)現(xiàn)我們真正用到節(jié)目制作里面去，就要有這樣的能力。
鈦媒體APP：也就是說，現(xiàn)在虛擬拍攝比拼的是工程化的能力，而不是技術(shù)本身？
盧海波：就好像早期大家都做“換臉”軟件，以為會做“換臉”就怎樣。但是，我們實際業(yè)務(wù)中，除了要“換臉”，還要換好多東西，要很精準(zhǔn)的。結(jié)果這些沒人做，只有我們自己攻關(guān)，自己來做了，我們很多技術(shù)就是這么做出來的。
因為我們的技術(shù)，不像第三方的科技公司，我們是因為有業(yè)務(wù)需求而去研發(fā)的技術(shù)，所以成功率會比較高，不會說是做出來之后，不知道到哪里去應(yīng)用。
鈦媒體APP：今年AI和IP是兩個很熱的關(guān)鍵詞。其實芒果TV，包括湖南衛(wèi)視，這么多年下來積累了很多很好的IP，你們有沒有想過把這兩個概念結(jié)合起來，做一些項目或者商業(yè)化的嘗試？
盧海波：我們這幾年有個戰(zhàn)略性業(yè)務(wù)叫小芒電商，其實是利用我們的IP去做電商的轉(zhuǎn)化，不是傳統(tǒng)的廣告或者會員費。
小芒電商成立了四年，現(xiàn)在一年的GMV也有一兩百億了，今年應(yīng)該會走向盈利，去年是微微虧損。它就是做IP的衍生商品，興趣圈子和追星人群。
大家一起喜歡一種玩具，棉花娃娃或者機(jī)甲等，有共同興趣，就上這個平臺，也可以說是個社區(qū)，這是我們的新業(yè)態(tài)。
另外，我們今年還有個新的戰(zhàn)略重點是小游戲。我們基于IP來研發(fā)相關(guān)游戲。也許做游戲我們不是專業(yè)的，當(dāng)然，我們肯定不是專業(yè)的，比騰訊和米哈游，我們肯定比不過。
但是，我們基于IP做游戲，可能就有優(yōu)勢，用戶邊看內(nèi)容邊去玩游戲，甚至他玩游戲的結(jié)果，又融合到節(jié)目里面去，成為內(nèi)容的一部分。
比如說，你玩一個游戲，結(jié)束之后，發(fā)現(xiàn)超過了何炅，然后，何炅在節(jié)目里面說，這個網(wǎng)友是誰，一下子就超過我了，就很好玩。我們做這些互動小游戲，結(jié)合IP來做，這是我們的重點。
鈦媒體APP：小游戲是在芒果TV APP上運行嗎？
盧海波：我們芒果TV上有自己的小程序平臺，有自己的小游戲平臺，但是我們不會局限于在這里，微信小程序里面也可以讓大家可以玩，只是芒果TV可能是讓他最先看到的，因為他在看節(jié)目過程中，他就更有沖動玩這個游戲。
事實上，我們孵化出了一些小游戲，尤其是社交類的小游戲，數(shù)據(jù)是挺好的。我們?nèi)ツ甑子袀€游戲發(fā)布了出來，有人連玩了30個小時，普通用戶也平均玩了兩個多小時。
鈦媒體APP：如果把“AI+IP”組合起來，會更有想象空間嗎？
盧海波：結(jié)合起來肯定就創(chuàng)作能力更強(qiáng)了，比如說，我們做的互動影游也與此相關(guān)。互動影游，也就是前幾年是叫互動劇，你看視頻不簡單一條線路了，是各種分支，根據(jù)你的不同的選擇不同表現(xiàn)，劇情不同發(fā)展，其實是視頻的游戲化了。
我們今年做了個升級，把內(nèi)容能夠發(fā)布到實際的平臺，發(fā)布到小程序平臺，所以，你看這個內(nèi)容的時候，你能夠參與它，改變這個結(jié)果。
如果基于一個已經(jīng)有IP來制作互動影游，原來就遇到過一個問題，有好多視頻片段，你要重新拍，這就更麻煩了，現(xiàn)在，我們?nèi)〉檬跈?quán)的情況下，就可以用AI重新生成。
還是你這個人穿這件衣服，但變成另外一個劇情，我不需要再拍了，因為AI已經(jīng)學(xué)習(xí)到了，生成了各種分支，各種特效，按照我們的互動影游編輯平臺，發(fā)布新的接近于游戲的內(nèi)容，大家就去玩了。
舉個簡單例子，劇里這個男的，最后選擇了那個女的，我恨死了，我就硬是要改變結(jié)局。
我個人認(rèn)為，互動影游最終結(jié)局就是AIGC。這是我們憧憬的一個方向，我認(rèn)為也不會太遠(yuǎn)。
鈦媒體APP：但其實有些偉大的作品，可能故事不是你想要的結(jié)局，但它帶來沖擊和遺憾，反而讓你印象更深，念念不忘。AI可以生成多種結(jié)局，彌補遺憾，但該怎么去考慮與藝術(shù)創(chuàng)作之間的關(guān)系？
盧海波：AI可以幫助創(chuàng)作者探索敘事可能性，這可能催生新的藝術(shù)形式，比如交互式故事，也就是上面提到的互動影游，觀眾可以探索多種敘事路徑。但同時，我們也需要珍視那些因遺憾而偉大的作品，它們展現(xiàn)了生活的真實復(fù)雜性。（本文獨家首發(fā)于鈦媒體APP，作者｜李程程）
快報
根據(jù)《網(wǎng)絡(luò)安全法》實名制要求，請綁定手機(jī)號后發(fā)表評論
雖然還有難題，但芒果TV解決問題的決心和行動值得肯定。
芒果TV的嘗試為行業(yè)提供新思路，值得其他平臺借鑒。
雖說還沒對外發(fā)布，靠它會員數(shù)和收入都增長了，真有一手！
在AI視頻領(lǐng)域持續(xù)探索，芒果TV未來發(fā)展?jié)摿o限！
通過網(wǎng)信辦備案，覆蓋70多個場景，這大模型實力不容小覷！
多模態(tài)和推理模型雙管齊下，助力芒果TV內(nèi)容更上一層樓。
各業(yè)務(wù)板塊協(xié)同發(fā)展，芒果TV打造出獨特AI生態(tài)。
生成多種劇情結(jié)局，大大提升影游創(chuàng)作能力，太贊了！
期待芒果TV持續(xù)創(chuàng)新，帶來更多驚喜和突破
緊跟AI發(fā)展趨勢，芒果TV有望引領(lǐng)行業(yè)新潮流。