隨著5G技術(shù)的大規(guī)模商用,高分辨率的視頻流量將呈指數(shù)級增長。移動視頻行業(yè)委員會預(yù)測顯示,至2028年5G流量的90%將來自視頻,增強(qiáng)型視頻(VR、AR、AGC)將是5G的第二大用例類型。
AI作為通用技術(shù)能夠賦能百業(yè),通過幫助各行各業(yè)解決行業(yè)痛點(diǎn)最終實現(xiàn)降本增效。當(dāng)5G技術(shù)可以大規(guī)模商用的時候,視頻行業(yè)也在期待5G到來的那天,期望可以大大壓低成本?但在視頻領(lǐng)域,日本也在積極運(yùn)作,情況究竟如何呢?看看這篇文章如何介紹吧。
隨著5G技術(shù)的大規(guī)模商用,高分辨率的視頻流量將呈指數(shù)級增長。移動視頻行業(yè)委員會預(yù)測顯示,至2028年5G流量的90%將來自視頻,增強(qiáng)型視頻(VR、AR、AGC)將是5G的第二大用例類型。
隨后,英特爾發(fā)布《5G娛樂經(jīng)濟(jì)報告》進(jìn)一步顯示,5G視頻內(nèi)容消費(fèi)加速,用戶月均流量使用量將從當(dāng)前的11.7GB增長至84.8GB,2021-2028年傳媒和娛樂企業(yè)由此將受益新增營收1400億美元,增強(qiáng)型視頻(VR、AR、AGC)服務(wù)的營收潛力可達(dá)960億美元。
報告分析師指出,“5G+AI技術(shù)紅利”將驅(qū)動視頻產(chǎn)業(yè)迎來增強(qiáng)型視頻(VR、AR、AGC)內(nèi)容快速發(fā)展,如何搭載5G順風(fēng)車,中國、日本、韓國等亞太地區(qū)的部分文娛企業(yè)已經(jīng)率先開始使用人工智能技術(shù)輔助視頻內(nèi)容生產(chǎn),開始大規(guī)模用AI生產(chǎn)技術(shù)解決5G時代的內(nèi)容及圖像質(zhì)量。
中國智能影像生產(chǎn)技術(shù):文娛全產(chǎn)業(yè)鏈基礎(chǔ)建設(shè)
較其他國家及地區(qū),中國媒體及娛樂企業(yè)對全面智能視頻化保持熱情。大部分企業(yè)認(rèn)為,智能影像生產(chǎn)技術(shù)能切實可行的提高制作及分發(fā)效率,借助AI技術(shù)能夠為用戶提供量身定制和智能推薦的內(nèi)容,它改變的是內(nèi)容創(chuàng)作和分發(fā)的方式。包括《南方日報》、騰訊、澎湃、芒果TV、愛奇藝、華視傳媒等在內(nèi)的傳媒和娛樂企業(yè)積極借助人工智能技術(shù)構(gòu)建自主可控平臺或提供優(yōu)質(zhì)視頻內(nèi)容產(chǎn)品。
目前,AI技術(shù)的應(yīng)用已經(jīng)貫穿整個文創(chuàng)產(chǎn)業(yè)鏈,包含劇本創(chuàng)作、選角、流量預(yù)測、審核、編碼、剪輯、運(yùn)營、搜索、推薦、宣發(fā)、熱點(diǎn)預(yù)測、熱點(diǎn)提取、追星、廣告投放、在線交互等諸多環(huán)節(jié),實現(xiàn)智能創(chuàng)作、智能生產(chǎn)、智能標(biāo)注、智能分發(fā)、智能播放、智能變現(xiàn)、智能客服等七大方面的充分應(yīng)用。
據(jù)Forrester發(fā)布的《2019-2020 Video AI技術(shù)預(yù)測》報告顯示,90%的中國視頻平臺正在借助專業(yè)的視頻識別技術(shù)以對視頻進(jìn)行數(shù)據(jù)結(jié)構(gòu)化,在視頻內(nèi)容原創(chuàng)、視頻營銷、視頻結(jié)構(gòu)化商用、視頻大數(shù)據(jù)領(lǐng)域、機(jī)器人流程化等領(lǐng)域產(chǎn)生財務(wù)績效,通過自動化影像加工輔助技術(shù)、生產(chǎn)技術(shù)為產(chǎn)業(yè)升級提供動力。
在智能影像生產(chǎn)環(huán)節(jié),國內(nèi)人工智能公司影譜科技的視頻內(nèi)容自動化生產(chǎn)引擎—MAPE (Moviebook Auto-Production Engine)是一個人工智能平臺,利用視頻識別及視頻生產(chǎn)技術(shù)為文娛企業(yè)提供內(nèi)容生產(chǎn)平臺。
在商業(yè)化環(huán)節(jié),國內(nèi)多個熱門作品都采用了基于人工智能的內(nèi)容生產(chǎn)技術(shù),包括熱播的《我的師傅》、《巔峰之夜》、《我最愛的女人們》、《女兒們的熱愛》、《妻子的浪漫旅行》、《戀愛先生》、《楚喬傳》等,這些熱門節(jié)目的商業(yè)化技術(shù)實現(xiàn)與傳統(tǒng)方式不盡相同,通過采納影譜科技智能影像生產(chǎn)技術(shù),讓品牌主的廣告畫面成為原視頻內(nèi)容的一個部分,更有甚者是把原本不存在的品牌主物品以“虛擬廣告道具”方式無違和感的植入視頻播放/用戶觀影過程中。
不僅如此,除視頻以外,圖、文、音、影等不同信息載體之間無縫轉(zhuǎn)換正成為智能傳媒的重要基礎(chǔ)設(shè)施。傳統(tǒng)的圖像、文字、音頻、視頻相互轉(zhuǎn)化,通常人工需要一周時間,平均花費(fèi)263美元,內(nèi)容失真率卻高達(dá)52%。而AI技術(shù)的加入,可以使信息介質(zhì)融合互換更快速、更低價、更有效,如前端內(nèi)容采寫可通過AI技術(shù)一鍵生成與之匹配的視頻、音頻等,改變內(nèi)容開發(fā)整個過程,從內(nèi)容創(chuàng)造、生成機(jī)制、影響力提前預(yù)測、觀察數(shù)據(jù)等方面。
雖然一些媒體和娛樂公司對AI的投入保持謹(jǐn)慎,但大多數(shù)專家預(yù)測中國的5G+人工智能發(fā)展速度較全球市場將更快一步。
日本智能影像生產(chǎn)技術(shù):如何提升動畫制作效率
顯然,日本動畫產(chǎn)業(yè)是這次AI+5G視頻消費(fèi)升級的核心。動畫產(chǎn)業(yè)市場規(guī)模超過2兆日元的日本,在人工智能技術(shù)與效能方面也進(jìn)行了具有個性化的探索,在動畫預(yù)處理、動畫動態(tài)、動畫合成等全產(chǎn)業(yè)上已形成深度應(yīng)用場景。
首先,AI生成工具提高繪畫產(chǎn)業(yè)鏈生產(chǎn)效率。
自動上色 AI 工具的成功商用,讓畫師的制作進(jìn)一步簡化。近期,白泉社(發(fā)行漫畫期刊、漫畫等為主的會社)和博報堂(日本知名的廣告與傳播集團(tuán))DY Digital 宣布開始使用 AI 技術(shù)來交付和銷售自動著色的彩色漫畫。第一部彩色漫畫將在電子書店網(wǎng)站(如白泉社 e-net)發(fā)送。未來還將通過自動對其他作品進(jìn)行著色來制作和分發(fā)彩色版本。
這是由日本科技企業(yè) Preferred Networks 研發(fā)的一款自動上色工具“PaintsChainer”,利用深度學(xué)習(xí)的 AI(人工智能),代替人工進(jìn)行大量簡單的上色線稿工作,用戶只需上傳一張黑白線稿,PaintsChainer 會通過神經(jīng)網(wǎng)絡(luò)算法自動上色,生成一張彩色漫畫。
有了 AI 的輔助之后,畫師只需要完成部分輪廓和剪影的設(shè)計,計算機(jī)就可以自動生成細(xì)化的畫面,之后輸入黑白的線稿就可以涂畫大體的顏色,最后畫師只需要做一些細(xì)微的調(diào)整。這一生產(chǎn)方式的投入,成倍提高了新人的工作效率、每天作畫張數(shù)的增加便可帶來收入的提高。
除 Paintschainer 之外,另一項簡化畫師工作流程的項目也在日本引起了較大的關(guān)注。Edgar Simo-Serra 團(tuán)隊開發(fā)出一種將鉛筆畫的粗略草圖轉(zhuǎn)化成線稿的 AI 工具。該模型框架基于完全卷積神經(jīng)網(wǎng)絡(luò),當(dāng)輸入一個粗略的草圖圖像模型后,即可獲得一個干凈的簡化線稿。
不僅是漫畫彩色化,并且能有助于解決目前日本動畫制作現(xiàn)場的困境。最近上映的劇場版動畫《FLCL Progressive》(《フリクリ プログレ》)采用Dwango公司旗下機(jī)械學(xué)技術(shù)研發(fā)部門“Dwango Media Village”開發(fā)的最新動畫制作支持技術(shù)。
(Dwango Media Village研發(fā)AI技術(shù)擬人形象。圖左:時季ヶ原 埋,擔(dān)當(dāng)工程:中割り。圖右:時季ヶ原 寫,擔(dān)當(dāng)工程:原畫トレス)
該技術(shù)主要應(yīng)對動畫制作過程中的“中割”(中割り)和“原畫臨描”(原畫トレス)兩大環(huán)節(jié)?!爸懈睢迸c“原畫臨描”在動畫制作過程中屬于讓畫面“動”起來的工作,往往需要大量的動畫師花費(fèi)不少時間去一張一張完成,但技術(shù)含量相對于原畫等其他環(huán)節(jié)較低。事實上,“Dwango Media Village”即是通過計算機(jī)視覺識別及自動生成技術(shù)將這一部分的勞動量節(jié)省下來。
“電影制作過程中,雖然經(jīng)過AI生成的畫面,還需要作畫監(jiān)督進(jìn)行修正”,擔(dān)任《FLCL Progressive》第五話監(jiān)督的末澤慧就表示,“但AI給工作帶來的便利超過麻煩,隨著AI學(xué)會的越多,需要人工修繕的地方就會越來越少”。
其次,顯著減少動畫制作企業(yè)成本,第二視頻產(chǎn)業(yè)在日本覺醒。
對于動畫制作公司來說,AI 的帶來的好處是顯而易見的,首先就是制作成本的降低。
近日,I.G port發(fā)布的最新財報顯示,在動畫制作事業(yè)上,公司本期(2017.6.1-2018.2.28)損失為3.99億日元(去年同期為2.34億日元的損失)。主要是為了制作出讓觀眾滿意的高質(zhì)量動畫,制作費(fèi)用持續(xù)增加。與之相似的還有龍之子動畫工作室(NTV 旗下),2017財年虧損了5000萬日元。目前一部動畫的參與制作人員平均百余人,較日漸增加的人工費(fèi)用,將最底層工作交由計算機(jī)完成,是動畫制作公司的最佳選擇。
其次,AI 也能緩解日本動畫公司人手不足的情況。在這種局面下,早稻田大學(xué)科森島繁生研究室研發(fā)出了通過現(xiàn)實場景的照片自動生成背景的CG技術(shù)。該技術(shù)旨在讓創(chuàng)作者能夠更加便利、輕松地使用和工作。生成一張背景僅需10秒。進(jìn)一步,除了靜止的畫面,讓運(yùn)動的影像也自動生成,效率大大提升。
自動內(nèi)容生產(chǎn)技術(shù)(AGC)的引入將釋放大量輕創(chuàng)作勞動,借助計算機(jī)視覺等AI技術(shù)減少動畫制作時所需的人物力高消耗。
如前不久入圍威尼斯電影節(jié)、由ProducTIon I.G制作的《攻殼機(jī)動隊 新劇場版Virtual Reality Diver》,通過AI視頻生成+VR技術(shù)帶來更新的動畫觀賞體驗。
早前,Pixiv推出過利用AI上色的功能。今年7月,P站又推一款“黑科技” VRoid Studio,讓不懂三維建模技術(shù)的普通人也能輕松創(chuàng)作出自己的3D角色。
另外,日本虛擬偶像和動畫的關(guān)系也越走越近,已有日本公司開始籌劃使用VR+VTuber進(jìn)行自動化動畫生產(chǎn)(AGC)的制作方式。今年9月,日本VR技術(shù)公司XVI(株式會社エクシヴィ)和影像音樂集團(tuán)愛貝克斯(Avex)共同成立的AniCast Lab.正是希望通過VTuber+VR的應(yīng)用,將動畫制作的周期縮短,減少人力勞動,以及節(jié)約成本。AniCast Lab.創(chuàng)造一種全新的動畫制作方式,采用智能影像生產(chǎn)技術(shù)令普通人也能制作自己的動畫并發(fā)布分享。
隨著5G到來,智能影像技術(shù)正讓日本動漫產(chǎn)業(yè)走向全數(shù)字化的可能,日本動畫公司的抉擇,也將影響到海外同行能否借機(jī)實現(xiàn)“變道超車”。
5G+AI視頻娛樂已經(jīng)不僅僅是一種技術(shù)想象,而是真實走進(jìn)了一個產(chǎn)業(yè)周期中的快速上行通道。對于必須兼顧視頻圖像和內(nèi)容質(zhì)量的文娛創(chuàng)作企業(yè)而言,展開對全自動化視頻生產(chǎn)技術(shù)的應(yīng)用研究成為一種微妙的供給平衡手段。事實上,一些先行企業(yè)將取得“技術(shù)先發(fā)優(yōu)勢”作為最大的戰(zhàn)略目標(biāo)。