AI剪輯的“so great” 和“too weak”
今年世界杯迄今為止最大冷門(mén),無(wú)疑是衛(wèi)冕冠軍德國(guó) 0:1 爆冷負(fù)于墨西哥,險(xiǎn)些0:2甚至0:3。世界杯的魅力就是永遠(yuǎn)會(huì)發(fā)生各種看似各種不可能的事,因此,留下了不少讓球迷津津樂(lè)道的精彩瞬間。
如何快速將這些精彩快速集合,二次引爆球迷呢?
某視頻網(wǎng)站在6月14日世界杯揭幕賽前正式發(fā)布最新“AI黑科技”— AI直播剪輯官,參與世界杯直播精彩短視頻實(shí)時(shí)剪輯。事實(shí)上,在年初的2018足協(xié)杯資格賽上,人工智能剪輯就被運(yùn)用,全部自動(dòng)化完成,不需要人工操作審核,實(shí)時(shí)捕捉、實(shí)時(shí)剪輯。
不僅在體育上,AI剪輯最早是被應(yīng)用在電影制作上,但是在這兩者上的應(yīng)用上卻有一定的差異,并呈現(xiàn)一系列問(wèn)題,下面筆者將據(jù)此進(jìn)行分析。
AI剪輯體育視頻“so great”,剪輯電影就”too weak“
說(shuō)起電影剪輯,不得不提王家衛(wèi)。據(jù)說(shuō)他拍電影不用劇本,全靠后期剪輯。張曼玉曾在拍《花樣年華》接受記者采訪時(shí)坦言,“拍他的戲很無(wú)奈,因?yàn)槟阌肋h(yuǎn)不會(huì)知道他下一步會(huì)怎樣走,根本無(wú)法準(zhǔn)備。不過(guò),每次看完剪片,我都會(huì)有意外驚喜,很開(kāi)心!
這充分說(shuō)明了剪輯在電影中的重要地位,類(lèi)似于觀音菩薩捏泥人造人時(shí),最后吹的那口讓泥人成真人的一口氣。
體育往往是肢體運(yùn)動(dòng),AI 在剪輯前更多的是人臉識(shí)別和對(duì)相關(guān)動(dòng)作的學(xué)習(xí),但是電影是對(duì)白藝術(shù),不僅是人臉識(shí)別還有語(yǔ)音語(yǔ)義識(shí)別。同時(shí),體育運(yùn)動(dòng)是在既定的規(guī)則框架下進(jìn)行的,AI不需要花費(fèi)時(shí)間去去判斷是否犯規(guī),而在AI剪輯電影前,需要判斷表演的好壞和拍攝的質(zhì)量,還要能識(shí)別出穿幫鏡頭。二者的難度系數(shù)可想而知。
因此,AI剪輯現(xiàn)階段在體育領(lǐng)域的使用會(huì)遠(yuǎn)遠(yuǎn)高于在在電影領(lǐng)域的使用,在電影剪輯里,它更多的是作為一個(gè)輔助者。
早前IBM的人工智能系統(tǒng)Watson曾為電影《Morgan》剪輯預(yù)告片。
具體流程是先給Watson看100部恐怖電影預(yù)告片,準(zhǔn)確的說(shuō),是這些影片的切割片段或單獨(dú)場(chǎng)景。Watson對(duì)這些預(yù)告片進(jìn)行了畫(huà)面、聲音、創(chuàng)作構(gòu)成的分析,并標(biāo)記上對(duì)應(yīng)的情感。隨后,工作人員將電影《Morgan》導(dǎo)入,Watson迅速挑出了其中10個(gè)場(chǎng)景組成了一段長(zhǎng)達(dá)6分鐘的影片。最后在剪輯師的幫助下,這些鏡頭被剪輯成最終的成片。
該預(yù)告片談不上優(yōu)秀,甚至有點(diǎn)“土”而無(wú)“味”。但是在營(yíng)銷(xiāo)和制作周期上的意義影響深遠(yuǎn),本應(yīng)10天到1個(gè)月的制作周期縮減到了24小時(shí),獲得了極大的曝光。除此之外并沒(méi)有特別的意義,《Morgen》于2016年上映,在此之后鮮少聽(tīng)聞?dòng)须娪坝萌斯ぶ悄茏鲱A(yù)告片。
AI剪輯更多是“成品“不是”作品“
據(jù)說(shuō)戰(zhàn)地記者在拍攝的時(shí)候,有時(shí)候會(huì)因?yàn)椴皇煜で闆r沒(méi)法獲取一手資料,而這個(gè)時(shí)候如果托當(dāng)?shù)厝巳ヅ臄z就會(huì)容易得多。對(duì)看新聞的人而言,他們不會(huì)太關(guān)心這段視頻是不是抖動(dòng)得厲害,畫(huà)質(zhì)是否不清晰,只要這個(gè)新聞事件被完整呈現(xiàn)。
顯然對(duì)很多球迷而言,呈現(xiàn)的意義比創(chuàng)作更大。能及時(shí)看到世界杯的進(jìn)球和精彩合集是最重要的,再配上足夠激動(dòng)人心的音樂(lè),球迷并不會(huì)在意其他。
2018賽季NBA總決賽塵埃落定后,有視頻網(wǎng)站實(shí)時(shí)上線了《杜蘭特11年精彩回顧》。球迷對(duì)這部片子的要求不亞于對(duì)一部電影的標(biāo)準(zhǔn),但是捫心自問(wèn),它絕對(duì)算不得一部精彩的剪輯,全程節(jié)奏平淡,層次感不清晰,看完內(nèi)心毫無(wú)波瀾。好的剪輯可以直戳人心,而AI剪輯顯然和優(yōu)秀的剪輯師還有一段距離,AI剪輯的僅僅是“成品”而不是“作品”。
AI剪輯的發(fā)展軌跡
影視剪輯不僅重要,而且比較程式化,非常耗時(shí)。而 AI 的加持無(wú)疑有利于提升剪輯視頻的效率,智能相對(duì)論的分析師雷宇認(rèn)為,AI剪輯大體按照以下三個(gè)運(yùn)行軌跡發(fā)展。
第一步:畫(huà)面識(shí)別,縮短素材收集時(shí)間
這是AI對(duì)視頻最基礎(chǔ)的認(rèn)知,這里的 AI 識(shí)別的主要是辨認(rèn)視頻畫(huà)面中的對(duì)象。以世界杯為例,主要就是對(duì)高速運(yùn)動(dòng)下的球星人臉實(shí)時(shí)定位與檢測(cè),如這段視頻幾秒至幾秒出現(xiàn)的球星是梅西,這一段是阿圭羅等,并能將他們的視頻提取出來(lái)。
2016年Miles Deep 則使用了特殊的深度卷積神經(jīng)網(wǎng)絡(luò),可以取其精華去其糟粕,更方便你看小黃片。它可以移除所有不包含性接觸的場(chǎng)景,或者編輯去掉一種特定的性行為,是一個(gè)很好用的色情視頻分類(lèi)或編輯工具。
另一方面,有數(shù)據(jù)顯示,2025年全球數(shù)據(jù)量將達(dá)到163ZB ,這對(duì)人來(lái)說(shuō)整理視頻數(shù)據(jù)將越來(lái)越麻煩,但對(duì)AI來(lái)說(shuō),已經(jīng)能夠輕松做到從全網(wǎng)提取出包含特定關(guān)鍵詞內(nèi)容的視頻片段,并截取出來(lái)統(tǒng)一進(jìn)行分類(lèi)整理,這一步的AI類(lèi)似于一個(gè)小秘書(shū)。
第二步:理解鏡頭語(yǔ)言,學(xué)習(xí)人類(lèi)的鏡頭剪輯
AI需要對(duì)視頻的理解深入到鏡頭的內(nèi)容及鏡頭語(yǔ)言的運(yùn)用,學(xué)習(xí)剪輯規(guī)則,通過(guò)深度學(xué)習(xí)模仿人類(lèi)的剪輯技巧,實(shí)現(xiàn)基本的剪輯。如在世界杯中,它需要準(zhǔn)確識(shí)別進(jìn)球、射門(mén)、角球、紅牌、黃牌、慶祝等多種動(dòng)作,模仿人自動(dòng)剪輯出進(jìn)球、射門(mén)、犯規(guī)、過(guò)人等精彩片段。
以我們常常吐槽的制作粗糙的網(wǎng)絡(luò)劇為例,素材和成片比例大概是10:1,剪輯師剪輯起來(lái)可能不那么耗費(fèi)精力。但是真人秀節(jié)目就不同了,素材與成本的比例非常驚人,例如《爸爸去哪兒》攝制組共有40多個(gè)機(jī)位,大全景、大特寫(xiě)、小全景等多個(gè)景別同時(shí)開(kāi)拍,每集90分鐘的節(jié)目都有1000多小時(shí)的素材。如何前期從幾十臺(tái)機(jī)位的素材中快速找到最終剪輯需要的鏡頭,是相當(dāng)費(fèi)時(shí)費(fèi)力的過(guò)程,而AI 的使用可以輔助人篩選,最終簡(jiǎn)化這一流程。
第三步:在某種程度上替代人,做一些具有創(chuàng)造性的活。
這要求AI能自行能夠理清素材間的聯(lián)系,根據(jù)學(xué)習(xí)的鏡頭組接規(guī)則,面向特定目標(biāo)自動(dòng)進(jìn)行視頻的剪輯。經(jīng)典好萊塢電影拍攝手法,一般是拍攝一個(gè)遠(yuǎn)景作為主鏡頭,然后再分別拍攝特寫(xiě)鏡頭、反應(yīng)鏡頭、切入鏡頭和切離鏡頭,最后剪輯師依據(jù)需求進(jìn)行剪輯。
一個(gè)來(lái)自斯坦福大學(xué)和Adobe公司的AI便能夠自行同步相同場(chǎng)景的錄像。然后自動(dòng)識(shí)別和分析演員所體現(xiàn)出的人物形象,最后根據(jù)導(dǎo)演對(duì)風(fēng)格的要求,AI依據(jù)數(shù)據(jù)庫(kù)里較為成熟的剪輯風(fēng)格和鏡頭語(yǔ)言對(duì)錄像進(jìn)行自動(dòng)選擇和組裝。
圖為四種不同形式的剪輯
它僅僅3秒鐘就剪出了一個(gè)71s的視頻,而一個(gè)經(jīng)驗(yàn)豐富的剪輯師可能需要好幾個(gè)小時(shí)。但是剪輯質(zhì)量如何,最關(guān)鍵的地方卻沒(méi)有細(xì)說(shuō),很微妙。
結(jié)尾
毫無(wú)疑問(wèn),AI剪輯已經(jīng)越來(lái)越廣泛滲入到了文體產(chǎn)業(yè),從第一部電影誕生至今,電影影視工業(yè)不斷的走向成熟和便捷。剪輯因早一批的剪輯師用剪刀剪斷錄像膠卷后拼接成像而得名,隨著電影電視數(shù)碼化,剪輯師的工具從剪刀變成了電腦,AI剪輯讓剪輯師手里的工具更加的方便,利于他們創(chuàng)作出更多更優(yōu)秀的作品。
但是,在讓剪輯師更加便捷工作的同時(shí),也讓剪輯師的職業(yè)門(mén)檻不斷降低,越來(lái)越多的人可以制作視頻,電影電視的制作周期可能會(huì)更短,至于質(zhì)量?粉絲買(mǎi)單就成。
發(fā)表評(píng)論
請(qǐng)輸入評(píng)論內(nèi)容...
請(qǐng)輸入評(píng)論/評(píng)論長(zhǎng)度6~500個(gè)字
最新活動(dòng)更多
-
即日-11.13立即報(bào)名>>> 【在線會(huì)議】多物理場(chǎng)仿真助跑新能源汽車(chē)
-
11月28日立即報(bào)名>>> 2024工程師系列—工業(yè)電子技術(shù)在線會(huì)議
-
12月19日立即報(bào)名>> 【線下會(huì)議】OFweek 2024(第九屆)物聯(lián)網(wǎng)產(chǎn)業(yè)大會(huì)
-
即日-12.26火熱報(bào)名中>> OFweek2024中國(guó)智造CIO在線峰會(huì)
-
即日-2025.8.1立即下載>> 《2024智能制造產(chǎn)業(yè)高端化、智能化、綠色化發(fā)展藍(lán)皮書(shū)》
-
精彩回顧立即查看>> 【限時(shí)免費(fèi)下載】TE暖通空調(diào)系統(tǒng)高效可靠的組件解決方案
推薦專(zhuān)題
- 1 【一周車(chē)話(huà)】沒(méi)有方向盤(pán)和踏板的車(chē),你敢坐嗎?
- 2 特斯拉發(fā)布無(wú)人駕駛車(chē),還未迎來(lái)“Chatgpt時(shí)刻”
- 3 特斯拉股價(jià)大跌15%:Robotaxi離落地還差一個(gè)蘿卜快跑
- 4 馬斯克給的“驚喜”夠嗎?
- 5 打完“價(jià)格戰(zhàn)”,大模型還要比什么?
- 6 馬斯克致敬“國(guó)產(chǎn)蘿卜”?
- 7 神經(jīng)網(wǎng)絡(luò),誰(shuí)是盈利最強(qiáng)企業(yè)?
- 8 比蘋(píng)果偉大100倍!真正改寫(xiě)人類(lèi)歷史的智能產(chǎn)品降臨
- 9 諾獎(jiǎng)進(jìn)入“AI時(shí)代”,人類(lèi)何去何從?
- 10 Open AI融資后成萬(wàn)億獨(dú)角獸,AI人才之爭(zhēng)開(kāi)啟
- 高級(jí)軟件工程師 廣東省/深圳市
- 自動(dòng)化高級(jí)工程師 廣東省/深圳市
- 光器件研發(fā)工程師 福建省/福州市
- 銷(xiāo)售總監(jiān)(光器件) 北京市/海淀區(qū)
- 激光器高級(jí)銷(xiāo)售經(jīng)理 上海市/虹口區(qū)
- 光器件物理工程師 北京市/海淀區(qū)
- 激光研發(fā)工程師 北京市/昌平區(qū)
- 技術(shù)專(zhuān)家 廣東省/江門(mén)市
- 封裝工程師 北京市/海淀區(qū)
- 結(jié)構(gòu)工程師 廣東省/深圳市