《AI智能與影視制作分析》由會員分享,可在線閱讀,更多相關(guān)《AI智能與影視制作分析(6頁珍藏版)》請?jiān)谘b配圖網(wǎng)上搜索。
1、AI智能與影視制作分析
關(guān)鍵詞:AI智能;影視制作
一、引言
人工智能技術(shù)可以多方面的模擬人腦的思維,人工智能的出現(xiàn)不僅是提高人們生活質(zhì)量與生活層次的產(chǎn)物,同時也是社會進(jìn)步和發(fā)展的必然結(jié)果。隨著人工智能技術(shù)的快速發(fā)展,影視內(nèi)容制作現(xiàn)在與人工智能已經(jīng)逐漸結(jié)合并且結(jié)合的效果也已經(jīng)有了一定的起色,無論是自動配音環(huán)節(jié),還是自動生成字幕環(huán)節(jié)都還需要人工將其全部完成,在當(dāng)前形勢下,人工智能技術(shù)已經(jīng)逐漸與其相結(jié)合。尤其是對于一些高質(zhì)量的影視制作,通過結(jié)合人工智能技術(shù)可以在提高效率的同時,滿足用戶對影視內(nèi)容個性化的需求。為此,在影視制作領(lǐng)域要全面推廣對AI智能技術(shù)
2、的應(yīng)用。
二、人工智能介入影視后期制作的條件
(一)建立有效的影像辭典
《西蒙尼》主要是由美國一家電影公司所發(fā)行的,電影的內(nèi)容主要就是將主角要離開劇組,導(dǎo)演利用數(shù)字虛擬化的方式合成一個女明星,也就是電影名字西蒙尼。電影的這個影像過程都是采用數(shù)字虛擬技術(shù),導(dǎo)演創(chuàng)造出了一個沒有任何人可以取代的一個女主角,使女主角西蒙尼身上積聚了所有讓人羨慕的屬性。如果說導(dǎo)演制作了一個性質(zhì)相對比較簡單的電影假象,對于人工智能介入的數(shù)字化剪輯來講,影像辭典在建立過程中會更加的復(fù)雜。要采集海量的影視素材,并對素材急性分析,這只是屬于一個輸入、計(jì)算學(xué)習(xí)的過程。例如對于大量的
3、影視素材,都需要將其分割成多個小段,按照樹形的結(jié)構(gòu)將已經(jīng)分割成的各個小段進(jìn)行劃分,在私有類別里,定義為肖似代碼層面的,則不需要進(jìn)行改正和調(diào)整,較為簡單化,對于共有類別里,需要選擇一個相應(yīng)鏡頭組相接的參數(shù),如:鏡頭類型、速率等,其他類型的鏡頭,都可以采用同一種風(fēng)格作為參照的標(biāo)注,加以統(tǒng)一化的處理,這種表示主要就是針對試聽語言自身所具有的獨(dú)特優(yōu)勢。針對新拍攝的素材,數(shù)字剪輯師在整個工作過程中需要采用一種方式進(jìn)行處理和分析,同時還要結(jié)合原版的影響詞典進(jìn)行分析,利用計(jì)算機(jī)根據(jù)客戶給出要求將其剪輯成片,對于已經(jīng)剪輯好的成片也要被一起記錄在整個影像詞典中,完善整個影像詞典的特效和質(zhì)量。
(
4、二)對于視聽語言進(jìn)行深度學(xué)習(xí)
為了保障人工智能技術(shù)可以更加順暢介入到影像后期的剪輯中,就是保障計(jì)算機(jī)在意素層面中對整個影像情況進(jìn)行深入性的分析和研究,簡單來講,就是利用計(jì)算機(jī)將影像內(nèi)容全部讀懂,將意素的屬性以及意素之間相存在的聯(lián)系全部理解透徹。安德烈巴贊深入研究影像場景的調(diào)度情況時,就有一個非常典型的案例,在電影《公民凱恩》中最具有代表的一幕就是,演員蘇珊有了輕生的想法,凱恩需要在這個時候立即沖到演員蘇珊的屋內(nèi),阻止他輕生的行為。這一幕只用了一個鏡頭進(jìn)行表示。在人工智能技術(shù)下,將這一幕劃分成若干個鏡頭,例如:蘇珊臉色非常慘白,郁郁寡歡,床頭有玻璃杯、安眠藥片,凱恩迅速跑道蘇珊的
5、房間內(nèi),蘇珊臉色更加慘白,這樣也可以表述出上一幕所要表達(dá)的意思。這個案例被安德烈巴贊用在了鏡頭調(diào)度的研究中華,在整個過程中應(yīng)用人工智能技術(shù),可以深入研究像后期介入的具體操作情況進(jìn)行研究。另外,人工智能技術(shù)需要在讀懂鏡頭里意素的同時,還要根據(jù)人物的心理狀態(tài)和神態(tài)對鏡頭之間的銜接做好預(yù)測和判斷,確保呈現(xiàn)出的影像畫面是完整的。
三、智能媒體制作的應(yīng)用案例分析
在科學(xué)技術(shù)迅速發(fā)展的背景下,網(wǎng)絡(luò)新媒體發(fā)生了巨大的變化,開始借助人工智能技術(shù)對視頻內(nèi)容進(jìn)行智能化的便捷和生產(chǎn),主要采用的人工智能技術(shù)包括:人臉/人體的智能編輯技術(shù)、物體/場景的智能生成技術(shù)、跨模態(tài)內(nèi)容匹配生成技術(shù)
6、。
(一)人臉/人體的智能編輯技術(shù)
無論是人臉、還是人體動作的特效在整個視覺作品中都起著至關(guān)重要的作用,對于傳統(tǒng)的影視為了營造一種良好的特效,需要依附在整個后期制作和圖形的計(jì)算中,生成式對抗神經(jīng)網(wǎng)絡(luò)GAN的出現(xiàn),打開了人臉的智能生成、智能編輯的新思路[1]。在一般情況下,人臉生成都是采用GAN的變體模型在這個實(shí)際操作過程中采用編碼-解碼器的結(jié)構(gòu)進(jìn)行操作,通過特征碼來體現(xiàn)人臉的相關(guān)屬性,例如:臉形、表情、姿勢等,這樣就可以使神經(jīng)網(wǎng)絡(luò)學(xué)習(xí)有關(guān)人臉屬性分布特征碼之間所存在的緊湊映射性的關(guān)系。對于映射關(guān)系,用戶對其屬性可以隨意的進(jìn)行控制,并采用生產(chǎn)新的臉型或者是人臉做出
7、符合整個影視作品中鄋需要的動作、特效、表情,可以確保整個畫面的完整性。對于DeepFake技術(shù),在特定的條件下,可以對短視頻中的人臉根據(jù)整個影像畫面的需求進(jìn)行修飾,該技術(shù)雖然在應(yīng)用過程中還無法達(dá)到電影制作商所提出的相關(guān)要求和標(biāo)準(zhǔn),但是有很多的影視制作公司已經(jīng)開始對人臉/人體的智能編輯采用低成本的深度學(xué)習(xí)方法來將其應(yīng)用在影視作品中,提高整個影視作品的視覺感。
(二)物體/場景的智能生成技術(shù)
圖像生成技術(shù)的應(yīng)用可以有效產(chǎn)生出圖片特定的一種物體,產(chǎn)生出與視頻相關(guān)的背景和影像。“BigGAN”技術(shù)就可以利用獨(dú)立的模型產(chǎn)生出相關(guān)的圖片,并且圖片的質(zhì)量非常高,對于同一種不同
8、實(shí)體總所存在的多樣性可以采用截?cái)嗟牟僮鬟M(jìn)行控制,GAN的變體可以利用GAN、通過文字的形式來生成出更具有準(zhǔn)確性的圖像。同時也可以單一物體的形象特征進(jìn)行描述,例如:例如有一匹駿馬,駿馬的毛發(fā)是紅棕色,馬蹄是黑色,尾巴比較短,或者是采用多個實(shí)體組合成不同的場景進(jìn)行描述,例如:有三個滑雪者都背著書包從高處的雪山坡上劃過[2]。無論是對文字的分析,還是圖像生成模型的技術(shù)都屬于目前新型的一種人工智能技術(shù),通過對不同的數(shù)據(jù)集進(jìn)行訓(xùn)練,可以更加滿足對于文字的描述和講解,從而形成一種單一化的實(shí)體生成,還可以采用多體的場景使其形成一種圖像。利用圖像操縱類GAN,就可以直接對實(shí)體的邊緣情況進(jìn)行分析,根據(jù)分析結(jié)果設(shè)
9、定一個簡單的輪廓,進(jìn)而生成一種高質(zhì)量的實(shí)體圖像。以上這些技術(shù)應(yīng)用在影視內(nèi)容制作上都可以起到顯著的效果,提供大量的具有個性化特性的示例圖像素材,譬如在演播室的桌子上可以將不同的電視節(jié)目經(jīng)過簡單的操作生成出有關(guān)不同節(jié)目的裝飾物,這樣在很大程度上減少了人工制作素材的成本,節(jié)省了大量的人力和物力,全面提升整個影像視頻所獲取的經(jīng)濟(jì)效益。
(三)跨模態(tài)的匹配生成技術(shù)
跨媒體內(nèi)容生成主要就是指在學(xué)習(xí)的基礎(chǔ)上與不同的模態(tài)媒體內(nèi)容中的低維特征相匹配,低維特征具有相似語義的特性,例如:像表征物體的像素集合,單詞等;能夠有效降不同模態(tài)之間、媒體內(nèi)容中所存在的高維結(jié)構(gòu)性匹配進(jìn)行有效的完
10、成,例如:多物體、多層次的圖像、語句等,從而完整最終的內(nèi)容生成和轉(zhuǎn)化。在當(dāng)前網(wǎng)絡(luò)媒體節(jié)目制作中已經(jīng)有兩種技術(shù)被廣泛應(yīng)用,一種是總結(jié)型媒體內(nèi)容生成,以圖像到文本生成為主,包括圖像描述、視頻描述等,應(yīng)用實(shí)例有自動體育視頻解說,新聞稿件自動生成器等。另一種是想象型媒體內(nèi)容生成,以文本到圖像生成為主,包括文本-圖像、文本-視頻生成、文本-音頻生成等。應(yīng)用實(shí)例有圖像內(nèi)容編輯,以本文輸入為主;虛擬人物樂器演奏視頻,以音頻信息生成為主。第二種技術(shù)與第一種技術(shù)的生成特性恰恰相反,想象型媒體內(nèi)容生成屬于擴(kuò)展信息、聯(lián)想信息的一個主要過程中,簡單來講,與以往的媒體內(nèi)容對比可知,將要生成的內(nèi)容所包含的信息量非常的大,
11、這種方法在實(shí)際應(yīng)用的過程中都需要具備海量的配對訓(xùn)練數(shù)據(jù),在對抗生成網(wǎng)絡(luò)的基礎(chǔ)上對生成媒體內(nèi)容構(gòu)建模型,適合應(yīng)用在對互動創(chuàng)意視頻內(nèi)容的智能制作中。
四、人工智能技術(shù)與應(yīng)用在影視行業(yè)的發(fā)展
(一)人工智能對創(chuàng)意與編劇的影響
首先是創(chuàng)意編劇階段。2018年依靠人工智能技術(shù)創(chuàng)作了一部小說,叫《哈利波特和看起來像一大坨灰燼的肖像》,在人類看來這完全不像是正常的詞語,但就是這樣一本小說,在全世界的零零后里引起了巨大的反響,它帶著機(jī)械性的語言已經(jīng)成為一種新時尚。還有《Sunspring》這部出現(xiàn)在去年倫敦科幻電影節(jié)上的影片,也是由人工智能創(chuàng)作的。以上例子是人工
12、智能在創(chuàng)意階段所做的一些嘗試、一些工作。
(二)人工智能對制作的影響
在制作階段,有些技術(shù)目前已經(jīng)很成熟了。現(xiàn)在的體育比賽、現(xiàn)場秀和新聞節(jié)目中,攝像機(jī)的軌跡很多都是通過人工智能的大數(shù)據(jù)分析在驅(qū)動的。包括剪輯這樣的制作環(huán)節(jié),它的背后都有人工智能的驅(qū)動以保證最快的實(shí)效性。關(guān)于具體的圖像處理技術(shù),比如說NVIDIA新發(fā)布的RTX顯卡,它通過人工智能的降噪完成光線追蹤的實(shí)時處理;再比如說程序化紋理,在傳統(tǒng)三維技術(shù)里面生成成本相對比較高的環(huán)節(jié)都可以通過人工智能去幫助實(shí)現(xiàn)。以及涵蓋了面部捕捉和表情捕捉的動作捕捉技術(shù),在好萊塢電影《復(fù)仇者聯(lián)盟》和《星球大戰(zhàn)俠盜一號》等影片中所
13、呈現(xiàn)的虛擬角色的背后都有人工智能在驅(qū)動。還有聲音后期制作的例子,所有內(nèi)容相關(guān)的處理都有人工智能的嘗試在其中。到了所謂觸達(dá)階段,我們現(xiàn)在用的一個詞叫觸達(dá),是因?yàn)楝F(xiàn)在影視內(nèi)容的呈現(xiàn)方式不再是確定的銀幕或者屏幕,從現(xiàn)在的多屏融合到未來的VR。目前國內(nèi)的各大視頻平臺,內(nèi)容推送的背后都有大數(shù)據(jù)的支持。例如Netflix的項(xiàng)目,從立項(xiàng)到研發(fā),背后都有人工智能數(shù)據(jù)的支撐。人工智能技術(shù)在影視行業(yè)中有些內(nèi)容已經(jīng)在應(yīng)用階段了,有些內(nèi)容還處在實(shí)驗(yàn)階段,例如谷歌、NVIDIA也不斷會有一些實(shí)驗(yàn)室階段的技術(shù)出現(xiàn)。
五、人工智能與電影未來
在當(dāng)前社會形態(tài)下,人工智能技術(shù)已經(jīng)被廣泛應(yīng)用,在科
14、幻片中可以看到人工智能。例如:警匪片、偵探片等,將不清楚的畫面進(jìn)行放大,提高整個影像的清晰度,人工智能技術(shù)在以前是完全不可能實(shí)現(xiàn)的,但是現(xiàn)在我們已經(jīng)實(shí)現(xiàn)了對人工智能技術(shù)的應(yīng)用。人工智能技術(shù)應(yīng)用在電影中可以對我們?nèi)宋锉砬榈木庉嬏峁└嗟目赡苄院筒僮餍?。所以技術(shù)發(fā)展共同的特性就是滿足人類發(fā)展過程中的需求,使人類可以將需要創(chuàng)造的內(nèi)容和影像變得更加簡單、容易,在整個操作的過程中也不需要長時間的訓(xùn)練和調(diào)整。人工智能技術(shù)的出現(xiàn),我們每一個人都像是擁有一個人工智能助理,可以在很大程度上滿足我們創(chuàng)造過程中的實(shí)際需求。人工智能技術(shù)的發(fā)展不僅可以給我們的影視行業(yè)帶來更多的變化,激發(fā)人們的創(chuàng)作積極性和主動性,甚至還
15、可以改變?nèi)伺c人之間的溝通方式,利用人工智能技術(shù)將我們內(nèi)心所想要表達(dá)的想法全部表達(dá)出來。相信,在人工智能的領(lǐng)導(dǎo)下新時代會很快就來臨。
六、結(jié)束語
綜上所述,人工智能技術(shù)應(yīng)用在影視制作中具有較高的應(yīng)用價值??茖W(xué)、合理的應(yīng)用人工智能技術(shù)能夠有效改善長期以來我國傳統(tǒng)網(wǎng)絡(luò)技術(shù)的狀態(tài),改變了傳統(tǒng)全人工式的內(nèi)容制作模式,提高了人們的生活質(zhì)量和工作效率,同時也能夠準(zhǔn)確預(yù)測劇本拍成電影是否可以獲得更多的經(jīng)濟(jì)效益。例如:ScriptBook系統(tǒng),它屬于一種目前新型的一種高等技術(shù),包含數(shù)據(jù)分析、處理、算則算法等環(huán)節(jié),含有6500個以上劇本,同時它還具有對市場的應(yīng)變能力,在自由數(shù)據(jù)庫中
16、可以對新型數(shù)據(jù)進(jìn)行綜合的判定。創(chuàng)始人Azermai表示,ScriptBook預(yù)測的準(zhǔn)確性至少比人類高三倍。人工智能技術(shù)在性能的改變上還有非常大的進(jìn)步空間,對于藝術(shù)創(chuàng)作在目前還不能完全被人工智能所取代,因?yàn)樗囆g(shù)創(chuàng)造是需要創(chuàng)新的,人的思維是發(fā)散性的,而人工智能技術(shù)是人類在藝術(shù)創(chuàng)作中所賦予的一種特殊能力。
參考文獻(xiàn):
[1]鄧濤,王代強(qiáng).淺談影視藝術(shù)創(chuàng)作中的大數(shù)據(jù)智能算法分析與運(yùn)用[J].藝術(shù)科技,2019,32(22):18-19.
[2]毛琦.技術(shù)主義與契約機(jī)制:基于社會學(xué)意義的電影數(shù)據(jù)管理體系研究[J].現(xiàn)代傳播,2019,41(8):133-138.