[新聞] Sora大片真相:人工特效參與,被指誤導大眾
Sora大片真相:人工特效參與,被指誤導大眾
https://www.qbitai.com/2024/04/138328.html
魚羊
啊? Sora火爆短片《氣球人》,也「造假」了? ? ?
背後藝術家團隊的最新揭秘,可謂一石激起千層浪:
原來, 視訊畫面並非完全由AI生成,其中有大量視覺效果需要人類後期實現 。
像:
https://www.qbitai.com/wp-content/uploads/replace/ce596c9de49429e0a84241b2adc33966.png
這下網友不幹了,合著大傢伙兒跟OpenAI玩真心,OpenAI背後卻耍起心眼子來了:
他們含糊其辭,就是希望觀眾認為短片完全是AI生成的,這是不是有點不誠實了啊。
這不是人工智慧生成的視頻,而是使用了一些AI技術的視頻。
還有網友直接開噴:誤導行銷! 這是誤導性行銷!
究竟是怎麼個事兒,咱們還是具體捋一捋。
揭秘Sora大片工作流程
儘管OpenAI一開始就介紹了,《氣球人》這樣的短片出自藝術家團隊之手,他們只是把
Sora開放給了藝術家使用,但官方並未提及短片具體是如何製作而成的。
現在,《氣球人》背後的藝術家團隊Shy Kids自己來了個大揭秘,內容包括:
影片片段一致性如何實現
他們如何處理Sora生成的影片素材
Sora生成影片的限制及後製
影片一致性
《氣球人》中主角形象的一致性可謂驚艷眾人。
但其實吧,根據Shy Kids團隊中負責後製的老哥Patrick Cederberg(簡稱老帕)透露,
想要實現這種前後一致並不是寫寫提示詞就能成的。
Sora並沒有提供工具,來幫助實現不同鏡頭之間的主體一致性。 也就是說,就算提示詞
都是一樣的,兩次運行的結果也會有所不同。
他們的做法是,盡可能詳細地對主角形象進行描述。
解釋角色的服裝以及氣球的類型是我們解決一致性問題的方法,目前Sora還沒有整合
適當的功能來實現此類控制。
即便如此,團隊在用Sora生成影片素材時還是遇到了不少這樣那樣的問題。
例如,提示詞裡明明寫了氣球是黃色的,但Sora生成的片段裡氣球可能變成紅色。
視訊素材處理
一致性之外,老帕提到,在時間軸方面,Sora允許使用者修改關鍵影格。 但這種時間控
制並不精準,無法保證一定能達到預想的效果。
另外,想要實現這個鏡頭:
https://www.qbitai.com/wp-content/uploads/replace/93608b16f20522e8344f845d3e2d9955.gif
即把鏡頭焦點從牛仔褲一路上移到氣球頭,也得人類自己後期裁切平移畫面,因為Sora本
身不會渲染這樣的鏡頭:它總是傾向於把焦點集中在氣球頭上。
老帕也談到,他們在寫提示詞時也遇到了一些問題:
OpenAI在讓藝術家試用Sora前,並沒有考慮到真正的電影製作人是如何思考的。
簡單來說,就是Sora對攝影術語(如跟拍、平移等)的理解有限。 老帕認為,這一點上
Sora不如Runway。
值得一提的是,儘管Sora原生支援生成1080p視頻,但老帕他們實際上生成的素材都是
480p的。 他們是在後期使用Topaz等工具對視訊素材進行了超分處理。
生成速度方面,根據老帕的回憶,每次大概需要10-20分鐘的時間。
影片後期
接下來,就到了網友們反應最強烈的部分──後期。
前面已經說到,Sora本身也解決不了不同影片片段裡一致性的問題。
除了氣球不一定符合設定,或許是因為訓練資料的原因,Sora也喜歡自動為氣球加上
奇奇怪怪的人臉。
給主角生成其實不需要的假人頭。
Sora還堅定地認為氣球得帶根繩。
總而言之言而總之,這些都需要老帕上手丟到AE裡,進行後期處理。
另外,儘管Shy Kids發現「35mm底片」這樣的關鍵字很好用,能讓Sora生成的影片畫面風
格更一致,但藝術家們仍需要為最後的成片做調色,為畫面添加顆粒和閃爍效果,以使整
部影片畫面更協調統一。
老帕也提到了一個有趣的細節:
Sora很喜歡慢動作。
我不知道為什麼,但有很多鏡頭看起來都是0.5倍速和0.75倍速。
因此我們需要對大量畫面進行調速,免得影片看起來像是大型慢動作項目。
那麼,Sora生成的影片素材有多少最終被用在影片裡了?
「數學很差」的老帕估計了一下,大概是 300:1 。
音訊方面,Sora目前還不能產生聲音,因此旁白和音樂都是團隊自己加上去的。
版權
為了不侵犯版權,OpenAI給了Sora一些限制。
例如,你不能把提示詞寫成“35mm膠卷,未來太空船中,一名男子拿著光劍靠近”,那樣
Sora會直接拒絕生成,因為這畫面太像《星際大戰》了。
喔對,像什麼「阿羅諾夫斯基式鏡頭」和「希區考克變焦」也是不行的。
3人團隊2週製作完成
該說不說,在外界捲起風波之前,Shy Kids團隊對於Sora的表現還是很滿意的。
畢竟,製作《氣球人》這樣一個高品質短片,最後只用了他們仨1.5到2週的時間。
團隊認為,現在,對於專業的電影團隊來說,Sora當然還有很大進步空間,但對於大部分
人而言,Sora已經足夠驚艷。
用老帕自己的話說:
我覺得人們應該將Sora變成工作流程的一部分。
不過,如果他們不想跟AI沾邊,也沒關係。
對於這樣的觀點,也有不少網友表示認同,認為Sora這樣的影片生成AI,是對現有工作流
程很好的補充。
Adobe把它們整合進軟體裡,就是一個很不錯的主意。
但,「我厭倦了OpenAI們的精美Demo行銷」。
還有網友不滿的點在於,爆紅的「人工智慧生成影片」背後有大量的人類工作,他們投入
數百個小時工作,卻被AI掩蓋了真實的價值。
那麼,這事兒你怎麼看?
參考連結:
[1]https://www.fxguide.com/fxfeatured/actually-using-sora/
[2]https://twitter.com/bilawalsidhu/status/1783544598259794046
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 114.38.27.129 (臺灣)
※ 文章網址: https://www.ptt.cc/bbs/AI_Art/M.1714571826.A.E9F.html
→
05/02 07:01,
4月前
, 1F
05/02 07:01, 1F
推
05/02 08:32,
4月前
, 2F
05/02 08:32, 2F
→
05/02 08:33,
4月前
, 3F
05/02 08:33, 3F
→
05/02 08:33,
4月前
, 4F
05/02 08:33, 4F
→
05/02 08:34,
4月前
, 5F
05/02 08:34, 5F
→
05/02 08:35,
4月前
, 6F
05/02 08:35, 6F
→
05/02 08:35,
4月前
, 7F
05/02 08:35, 7F
推
05/02 22:35,
4月前
, 8F
05/02 22:35, 8F
→
05/02 22:36,
4月前
, 9F
05/02 22:36, 9F