[新聞] Sora大片真相:人工特效參與,被指誤導大

看板AI_Art作者 (j)時間4月前 (2024/05/01 21:57), 編輯推噓2(207)
留言9則, 3人參與, 4月前最新討論串1/1
Sora大片真相:人工特效參與,被指誤導大眾 https://www.qbitai.com/2024/04/138328.html 魚羊 啊? Sora火爆短片《氣球人》,也「造假」了? ? ? 背後藝術家團隊的最新揭秘,可謂一石激起千層浪: 原來, 視訊畫面並非完全由AI生成,其中有大量視覺效果需要人類後期實現 。 像: https://www.qbitai.com/wp-content/uploads/replace/ce596c9de49429e0a84241b2adc33966.png
這下網友不幹了,合著大傢伙兒跟OpenAI玩真心,OpenAI背後卻耍起心眼子來了: 他們含糊其辭,就是希望觀眾認為短片完全是AI生成的,這是不是有點不誠實了啊。 這不是人工智慧生成的視頻,而是使用了一些AI技術的視頻。 還有網友直接開噴:誤導行銷! 這是誤導性行銷! 究竟是怎麼個事兒,咱們還是具體捋一捋。 揭秘Sora大片工作流程 儘管OpenAI一開始就介紹了,《氣球人》這樣的短片出自藝術家團隊之手,他們只是把 Sora開放給了藝術家使用,但官方並未提及短片具體是如何製作而成的。 現在,《氣球人》背後的藝術家團隊Shy Kids自己來了個大揭秘,內容包括: 影片片段一致性如何實現 他們如何處理Sora生成的影片素材 Sora生成影片的限制及後製 影片一致性 《氣球人》中主角形象的一致性可謂驚艷眾人。 但其實吧,根據Shy Kids團隊中負責後製的老哥Patrick Cederberg(簡稱老帕)透露, 想要實現這種前後一致並不是寫寫提示詞就能成的。 Sora並沒有提供工具,來幫助實現不同鏡頭之間的主體一致性。 也就是說,就算提示詞 都是一樣的,兩次運行的結果也會有所不同。 他們的做法是,盡可能詳細地對主角形象進行描述。 解釋角色的服裝以及氣球的類型是我們解決一致性問題的方法,目前Sora還沒有整合 適當的功能來實現此類控制。 即便如此,團隊在用Sora生成影片素材時還是遇到了不少這樣那樣的問題。 例如,提示詞裡明明寫了氣球是黃色的,但Sora生成的片段裡氣球可能變成紅色。 視訊素材處理 一致性之外,老帕提到,在時間軸方面,Sora允許使用者修改關鍵影格。 但這種時間控 制並不精準,無法保證一定能達到預想的效果。 另外,想要實現這個鏡頭: https://www.qbitai.com/wp-content/uploads/replace/93608b16f20522e8344f845d3e2d9955.gif
即把鏡頭焦點從牛仔褲一路上移到氣球頭,也得人類自己後期裁切平移畫面,因為Sora本 身不會渲染這樣的鏡頭:它總是傾向於把焦點集中在氣球頭上。 老帕也談到,他們在寫提示詞時也遇到了一些問題: OpenAI在讓藝術家試用Sora前,並沒有考慮到真正的電影製作人是如何思考的。 簡單來說,就是Sora對攝影術語(如跟拍、平移等)的理解有限。 老帕認為,這一點上 Sora不如Runway。 值得一提的是,儘管Sora原生支援生成1080p視頻,但老帕他們實際上生成的素材都是 480p的。 他們是在後期使用Topaz等工具對視訊素材進行了超分處理。 生成速度方面,根據老帕的回憶,每次大概需要10-20分鐘的時間。 影片後期 接下來,就到了網友們反應最強烈的部分──後期。 前面已經說到,Sora本身也解決不了不同影片片段裡一致性的問題。 除了氣球不一定符合設定,或許是因為訓練資料的原因,Sora也喜歡自動為氣球加上 奇奇怪怪的人臉。 給主角生成其實不需要的假人頭。 Sora還堅定地認為氣球得帶根繩。 總而言之言而總之,這些都需要老帕上手丟到AE裡,進行後期處理。 另外,儘管Shy Kids發現「35mm底片」這樣的關鍵字很好用,能讓Sora生成的影片畫面風 格更一致,但藝術家們仍需要為最後的成片做調色,為畫面添加顆粒和閃爍效果,以使整 部影片畫面更協調統一。 老帕也提到了一個有趣的細節: Sora很喜歡慢動作。 我不知道為什麼,但有很多鏡頭看起來都是0.5倍速和0.75倍速。 因此我們需要對大量畫面進行調速,免得影片看起來像是大型慢動作項目。 那麼,Sora生成的影片素材有多少最終被用在影片裡了? 「數學很差」的老帕估計了一下,大概是 300:1 。 音訊方面,Sora目前還不能產生聲音,因此旁白和音樂都是團隊自己加上去的。 版權 為了不侵犯版權,OpenAI給了Sora一些限制。 例如,你不能把提示詞寫成“35mm膠卷,未來太空船中,一名男子拿著光劍靠近”,那樣 Sora會直接拒絕生成,因為這畫面太像《星際大戰》了。 喔對,像什麼「阿羅諾夫斯基式鏡頭」和「希區考克變焦」也是不行的。 3人團隊2週製作完成 該說不說,在外界捲起風波之前,Shy Kids團隊對於Sora的表現還是很滿意的。 畢竟,製作《氣球人》這樣一個高品質短片,最後只用了他們仨1.5到2週的時間。 團隊認為,現在,對於專業的電影團隊來說,Sora當然還有很大進步空間,但對於大部分 人而言,Sora已經足夠驚艷。 用老帕自己的話說: 我覺得人們應該將Sora變成工作流程的一部分。 不過,如果他們不想跟AI沾邊,也沒關係。 對於這樣的觀點,也有不少網友表示認同,認為Sora這樣的影片生成AI,是對現有工作流 程很好的補充。 Adobe把它們整合進軟體裡,就是一個很不錯的主意。 但,「我厭倦了OpenAI們的精美Demo行銷」。 還有網友不滿的點在於,爆紅的「人工智慧生成影片」背後有大量的人類工作,他們投入 數百個小時工作,卻被AI掩蓋了真實的價值。 那麼,這事兒你怎麼看? 參考連結: [1]https://www.fxguide.com/fxfeatured/actually-using-sora/ [2]https://twitter.com/bilawalsidhu/status/1783544598259794046 -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 114.38.27.129 (臺灣) ※ 文章網址: https://www.ptt.cc/bbs/AI_Art/M.1714571826.A.E9F.html

05/02 07:01, 4月前 , 1F
那這幾天大陸發佈的 AI 講的比 Sora 還厲害又怎麼看?
05/02 07:01, 1F

05/02 08:32, 4月前 , 2F
正常啊 我們用AI生圖出來也要精修阿 很少直接拿來用=.=
05/02 08:32, 2F

05/02 08:33, 4月前 , 3F
一般民眾沒玩過AI的才會認為念咒語生出來直接用好棒棒
05/02 08:33, 3F

05/02 08:33, 4月前 , 4F
事實上要好看要精緻 都嘛還是要稍微修圖 合理阿
05/02 08:33, 4F

05/02 08:34, 4月前 , 5F
事實上AI的功勞就是縮短工時和作品精緻化 這其實同一件事
05/02 08:34, 5F

05/02 08:35, 4月前 , 6F
以前從無到有畫一張圖 十個小時好了 五小時畫 五小時精修
05/02 08:35, 6F

05/02 08:35, 4月前 , 7F
現在AI幫忙生圖 半小時抽卡 剩下9.5小時可以精修 當然精緻
05/02 08:35, 7F

05/02 22:35, 4月前 , 8F
就算現在影視工業也是後製不然怎麼會有調色師,AI光是能
05/02 22:35, 8F

05/02 22:36, 4月前 , 9F
加速渲染就能很快改變現在的影視工業了!
05/02 22:36, 9F
文章代碼(AID): #1cCaeowV (AI_Art)