GPT-4o生圖免費,吉卜力版《甄嬛傳》續集來了,終於讓安陵容對上口型
好消息!好消息!
ChatGPT 圖像生成功能現已對所有用戶開放啦!
換句話說,即使是免費用戶,也可以用 GPT-4o 生成最近爆火的吉卜力風格圖片。

有網民在 X 上發佈了自己使用 GPT-4o 和可靈製作的動畫影片。
上週五,我們也用 GPT-4o 和可靈,搞了個吉卜力版《甄嬛傳》,沒想到小火了一把。
截至目前,該影片在全網已有近 30 萬播放量。不少網民還在評論區「催更」,要看全集。



我先交個底:全集是沒有的,但偶爾整個活兒,還是可以滴。
由於上次時間有限,並未給動畫角色對口型,這次我們決定來個進階版,讓吉卜力風格的甄嬛真正開口「說話」。
應網民要求,我們選用的是《甄嬛傳》中「皇后殺了皇后」這一經典名場面。
不知合不合各位老鐵的口味啊?
接下來,我們就公開整個製作流程。
第一步:截鏡頭 + GPT-4o 轉繪。
與上期操作一樣,找到《甄嬛傳》原版影片片段,截取其中幾個關鍵鏡頭。
別看短短 30 多秒的影片,裡面涉及不少轉場鏡頭,為了讓畫面更加連貫絲滑,我們截取了 8 個關鍵幀。








然後,將這些畫面逐一上傳至 GPT-4o,並輸入提示詞:「請幫我把這張照片轉成吉卜力風格」。

上效果:








有網民表示,GPT-4o 有時會拒絕生成吉卜力風格圖片,這當然也有破解之道,我們可以使用「墊圖法」繞過系統限制。
只需要上傳一張吉卜力風格的圖片,再上傳想要重繪的圖片,輸入提示詞「用圖 1 的視覺風格重繪圖 2」。

第二步:圖片轉影片。
這一步就是將風格化後的圖片動起來。
由於原影片片段中包含不少大幅度動作和細微的表情特寫,所以一開始我們打算用 Viggle AI 的「Move」功能來生成。
只需將風格化後的圖片和對應的原影片片段逐一上傳即可。

實測一番發現它確實有兩把刷子:

不過也有翻車的時候。比如甄嬛的這個轉頭動作:

Viggle AI 雖然捕捉到了動作,但對於細節的把握較為粗糙,尤其是甄嬛的頭飾,明顯出現鬼影、閃爍、變形等問題。

此外,我們也可以使用可靈 1.6 的「圖生影片」功能,上傳圖片,再輸入提示詞。
為了獲得更好的生成效果,在進行提示詞描述時,儘量簡潔而準確地給出人物、動作和神態,比如「這個女人慢慢轉過頭去,留下一個背影」、「這個女人悲傷嚴肅地眨著眼睛」等。

來看看效果:


總之,Viggle AI 和可靈 1.6 各有優缺點。
Viggle AI 可以在不輸入提示詞的情況下,還原人物動作、神態,但畫面經常不夠精美,易出現重影、抖動等瑕疵。
可靈 1.6 模型生成效果更穩定,但對提示詞的撰寫要求較高,這麼說吧,提示詞質量的高低直接影響最終的生成效果。
因此,我們的建議是二者搭配「食用」,不好描述提示詞、且涉及大幅度運動時使用 Viggle AI,想要精美畫面時則選用可靈 1.6 模型。
第三步:對口型。
市面上關於對口型的 AI 工具已有不少,比如可靈、即夢以及之前介紹過的 Hedra。
在這個「皇后殺了皇后」的名場面中,有兩處安陵容的懺悔需要對口型。為了省事情,我們直接使用了可靈的對口型功能。
生成相應的影片後,我們點擊「對口型」,然後上傳對應的音頻就 OK。


最後,我們把原影片和生成好的素材全部導入剪映中,逐一對應音頻後再自動加入字幕即可。

OK!今天的 AI 小課堂就到這兒啦,古德拜!
工具鏈接:
GPT-4o 鏈接:https://chatgpt.com/
可靈 AI 鏈接:https://app.klingai.com/
Viggle AI 鏈接 :https://viggle.ai/
即夢 AI 鏈接:https://jimeng.jianying.com/
Hedra 鏈接:https://www.hedra.com/
剪映
本文來自微信公眾號「機器之能」(ID:almosthuman2017),作者:關注AI的,36氪經授權發佈。