顯示具有 Sora 標籤的文章。 顯示所有文章
顯示具有 Sora 標籤的文章。 顯示所有文章

2025/01/05

Sora 產生影片心得(四)人物影片生成

  雖然Sora 生成人物常發生肢體動作不合理,但透過多個影片再加以剪輯成影片也是可以做出影片原型,讓自己的想法有接近想法。




提示詞: 先使用中文如下

一位長相甜美的亞洲女偶像紥著兩個髪球在兩側,她穿著開叉的超短連衣紅色旗袍,光滑旗袍表面隨著她光線變化做著跳舞的動作

有時會被擋下,無法生成影片,最後還是以英文 prompt 來生成影片:

A sweet-looking Asian idol with two hair buns on either side is wearing a high-slit, ultra-short red cheongsam.


以上的提示詞較單純,沒有複雜的場景描述,對人物長相及穿著較清楚描述。

最後再配上 Suno 生成的音樂


2024/12/31

Google 不是省油的燈, Veo2 將出OpenAI的Sora要小心了

  這一兩週以來利用工作以外的時間都在把玩OpenAI 的Sora影片生成功能。也利用Christmas 無流量限制期間大量生成影片,但結果真的是不滿意,最主要還是人物或是動物或是物理的動作或移動上種種不合理現象。想要用它來製作影片還有一大段路要走。

        Google 的Veo 2 雖然還沒正式推出,但對它已經是充滿期待了。因為它的物理動作比較正確,不會像Sora 常出現不合理動作的問題。只是比較可惜,它還在實驗階段,沒有像Sora一樣可以讓大家使用。


2024/12/24

Sora 產生影片心得(三)中文提示詞及不同風格嘗試

  OpenAI宣布ChatGPT Plus用戶可在聖誕假期間,無上限使用影片生成服務Sora。上週我一下子就將每個月的額度用完了,剛好可以利用此段時間多生成不同風格影片來試試。

        這次不走真實風格,想來個皮克斯 Pixel stye ,結果Sora 給我生成像素風格。


Boxing 這個字加上 Baby 曾經被違反暴力政策給擋下,它就不幫我生成影片。

顯然OpenAI 低估了使用量,以為Christmas 假期 Sora 流量減少,放開流量限制一下子就遇到算力瓶頸了。我每次生成影片都容易遇到排隊等待。只有有耐心的等待了... "限量是殘酷的 !!!"

這幾天看了一些YouTuber 的Sora 使用心得,他們多半建議使用英文提示詞,我不信邪,因為ChatGPT 中文理解能力那麼強,這沒有道理啊!

我就直接問ChatGPT 如何建立良好的 Sora prompt :

它給我詳細的說明,也提供不少範例,我就用其中一個試著生成影片:

Prompt : 

在細雨霏霏的傍晚,一位撐著透明傘的女子在石板街道上緩步前行,街燈倒映在濕漉漉的地面上。




Prompt: 

夜晚的漁村港口,一位老漁夫在小木船上整理漁網,遠處燈塔微微閃爍,海浪輕輕拍打岸邊,夜空繁星點點。







結論: Prompt 能力會大大影響成果,多參考其它人影片的提示詞,多多練習才是王道。


2024/12/18

Sora 產生影片心得(二)

  今天第二次來用Sora 生成影片,先用中文提示詞在ChatGPT 讓它先產生好的英文提示詞:

Three elegant and vibrant koi fish, each with unique patterns of red, white, and gold, gracefully swimming in a serene pond. The water is crystal clear, reflecting the sunlight and casting soft ripples as the koi move. Lily pads float gently on the surface, surrounded by blooming lotus flowers. The scene is tranquil, with a hint of soft shadows from overhanging trees and subtle bubbles rising to the surface.





產生出來效果很逼真,但還是怪怪的!

和我第一篇心得一樣,一些物理上的動作不合理,像是這部錦鯉的影片,其中條看起來就像飄在水面上,很不自然。







以上兩影片的光線及質感都很好,就是動作上還是不太自然。這是Sora接下來要克服的。另外,使用ChatGPT 幫你優化 prompt 是要注意的,太多的細節描述及長度是無法產生你預期的效果。

結論:ChatGPT Plus 生成 Sora 影片點數實在不夠用,剛好OpenAI Christmas 期間因為算力需求較少,開放無限制使用。接下來會利用這段時間再多試試。

2024/12/14

Sora 產生影片心得(一)

  Sora 終於正式推出了,目前只提供給付費訂閱用戶。我是ChatGPT Plus 每個月$20美金訂閱用戶,每月可以產生50個影片。

第一次使用簡單的英文 prompt : 
   A cute girl is playing with a puppy in the room.

它會產生兩個5秒的影片。我先使用預設 16:9, 480p, 5s 
產生影片速度快,不到30秒。 影片長度還有 10s (10秒)可以選擇,一次產生兩個提供選擇,可以再做 remix, blend 及Storyboard 等。



這個一個小女孩在房間與一支小貓玩耍才是我真正第一次試產出的影片,其結果不理想,所以才有開頭那個小女孩與小狗玩耍的影片。
你有發現影片中有什麼不正常現象嗎?

製作短影片: 很適合做 Shorts ,影片比例換成 9:16

Prompt : A cute girl is playing with a puppy in the garden

場景換成戶外。

影片中的小狗翻身跳耀動作不自然。
簡單來說,和第一個逗小猫的影片都有一些不自然動作。這方面仍有改善空間。

接下來利用 ChatGPT 優化提示詞(prompt):

A cheerful and cute girl, around 7 years old, wearing a light blue summer dress, is happily playing with a fluffy golden retriever puppy in a colorful garden filled with blooming flowers. The puppy playfully jumps and chases after a small red ball the girl is throwing. The sunlight creates a warm, golden glow, with birds chirping in the background and butterflies fluttering around.


重新產生的影片如下:







可以看到紅色的球在小狗的附近移動時有不自然的現象。

相同的提示詞,最後再來一個 720p 影片,這次生成時間慢了四倍,

小女孩動作上仍然有問題:她手上拿的紅色球不自然地穿過小狗身體。
另外,生成720p影片的限制長度只能有5秒。看樣子,720p 5秒長度限制下,很力程度上會限制使用意願。可能要改用$200 美元的訂閱方案,一個月可以500支影片產出,每支影片20秒,下載影片不加浮水印(Watermark)。

後來,再試一個以下提示詞:
A playful and energetic Shiba Inu joyfully chases a colorful frisbee across a lush, green field under a clear blue sky.

  以乎 Sora 對 colorful 有所誤解,生成的飛盤變成多個了。

再換一個提示詞:colorful 換成 red 
A playful and energetic Shiba Inu joyfully chases a red frisbee across a lush, green field under a clear blue sky.




這影片中的紅色飛盤是對的,但影片變成上下各一個分割畫面了。這結果真的慘不忍睹

OpenAI 這麼急著推出 Sora ,應該也有一些其它考量,先試水溫看看市場上大眾的反應,再來改善產品。 以一個市場先行者的角度來看,這個做法是對的,其它跟隨著會很快加入。但可以預見的是,OpenAI Sora 這產品一推出,其AI 算力需求會暴增,所以其燒錢速度會很快。這問題不是只有OpenAI ,其它跟隨著都會面臨相同問題。所以,個人預估未來三年,AI 算力及電力需求只會增加不會減少,而Sora 一推出,也可以看見很多YouTuber 或是影音創作者都會開始使用,也會受益,連我自己都有點心動,是不是該投入來賺點流量。