隨著人工智慧技術的不斷發展,文字生成影片的 AI 工具逐漸成為研究項目,而OpenAI一直站在創新的前沿,2024 年 2 月,OpenAI 推出了Sora,一款能夠生成超級逼真高品質影片的 AI 工具, Sora的推出對於文字生成影片的技術有重大的突破,並對影片帶來新的可能性,在本篇文章中,我們會介紹Sora功能和優勢、展示 Sora 生成的作品,並探討 Sora 對影片創作者的影響。
Table of Contents
ToggleSora ai是什麼?
Sora是OpenAI開發的AI文字生成影片模型,能夠根據用戶輸入的文字描述生成逼真、流暢的影片,Sora AI 是基於OpenAI 的 DALL-E 3的文字生成圖模型和GPT模型,並使用了大量的影片數據進行訓練。
Sora運作
Sora 運作過程可以分為以下幾個步驟:
- 用戶輸入文字描述。
- Sora 使用 GPT-3 模型將文字描述轉換為一系列圖像。
- Sora 將圖像序列轉換為影片。
Sora原理
Sora原理是基於擴散模型和Transformer模型,Sora運用擴散模型透過增加噪聲將文字轉換成低維度表示,而Sora能生成具有連貫性的影片是運用Transformer模型,用此模型來學習文字之間的關係,以製作出流暢的AI生成影片。
Sora成品格式和解析度
Sora可以生成具有最高1920×1080的解析度的視頻,格式為 MP4、幀率30 fps,可以從Openai Sora關往查看提供的影片舉例,具有十分流暢且高解析度的影片。
模糊照片一鍵變清晰:https://app.genape.ai/zh-TW/fixBlurryImages
Sora AI優勢是什麼?
Sora AI具有優勢為生成能力十分逼真、操作簡單、應用場景廣泛,以下詳細說明:
生成逼真的視頻
Sora具有令人驚嘆的生成能力,可以生成高度細節的場景、複雜的相機轉動和具有豐富情感的多個角色,還可以擴展現有的影片或填補丟失的幀數,且Sora AI 採用了多模態融合、對抗訓練和注意力機制等技術來提高視頻的質量。
舉例來說,Sora官網展示的這則影片,輸入的人物穿搭的指令都有呈現出來,在較細部的塗紅色口紅、走路自信也能在影片完全看到,最厲害的是街道潮濕反光的效果也呈現的十分逼真。
操作簡單
Sora 的界面簡單易用,用戶只需輸入文字描述即可生成影片。
應用場景廣泛
Sora 可以用於各種應用場景,在娛樂、教育、商業領域皆可,可以製作電影、動畫、廣告、宣傳片等商業內容。
Sora使用目前誰可以?
Sora目前處於封閉測試階段,僅有紅隊成員才能使用,紅隊成員是OpenAI 的一個團隊,專門研究 AI 的安全和倫理問題,目前正在評估Sora 的危害和風險,如:虛假訊息、仇恨言論或暴力。
Sora使用何時開放?
OpenAI 表示,在評估完Sora風險後就會公開發布Sora,但具體時間尚未確定。
Sora目前有弱點嗎?
Sora模型還處於開發階段,目前尚有幾個需要進步的,針對這些缺陷詳細說明:
生成視頻的長度有限
Sora模型目前只能生成長達60秒的影片,對於長影片需求的創作者來說,較為麻煩,需要一段一段的生成。
生成視頻的內容可能存在偏差
Sora模型是基於大量的視頻數據進行訓練的,因此生成視頻的內容可能存在訓練數據中的偏差。例如,如果訓練數據中女性的比例較低,那麼Sora模型生成的視頻中女性的比例也可能會較低。
無法達到精細
Sora ai生成的影片會混淆指示中的空間細節,例如左右混淆,並且在時間上對事件的精確描述生成愈到困難,也難以準確模擬複雜場景的物理效應,並且可能無法理解因果關係的具體實例。
舉例來說:Sora模型可能在動物或是人可能會自發性出現,通常會出現在多個實體的場景中,像是下圖灰狼幼崽互相在嬉戲,不過可以看到有些身體是連在一起的。
或是一個籃球穿過籃網,但實際上籃球應該反彈,且物體會有變形的例子。
Sora會影響到影片創作者嗎?
Sora 會對影片創作者帶來正面及負面影響,總體而言,Sora 對影片創作者的影響是利大於弊的
OpenAI Sora 正面影響
- 提高影片製作效率:Sora 幫助影片創作者快速生成影片,提高影片製作效率。
- 降低影片製作成本:Sora 能讓影片創作者降低影片製作成本,可以花更低預算製作成本。
- 拓展影片創作的可能性:協助影片創作者實現以前無法實現的影片創作,拓展影片創作的可能性,也不需要耗費太多時間收集素材。
OpenAI Sora 負面影響
- 創作出的影片類似:若多位影片創作者都使用同一套預設模板,可以製作的影片會非常相同。
- 缺乏創造力:若影片創作者過度依賴 Sora,有可能會失去創造力。
- 內容虛假:一位影片創作者可以使用 Sora 製作假新聞或其他具有欺騙性的影片,導致誤導觀眾。
AI工具推薦
如果你還在找一款可以幫助你生產力的工具,推薦GenApe,此AI工具是專攻文字與圖像,能一次滿足你的需求,趕緊點擊下方連結免費使用。