以圖照生成影片:修訂版本之間的差異
出自福留子孫
(→統一角色生成影片) |
|||
(未顯示3位用戶所作出之66次版本) | |||
第 1 行: | 第 1 行: | ||
[[分類:AI]] | [[分類:AI]] | ||
+ | ==統一角色生成影片== | ||
+ | #以[https://tensor.art/u/751652064853086945 TensorArt]生成圖片 | ||
+ | #*設定好角色外觀生成想要的角色 | ||
+ | #*鎖定seed以產生同一角色不同面向,增加樣本數 | ||
+ | #*TensorArt為完全免費,每日可生成100點(免費帳戶生成最高限制為四點左右,一日約可生成25張以上) | ||
+ | #以[https://app.leonardo.ai/ Leonardo Ai]生成圖片以及影片 | ||
+ | #*可直接以Leonardo使用生成好的腳色圖片以及seed生成影片 | ||
+ | #*免費會員每日150點(四張圖片約12-17點,依照選擇model以及圖片張數計算不同1-2張消費10點,影片一次4秒消費25點) | ||
+ | #*點選圖片-「motion」-選擇「motion strenth(初始設定值為5,最大為10)」-依照每張圖片不同選擇數值及效果呈現會不同 | ||
+ | #以[https://tensor.art/u/751652064853086945 PixVerse]生成該角色片段 | ||
+ | #*以"Character To Video"的功能生成角色樣本 | ||
+ | #*點選Character To Video - 點選「+」符號 - 上傳以TensorArt生成之角色照片 - 為該角色命名 | ||
+ | #*輸入Prompts, negative prompts(不希望出現的元素&錯誤) | ||
+ | #*PixVerse可完全免費使用(有浮水印),初使用者150點,每日補充50點,一隻影片消耗10點。 | ||
+ | #以[https://ai.invideo.io/workspace/06218662-9452-4937-949e-9b2b9bb5b1ea/home InvideoAI]生成角色之外的影片內容 | ||
+ | #*單次可生成約1~2分鐘之影片(依照文本),能選擇旁白及語音種類 | ||
+ | #*可在生成網站中以自己的影片素材置換InVideo生成的影片片段,調整成使用者需要的影像。 | ||
+ | #*免費使用者每週可生成總共10次影片,輸出4次 | ||
+ | #*可共同協作 | ||
+ | #利用[https://haiper.ai/creations Haiper]、[https://lumalabs.ai/dream-machine/creations Luma]、[https://app.runwayml.com/video-tools/teams/faye0802/ai-tools/generative-video Runway Gen-2]等網站增加角色之外的影片素材 | ||
+ | #利用[https://suno.com/create Suno]製作需要的配樂 | ||
+ | |||
+ | ==給課主的建議== | ||
+ | *在多鏡頭角色統一外觀的連戲處理中,有幾個要點需要注意。 | ||
+ | *影片部分: | ||
+ | *#推薦使用Luma進行嘗試。這個工具在動作改變較大時效果更好。 | ||
+ | *#Runway Gen-3內含的相機鏡位參數也能調整,值得一試,不過技術門檻稍高。 | ||
+ | *#單純使用Haiper生成統一角色在不同場景或動作中會比較困難。 | ||
+ | *此外,可以使用一些其他工具來輔助生圖,使用這些工具生成圖片後,可以置入上述軟體中多方面編輯,不過須注意圖生影片的自由度低於文字生影片。。 | ||
+ | *#TensorArt完全免費(亦可付費升級使用權限),可以固定使用seed並逐步調整生成所需的圖片。 | ||
+ | *#MidJourney則需付費,與DALL-E同為目前大眾主流生成網站。 | ||
+ | *在配樂方面,推薦使用Suno生成音樂。 | ||
+ | |||
+ | ===簡易分類如下=== | ||
+ | #圖片、文字生成影片: | ||
+ | ##Pika Labs | ||
+ | ##Haiper | ||
+ | ##Luma | ||
+ | ##Gen-3 | ||
+ | #*目前Luma在技術門檻和成果表現的CP值上較高,優於Haiper和Pika。 | ||
+ | #虛擬主播開口講話: | ||
+ | ##D-ID | ||
+ | ##Hedra | ||
+ | ##heygen | ||
+ | #動畫補幀: | ||
+ | ##ToonCrafter | ||
+ | |||
+ | == 多鏡頭角色統一外觀的要領(連戲) == | ||
+ | #推薦用luma 嘗試,動作會改變得比較大(Runway Gen-3內含相機鏡位參數供調整,可嘗試看看) | ||
+ | #單一以Haiper生成統一角色/不同場景or動作較為困難 | ||
+ | #可使用TensorArt(可完全免費使用), MidJourney(需付費),使用固定的seed並逐漸調整prompt以生成所需圖片,再置入上述軟體多方面編輯(圖生影片較文字生影片自由度低) | ||
+ | #配樂可使用Suno生成 | ||
+ | |||
+ | ==簡易分類== | ||
+ | #圖片、文字生影片 | ||
+ | ##Pika Labs | ||
+ | ##Haiper | ||
+ | ##Luma | ||
+ | ##Gen-3 | ||
+ | #*目前體感 Luma>Haiper>Pika | ||
+ | #虛擬主播開口講話 | ||
+ | ##D-ID | ||
+ | ##Hedra | ||
+ | ##heygen | ||
+ | #動畫補幀 | ||
+ | ##ToonCrafter | ||
+ | == Pika Labs == | ||
+ | *免費&付費會員:2~5秒<br> | ||
+ | '''免費''' | ||
+ | *250 初始點數 | ||
+ | #初始點數用完後,每天可補充 30 點 | ||
+ | #Lip Sync 音訊產生每個需要 2 點 | ||
+ | #可下載影片 | ||
+ | '''標準''' | ||
+ | #$8/月(美金) 按年計費 | ||
+ | #每月更新 700 個積分 | ||
+ | #免費唇形同步音訊生成 | ||
+ | #高檔解析度 | ||
+ | #無浮水印 | ||
+ | #延長影片長度 | ||
+ | #以折扣價購買更多積分 | ||
+ | '''無限''' | ||
+ | #無限chill generation | ||
+ | #$28/月(美金) 按年計費 | ||
+ | #每月更新 2000 個積分 | ||
+ | #延長影片長度 | ||
+ | '''專業''' | ||
+ | #$58/月(美金) 按年計費 | ||
+ | #無限lightening generation | ||
+ | #無限積分 | ||
+ | #搶先體驗新功能 | ||
+ | #商業條款 | ||
+ | #延長影片長度 | ||
+ | ===缺點(免費版):=== | ||
+ | *影片長度短,無法短時間內「客製」太多細節<br> | ||
+ | *風格限制:Pica Labs目前提供的風格選項有限,可能無法滿足所有用戶的需求。 | ||
+ | |||
+ | ===優點(免費版):=== | ||
+ | *可使用純文字prompt、圖片加上prmopt的方式生成影像(免費版可產出2秒) | ||
+ | *可多參考其他使用者的promopt再加以修正及刪減,免費版也能有相當品質 | ||
+ | *免費會員即可精準控制影像類型(有多項參數可調整) | ||
+ | |||
+ | == Haiper (李良猷 推荐)== | ||
+ | '''Haiper 會員資格 年付(八折優惠)'''<br> | ||
+ | *免費會員:2~4秒<br> | ||
+ | *付費會員:8秒<br> | ||
+ | '''免費(測試版)''' | ||
+ | #永久免費 | ||
+ | #每天10次創作 | ||
+ | #3個同時創作 | ||
+ | |||
+ | '''探索者(測試版)''' | ||
+ | #$8/月(美金) 按年計費 | ||
+ | #無限次創作(測試版) | ||
+ | #5個同時創作 | ||
+ | #優先使用新功能(有限免費) | ||
+ | |||
+ | '''專業(測試版)''' | ||
+ | #$24/月(美金) 按年計費 | ||
+ | #無限次創作(測試版) | ||
+ | #10個同時創作 | ||
+ | #優先使用新功能(更多功能即將推出) | ||
+ | #創建無浮水印影片 | ||
+ | #商業使用 | ||
+ | #私密創作 | ||
+ | ===缺點(免費版):=== | ||
+ | *影片長度短,無法短時間內「客製」太多細節<br> | ||
+ | *影像生成時間相對較長 | ||
+ | *圖片及影像加文字重新生成的功能較難精確控制 | ||
+ | |||
+ | ===優點(免費版):=== | ||
+ | *可使用純文字prompt、圖片加上prmopt的方式生成影像(免費版可產出2秒以及4秒影片) | ||
+ | *可多參考網站中其他使用者的promopt再加以修正及刪減,免費版也能有相當品質 | ||
+ | *免費會員即可精準控制影像類型(動畫anime, cartoon類別、擬真realistic, photo等) | ||
+ | *影像整體品質相對高 | ||
+ | <br> | ||
+ | |||
== Hedra == | == Hedra == | ||
Hedra 是一款能讓圖片動起來的AI工具,用來讓人像說話,適合當旁白配音。 | Hedra 是一款能讓圖片動起來的AI工具,用來讓人像說話,適合當旁白配音。 | ||
第 9 行: | 第 146 行: | ||
* 能讓人像圖片動起來說話,沒有圖片也可以自動生成。 | * 能讓人像圖片動起來說話,沒有圖片也可以自動生成。 | ||
− | == Luma == | + | == D-ID == |
+ | [https://shinphotos.com/d-id/ 讓AI會說話講中文!真人影片] | ||
+ | |||
+ | [https://tenten.co/learning/studio-d-id/ D-ID 教學-讓照片開始動起來!] | ||
+ | #優點: | ||
+ | #*創建具有會說話的頭像的影片,讓您的AI 影片在幾秒鐘內變得栩栩如生。 | ||
+ | #限制: | ||
+ | #*目前試用免費約可製作6支影片,超過就會需要收費才能解鎖功能及去除浮水印 | ||
+ | |||
+ | == heygen == | ||
+ | #優點 優點 | ||
+ | ##簡單易用、提供豐富的語音效果、節省時間和資源 | ||
+ | #缺點 | ||
+ | ##積分限制 | ||
+ | ##無可用的影片預覽選項 | ||
+ | ##部分功能需要付費、語音效果可能不夠逼真 | ||
+ | |||
+ | == Luma (Dream Machine)== | ||
Luma 是一款圖像生成影片的 AI 工具。 | Luma 是一款圖像生成影片的 AI 工具。 | ||
=== 缺點 === | === 缺點 === | ||
第 16 行: | 第 170 行: | ||
=== 優點 === | === 優點 === | ||
* 看起來效果不錯。試了一下遠勝過之前的圖生影片相關 AI (e.g. runway gen2, Pika) | * 看起來效果不錯。試了一下遠勝過之前的圖生影片相關 AI (e.g. runway gen2, Pika) | ||
+ | |||
+ | === 付費? === | ||
+ | 免費:每月 30 段影片 | ||
+ | |||
+ | standar 月費 24 美金,每月 120+30 = 150段 | ||
+ | |||
+ | === 示例 === | ||
+ | #[https://www.youtube.com/watch?v=_2CWf9L-fRc 最新 AI 影片生成工具!秒殺 OpenAI Sora?直接免費用,Dream Machine 到底有多強? | 零度解說] | ||
== ToonCrafter == | == ToonCrafter == | ||
第 28 行: | 第 190 行: | ||
* 可以省下時間畫中間的幀。 | * 可以省下時間畫中間的幀。 | ||
* 可以幫草圖著色。 | * 可以幫草圖著色。 | ||
+ | |||
+ | === 示例 === | ||
+ | #[https://www.youtube.com/watch?v=ykJ-eZWzt-I 這個免費的AI工具徹底改變了AI動畫 | 100%免費] |
2024年7月26日 (五) 11:09的最新修訂版本
目錄
統一角色生成影片
- 以TensorArt生成圖片
- 設定好角色外觀生成想要的角色
- 鎖定seed以產生同一角色不同面向,增加樣本數
- TensorArt為完全免費,每日可生成100點(免費帳戶生成最高限制為四點左右,一日約可生成25張以上)
- 以Leonardo Ai生成圖片以及影片
- 可直接以Leonardo使用生成好的腳色圖片以及seed生成影片
- 免費會員每日150點(四張圖片約12-17點,依照選擇model以及圖片張數計算不同1-2張消費10點,影片一次4秒消費25點)
- 點選圖片-「motion」-選擇「motion strenth(初始設定值為5,最大為10)」-依照每張圖片不同選擇數值及效果呈現會不同
- 以PixVerse生成該角色片段
- 以"Character To Video"的功能生成角色樣本
- 點選Character To Video - 點選「+」符號 - 上傳以TensorArt生成之角色照片 - 為該角色命名
- 輸入Prompts, negative prompts(不希望出現的元素&錯誤)
- PixVerse可完全免費使用(有浮水印),初使用者150點,每日補充50點,一隻影片消耗10點。
- 以InvideoAI生成角色之外的影片內容
- 單次可生成約1~2分鐘之影片(依照文本),能選擇旁白及語音種類
- 可在生成網站中以自己的影片素材置換InVideo生成的影片片段,調整成使用者需要的影像。
- 免費使用者每週可生成總共10次影片,輸出4次
- 可共同協作
- 利用Haiper、Luma、Runway Gen-2等網站增加角色之外的影片素材
- 利用Suno製作需要的配樂
給課主的建議
- 在多鏡頭角色統一外觀的連戲處理中,有幾個要點需要注意。
- 影片部分:
- 推薦使用Luma進行嘗試。這個工具在動作改變較大時效果更好。
- Runway Gen-3內含的相機鏡位參數也能調整,值得一試,不過技術門檻稍高。
- 單純使用Haiper生成統一角色在不同場景或動作中會比較困難。
- 此外,可以使用一些其他工具來輔助生圖,使用這些工具生成圖片後,可以置入上述軟體中多方面編輯,不過須注意圖生影片的自由度低於文字生影片。。
- TensorArt完全免費(亦可付費升級使用權限),可以固定使用seed並逐步調整生成所需的圖片。
- MidJourney則需付費,與DALL-E同為目前大眾主流生成網站。
- 在配樂方面,推薦使用Suno生成音樂。
簡易分類如下
- 圖片、文字生成影片:
- Pika Labs
- Haiper
- Luma
- Gen-3
- 目前Luma在技術門檻和成果表現的CP值上較高,優於Haiper和Pika。
- 虛擬主播開口講話:
- D-ID
- Hedra
- heygen
- 動畫補幀:
- ToonCrafter
多鏡頭角色統一外觀的要領(連戲)
- 推薦用luma 嘗試,動作會改變得比較大(Runway Gen-3內含相機鏡位參數供調整,可嘗試看看)
- 單一以Haiper生成統一角色/不同場景or動作較為困難
- 可使用TensorArt(可完全免費使用), MidJourney(需付費),使用固定的seed並逐漸調整prompt以生成所需圖片,再置入上述軟體多方面編輯(圖生影片較文字生影片自由度低)
- 配樂可使用Suno生成
簡易分類
- 圖片、文字生影片
- Pika Labs
- Haiper
- Luma
- Gen-3
- 目前體感 Luma>Haiper>Pika
- 虛擬主播開口講話
- D-ID
- Hedra
- heygen
- 動畫補幀
- ToonCrafter
Pika Labs
- 免費&付費會員:2~5秒
免費
- 250 初始點數
- 初始點數用完後,每天可補充 30 點
- Lip Sync 音訊產生每個需要 2 點
- 可下載影片
標準
- $8/月(美金) 按年計費
- 每月更新 700 個積分
- 免費唇形同步音訊生成
- 高檔解析度
- 無浮水印
- 延長影片長度
- 以折扣價購買更多積分
無限
- 無限chill generation
- $28/月(美金) 按年計費
- 每月更新 2000 個積分
- 延長影片長度
專業
- $58/月(美金) 按年計費
- 無限lightening generation
- 無限積分
- 搶先體驗新功能
- 商業條款
- 延長影片長度
缺點(免費版):
- 影片長度短,無法短時間內「客製」太多細節
- 風格限制:Pica Labs目前提供的風格選項有限,可能無法滿足所有用戶的需求。
優點(免費版):
- 可使用純文字prompt、圖片加上prmopt的方式生成影像(免費版可產出2秒)
- 可多參考其他使用者的promopt再加以修正及刪減,免費版也能有相當品質
- 免費會員即可精準控制影像類型(有多項參數可調整)
Haiper (李良猷 推荐)
Haiper 會員資格 年付(八折優惠)
- 免費會員:2~4秒
- 付費會員:8秒
免費(測試版)
- 永久免費
- 每天10次創作
- 3個同時創作
探索者(測試版)
- $8/月(美金) 按年計費
- 無限次創作(測試版)
- 5個同時創作
- 優先使用新功能(有限免費)
專業(測試版)
- $24/月(美金) 按年計費
- 無限次創作(測試版)
- 10個同時創作
- 優先使用新功能(更多功能即將推出)
- 創建無浮水印影片
- 商業使用
- 私密創作
缺點(免費版):
- 影片長度短,無法短時間內「客製」太多細節
- 影像生成時間相對較長
- 圖片及影像加文字重新生成的功能較難精確控制
優點(免費版):
- 可使用純文字prompt、圖片加上prmopt的方式生成影像(免費版可產出2秒以及4秒影片)
- 可多參考網站中其他使用者的promopt再加以修正及刪減,免費版也能有相當品質
- 免費會員即可精準控制影像類型(動畫anime, cartoon類別、擬真realistic, photo等)
- 影像整體品質相對高
Hedra
Hedra 是一款能讓圖片動起來的AI工具,用來讓人像說話,適合當旁白配音。
缺點
- 只能生成512×512的影片,很模糊。
- 動作的頻率太高,幅度太大,顯得誇張,令人物有點像在搞笑。
- 有30秒限制。
優點
- 能讓人像圖片動起來說話,沒有圖片也可以自動生成。
D-ID
- 優點:
- 創建具有會說話的頭像的影片,讓您的AI 影片在幾秒鐘內變得栩栩如生。
- 限制:
- 目前試用免費約可製作6支影片,超過就會需要收費才能解鎖功能及去除浮水印
heygen
- 優點 優點
- 簡單易用、提供豐富的語音效果、節省時間和資源
- 缺點
- 積分限制
- 無可用的影片預覽選項
- 部分功能需要付費、語音效果可能不夠逼真
Luma (Dream Machine)
Luma 是一款圖像生成影片的 AI 工具。
缺點
- 從範例看起來比 Sora 差,給定圖片人臉會換臉的問題還是很嚴重。
- 限額:1天20次,1個月30次,每次大約五秒。
優點
- 看起來效果不錯。試了一下遠勝過之前的圖生影片相關 AI (e.g. runway gen2, Pika)
付費?
免費:每月 30 段影片
standar 月費 24 美金,每月 120+30 = 150段
示例
ToonCrafter
ToonCrafter 是一款由香港大學開發的工具,可以幫助省下畫中間幀的時間。
缺點
- 秒數少(2秒)。
- 需要關鍵幀。
- 需要強大硬體。
- 香港大學開發,可能有疑慮。
- 若是兩幀差太多,轉場會很硬。
優點
- 可以省下時間畫中間的幀。
- 可以幫草圖著色。