by Rain Chu | 3 月 18, 2025 | AI, 影片製作
Open-Sora 這個 GitHub 專案，提供類似於 OpenAI 的 Sora 的影片生成模型，讓更多人能夠高效地製作高品質影片，無需再等待 Sora 的推出。
Open-Sora 的主要特色
1. 11B 參數模型
Open-Sora 採用了擁有 110 億參數的大型模型架構，這使其在影片生成的質量和細節上達到業界領先水平。與其他需要大量資源的模型相比，Open-Sora 以較低的成本實現了高品質的影片生成。
2. 基於 PyTorch 和 xFormers
該專案基於 PyTorch 框架開發，並結合了 xFormers 技術，這使得模型在計算效率和資源利用上有顯著提升。開發者可以利用這些技術，進行更高效的模型訓練和推理。
3. 支援本地運行
Open-Sora 支援在本地環境中運行，使用者可以在自己的設備上部署和運行模型，這不僅提高了資料的私密性，還減少了對外部伺服器的依賴。這對於需要處理敏感資料的使用者尤為重要。
如何開始使用 Open-Sora
- 獲取程式碼：前往 Open-Sora 的 GitHub 儲存庫，克隆或下載最新的程式碼。
- 安裝依賴項：確保您的環境中已安裝 PyTorch，並根據專案需求安裝其他必要的 Python 套件。
- 配置環境：根據官方文件，配置您的運行環境，包括設定模型參數和路徑。
- 運行模型：按照指導，運行模型並生成影片。您可以根據需要調整輸入參數，以獲得不同的影片效果。
by Rain Chu | 3 月 10, 2025 | AI, 影片製作
探索阿里巴巴開源的 AI 影片製作模型：Wan 2.1
阿里巴巴近期推出的開源影片生成模型——Wan 2.1，為創作者提供了一個強大且高效的工具。該模型不僅完全開源，還具備極快的生成速度，並融入了豐富的東方元素，如哪吒等，為影片創作帶來了新的可能性。
Wan 2.1 的主要特色
完全開源，兼容性強
Wan 2.1 採用 Apache 2.0 協議開源，這意味著開發者可以自由地使用、修改和分發該模型，甚至用於商業用途。此外，Wan 2.1 支援 ComfyUI 等圖形介面，方便用戶進行可視化操作，降低了技術門檻。
高效的影片生成速度
得益於先進的架構設計，Wan 2.1 在影片生成速度上表現優異。即使在消費級 GPU 上，如 RTX 3070 顯卡，使用 1.3B 參數模型即可流暢運行，生成 480P 分辨率的影片，更何況現在已經來到了RTX 5090，這將讓個人也能夠在本地設備上高效地進行影片創作。
豐富的東方元素融入
Wan 2.1 在影片生成中融入了大量的東方元素，特別是中國傳統文化中的角色和場景。例如，模型能夠生成包含哪吒等經典角色的影片，這為喜愛東方文化的創作者提供了更多的創作靈感和素材。
如何離線使用 Wan 2.1 進行影片創作
- 環境準備：首先，確保您的電腦具備足夠的硬體資源，建議使用至少 12GB 顯存的顯卡。
- 下載模型：從官方 GitHub 倉庫或 HuggingFace 平台下載 Wan 2.1 的模型檔案。
- 安裝依賴：根據官方指引，安裝所需的 Python 套件和其他依賴項。
- 運行 ComfyUI：啟動 ComfyUI，載入 Wan 2.1 模型，並按照介面提示輸入文本或上傳圖片，以生成對應的影片內容。
- 下載 ComfyUI 工作流 : JSON
參考資料
https://www.freedidi.com/18705.html
by Rain Chu | 6 月 21, 2024 | AI, 影片製作
PixVerse是其中一個令人驚艷的AI工具，能夠簡化影片製作的流程，還能生成出超現實的效果。以下是PixVerse的一些亮點：
1. 超多寫實的電影場景
PixVerse 提供了一個豐富的電影場景庫，涵蓋了各種不同風格和題材的場景。無論是科幻未來城市還是古典歐洲城堡，使用者都可以輕鬆找到適合自己影片的背景。這些場景不僅僅是靜態圖片，而是經過精心設計和渲染的3D環境，能夠帶給觀眾身臨其境的視覺體驗。
2. 自由用遮罩控制需要運動的物件
在影片製作中，物件的運動和互動是至關重要的。PixVerse 讓使用者能夠通過遮罩技術，自由控制影片中各種物件的運動方向和速度。例如，在製作一部鯊魚主題的影片時，使用者可以使用遮罩來精確控制鯊魚的游泳方向，讓影片更加真實和生動。這種自由度讓影片製作變得更加靈活和創意十足。
3. 利用人物生成視頻功能
除了場景和物件運動，PixVerse 還具備利用人物生成視頻功能。使用者可以根據自己的需求，調整角色的外觀、動作和表情。這些角色不僅外觀真實，而且可以根據劇情需要做出自然的動作和反應。無論是需要一個動作明星還是日常生活中的普通人，PixVerse 都能夠快速生成，極大地節省了角色設計和建模的時間。
參考資料
https://pixverse.ai
by Rain Chu | 10 月 9, 2023 | AI, Tool, 圖型處理, 影片製作, 繪圖, 音樂
當我們談論數位藝術和影片製作，通常的過程很複雜且耗時。但現在，有了Artflow AI，一切都變得如此簡單和迅速。這是一個強大的平台，集成了各種工具，使用者能從簡單的想法迅速轉換到完整的影片或圖像。以下是一些核心功能的深入探討。
- 影像生成系統：Artflow AI 透過其先進的影像生成系統，能夠從基本的描述或提示快速製作出令人驚艷的藝術品。不再需要專業的繪圖技巧或花費時間學習複雜的軟件。
- 影片編輯系統：除了單一的圖像，Artflow AI 也提供了影片編輯功能，允許使用者編輯和製作高品質的影片內容。
- 故事編輯系統：透過這個系統，用戶可以編排和策劃整個故事情節，確保內容的流暢性和吸引力。
- 頭像生成系統：想要一個獨特和個性化的頭像嗎？這個功能允許使用者創建專屬的頭像，展現真實或想像中的自己。
新功能亮點：
- 成為自己奇幻故事中的英雄：現在你可以在圖片或影片中可視化自己，成為自己夢想中的主角。
- 訓練你的數位演員：只需10張圖片，就能訓練出屬於你的數位角色。
- 免費訓練機會：Starter 和 Pro 用戶都能獲得一次免費的訓練。
- Artflow v2：更高的解析度和質量，讓每一部作品都更出色。
- 免費混音Video Studio項目：Pro用戶現在可以免費混音新的Video Studio項目。
- 動畫你的角色：只需一鍵，就可以將角色從畫廊轉到Video Studio！
總的來說，Artflow AI是每個創作者夢寐以求的工具。從圖像生成到影片編輯，它提供了一個綜合的解決方案，使內容創作更加快速和簡單。
同場加映用來做兒童繪本的方法
延伸閱讀
近期留言