影視產業中風格轉換的演進

什麼是風格轉換？

AI 風格轉換是一種人工智慧技術，能將一張圖片的藝術風格套用到另一張圖片上。

在 AI 風格轉換技術問世之前，圖像處理通常依賴軟體內建的濾鏡和預設效果。例如，廣受使用的圖像處理工具 Photoshop 含有許多預設濾鏡，讓使用者能快速套用復古、黑白、油畫等風格化效果。這些濾鏡易於使用且效果明顯，但因為風格是預先設定好的，限制了客製化和個人化的空間。

AI 的發展帶來了圖像風格處理的新方式，允許我們將特定的藝術風格套用到任何圖像上，而不只是簡單的濾鏡。舉例來說，一張簡單的魔術師手勢圖片，透過參考梵谷的《星夜》，即可快速創造出獨特且個人化的藝術海報。

Wang, H., Spinelli, M., Wang, Q., Bai, X., Qin, Z., & Chen, A. (2024, April 4). InstantStyle: Free lunch towards style-preserving in text-to-image generation. arXiv.org. https://arxiv.org/abs/2404.02733

相較於傳統濾鏡，AI 風格轉換在風格和內容的結合上提供更多創意表現的可能性。許多軟體和網站也在探索 AI 風格濾鏡的新可能。

例如，Remini，一款流行的 AI 圖像應用，提供黏土風格濾鏡。這些濾鏡透過深度學習模型分析圖像整體內容，智慧地套用類似黏土雕塑的質感，使圖像看起來像手工製作的黏土藝術品。最終呈現出「醜萌」的風格，迅速在網路上走紅。

與傳統濾鏡不同，AI 風格濾鏡會智慧調整圖像細節，而非單純覆蓋效果。

隨著技術進步，風格轉換也被應用在影片上。影片風格轉換比圖像風格轉換複雜，因為它需要維持每一幀畫面風格的一致性，確保整支影片的流暢自然。

然而，風格轉換技術在影片領域的潛力，為傳統影視產業帶來新的可能，為影片製作提供新的創意表現空間。

style_transfer_blog_video_1.mp4

style_transfer_blog_video_2.mp4

影視產業中的「風格轉換」

在傳統動畫製作中，動畫師常參考真人影片，並手動加入動畫效果與風格化處理。例如在電影《蜘蛛人：新宇宙》中，動畫師透過參考真實演出，繪製出靈活且逼真的動畫效果。

style_transfer_blog_video_3.mp4

1. 動畫製作本身即可視為一種「風格轉換」

舉例來說，在《靈魂急轉彎》（Soul）中，Pixar 使用手繪分鏡腳本規劃每個場景的動作與鏡頭，逐步轉化為 3D 建模、動畫與最終渲染。透過比較分鏡腳本與最終電影，我們可以看到動畫如何從草圖演進到精細渲染。

手繪分鏡腳本

概念探索

動畫製作

裸渲染

光影與後期調整

2. AI 近年也正式進入動畫製作流程

例如在《元素方程式》(Elemental) 中，Pixar 藝術家繪製了幾張風格化的火焰靜態圖作為 AI 參考。AI 將真實火焰的動態轉換為風格化的火焰動態，造成非常逼真的火焰效果。沿著這條技術路線，Pixar 利用每位員工的 GPU，最終將 AI 渲染時間從每幀 5 分鐘加速到 1 秒，處理了全片超過 1600 個鏡頭。

作為風格轉換產業早期的應用案例，這項 AI 技術突破了傳統人工作業的動畫處理方式，讓創作團隊能在更短時間內完成複雜視覺效果。

此外，AI 風格轉換也被應用於廣告及音樂影片製作，協助製作團隊以更低成本達成高度藝術化的效果。

使用 AI 進行風格轉換

隨著人工智慧技術快速發展，風格轉換在影視製作的應用日益普及。在眾多工具中，ComfyUI 因其靈活性與效率成為首選之一，允許使用者搭配不同模型與元件來實現高度客製化的風格轉換效果，滿足多元創意需求。

基於 ComfyUI 的風格轉換流程可歸納為：

1. 準備影片素材：

首先，準備清晰的原始影片素材。通常 1080P 解析度足以滿足 AI 風格轉換需求。素材品質直接影響後續生成品質，因此影片的清晰度與畫面穩定性非常重要。

2. ControlNet 預處理：

接著透過 ControlNet 進行預處理。ControlNet 可根據影片需求擷取不同特徵，包括線條、骨架動態或深度資訊。提取哪些特徵取決於專案對風格轉換的具體需求。例如需要精確捕捉人體動作，就提取骨架特徵；若強調線條風格，則提取線條特徵。

與 ControlNet 配合使用於 ThinkDiffusion

3. 確定風格與模型：

依照想要的風格，使用者可選擇適合的大型模型（如 SD1.5 或 SDXL）及 Civitai 上的 LoRA。此步同時需選擇合適的關鍵詞，確保 AI 生成的風格效果符合預期。關鍵詞在風格轉換中具指引作用，且模型組合會影響最終結果。

4. AI 風格轉換：

此步利用前述預處理素材與選定模型透過 AI 執行風格轉換。ControlNet 的預處理特徵幫助 AI 在生成過程中維持原影片的結構與動態，確保風格轉換後動畫保持一致且流暢。

5. 後製剪輯：

生成後取得最終影片，並進行後製。此時可使用剪輯工具微調影片，確保最終效果符合預期，如調整色彩、光影，或根據需求添加特效及字幕。

介紹 Morph Studio 進行風格轉換

如果上述步驟對你來說感覺繁複，不用擔心，我們為你準備好了。我們創新的平台 Morph Studio Video Style Transfer，將複雜流程整合封裝，結合我們專有的 AI 模型力量，只需上傳影片、選擇風格，一鍵即可見證轉換魔法。

點擊這裡前往 Morph Studio Video Style Transfer

我們平台提供動畫、卡通、泥塑、像素畫、賽博朋克等多種精選流行風格，猶如導演般為你挑選。想要個人化風格？甚至可以上傳圖片，讓 AI 擷取其獨特風格，無縫整合到你的影片中。

Morph Studio 與其他風格轉換工具比較

雖然市面上已有數個平台提供 AI 影片風格轉換，Morph Studio 以卓越服務已成為業界領導者。

Domo.ai 與 Morph Studio ：

• Domo.ai：
  • 優點：
    • 提供 30 多種風格影片濾鏡
    • 附帶其他輔助工具，如文字轉圖像、角色移動等
  • 缺點：
    • 風格轉換時臉部表情和結構細節丟失嚴重
    • 輸出影片與原背景不一致，顏色隨意變化
    • 生成時間較久，不支持批次處理影片
• Morph Studio：
  • 優點：
    • 保留角色臉部結構和表情，忠於原影片
    • 保留更多背景細節，畫面更豐富
    • 支持批次處理，能快速處理多支影片，且價格合理
  • 缺點：
    • 當物體移動速度過快時，背景連貫性稍有流失

GoEnhance 與 Morph Studio：

• GoEnhance：
  • 優點：
    • 約有 30 種風格可供選擇
    • 其他輔助工具，如影片換臉與角色動畫
  • 缺點：
    • 風格轉換後臉部表情遲鈍，製作時不理想
    • 生成速度緩慢
• Morph Studio：
  • 優點：
    • 介面友善，支援批次處理影片
    • 保留更多細節，與原始內容保持一致
    • 擁有獨特風格，如水、火、羽毛，增添創意
  • 缺點：
    • 目前風格種類較有限

風格轉換的領域是一幅無界限的畫布，我們期待看到你利用我們的工具創造出更多精彩的創作大作！