風格轉換在電影與電視產業的演變
什麼是風格轉換?
AI 風格轉換是一種人工智能技術,將一張圖片的藝術風格應用到另一張圖片上。
在 AI 風格轉換技術出現前,圖片處理通常依賴於軟件內建的濾鏡和預設。例如,Photoshop 這個廣泛使用的圖片處理工具,包含許多預設濾鏡,讓用戶能快速將影像風格化為復古、黑白、油畫等效果。這些濾鏡使用簡單且效果明顯,但由於風格是預設的,限制了用戶的自訂與個人化空間。
人工智能的發展帶來了影像風格處理的新方式,讓我們能將特定的藝術風格套用到任何影像,不只是簡單的濾鏡。舉例來說,一張簡單的魔術師手勢照片,藉由參考梵谷的《星夜》,我們可以迅速創作出獨一無二且充滿個人風格的藝術海報。

Wang, H., Spinelli, M., Wang, Q., Bai, X., Qin, Z., & Chen, A. (2024, April 4). InstantStyle: Free lunch towards style-preserving in text-to-image generation. arXiv.org. https://arxiv.org/abs/2404.02733
相比傳統濾鏡,AI 風格轉換在風格與內容的結合上具備更多創意表現的可能性。很多軟件和網站也在探索 AI 風格濾鏡的新可能性。
例如,Remini,一款受歡迎的 AI 影像應用,提供黏土風格濾鏡。這種濾鏡透過深度學習模型分析影像的整體內容,智慧地套用類似黏土雕塑的材質,使影像看起來像手工黏土藝術品。最終影像呈現出「醜中帶萌」的風格,在網路上迅速走紅。

與傳統濾鏡不同,AI 風格濾鏡能根據影像細節智能調整,而非簡單疊加效果。
隨著科技進步,風格轉換技術也被應用於影片。影片風格轉換比影像風格轉換更複雜,因為需要維持各幀之間風格的一致性,確保整個影片流暢且自然。
然而,風格轉換技術在影片領域的潛力為傳統電影與電視產業開闢了新可能,為影片製作帶來創意表現的新空間。
style_transfer_blog_video_1.mp4
style_transfer_blog_video_2.mp4
電影與電視產業中的「風格轉換」
在傳統動畫製作中,動畫師經常參考真人影片,然後手動加入動畫效果及風格化處理。例如在電影《蜘蛛人:新宇宙》中,動畫師參考現實生活中的表演,繪製出靈活且真實感強的動畫效果。
style_transfer_blog_video_3.mp4
1. 動畫製作本身可視為一種「風格轉換」
例如在《靈魂奇遇記》中,Pixar 使用手繪分鏡圖來規劃每一場戲的動作與鏡頭,逐步過渡到 3D 建模、動畫及最後的渲染。透過比對分鏡圖與最終影片,我們可以看到動畫如何從最初的草稿演變成细緻的終稿渲染。

手繪分鏡圖

概念探索

動畫製作

裸渲染

光影與後期調整
2. 近年來 AI 也正式進入動畫製作流程
以《元素方程式》為例,Pixar 藝術家繪製少量風格化的火焰靜態圖作為 AI 參考,AI 將真實火焰動態轉化為風格化的火焰動態,達到極具真實感的火焰效果。沿著這條技術路線,Pixar 利用每位員工的 GPU,最終將 AI 渲染時間從每幀 5 分鐘加速至 1 秒,處理了整部影片的 1600 多個鏡頭。

作為風格轉換技術早期的產業應用案例,這項 AI 技術突破了傳統手工動畫處理方法,使創作團隊得以在更短時間內完成更複雜的視覺效果。
此外,AI 風格轉換亦被應用於廣告與音樂影片製作,協助團隊低成本達成高度藝術化的效果。
利用 AI 進行風格轉換
隨著人工智能技術迅速發展,風格轉換在電影與影片製作中的應用愈來愈廣泛。眾多工具中,ComfyUI 以其靈活與高效性成為首選之一。它讓使用者透過配對不同模型與組件,達成高度自訂的風格轉換效果,滿足多樣的創意需求。
基於 ComfyUI 的風格轉換流程可總結如下:
1. 準備影片素材:
首先準備清晰的原始影片素材,通常 1080P 解析度足以滿足 AI 風格轉換需求。素材的品質直接影響後續生成的質量,因此影片的清晰度與穩定性非常重要。
2. ControlNet 預處理:
接著透過 ControlNet 進行預處理。ControlNet 根據影片需求提取不同特徵,包括線條、骨架動作或深度信息。提取何種特徵取決於風格轉換專案的具體要求。例如,如需精確捕捉人體動作,則提取骨架特徵;如重點在於線條風格,則提取線條特徵。

在 ThinkDiffusion 中和 ControlNet 協同工作
3. 確定風格與模型:
根據期望風格,用戶可選擇合適的大模型(如 SD1.5 或 SDXL)及 LoRA,並在Civitai上取得。此階段同時需挑選適當的關鍵詞,確保 AI 生成的風格符合預期。關鍵詞在風格轉換中扮演重要的引導角色,模型選擇的組合也會影響最終生成結果。

4. AI 風格轉換:
此步驟中,使用前面預處理的素材與選定之模型進行 AI 風格轉換。ControlNet 預處理的特徵有助於 AI 在生成過程中保持原影片的結構與動態,確保風格變換後的動畫仍然一致且流暢。

5. 後製編輯:
生成完成後,取得最終影片並進行後期處理。在此階段,可透過編輯工具微調影片,使最終效果符合期望,例如調整顏色、光影,或根據需求加入特效與字幕。
介紹 Morph Studio 進行風格轉換
如果以上步驟讓你覺得複雜,不用擔心,我們為你準備好了。我們創新的平台 Morph Studio Video Style Transfer 已經革新了整個流程,將複雜的工作流程封裝並運用我們獨有的 AI 模型。你只需上傳影片,選擇想要的風格,點擊按鈕,就能見證影片轉化的奇蹟。
這裡是 Morph Studio Video Style Transfer 的連結

我們的平台提供動畫、卡通、黏土動畫、像素藝術、賽博朋克等眾多人氣風格,由我們以導演眼光精心挑選。若想要個人化風格,你甚至可以上傳一張圖片,讓我們的 AI 擷取其獨特風格,無縫植入你的影片中。
比較 Morph Studio 與其他風格轉換工具
市面上雖有少數平台提供 AI 影片風格轉換,但 Morph Studio 透過優異的服務已經成為領導者。
Domo.ai 與 Morph Studio 比較:
- Domo.ai:
- 優點:
- 提供 30 多種風格可選擇。
- 其他配合影片風格轉換的工具,如文字轉圖像、角色動態。
- 缺點:
- 風格轉換時臉部表情與結構細節流失明顯。
- 輸出影片背景不穩定,隨機改變影片色彩。
- 生成速度慢,且無法批量處理影片。
- 優點:
- Morph Studio:
- 優點:
- 保留角色臉部結構與表情,忠於原影片。
- 保留更多背景細節,包含背景中正在發生的事物。
- 支援批量風格轉換多支影片,且生成速度快,價格合理。
- 缺點:
- 當物體移動太快時,背景連貫性稍有流失。
- 優點:
GoEnhance 與 Morph Studio 比較:
- GoEnhance:
- 優點:
- 提供約 30 種風格讓用戶選擇。
- 其他配合影片風格轉換的工具,如影片換臉及角色動畫。
- 缺點:
- 風格轉換後臉部表情呆板,不符合製作需求。
- 生成速度慢。
- 優點:
- Morph Studio:
- 優點:
- 介面友好、易於操作,且支持批量處理影片。
- 保留更多影片細節,與原內容保持一致。
- 提供獨特風格如水、火、羽毛,為創作增添更多可能性。
- 缺點:
- 目前風格數量有限。
- 優點:
風格轉換的世界是一幅無界限的畫布,我們期待看到你用我們的工具創作出多麼精彩的藝術傑作!