Runway 推出使用簡單的影片輸入,立即生成富有表情的角色動態補作,一個全新的影片生成表現工具 - Act-One。即將推出
在 Runway,我們的使命是為藝術家構建富有表現力且可控的工具,為創意表達開闢新的途徑。今天,我們很高興推出 Act-One,這是一款在 Gen-3 Alpha 中生成富有表情的角色表現的最新工具。
Act-One 可以使用影片和語音表現作為輸入,創建引人入勝的動畫。它代表了在使用生成模型創作富有表現力的真人和動畫內容方面向前邁出了重要一步。
僅使用演員表演的簡單影片來為生成的角色製作動畫。視線、微表情、節奏和表現都在最終生成的輸出中得到了忠實的呈現。
捕捉表演的精髓
傳統的面部動畫流程通常涉及複雜的多步驟工作流程。這些可能包括動作捕捉設備、多個影片參考、手動面部綁定等技術。目標是將演員的表演轉換為適合動畫流程的3D模型。傳統方法的主要挑戰在於將參考影片中的情感和細微差別保留到數位角色中。
使用完全不同的流程,直接且僅由演員的表演驅動,且不需要額外的設備。只要簡單的單攝影機設置捕捉演員的表演,可用於為生成的角色製作動畫。
動作捕捉動畫
Act-One 可以應用於各種參考圖像。該模型保留了逼真的面部表情,並將表演精確地轉換為與原始影片比例不同的角色。這種多功能性為創新的角色設計和動畫開闢了新的可能性。
在家中使用簡單的攝影機設置捕捉演員的驅動表演,為生成的角色製作動畫。並添加了語音變化。
真人實拍
該模型還擅長生成具有電影感和真實感的輸出,在不同攝影機角度下表現出顯著的穩定性,同時保持高保真的面部動畫。這種能力使創作者能夠開發出可信的角色,傳達真實的情感和表達,增強觀眾與內容的聯繫。
新的創意途徑
在 Tenten 我們一直在嘗試使用 Runway 探索如何允許生成多回合、富有表情的對話場景,這在以前使用生成式影片模型時具有挑戰性。現在透過 Act-One 只需使用消費級攝影機和一位演員從劇本中閱讀並表演不同的角色,就可以創作敘事內容。
安全性
Runway 致力於負責任的開發和部署。這個新工具,配備了全面的內容審查和安全預防措施,包括:
- 更強大的能力來檢測和阻止試圖生成包含公眾人物的內容;
- 技術措施來驗證最終用戶有權使用他們使用自定義聲音創建的語音;以及
- 持續監控以檢測和減輕其他可能對我們的工具和平台的濫用。
了解更多關於 Runway 的安全生成媒體基礎是我們當前和未來 Act-One 發布的基礎。
展望未來
我們很高興看到 Act-One 將為動畫和角色表演帶來何種形式的創意敘事。Act-One 是我們將以前複雜的技術帶給更廣泛的創作者和藝術家的目標的又一步。
期待看到藝術家和敘事者如何使用 Act-One,以新的和令人興奮的方式將他們的願景變為現實。Act-One 的訪問權限今天開始逐步向付費用戶推出,很快將向所有人開放。
--