SenseNova 6.8 Code2Video 評測:開源模型能透過編寫程式碼生成影片嗎?
SenseTime 推出的 SenseNova 6.8 Code2Video 透過程式碼生成影片。評測其開源工作流程、動態設計能力,並與擴散模型進行比較。
SenseNova 6.8 Code2Video 評測:開源模型能透過編寫程式碼生成影片嗎?
AI 影片生成的領域長期由擴散模型主導——這些龐大的神經網路逐幀預測像素值。雖然效果驚人,但這些模型往往難以實現精確控制、時間一致性與可編輯性。此時,SenseNova 6.8 Code2Video 登場,這是 SenseTime 推出的一款全新開放權重模型,提出了一種激進的替代方案:如果 AI 不是直接生成像素,而是編寫渲染像素所需的程式碼,會怎樣?
SenseNova 6.8 Code2Video 於 2026 年 10 月 28 日發布,它並非傳統的影片生成器。這是一款輕量級的開源模型,旨在透過生成可執行程式碼來合成短影片。這種方法仿效了由 Claude 3.5 等大型語言模型帶動流行的「Artifacts」工作流程,但專門應用於動態圖形與程式化視覺特效。在本評測中,我們將深入探討這種程式碼優先的範式能否與成熟的擴散模型工具競爭、它如何處理動作編排,以及這對開源 AI 影片未來意味著什麼。
範式轉變:從像素到程式
要理解 SenseNova 6.8 Code2Video,你必須先拋棄傳統意義上「生成影片」的概念。大多數競爭對手,例如 Sora 或 Runway Gen-3,使用擴散轉換器將潛在表示去噪為影片幀。這個過程計算成本高昂且本質上是機率性的,導致 AI 影片中常見的瑕疵:物體變形、背景不一致以及細節閃爍。
SenseNova 6.8 採用確定性方法。根據近期的評測與官方 GitHub 儲存庫,該模型會生成一個腳本——通常使用 Python 或類似的高階語言——來定義場景、物體、動畫與時間安排。接著,由渲染引擎執行這段程式碼以產生最終的影片輸出。
這個區別至關重要。由於每一幀都是可執行程式的輸出結果,因此視覺效果可以精確控制。如果您希望球體以特定高度反彈並符合精確的物理規律,您不必指望擴散模型「學會」重力;您可以直接將物理方程式寫入程式碼中。這使得輸出結果可以就地編輯。您可以調整顏色變數、更改時間參數,或替換形狀,而無需從頭重新生成整個影片。
主要功能與工作流程
SenseNova 6.8 Code2Video 的核心優勢在於其專業化。它並非試圖成為適用於電影鏡頭或逼真真人臉部的通用影片生成器。相反,它專注於動態設計、數學動畫和程式化視覺效果。
1. 程式碼驅動渲染
該模型充當自然語言提示詞與可執行程式碼之間的橋樑。您提供描述所需動態圖形的提示詞,模型則輸出渲染該圖形所需的程式碼。這使得實現複雜的編排成為可能,而這是純擴散模型難以做到的。例如,創建幾何圖形的同步舞蹈或即時更新的資料視覺化,變成邏輯問題而非運氣問題。
2. 開源生態系統
商湯科技已在 Hugging Face 上發布模型權重,確保社群可以檢查、微調並在本地部署該模型。工作流程、技能檔案和提示詞範本託管在 GitHub 上的 OpenSenseNova 組織下。對於希望將影片生成整合到現有流程中而不依賴封閉 API 的開發人員和研究人員來說,這種透明度是一個顯著優勢。
3. 輕量級架構
與需要高階 GPU 進行推論的數十億參數擴散模型不同,SenseNova 6.8 被描述為「輕量級」模型。這意味著它可以在更普通的硬體上運行,使其適用於邊緣裝置或本地開發環境。對程式碼生成的關注降低了與迭代去噪步驟相關的計算負載。
4. 互動式「Artifacts」風格工作流程
使用者體驗設計為迭代式。就像大型語言模型允許你在聊天介面中反覆修改程式碼一樣,SenseNova 6.8 支援一種工作流程,讓你可以調整生成的程式碼並快速重新渲染。這對於需要精確控制時間軸與緩動曲線的動態設計師特別實用。
效能與視覺品質
SenseTime 與早期測試者分享的初步結果顯示,該模型在視覺構圖與動作編排方面表現出色。在涉及抽象形狀、文字動畫與數學圖表的測試中,輸出結果清晰且時間上穩定。由於動作是由程式碼定義,因此不會出現擴散模型常見的「抖動」或「變形」現象。
然而,這一優勢也是其限制所在。該模型目前專注於完全以程式碼實作的短影片。這意味著它尚不適合生成寫實場景、複雜的 3D 環境鏡頭運動,或包含真實人類演員的影片。它是一款動態圖形工具,而非電影製作工具。
早期示範影片,包括 10 月 28 日在 X(前 Twitter)上發布的 90 秒宣傳片,展示了該模型創造具有乾淨線條與精確時間軸的動態視覺效果的能力。動作感覺是有目的且經過設計的,而非幻覺產物。
比較:SenseNova 6.8 與擴散式模型
為了讓 SenseNova 6.8 Code2Video 有更清晰的定位,將其與傳統擴散式影片生成器進行比較會很有幫助。下表突顯了方法、控制權與應用場景方面的主要差異。
| 功能 | SenseNova 6.8 Code2Video | 傳統擴散模型(例如 Sora、Runway) |
|---|---|---|
| 生成方法 | 生成可執行程式碼(Python/JS)以渲染影格 | 透過迭代去噪預測像素值 |
| 主要應用場景 | 動態圖形、資料視覺化、抽象動畫 | 電影鏡頭、寫實場景、人類演員 |
| 可編輯性 | 高:編輯程式碼變數以改變顏色、時間軸、形狀 | 低:需要重新生成或複雜的局部重繪 |
| 時間一致性 | 高:基於邏輯的確定性輸出 | 變動性高:容易出現閃爍與變形 |
| 硬體需求 | 輕量:所需 GPU 記憶體較低 | 沉重:高解析度需要高階 GPU |
| 開源狀態 | 開放權重(Hugging Face)& 程式碼(GitHub) | 大多為封閉 API 或專有權重 |
| 學習曲線 | 中等:需要基本的程式碼直覺 | 低:基於提示詞的介面 |
優缺點
優點
- 精準控制:由於影片由程式碼定義,您可以精確控制時間、緩動效果和物件屬性。
- 可編輯性:您可以微調生成的程式碼以進行小幅調整,而無需重新生成整個影片。
- 開源:權重和工作流程可在 Hugging Face 和 GitHub 上取得,促進社群創新。
- 輕量化:模型設計注重效率,可能允許在消費級硬體上本地執行。
- 時間穩定性:沒有擴散模型中常見的閃爍或變形偽影。
- 專業領域卓越:擅長動態設計、數學動畫和程式化特效。
缺點
- 範圍有限:目前專注於簡短的程式碼實作影片;不適合寫實或複雜的電影場景。
- 編碼門檻:雖然它能生成程式碼,但用戶可能需要一些程式設計知識才能有效編輯和優化輸出結果。
- 早期階段:作為一款新發布的產品(Oct 2026),其工具與外掛生態系統仍在發展中。
- 不適合寫實:難以處理或並非為寫實的人臉、紋理或自然環境而設計。
- 依賴渲染引擎:需要相容的渲染環境來執行生成的程式碼。
誰應該使用 SenseNova 6.8 Code2Video?
此模型並非適合所有人。它特別針對以下對象設計:
- 動態設計師:需要精確控制動畫並希望自動化重複性任務的人。
- 開發人員:希望使用程式碼驅動的工作流程將影片生成整合到應用程式中的人。
- 教育工作者:需要為教學製作數學動畫或資料視覺化的人。
- 研究人員:對大型語言模型與程式化渲染的交集感興趣的人。
如果您希望生成寫實的電影片段或包含人類演員的社群媒體內容,建議繼續使用基於擴散的模型。但如果您需要乾淨、可編輯且精確的動態圖形,SenseNova 6.8 提供了一個極具吸引力的替代方案。
評定結果
SenseNova 6.8 Code2Video 是邁向更具可控性與效率的 AI 影片生成的一個充滿潛力的步驟。透過將範式從像素預測轉向程式碼生成,商湯科技(SenseTime)解決了擴散模型許多相關的痛點,特別是在可編輯性與時間一致性方面。
雖然它無法取代通用型影片生成器,但它在動態設計與程式化視覺效果領域佔據了有價值的利基市場。該專案的開源性質對社群而言是一項重大勝利,允許進行客製化與本地部署。隨著模型日益成熟以及工具生態系統的不斷擴展,我們預期將看到更多這種程式碼優先方法的創新應用。
目前,SenseNova 6.8 Code2Video 對於那些精通程式碼並希望利用 AI 進行精確、可編輯影片創作的用戶來說,是一款強大的工具。它提醒我們,有時生成圖片的最佳方式不是繪製它,而是撰寫如何繪製它的指令。
常見問題
問:SenseNova 6.8 Code2Video 可以免費使用嗎? 答:是的,模型權重是開源的,並可在 Hugging Face 上取得。工作流程與程式碼位於 GitHub。然而,如果您沒有能夠執行該模型的本地硬體,可能需要支付雲端 GPU 資源的費用。
問:它支援哪些程式語言? 答:該模型主要生成 Python 程式碼,然後由渲染引擎執行。隨著社群對 GitHub 儲存庫的貢獻,確切支援的語言可能會擴展。
問:我可以用它來生成逼真的人像影片嗎? 答:不行,SenseNova 6.8 專門用於動態圖形、抽象動畫與程式化特效。它並非為寫實人像生成而設計。
問:它與 Runway 或 Pika 相比如何? 答:Runway 與 Pika 是擴散模型,擅長生成寫實場景。SenseNova 6.8 更適合精確、可編輯的動態圖形與資料視覺化。它們服務不同的應用場景。
問:我可以在哪裡找到模型權重?
答:權重可在 Hugging Face 上取得,程式碼與文件則位於 OpenSenseNova GitHub 組織中。
AI Tools Hub 團隊
專業 AI 工具評測團隊
我們的團隊由 AI 愛好者與技術專家組成,測試並評測數百款 AI 工具,協助您找到最適合需求的解決方案。我們基於實際使用情況,提供誠實且深入的評析。