Netflixが新たに開発した動画編集フレームワーク「VOID」を発表、動画から任意の物体を消した場合に残りの物体の動きを物理シミュレーションして映像を生成可能
2026年4月7日 12:24
🤖 AI Summary
Netflixとブルガリア・ソフィア大学の研究チームが開発した動画編集フレームワーク「VOID」について説明します。
1. ** VOID の目的**: オブジェクトを削除した際に周囲の物体の動きや物理的な因果関係を自然に再構成し、不自然な結果を避ける。
2. ** 特徴**:
- 物理シミュレーションに基づいた動画生成。
- 削除対象が他の物体と衝突したり支えている場合でも自然な動きを再現できる。
3. ** 技術**:
- Quadmask: VLM(視覚と言語統合モデル)を使用し、削除領域を特定し、物理的に妥当な軌道や動きを生成する。
- CogVideoX: 50億パラメータの拡散トランスフォーマーに基づいて構築され、物理的な反事実動画生成に優れている。
4. ** 実用性**:
- ドミノ倒しやプールでの水しぶきなどの例を通じて、VOID の効果を示している。
- Hugging Face でデモが公開されており、ソースコードは GitHub で公開されている。
この技術により、動画編集時に物体を削除した際の自然な物理的動きを再現しやすくすることができ、より高度な動画編集が可能になる。
1. ** VOID の目的**: オブジェクトを削除した際に周囲の物体の動きや物理的な因果関係を自然に再構成し、不自然な結果を避ける。
2. ** 特徴**:
- 物理シミュレーションに基づいた動画生成。
- 削除対象が他の物体と衝突したり支えている場合でも自然な動きを再現できる。
3. ** 技術**:
- Quadmask: VLM(視覚と言語統合モデル)を使用し、削除領域を特定し、物理的に妥当な軌道や動きを生成する。
- CogVideoX: 50億パラメータの拡散トランスフォーマーに基づいて構築され、物理的な反事実動画生成に優れている。
4. ** 実用性**:
- ドミノ倒しやプールでの水しぶきなどの例を通じて、VOID の効果を示している。
- Hugging Face でデモが公開されており、ソースコードは GitHub で公開されている。
この技術により、動画編集時に物体を削除した際の自然な物理的動きを再現しやすくすることができ、より高度な動画編集が可能になる。