動画生成AI
soraが面白いのは、既存生成AIが、キーワードを中心にそれっぽいものをGANのように穴埋めしていくような従来の画像処理に加え、登場するものの一貫性の維持や、現実空間のシミュレーション的な考慮が行われている点である。
まだ実装方法は明らかではないが、
・Unreal Engineのような3Dシミュレーション要素を裏で走らせている
・重力のようないくつかの原則を学習したモデルによって、物理法則からの逸脱を抑制している
・多数の動画パターンを学習してそれにあわせた動き方をしている。
どれなのかはわからないが、いずれも仮説レベルでは成立するかと思う。