project
Oasis - DecartとEtchedが初のAI生成リアルタイムゲームシステムを発表
Oasisは、DecartとEtchedが共同開発した、世界初のリアルタイムAI生成ゲームです。このゲームは、ゲームエンジンを使用せずにAIモデルによって直接生成されたインタラクティブなビデオコンテンツを、毎秒20フレームでリアルタイムにレンダリングします。プレイヤーは…
Oasisとは何ですか?
Oasisは、DecartとEtchedが共同開発した、世界初のリアルタイムAI生成ゲームです。ゲームエンジンを使わず、AIモデルが直接生成したインタラクティブなビデオコンテンツを、毎秒20フレームでリアルタイムにレンダリングします。プレイヤーは自由に移動したり、ジャンプしたり、アイテムを拾ったりすることができ、AIによってリアルタイムで形作られるゲーム世界を体験できます。Transformerアーキテクチャをベースに、ViTとDiTの技術を組み合わせることで、Oasisは低遅延のリアルタイムインタラクションを実現しています。コードとモデルの重みはオープンソースで公開されており、コミュニティの貢献と技術革新を促進しています。Oasisの登場は、AI生成によるパーソナライズされたコンテンツの新時代の到来を告げるものです。
Oasisの主な機能
- リアルタイムコンテンツ生成Oasisはプレイヤーのキーボード入力に基づいてリアルタイムでゲーム画面を生成できるため、ゲーム世界はプレイヤーの行動に即座に反応することができる。
- 自由な探索と交流プレイヤーはオアシス内で自由に移動、ジャンプ、ブロックの破壊や構築を行うことができ、高いインタラクティブ性と探索の自由度を提供する、新たに生成されたマップ世界を探索できます。
- ゲームエンジンは不要Oasisは従来のゲームエンジンに依存せず、AIベースのモデルを使用してゲームコンテンツを生成することで、開発の複雑さを軽減し、コンテンツ制作の新たな方法を切り開いています。
- 物理法則とゲームメカニクスに関する基礎的な理解Oasisは、物理法則とゲームルールを理解しており、グラフィックレンダリングやゲームロジックのシミュレーションを含むコンテンツを生成します。
- 高フレームレートレンダリングこのゲームは毎秒20フレームでリアルタイムにレンダリングされ、プレイヤーにスムーズなゲーム体験を提供します。
- オープンワールド体験Oasisは、海岸線、村、森林、砂漠など、さまざまな地形を体験できるオープンワールドを提供します。
- プレイヤーの入力に基づく動的な調整このゲームは、プレイヤーの入力に基づいてゲーム世界を動的に調整し、パーソナライズされたゲーム体験を提供する。
- ハードウェア最適化Oasisは、より高いパフォーマンスと優れたユーザーエクスペリエンスを実現するために、特定のハードウェア(EtchedのSohuチップなど)向けに最適化されています。
- インタラクティブなビデオコンテンツ静止画やインタラクティブな動画コンテンツを生成できるようになったことで、ビデオゲーム業界に新たな可能性がもたらされた。
Oasisの技術原則
- モデルアーキテクチャOasisは、拡散トランスフォーマーバックボーンネットワークとトランスフォーマーベースのオートエンコーダーを含む、トランスフォーマーベースのモデルアーキテクチャであり、高速な自己回帰型インタラクティブビデオ生成のために特別に設計されています。
- 低遅延設計Decartチームは、モーションからフレームへの遅延を低減できるモデルアーキテクチャを導入し、システムがプレイヤーの入力に迅速に対応できるようにした。
- ハードウェア最適化Oasisは、特定のGPUおよびサーバーハードウェアアーキテクチャ向けに独自のシステム最適化機能を備えており、より効率的なパフォーマンスを実現します。
- SohuチップOasisはSohuチップ上で動作し、Etched社が開発中のASIC(特定用途向け集積回路)で、大規模なビデオモデルの処理に特化して設計されており、4K解像度で1000億個以上のパラメータを持つモデルをサポートできる。
オアシスプロジェクトの住所
- プロジェクト公式サイト:oasis-model.github.io
- GitHubリポジトリ:https://github.com/etched-ai/open-oasis
- ハギングフェイスモデルライブラリ:https://huggingface.co/Etched/oasis-500m
- オンラインでデモを体験してください:oasis.decart.ai
Oasisの応用シナリオ
- ビデオゲームそれは、まったく新しいゲーム体験と、無限の可能性を秘めたゲーム環境を提供する。
- 教育と訓練スキル訓練のためのシミュレーション環境を作成し、インタラクティブな学習体験を提供する。
- バーチャル観光と探検仮想世界を探索するユーザーをサポートし、安全な冒険体験を提供します。
- 映画とエンターテイメント映画シーンのリアルタイム生成とインタラクティブムービーの制作。
- 社会的交流仮想ソーシャルプラットフォームを開発し、拡張現実(AR)を活用したソーシャル体験を提供する。