project
Project Marinerは、Googleが開発したインテリジェントなウェブブラウジングアシスタントで、ユーザーがスプレッドシートを操作したり、オンラインショッピングをしたりするのを支援します。
Project Marinerは、Google DeepMindが開発したブラウザアシスタントです。Gemini 2.0テクノロジーをベースに、Chrome拡張機能を使用してブラウザタスクを自動化し、Webページの操作を理解して実行します。
プロジェクト・マリナーとは何ですか?
Project Marinerは、Google DeepMindが開発したブラウザアシスタントです。Gemini 2.0テクノロジーをベースに、Chrome拡張機能を使用してブラウザ操作を自動化し、ウェブページのタスクを理解して実行します。ピクセルやウェブページ要素など、ブラウザ画面上の情報を理解し、推論し、この情報を使用してChrome拡張機能を介してタスクを完了できます。Project Marinerは、Chromeブラウザを制御し、画面上のカーソルを移動したり、ボタンをクリックしたり、フォームに入力したりすることができ、人間のようにウェブサイトを使用および閲覧できます。Project Marinerは、WebVoyagerベンチマークで83.5%という高いスコアを獲得しました。現在、Project Marinerはブラウザのアクティブなタブ内でのみ、入力、スクロール、クリック操作を実行でき、特定の機密性の高い操作(商品の購入など)を実行する前に、ユーザーからの最終確認が必要です。
プロジェクトマリナーの主な機能
- マルチモーダルな理解ピクセル、テキスト、コード、画像、フォームなどのデータを含め、ブラウザ画面上のすべてのコンテンツを理解します。
- ブラウザ操作複雑なウェブサイトのリアルタイムナビゲーションと操作、ブラウザ内でのタスクの自動化、およびユーザー制御の維持。
- 自動化されたタスクブラウザと自動的に連携して、ウェブページの他の領域にデータを整理・表示するとともに、ユーザーの要求に応じてデータを整理します。
- 複雑な命令処理複雑なユーザー指示を理解し、実行可能な手順に分解して実行することができます。
- 関係性の理解ウェブページのさまざまな要素間の関係性と機能を理解する。
- 視覚的なフィードバック作業の進捗状況をユーザーに知らせるため、作業中に視覚的なフィードバックと最新情報を提供する。
- 安全機密性の高い操作(買い物や支払いなど)を行う前に、ユーザーはセキュリティを確保するために最終確認を行う必要があります。
Project Marinerの使い方
プロジェクト・マリナーは現在初期テスト段階であり、限られた数のテスターのみが参加可能です。プロジェクト・マリナーへのアクセスは制限されています。公式サイト順番待ちリストに追加してください。
プロジェクトマリナーの応用例
- データクリーニングと複製ウェブページからデータをコピーしてスプレッドシートに取り込むこと。例えば、大量のデータが保存されているウェブページから情報を抽出し、Excelなどのスプレッドシートソフトウェアに整理するといった作業。
- オンラインショッピングユーザーの買い物リストに基づいて、ECサイトで商品を自動的に検索し、ショッピングカートに追加する。
- 旅行計画旅行計画プロセスにおいて、ウェブブラウジングや情報比較を自動化することで、ユーザーがフライトやホテルの情報を簡単に見つけられるように支援します。
- 毎日の買い物家庭用品の検索や購入など、小売ウェブサイトでの買い物をユーザーが行えるようにします。
- レシピ検索ユーザーのニーズに基づいて、レシピサイト上でレシピを自動的に検索・選択します。