project
ZeroSearch - アリババが開発した大規模なオープンソース検索エンジンフレームワーク。
ZeroSearchは、アリババ傘下のTongyi Labがオープンソース化した革新的な大規模モデル検索エンジンフレームワークです。強化学習を活用することで、実際の検索エンジンと直接やり取りすることなく、大規模モデルの検索能力を向上させます。このフレームワークは、大規模モデルから事前に学習された知識に依存しています。
ZeroSearchとは何ですか?
ZeroSearchは、アリババ傘下のTongyi Labがオープンソース化した革新的な大規模モデル検索エンジンフレームワークです。強化学習を活用することで、実際の検索エンジンと直接やり取りすることなく、大規模モデルの検索能力を向上させます。このフレームワークは、大規模モデルから事前に学習された知識を利用し、クエリに基づいて関連性の高いドキュメントやノイズの多いドキュメントを生成する検索モジュールに変換し、生成されるドキュメントの品質を動的に制御します。複数の質問応答データセットにおいて、ZeroSearchはGoogle検索を凌駕し、トレーニングコストを大幅に削減(80%以上)しています。軽量な教師ありファインチューニングとカリキュラム学習メカニズムに基づき、ZeroSearchはモデルの推論能力を段階的に向上させ、様々な強化学習アルゴリズムをサポートし、高い拡張性と汎用性を備えています。
ZeroSearchの主な機能
- 実際の検索エンジンとのやり取りは不要ですこのアプローチは検索エンジンをシミュレートし、大規模モデルの検索能力を促進し、実際の検索エンジン(Googleなど)とのやり取りを回避し、コストと予測不可能性を低減します。
- 文書品質を動的に制御する関連性の高い文書やノイズの多い文書の生成をサポートし、調整プロンプトのキーワードに基づいて生成される文書の品質を柔軟に制御することで、トレーニングのための多様な検索シナリオを提供します。
- コスト削減強化学習のトレーニングに実際の検索エンジンを使用する場合と比較して、ZeroSearchはトレーニングコストを大幅に削減(80%以上)し、大規模なトレーニングをより実現可能にします。
- 複数のモデルとアルゴリズムをサポートパラメータサイズが異なる大規模モデル(3B、7B、14Bなど)に対応しており、さまざまな強化学習アルゴリズム(PPO、GRPOなど)をサポートしています。
ZeroSearchの技術原則
- シミュレーション検索エンジン大規模モデル自体の知識に基づいて、それはシミュレーションされた検索エンジンに変換され、クエリに応じて関連性の高い文書またはノイズの多い文書を生成することで、実際の検索エンジンに取って代わる。
- 軽量な監視と微調整少量のラベル付きデータに基づいて大規模モデルを微調整することで、さまざまなトレーニングニーズに合わせて、高品質の文書または低品質の文書を生成することができます。
- コース学習メカニズムトレーニング中、文書のノイズレベルは徐々に増加され、モデルは単純なシナリオから始めて徐々に難易度の高いタスクに適応できるようになり、それによって推論能力が向上します。
- F1スコアに基づく報酬メカニズムF1スコアを報酬指標として使用することで、回答の正確性に重点を置き、モデルによって生成された回答が実際の回答にできるだけ近いものになるようにします。
- 複数ターンのインタラクションテンプレート明確な推論、検索、および回答のフェーズを設計し、構造化されたラベル(<think>、<search>、<answer>など)に基づいて、モデルがタスクを段階的に完了するように誘導します。
ZeroSearchのプロジェクトアドレス
- プロジェクト公式サイト:https://alibaba-nlp.github.io/ZeroSearch/
- GitHubリポジトリ:https://github.com/Alibaba-nlp/ZeroSearch
- ハギングフェイスモデルライブラリ:https://huggingface.co/collections/sunhaonlp/zerosearch
- arXiv技術論文:https://arxiv.org/pdf/2505.04588
ZeroSearchの応用事例
- インテリジェントな質問応答システムユーザーからの質問に迅速かつ正確に回答できるため、インテリジェントな顧客サービスやインテリジェントなアシスタントに適しています。
- コンテンツ作成これは、クリエイターが情報を入手したり、下書きを作成したり、インスピレーションを得たりするのに役立ち、ニュース記事、コピーライティング、学術論文の執筆に適しています。
- 教育と学習学生に即座に回答を提供し、オンライン教育と高度な個別指導を支援します。
- エンタープライズ知識管理これは、従業員が社内リソースを迅速に取得し、業務効率を向上させるのに役立ちます。
- 研究開発これは研究者に最新の研究成果を提供し、研究プロセスを加速させる。