アリババ・トンイラボ（Tongyi Lab）は最近、WebAgentシリーズの第4弾オープンソースツール「WebShaper」を発表しました。この画期的なフレームワークは、「形式化駆動型」という情報検索の新しいパラダイムにより業界で注目されています。AIbaseによると、WebShaperはGAIAベンチマークテストで60.19という高いスコアを達成し、Claude3.5SonnetやGPT-4oを上回り、新たなオープンソースモデルの基準を設けました。また、新規なデータ生成方法により、AIが複雑なタスクにおける情報検索と推論能力を大幅に向上させています。

 情報駆動から形式化駆動へ：パラダイムの革新

従来の情報検索（IS）方法は「情報駆動」を核心としていますが、情報構造と推論ロジックの不一致や知識のカバー範囲の限界により、AIが開かれた複雑なタスクを処理する際には限界がありました。WebShaperは「形式化駆動」の新たなパラダイムを導入し、システム的にタスクを形式化することで、データ生成とモデルトレーニングプロセスを再定義しています。

image.png

このフレームワークの核心は、論理的に明確な構造化生成方式を通じて、トレーニングデータの知識構造と推論構造が文脈的に一致することを保証することです。AIbaseによると、WebShaperは「エージェント式拡張器（Agentic Expander）」を用いて反復的に問題を生成・検証し、データ生成プロセスを制御可能かつ整理整頓されているようにしています。この方法はデータの品質を向上させ、モデルが複雑な情報検索タスクにおいてより高い性能を発揮することを可能にしています。

 GAIA評価で快挙：60.19点でオープンソースモデルをリード

WebShaperの性能は注目に値します。GAIAベンチマークテストでは、WebShaperデータセットに基づいてトレーニングされたオープンソースモデルが60.19という高いスコアを記録し、業界をリードするClaude3.5SonnetやGPT-4oを上回りました。GAIAはAIの汎用能力を評価するためのベンチマークで、マルチモーダル処理、ウェブブラウジング、複雑な推論などのタスクを含んでおり、AIの総合的能力に対して厳しい要求を課しています。

さらに、WebShaperはWebWalkerQAベンチマークテストでも52.50という優れたスコアを記録し、ウェブナビゲーションと情報検索タスクにおける強力な能力を示しています。AIbaseはこの成果がWebShaperの技術的優位性を証明し、オープンソースAIコミュニティに新たな活力をもたらしたと述べています。

image.png

 WebShaperデータセット：論理駆動型のトレーニング新パラダイム

WebShaperの主要な革新の一つはそのデータセット生成フレームワークです。伝統的な無秩序なデータ収集方法とは異なり、WebShaperは形式化駆動の方法を用いて、情報検索タスクのインスタンスを体系的に生成しています。AIbaseによると、このフレームワークはタスクの要件に応じて構造化されたトレーニングデータを生成し、知識と推論ロジックの文脈的一貫性を保証することで、AIが開かれた問題をより正確で効率的に処理できるようにしています。

例えば、WebShaperはSailorFog-QAデータセットを導入しており、これは高不確実性と高難易度の質問応答ベンチマークです。グラフサンプリングと情報曖昧化技術を用いて生成され、複雑なシナリオでのモデルの性能をテストするために設計されています。ソーシャルメディアからのフィードバックによると、開発者はこのデータセットの論理性と制御性を高く評価しており、AIモデルのトレーニングに信頼性の高い基礎を提供していると述べています。

 WebAgentエコシステムの継続的な進化：オープンソースとコミュニティ駆動

WebShaperはアリババ・トンイラボのWebAgentシリーズの最新の成果であり、WebWalker、WebDancer、WebSailorなども含まれています。これらのツールは、学術研究、市場分析、日常的な検索など多様なシナリオにおいて、自律的な情報検索と処理能力の構築を目指しています。AIbaseはWebAgentプロジェクトがGitHub上で4000以上のスターを獲得しており、オープンソースコミュニティの広範な注目と支援を受けていると注目しています。[]（https://www.kdjingpai.com/en/webagent/）

WebShaperのオープンソース特性は、コミュニティのイノベーションをさらに推進しています。開発者はコードと一部のデータセットへの自由なアクセスが可能で、超パラメータの調整やDUPOアルゴリズムの強化学習によるモデル性能の最適化が可能です。さらに、WebAgentはWebWalkerQAやGAIAなどのタスクのインタラクティブなデモを提供し、ユーザーがモデルの強力な機能を直感的に体験できるようにしています。AIbaseは、コミュニティの継続的な貢献により、WebShaperおよび関連ツールが多くのシナリオで潜在力を発揮すると予測しています。

 将来展望：AIを汎用知能へと進化させる

WebShaperのリリースは、情報検索分野において重要な進歩を示しています。形式化駆動のパラダイムは、AIが複雑なタスクを処理する新たな可能性を提供しています。AIbaseによると、アリババ・トンイラボはWebAgentシリーズの機能をさらに拡張する計画をしており、例えばマルチモーダル処理能力の最適化、より広範な言語とシナリオのサポート、さらには高性能モデルへのリモートアクセスのデプロイ方法の探索を行っています。

ソーシャルメディアでは、開発者たちはWebShaperに対して一般的にポジティブな評価をしており、特に多段階の推論やマルチモーダル理解が必要なタスクにおいて突出した性能を発揮していると述べています。AIbaseは、WebShaperがオープンソースモデルの競争力を向上させ、汎用人工知能（AGI）の発展に重要な基盤を築いたと考えています。

結論  

アリババ・トンイラボのWebShaperは、形式化駆動の革新的なパラダイムとGAIAベンチマークでの卓越した表現により、情報検索タスクの境界を再定義しています。AIbaseはWebAgentシリーズの最新の進展を継続して追跡し、読者に前線のAI技術情報を提供し続けます。オープンソースAIが論理駆動とコミュニティ協力によって汎用知能の新しい時代に向かって進むことを一緒に見守りましょう!

プロジェクトのアドレス：https://github.com/Alibaba-NLP/WebAgent