エージェント重要度 ★9
韓国公開APIを対象とした多段階ツール呼び出し：ベンチマークとデータ合成レシピ
Multi-Step Tool-Calling over Korean Open Public APIs: A Benchmark and a Data-Synthesis Recipe
https://export.arxiv.org/api/query·2026/9/4
AI要約
KOPA-Benchは、韓国の公開APIを対象としたマルチステップツール利用ベンチマークである。オンプレミスで動作するLLMエージェントが、複数のツール呼び出しを連鎖させる能力を評価し、EDGEというデータ合成手法を用いて、オープンソースモデルの性能向上を目指す。
AI要点
- 韓国の公開APIを対象とした多段階ツール呼び出しのベンチマーク KOPA-Bench を提案した。
- オープンソースLLMは多段階ツール呼び出しで性能が低いが、それを測定するベンチマークがなかった。
- EDGE (Execution-grounded Dynamic Graph) というデータ合成手法を開発した。
- EDGE はライブAPI実行結果に基づき、成功するツール呼び出しの連鎖をグラフ化して合成する。
- EDGE で合成したデータでファインチューニングしたモデルは、KOPA-Bench と BFCL ベンチマークで性能が大幅に向上した。
なぜ重要か
データ主権規制下で必要とされる、ライブAPI連携可能なLLMエージェントの開発・評価に貢献する。データ合成手法は、同様の課題を持つ他分野への応用も可能である。