DSPy を使用した Datasette Agent の SQL システムプロンプトの評価と改善

DSPyというライブラリを用いて、Datasette AgentのSQLシステムプロンプトを評価・改善する方法について解説した記事。AIエージェントのプロンプトエンジニアリングにおける具体的な活用事例を示している。

• DSPyフレームワークを用いて、Datasette Agent のSQLシステムプロンプトの評価と改善を行う研究です。
• GPT 4.1 mini/nano を使用し、プロンプト改善の有望な方向性を特定しました。
• スキーマリストにカラム名を含めるか、カラム情報取得に関するアドバイスを緩和することが提案されています。
• これにより、 Datasette Agent のSQL質問応答機能の精度向上が期待されます。