最強モデルが毎週入れ替わる。追いかけるのをやめて、乗り換えコストのほうを下げた

最強モデルを追いかけるのをやめ、乗り換えコストを下げる戦略を採用。毎週変わるモデルの進化に追従するのではなく、ワークフローを安定させ、開発時間を確保することの重要性を説く。

• 最強モデルを追いかけるのではなく、モデル乗り換えコストを下げるアプローチを採用することが推奨されています。
• 乗り換えコストを下げるために、モデルIDを集約、品質判定を自社タスク基準で行う、コスト計算を複線化する、プロンプトを汎用的にする、といった対策が有効です。
• モデルIDの集約は設定ファイルや定数で行い、品質判定は手元の見本ペアで確認、コスト計算は概算を複数持つ、プロンプトは省略せずに記述します。
• これにより、新しいモデルが登場しても、迅速かつ低コストで試用・切り替えが可能になります。