#uncertainty quantification1件

[6851] 不確かな判断から調整されたランキングへ：LLM評価のためのConformal Elo推定

本論文では、LLM評価のためのConformal Elo Estimationという新しい手法を提案。Eloレーティングシステムを改良し、局所的・全体的なレベルでConformal Predictionを統合することで、大規模な人間によるアノテーションなしでも、不確実性境界を正確に示したElo推定値を提供する。