研究/論文★8· Elo Rating for LLMs [2836] Co-Scientistは、チェスプレイヤーのランキングで最もよく知られているEloレーティングという手法を用いて、生成した提案の質を評価できます。
AIシステムCo-Scientistは、チェスで有名なEloレーティングシステムを利用して、生成した提案の質を評価します。この手法により、新規性や影響力を評価でき、その自己評価は人間の専門家や他のLLMの評価とよく一致します。実際の創薬実験では有望な薬剤候補を特定し、専門医による検証を経て、科学的発見における実用性を示しました。