LLM自動化の物語における欠陥

LLMの自動化に関する通説に疑問を呈し、ベンチマークタスクの限界（訓練データとの重複、信頼性の評価不足）を指摘。LLMの能力評価における注意点を提起。