文字数指定を守れないLLMに、コード実行ツールで正確なlen()を渡す

ChatGPTなどのLLMが文字数指定を守れない原因は、トークン化によるサブワード単位の生成にある。コード実行ツールを利用し、Pythonのlen()で文字数を数え直すことで、正確な文字数と削除箇所の具体案を得られることを実証している。

• LLMは「150字以内」のような文字数指定を守れない場合があり、トークン化が原因で正確な文字数を生成時に把握できない。
• ChatGPT、Claude、GeminiなどのLLMは、文字数指定を守るためにコード実行ツール（Pythonのlen()）を利用することで精度が向上する。
• コード実行ツールを用いることで、LLMは超過文字数を具体的に把握し、削減箇所を提案できるようになる。
• 絵文字や結合文字を含む場合、Pythonのlen()でも目視の文字数とずれが生じる可能性があるため、最終確認は人間が行う必要がある。