超知能向けのLLM基準C-test提案
原題 Artificiality's First Exam: An LLM-Referenced C-test for Supraintelligence
AIの進歩が速く、人間や現行AIで難度を較正した評価指標は循環するか、すぐ飽和する。本論文はLLMを基準にしたC-testで超知能を測る方法を提案する。具体的な設計や結果は要旨からは不明。
論点
超知能をLLM基準で測るのは循環では
- コメントを読み込み中…
議論のヒントを見る
賛成側の視点
人間を基準にすれば天井に当たる。AIで測るしか手がない。反対側の視点
AIがAIを測れば自己採点だ。そんな基準に意味はない。
みんなのコメント 件
コメントを書く