Kurate.org

概要

AIを使った科学論文ランキングのプラットフォーム。arXivのプレプリントを横断的に対象とし、論文の潜在的影響力を評価します。
論文を対戦させ、3つのLLMジャッジ（GPT-5.4、Claude Opus 4.6、Gemini 3 Pro）がどちらが科学的影響力が高いか投票。何千もの対戦で Elo風スコアのリーダーボードを生成。
Claude Opus 4.6は要約とジャッジを担い、1–10のスコール範囲を最も安定して活用するモデル。相関は初期検証でρ0.6–0.7を示しています。
現在検証は継続中。研究者からのフィードバック歓迎。詳細は methodology と correlation のページ参照。