Skip to content
TheChatArchiveThe Chat Archive
o4-mini-2025-04-16· OpenAIHugging Face LMArena Human Preference 140K

AI大模型能力评测排行可以参考哪些网站

From a Chatbot Arena battleThe same person sent this prompt to two anonymous models at once. Compare it with Kimikimi-k2-0711-preview’s answer.
  1. User

    AI大模型能力评测排行可以参考哪些网站

  2. Assistant

    下面列出几类常用的“大模型能力评测与排行榜”参考站点/平台,供你快速浏览、对比与跟踪最新进展:

    1. Papers With Code

      • 网址:https://paperswithcode.com/leaderboards
      • 特点:
        • 覆盖 NLP、CV、语音等多领域任务排行榜
        • 实时汇总最新 SOTA 论文 & 代码
        • 可按任务(GLUE、SuperGLUE、MMLU、ImageNet…)自由筛选
    2. Hugging Face Hub & Eval

    3. Stanford HELM(Holistic Evaluation of Language Models)

    4. MLCommons & BenchmarkX

    5. EleutherAI LM Eval Harness

    6. EvalAI & CodaLab

    7. AI Index Report(Stanford)

      • 网址:https://aiindex.stanford.edu/
      • 特点:
        • 年度报告形式,提供模型能力、应用落地、产业趋势全景视图
        • 各大模型(GPT、BLOOM、PaLM…)性能及影响力分析
    8. 各大厂商/开源组织官网 Leaderboard

      • OpenAI Leaderboard(内部榜单,需关注官方博客)
      • Google Research / DeepMind 公布页
      • Meta AI、Anthropic、Cohere、Alibaba DAMO 等

    ———

    如何选择?

    1. 多维度对比:Papers With Code+HELM 覆盖面广,适合横向比拼;
    2. 深度评测:LM Eval Harness 可自建脚本复现;
    3. 产业趋势:AI Index、MLCommons 更聚焦全局;
    4. 企业生态:厂商榜单/博客紧跟自家新模型最前沿。

    希望以上资源能帮你快速锁定、解读主流大模型能力排行!如需更具体的某项 benchmark 或快速上手示例,随时问我 😊

Responses were produced in different, uncontrolled contexts (system prompts, settings, prior turns). This is not a benchmark.