产品介绍
AGI-Eval是通用人工智能(AGI)评测基准,从中文通用能力出发,评估大模型在知识、推理、创作、指令遵循等多维度的表现,提供能力评估和排名。
面向模型评测工具场景,AGI-Eval 把"通用人工智能(AGI)评测基准"这类环节打包到一起,省去在多款工具之间来回切换。
核心功能
中文通用能力评测:评估大模型在中文场景下的通用能力。
多维度任务:覆盖知识、推理、创作、指令遵循等维度。
能力评估与排名:提供模型的综合能力评估和排名。
任务标准化:采用标准化任务,结果可比较。
使用教程
- 访问agi-eval.cn查看AGI-Eval评测说明。
- 查看模型的综合能力评估和排名。
- 了解各维度的具体表现。
优点
- 核心功能集中在模型评测工具场景,日常使用不用在多款工具之间切换。
- 上手成本低,用 AGI-Eval 跑通一遍基础流程就能看到效果。
- 官网提供使用说明,遇到问题有据可查。
需要注意的地方
- 具体评测方法和榜单公开度需以官网为准。
- AGI评测本身是持续演进的领域,标准会不断完善。
- 官方未公开统一价格,建议先确认计费方式再深度使用。
- AI 生成结果建议人工核对关键信息,不要直接照搬。
适合谁用
- 适合模型评测工具场景下需要提升效率的个人和团队,日常使用频率高、愿意用工具替代重复劳动的人。
- 刚开始接触 AGI-Eval 的新手,从基础功能直接上手即可,不需要额外配置。
定价
官方未公开统一价格,建议访问官网查看当前定价方案。
同类型产品对比
| 产品 | 定位 | 特点 |
|---|---|---|
| AGI-Eval | 本产品 | 通用人工智能(AGI)… |
| H2O EvalGPT | H2O.ai推出的AI… | 同类工具 |
| C-Eval | 中文大模型综合评测基准… | 同类工具 |
| PubMedQA | 生物医学领域的问答评测… | 同类工具 |
常见问题
AGI-Eval是什么?
是通用人工智能(AGI)评测基准,从中文通用能力出发,评估大模型在知识、推理、创作、指令遵循等多维度的表现,提供能力评估和排名。
AGI-Eval免费吗?
官方未公开统一价格,建议访问官网查看最新定价。
AGI-Eval有哪些核心功能?
通用人工智能(AGI)…、从中文通用能力出发、评估大模型在知识,覆盖模型评测工具的主要场景。
AGI-Eval适合哪些人用?
适合模型评测工具场景下的个人与团队,尤其是有明确提效需求、愿意用工具替代重复劳动的用户。
AGI-Eval怎么快速上手?
注册登录后从核心功能开始,先用真实需求跑一遍流程,再逐步深入高级功能。官网(agi-eval.cn)提供详细说明。
AGI-Eval和同类产品比怎么样?
选择时重点比较功能覆盖、价格方案与上手成本,结合自身场景判断。同分类产品对比见上文表格。
更多 AI模型评测
H2O EvalGPT是H2O.ai推出的AI模型评估平台,自动评测大模型在推理、知识、指令遵循、安全等维度的能力,支持基准测试、自定义评估和可视化报告,辅助模型选型与优化。
C-EvalC-Eval是中文大模型综合评测基准,包含13948道多项选择题,覆盖52个学科和4个难度级别,从STEM、人文、社会科学到其他领域全面评估中文大模型的综合能力。
PubMedQAPubMedQA是生物医学领域的问答评测基准,基于PubMed医学文献构建,包含yes/no/maybe三种答案类型,用于测试大模型在医学知识和推理方面的能力。
SuperCLUESuperCLUE是CLUE基准平台推出的中文大模型综合评测体系,从逻辑推理、知识运用、语言理解、生成创作、多轮对话、安全等多个维度评估中文大模型能力,并发布公开排名榜单。
MMBenchMMBench是OpenCompass推出的多模态大模型评测基准,标准化测试模型的图文理解能力,覆盖感知、认知、推理等…
OpenCompassOpenCompass是上海AI实验室等推出的开源大模型评测体系,支持语言、视觉、多模态等多维度能力评测,覆盖主流评测基准,提…




