OpenCompass

工具介绍

OpenCompass（司南）是上海人工智能实验室推出的开源大模型评测体系，提供一站式的大模型评测解决方案。它支持语言、多模态、法律、金融等多领域评测，内置丰富的数据集与评测算法，支持模型横向对比、评测报告生成与私有化部署，是大模型评测领域广泛使用的开源工具。

核心功能

• 多领域评测：覆盖语言、多模态、法律、金融等场景
• 丰富数据集：内置 MMLU、C-Eval、MMBench 等主流基准
• 多模型对比：在同一框架下对比多个模型
• 评测报告：自动生成详细的能力分析报告
• 私有化部署：支持本地部署保障数据安全

能帮你做什么

• 模型全面评测：从多维度评估大模型能力
• 选型决策：用统一基准对比候选模型
• 合规评测：在法律、金融等领域开展专项评测
• 科研支撑：高校机构基于开源体系开展研究

付费还是免费

• 完全免费开源：OpenCompass 评测体系开源免费