分类 AI模型
promptbench 是什么
这是一个基于 Pytorch 的 Python 包,用友好的 API 评估大型语言模型。它被定位为语言模型评估的统一开源库。
主要功能
- 模型性能的快速评估
- 提示工程与动态评估
- 用 DyVal 生成评估样本
优点与缺点
✓ 我们认可的地方
- 已有数据集和模型可快速上手评估
- 可以自行定制数据集和模型
! 需要留意的地方
- 使用方式建立在 Pytorch 的 Python 包之上
- 自定义数据集需要使用者自行定义
常见问题
它基于什么构建?
一个基于 Pytorch 的 Python 包。
能用自己的数据吗?
卡片说明可以轻松定制自己的数据集和模型。
最后评测: 2026-11-15
更多 大模型 API 平台 工具
查看全部 →-
302.AI 把数百个大模型收在一个 API 后面的聚合云平台 开发者工具 API 集成 多模型平台 模型部署 大模型 API 平台 -
360智脑开放平台 360 大模型 API 平台 API 集成 多模型平台 知识库问答 企业自动化 大模型 API 平台 -
4o Image API 图像生成 API 网关 免费 工具 免费增值 工具 开发者工具 API 集成 大模型 API 平台 -
AI-Flow 无代码的多模型工作流 工作流自动化 开发者工具 API 集成 知识库问答 大模型 API 平台 -
AI/ML API 一个网关接入众多模型 开发者工具 API 集成 多模态 多模型平台 大模型 API 平台 -
Amazon Bedrock 带安全扫描的 AWS 代码建议 免费 工具 代码助手 集成开发环境 应用搭建器 大模型 API 平台