分类 AI模型
TinyLlama 是什么
TinyLlama 被介绍为在 3 万亿令牌上预训练 1.1B Llama 模型的项目,采用与 Llama 2 相同的架构和分词器。
你可以用它做什么
- 用发布的模型生成文本
- 在基于 Llama 的项目中使用
- 服务内存受限的应用
训练说明
- 训练于 2023-09-01 开始
- 使用 16 个 A100-40G GPU 历时 90 天
- 功能列表列出 Transformers 与安全张量
优点与缺点
✓ 我们认可的地方
- 16 个 A100-40G GPU 在 90 天内完成训练
- 紧凑体积适合资源受限应用
! 需要留意的地方
- 模型规模固定为 1.1B 参数
- 训练于 2023-09-01 开始
常见问题
训练目标是什么?
资料说明在 3 万亿令牌上预训练一个 1.1B Llama 模型。
为何适合小型环境?
资料提到 1.1B 参数以及对计算和内存占用有限的应用需求。
最后评测: 2026-11-15
更多 大模型 API 平台 工具
查看全部 →-
302.AI 把数百个大模型收在一个 API 后面的聚合云平台 开发者工具 API 集成 多模型平台 模型部署 大模型 API 平台 -
360智脑开放平台 360 大模型 API 平台 API 集成 多模型平台 知识库问答 企业自动化 大模型 API 平台 -
4o Image API 图像生成 API 网关 免费 工具 免费增值 工具 开发者工具 API 集成 大模型 API 平台 -
AI-Flow 无代码的多模型工作流 工作流自动化 开发者工具 API 集成 知识库问答 大模型 API 平台 -
AI/ML API 一个网关接入众多模型 开发者工具 API 集成 多模态 多模型平台 大模型 API 平台 -
Amazon Bedrock 带安全扫描的 AWS 代码建议 免费 工具 代码助手 集成开发环境 应用搭建器 大模型 API 平台