跳到正文

Tele-FLM-1T

开放权重并共享训练细节的 1T 多语言模型

访问官网
分类 AI模型

Tele-FLM-1T 是什么

Tele-FLM-1T 被介绍为一个开源的 1T 多语言语言模型,采用 GPT 风格的仅解码器 Transformer 设计,并连同训练细节一起发布。

你可以用它做什么

  • 跨语言生成文本
  • 研读公开的核心设计
  • 按任务调整模型

模型说明

  • 增长技术分三个阶段
  • 列出 RoPE、RMSNorm 与 SwiGLU
  • 训练采用 3D 并行

上手流程

  • 在 Hugging Face 找到模型
  • 阅读模型卡了解细节与限制
  • 下载权重和相关代码
  • 依据公开实践调整模型

优点与缺点

✓ 我们认可的地方

  • 资料称与 Llama 架构兼容
  • 3D 并行结合数据、张量与流水线并行

! 需要留意的地方

  • 资料记录的训练依赖大型 GPU 集群
  • 下载前需阅读模型卡的使用限制

常见问题

用了多少令牌?

资料说明训练量约 2T tokens。

除权重外还分享什么?

资料说明分享核心设计、工程实践和训练细节。

最后评测: 2026-11-15

更多 大模型 API 平台 工具

查看全部 →

评测方法