Yi-34B
Yi-34B
零一万物 · 更新于 2023-11-02
Yi-34B 是由 01.AI 开发的开源大语言模型,参数量 340 亿,基于 LLaMA2 架构优化,支持中英文双语处理。其特点包括 200K 上下文窗口、3.1T token 预训练数据,通过 int4 量化技术可在 24G 显存消费级显卡运行,性价比接近 70B 模型。适用于对话生成、信息检索、文本理解等场景,在 MMLU 等评测中性能达 SOTA 水平。
核心参数
| 厂商 | 零一万物 |
|---|---|
| 分类 | 文本生成/大模型 |
| 更新时间 | 2023-11-02 |
| 标签 | 文本生成、中文、英文、高性价比、工具调用 |
模型能力
| 输入类型 | 文本 |
|---|---|
| 输出类型 | 文本 |
| Function Call | 是 |
| 模型精调 | 是 |
| 前缀缓存 | 否 |
| 结构化输出 | 是 |
模型参数
| 上下文窗口 | 4K |
|---|---|
| 模型更新时间 | 2023-11-02 |
| 数据训练截止 | 2023-06-30 |
| 开源分类 | 开源 |
| 多模态支持 | 否 |
| 最大输入 Token | 4K |
| 最大生成 Token | 2K |
| 典型场景 | 内容创作 |