Qwen_v2.5_3b_Instruct
Qwen_v2.5_3b_Instruct
阿里云 · 更新于 2024-11-05
Qwen_v2.5_3b_Instruct 是 Qwen2.5 系列中的轻量级指令微调模型,参数量 30 亿,基于 Transformer 架构,采用 GQA 注意力机制与 RoPE 位置编码。其特点包括:支持 128K 上下文长度,优化长文本生成与结构化数据分析;经多阶段强化学习(DPO/GRPO)提升指令遵循能力,适配量化部署(如 INT4/INT8)。适用场景为移动端端侧推理、轻量级客服机器人及低资源设备的智能交互任务,平衡性能与部署成本。
核心参数
| 厂商 | 阿里云 |
|---|---|
| 分类 | 文本生成/大模型 |
| 更新时间 | 2024-11-05 |
| 标签 | 文本生成、多语言 |
模型定价
输入
1 元/百万 tokens
模型能力
| 模型精调 | 是 |
|---|---|
| 结构化输出 | 是 |
模型参数
| 上下文窗口 | 32K |
|---|---|
| 模型更新时间 | 2024-11-05 |
| 数据训练截止 | 2024-09-19 |
| 最大输入 Token | 32K |
| 最大生成 Token | 8K |
| 典型场景 | 代码、数学 |