DiffuCoder-7B-cpGRPO

LLMApple

模型简介

扩散式代码生成模型,7B 用非自回归解码做代码补全。

参数量
7.6B
上下文
32K
所属
DiffuCoder
类型
纯文本
商用
有条件可商用
许可
Apple AMLR Model License
发布
2025-07-01
收录
2026-10-03

可用的部署方式

vLLMvLLM 社区(原 UC Berkeley)

生产环境部署 LLM 的默认答案:PagedAttention 把 KV cache 碎片化问题解决掉,吞吐比朴素实现高一个量级。

推理框架 / 服务引擎PagedAttention张量并行FP8/AWQ/GPTQOpenAI 兼容 API多模态
GitHub ↗