---
title: CMB-Qwen3-30B-A3B-DSpark-preview
canonical_url: "https://www.modelscope.cn/models/CMBTech/CMB-Qwen3-30B-A3B-DSpark-preview"
md_url: "https://www.modelscope.cn/models/CMBTech/CMB-Qwen3-30B-A3B-DSpark-preview.md"
repository: CMBTech/CMB-Qwen3-30B-A3B-DSpark-preview
last_updated: 2026-08-27
license: "Apache License 2.0"
pipeline_tag: text-generation
tasks:
  - text-generation
architectures:
  - DSparkDraftModel
base_model:
  - Qwen/Qwen3-30B-A3B
base_model_relation: finetune
parameters: 1.0B
tensor_type:
  - BF16
library_name:
  - safetensors
language:
  - zh
downloads: 25
stars: 1
---

# CMB-Qwen3-30B-A3B-DSpark-preview

> CMB-Qwen3-30B-A3B-DSpark-preview - CMBTech 在 ModelScope 开源的模型。CMB-Qwen3-30B-A3B-DSpark-preview

CMBTech/CMB-Qwen3-30B-A3B-DSpark-preview 是 ModelScope 魔搭社区上的 1.0B 参数text-generation模型，采用 Apache License 2.0 许可，基于 Qwen/Qwen3-30B-A3B 构建。

- **Repository**: CMBTech/CMB-Qwen3-30B-A3B-DSpark-preview
- **License**: Apache License 2.0
- **Tasks**: text-generation
- **Parameters**: 1.0B
- **Base model**: Qwen/Qwen3-30B-A3B
- **Downloads**: 25
- **Stars**: 1
- **Last updated**: 2026-08-27

Source: https://www.modelscope.cn/models/CMBTech/CMB-Qwen3-30B-A3B-DSpark-preview

---

# CMB-Qwen3-30B-A3B-DSpark-preview

## 模型概览
- **目标模型:** Qwen/Qwen3-30B-A3B
- **投机推理算法:** DSpark
- **发布时间:** 08/17/2026
- **版本:** preview
- **模型开发者:** 招商银行信息技术部架构管理团队

## 模型简介
本模型基于 **DSpark** 投机推理算法实现，目标模型为 [Qwen/Qwen3-30B-A3B](https://www.modelscope.cn/models/Qwen/Qwen3-30B-A3B)。

本模型由招商银行信息技术部架构管理团队训练并开源。模型基于 Qwen3-30B-A3B 架构，采用经 `
</think>

` 模式重生成的 [CMB-Eagle-Mix-330k](https://modelscope.cn/datasets/CMBTech/CMB-Eagle-Mix-330k) 数据集（`block_size=8`）训练而成。

该模型应配合 [Qwen/Qwen3-30B-A3B](https://www.modelscope.cn/models/Qwen/Qwen3-30B-A3B) 的聊天模板使用，并通过 `/chat/completions` 接口进行调用。

## 部署与使用

### 通过 vLLM 使用
> **注意：** 使用 vLLM 时，需要启用针对该模型的专属配置文件 `config_vllm.json`。在输入下列命令之前，请将模型目录下的 `config_vllm.json` 重命名为 `config.json` 以使其生效。

```bash
vllm serve Qwen/Qwen3-30B-A3B \
  --speculative-config '{
    "method": "dspark",
    "num_speculative_tokens": 7,
    "model": "<our-dspark-model-path>"
  }'
```

## Evaluations (评测结果)

<h3>评测结果 (num_speculative_tokens = 7)</h3>

| 评测分类 | 来源数据集 | 样本数 | 平均接受长度 (accept_length) |
| :--- | :--- | :--- | :--- |
| 数学推理 | GSM8K | 200 | 4.6 |
| 数学推理 | AIME2025_Prompt | 30 | 4.14 |
| 代码生成 | HumanEval | 200 | 4.04 |
| 多轮对话 | MTBench_Prompt | 80 | 3.33 |
| 通用综合 | Magpie-Qwen2-Pro-200K | 200 | 2.72 |

<details>
<summary><strong>详细实验配置</strong></summary>
<br>
<ul>
  <li><strong>Temperature:</strong> [0]</li>
  <li><strong>Top_p:</strong> [0.95]</li>
  <li><strong>Top_k:</strong> [20]</li>
  <li><strong>Repetitions:</strong> [1.0]</li>
  <li><strong>Hardware:</strong>[2×H800]</li>
</ul>
</details>
