Spaces:

Shawnno
/

Interview_Assistant

Running

App Files Files Community

Interview_Assistant / README.md

Shawnno

Upload README.md with huggingface_hub

66af0eb verified 24 days ago

preview code

Raw History Blame Contribute Delete

862 Bytes

---
title: Qwen2.5-3B Interview Assistant
emoji: 🎤
colorFrom: blue
colorTo: green
sdk: static
pinned: false
---
# Qwen2.5-3B 面试助手 · SFT + DPO 微调对比

同一道面试题，在 Qwen2.5-3B-Instruct 基座上依次经过 QLoRA SFT 与 DPO 对齐后的回答对比。

| Stage | 模型 |
|---|---|
| Base | `Qwen/Qwen2.5-3B-Instruct` |
| SFT | 基座 + `Shawnno/qwen2.5-3b-interview-sft-lora` |
| SFT + DPO | 基座 + `Shawnno/qwen2.5-3b-interview-dpo-lora` |

DPO adapter 由 SFT adapter 继续训练而来，已包含 SFT 权重，因此直接加载在干净基座上。

本 Space 为静态展示：若干道代表性面试题的三阶段回答已预生成（4-bit、贪心解码），
并附 64 题独立测试集的定量指标。想要现场输入任意问题运行，可打开仓库中的
`colab_demo.ipynb` 在 Colab 免费 T4 上运行。

	---
	title: Qwen2.5-3B Interview Assistant
	emoji: 🎤
	colorFrom: blue
	colorTo: green
	sdk: static
	pinned: false
	---

	# Qwen2.5-3B 面试助手 · SFT + DPO 微调对比

	同一道面试题，在 Qwen2.5-3B-Instruct 基座上依次经过 QLoRA SFT 与 DPO 对齐后的回答对比。

	\| Stage \| 模型 \|
	\|---\|---\|
	\| Base \| `Qwen/Qwen2.5-3B-Instruct` \|
	\| SFT \| 基座 + `Shawnno/qwen2.5-3b-interview-sft-lora` \|
	\| SFT + DPO \| 基座 + `Shawnno/qwen2.5-3b-interview-dpo-lora` \|

	DPO adapter 由 SFT adapter 继续训练而来，已包含 SFT 权重，因此直接加载在干净基座上。

	本 Space 为静态展示：若干道代表性面试题的三阶段回答已预生成（4-bit、贪心解码），
	并附 64 题独立测试集的定量指标。想要现场输入任意问题运行，可打开仓库中的
	`colab_demo.ipynb` 在 Colab 免费 T4 上运行。