winhsss/reworkwhisper-large-v1

PhoWhisper-large + LoRA (dataset-dot1)

LoRA fine-tune của vinai/PhoWhisper-small trên bộ meeting-ASR tiếng Việt dataset-dot1.

Kết quả (test set 500 seg, greedy, CER chuẩn hoá)

model	CER%	WER%	RTF
base	36.22	56.93	0.026
+ LoRA	31.38	47.41	0.089

LoRA r=32, alpha=64, epochs=3, lr=0.0001. Loader: HF PEFT (transformers + bitsandbytes 4-bit).

⚠️ Data synthetic (viXTTS) — số liệu chỉ để so tương đối, không phải hiệu năng trên giọng người thật.

Dùng

from transformers import WhisperForConditionalGeneration, WhisperProcessor
from peft import PeftModel
base = WhisperForConditionalGeneration.from_pretrained("vinai/PhoWhisper-small")
model = PeftModel.from_pretrained(base, "winhsss/viet-speech-small-v1")
processor = WhisperProcessor.from_pretrained("winhsss/viet-speech-small-v1")