这个char的效果比另一个不带char的差好多呀

by awdrgyjilplij - opened Feb 27, 2023

我主要试了阅读理解任务，这个大概f1有50，另一个f1能有65。
分词方式能带来这么大的差别吗

Fengshenbang-LM org Feb 28, 2023

我主要试了阅读理解任务，这个大概f1有50，另一个f1能有65。
分词方式能带来这么大的差别吗

我们尝试了一些任务，一般来说生成类任务sentence-piece会比char-level的表现好不少

Upload images, audio, and videos by dragging in the text input, pasting, or clicking here.

Tap or paste here to upload images

· Sign up or log in to comment