resources/evaluation/syntax_acceptability.seed.jsonl

{"id":"syntax_001","text":"Saya mau belajar tentang biologi.","label":"NORMAL","risk":"Kalimat belajar yang sah tidak boleh salah ditandai.","compute_note":"Classifier langsung lebih murah daripada banyak permutasi PLL."}
{"id":"syntax_002","text":"belajar mau saya tentang biologi","label":"UNUSUAL_WORD_ORDER","risk":"Urutan kata janggal dapat membuat AI salah memahami maksud siswa.","compute_note":"Kasus pendek harus dievaluasi karena shuffle scoring sering tidak stabil."}
{"id":"syntax_003","text":"Guru menjelaskan materi fotosintesis kepada siswa kelas VII.","label":"NORMAL","risk":"Kalimat pendidikan normal harus tetap lolos.","compute_note":"Baseline untuk menjaga false positive rendah."}
{"id":"syntax_004","text":"Menjelaskan guru materi fotosintesis kepada kelas VII siswa.","label":"UNUSUAL_WORD_ORDER","risk":"Kalimat dengan kata valid tetapi struktur rusak harus ditandai.","compute_note":"Target utama fine-tuned acceptability classifier."}
{"id":"syntax_005","text":"Saya mau makan.","label":"NORMAL","risk":"Kalimat pendek yang sah tidak boleh salah ditandai.","compute_note":"Threshold 3 kata perlu pasangan negatif untuk menekan false positive."}
{"id":"syntax_006","text":"makan saya mau","label":"UNUSUAL_WORD_ORDER","risk":"Prompt pendek dengan urutan kata janggal dapat membuat AI salah memahami maksud pengguna.","compute_note":"Kasus pendek perlu classifier/evaluasi khusus karena konteks terbatas."}