add condition for teencode def

utils.py

@@ -359,11 +359,15 @@ def common_misspelling_replacement(text, error_rate=0.03, C=0.01):
     # Tìm các từ có thể thay thế
     candidate_indices = [i for i, word in enumerate(words) if word in common_misspellings]
 
+    #Kiểm tra xem có thể thay không
+    if len(candidate_indices) == 0:
+        return ' '.join(words)
+
     # Tính toán xác suất thay thế từ dựa trên error_rate sử dụng hàm logarit
     augmentation_probability = C / math.log(error_rate + 1)
 
     # Thực hiện thay thế từ tại các vị trí ngẫu nhiên
-    num_errors = int(len(candidate_indices) * error_rate)
+    num_errors = int(len(text) * error_rate) if len(text) * error_rate > 1 else int(random.random())
     for _ in range(num_errors):
         if len(candidate_indices) > 0 and random.random() <= augmentation_probability:
             index = random.choice(candidate_indices)