update stopwords

app/constants.py

@@ -113,18 +113,19 @@ VEHICLE_KEYWORD_TO_COLUMN = {
 # Bạn có thể thêm/bớt các từ trong danh sách này tùy ý
 VIETNAMESE_STOP_WORDS = {
     "bị", "bởi", "cả", "các", "cái", "cần", "càng", "chỉ", "chiếc", "cho",
-    "chứ", "chưa", "có", "cứ", "cùng", "cũng", "đã", "đang", "để",
+    "chứ", "có", "cứ", "cùng", "cũng", "đã", "đang", "để",
     "do", "đó", "được", "gì", "khi", "là", "lại", "lên", "lúc",
     "mà", "mỗi", "một", "nên", "nếu", "ngay", "như", "nhưng", "những",
     "nơi", "nữa", "phải", "qua", "ra", "rằng", "rất", "rồi", "sau", "sẽ",
     "thì", "trên", "trước", "từ", "từng", "và", "vẫn", "vào", "vậy", "về",
-    "vì", "việc", "với", "xong", "phạt", "xử", "xe"
+    "vì", "việc", "với", "xong"
     # ... thêm các từ khác bạn muốn loại bỏ
 }
 
 # Stop phrases (multi-word stop words) for Vietnamese
 VIETNAMESE_STOP_PHRASES = [
-    "có thể", "vi phạm", "phạt tiền", "mức phạt tiền", "áp dụng", "đối với", "hành vi", "bao nhiêu", "thế nào", "mức xử phạt"
+    "có thể", "vi phạm", "phạt tiền", "mức phạt tiền", "áp dụng", "đối với", 
+    "hành vi", "bao nhiêu", "thế nào", "mức xử phạt", "xử phạt"
     # ... thêm các từ khác bạn muốn loại bỏ
 ]
 

app/llm.py

@@ -129,8 +129,8 @@ class LLMClient:
         Tạo text từ prompt sử dụng LLM.
         """
         logger.info(
-            # f"[LLM] generate_text - provider: {self.provider}\n\t prompt: {_safe_truncate(prompt)}"
-            f"[LLM] generate_text - provider: {self.provider}\n\t prompt: {prompt}"
+            f"[LLM] generate_text - provider: {self.provider}\n\t prompt: {_safe_truncate(prompt)}"
+            # f"[LLM] generate_text - provider: {self.provider}\n\t prompt: {prompt}"
         )
         try:
             if self.provider == "openai":
@@ -422,8 +422,8 @@ class LLMClient:
         """.strip()
 
         response = await self.generate_text(prompt, **kwargs)
-        # logger.info(f"[LLM][RAW][analyze] Kết quả trả về từ generate_text: {_safe_truncate(response)}")
-        logger.info(f"[LLM][RAW][analyze] Kết quả trả về từ generate_text: {response}")
+        logger.info(f"[LLM][RAW][analyze] Kết quả trả về từ generate_text: {_safe_truncate(response)}")
+        # logger.info(f"[LLM][RAW][analyze] Kết quả trả về từ generate_text: {response}")
 
         try:
             parsed = _parse_json_from_text(response or "")