Update app.py

app.py

@@ -350,6 +350,19 @@ def expand_synonyms(keywords: List[str]) -> List[List[str]]:
 
     return merged
 
+def _dedup_keywords_preserve_order(keywords: List[str]) -> List[str]:
+    """
+    의미 중복 제거:
+    - 짧은 토큰이 긴 토큰에 포함되면 제거
+    - 순서 유지
+    """
+    out = []
+    for k in keywords:
+        if any(k != x and k in x for x in keywords):
+            continue
+        if k not in out:
+            out.append(k)
+    return out
 
 
 def build_queries(
@@ -368,6 +381,8 @@ def build_queries(
     if not selected_keywords:
         selected_keywords = extract_candidates(sentence, max_candidates=10)[:4]
 
+    selected_keywords = _dedup_keywords_preserve_order(selected_keywords) #gk
+
     # Q1: 기본 AND
     q1 = " ".join(selected_keywords).strip()
     queries: List[str] = [q1] if q1 else []
@@ -385,6 +400,7 @@ def build_queries(
             # g[0]은 원문 유지, g[1]이 있으면 치환된 후보를 우선 사용
             combo.append(g[1] if len(g) >= 2 else g[0])
 
+        combo = _dedup_keywords_preserve_order(combo) #gk
         q2 = " ".join(combo).strip()
 
         # Q2가 Q1과 다르고, 비어있지 않으면 추가