Add duplicate file detection; show skip message in UI

app.py

@@ -57,7 +57,10 @@ def index_pdf(files, provider: str, openai_key: str) -> str:
                 # Gradio 5 возвращает строку-путь, Gradio 4 — объект с .name
                 tmp_path = Path(file if isinstance(file, str) else file.name)
                 added = rag.add_documents(str(tmp_path))
-                log_lines.append(f"✅ {tmp_path.name} — добавлено {added} чанков")
+                if added == 0:
+                    log_lines.append(f"⏭️ {tmp_path.name} — уже в базе, пропущен")
+                else:
+                    log_lines.append(f"✅ {tmp_path.name} — добавлено {added} чанков")
             stats = rag.get_stats()
             log_lines.append(f"\nВсего в базе: {stats['total_chunks']} чанков")
             return "\n".join(log_lines)

rag_system.py

@@ -272,6 +272,15 @@ class RAGSystem:
         all_chunks: list[Document] = []
 
         for file_path in file_paths:
+            fname = Path(file_path).name
+            # Проверка на дубликат: пропускаем, если файл уже в базе
+            existing = self.vectorstore._collection.get(
+                where={"source_file": fname}, limit=1, include=[]
+            )
+            if existing["ids"]:
+                print(f"[RAG] Пропуск {fname} — уже в базе.")
+                continue
+
             print(f"[RAG] Загрузка файла: {file_path}")
             try:
                 ext = Path(file_path).suffix.lower()