Update app.py

app.py

@@ -8,14 +8,17 @@ def fetch_pdf_links_and_titles():
     response = requests.get(url)
     soup = BeautifulSoup(response.text, 'html.parser')
     
+    seen_urls = set()
+    links_and_titles = []
     # 모든 PDF 링크와 제목을 찾습니다.
     pdf_links = soup.find_all('a', href=re.compile("^https://ssl.pstatic.net/imgstock/upload/research/company/.*\.pdf$"))
-    links_and_titles = []
     for link in pdf_links:
         title = link.text.strip()  # 링크 텍스트에서 제목 추출
         full_url = link['href']
-        # 다운로드 가능한 링크 형태로 저장
-        links_and_titles.append([title, f"<a href='{full_url}' download='{full_url.split('/')[-1]}'>{full_url}</a>"])
+        if full_url not in seen_urls:
+            seen_urls.add(full_url)
+            # 중복 제거 후 다운로드 가능한 링크 형태로 저장
+            links_and_titles.append([title, f"<a href='{full_url}' download='{full_url.split('/')[-1]}'>{full_url}</a>"])
     return links_and_titles
 
 # Gradio 인터페이스