Upload main.py

main.py

@@ -63,9 +63,9 @@ _cache_ttl_yt = 1800
 SHORTS_FALLBACK = [
     {"id":"nqlLH6chLRo","title":"Tin nóng VTV Nam Bộ | #shorts","channel":"vtvnambo"},
     {"id":"E7Kq0v3hG6w","title":"VTV Nam Bộ - Tin tức miền Nam | #shorts","channel":"vtvnambo"},
-    {"id":"Lu_iCQ5YwNM","title":"Công an lập hồ sơ xử lý người phụ nữ chửi bới tát nam tài xế ô tô ở Hà Nội","channel":"baodantri7941"},
+    {"id":"Lu_iCQ5YwNM","title":"Công an lập h� sơ xử lý người phụ nữ chửi bới tát nam tài xế ô tô � Hà Nội","channel":"baodantri7941"},
     {"id":"CwWvijF8BOA","title":"Chú rể Ninh Bình bật khóc nhận món quà bí mật người cha quá cố gửi 26 năm trước","channel":"baodantri7941"},
-    {"id":"tvPewsc2ph4","title":"Tính năng ẩn trên iPhone giúp giảm mỏi mắt","channel":"baodantri7941"},
+    {"id":"tvPewsc2ph4","title":"Tính năng �n trên iPhone giúp giảm m�i m�t","channel":"baodantri7941"},
     {"id":"b1Nxzv9ixlU","title":"Y án 3 năm tù với nữ tài xế uống 8 lon bia lái xe tông chủ tịch xã tử vong","channel":"baodantri7941"},
     {"id":"Xp5eTwAZAis","title":"Người đánh hàng xóm tại chung cư ở Hà Nội bị tuyên hơn 4 tháng tù","channel":"baodantri7941"},
     {"id":"Htzvwg6iOBM","title":"Xe điện Audi S6 Sportback e-tron có gì đặc biệt?","channel":"baodantri7941"},
@@ -75,24 +75,24 @@ SHORTS_FALLBACK = [
     {"id":"VAfgNNgZDRs","title":"Khởi tố 4 đối tượng ném bom xăng vào nhà dân ở Đồng Nai","channel":"baodantri7941"},
     {"id":"sBH_-zGh0Xw","title":"Vì sao Times New Roman vẫn nổi tiếng sau hàng chục năm?","channel":"baodantri7941"},
     {"id":"woKn5f2bLHM","title":"Quảng Ninh ngập sâu diện rộng sau đợt mưa lớn","channel":"baodantri7941"},
-    {"id":"bcpgRoxbLPw","title":"Giông lốc quật bay mái tôn ở TP.HCM","channel":"baodantri7941"},
+    {"id":"bcpgRoxbLPw","title":"Giông lốc quật bay mái tôn � TP.HCM","channel":"baodantri7941"},
     {"id":"ZIIC5osy544","title":"Bé trai Trung Quốc rơi từ tầng 11 vẫn sống sót kỳ diệu","channel":"baodantri7941"},
-    {"id":"uTMJ49NQpyc","title":"Sau lớp mascot 40kg Câu chuyện mưu sinh của người trẻ ở TPHCM","channel":"baodantri7941"},
-    {"id":"7Pd6vZ2Lz1M","title":"Hành động ấm lòng của người đàn ông tìm kiếm 5 học sinh tử vong ở sông Lô","channel":"baosuckhoedoisongboyte"},
+    {"id":"uTMJ49NQpyc","title":"Sau lớp mascot 40kg Câu chuyện mưu sinh của người tr� ở TPHCM","channel":"baodantri7941"},
+    {"id":"7Pd6vZ2Lz1M","title":"Hành động ấm lòng của người đàn ông tìm kiếm 5 học sinh tử vong � sông Lô","channel":"baosuckhoedoisongboyte"},
     {"id":"SlHLt_ZyPiE","title":"Xử phạt người đàn ông xóa số điện thoại cứu hộ trên cao tốc Bắc Nam","channel":"baosuckhoedoisongboyte"},
-    {"id":"IUOprcJyYr4","title":"Phụ nữ táo bón có phải do lười ăn rau?","channel":"baosuckhoedoisongboyte"},
-    {"id":"YY8ojFNE-AU","title":"Quái xế tự quay clip nẹt pô đánh võng đăng TikTok bị xử lý","channel":"baosuckhoedoisongboyte"},
+    {"id":"IUOprcJyYr4","title":"Phụ nữ táo bón có phải do lười �n rau?","channel":"baosuckhoedoisongboyte"},
+    {"id":"YY8ojFNE-AU","title":"Quái xế tự quay clip n�t pô đánh võng đăng TikTok bị xử lý","channel":"baosuckhoedoisongboyte"},
     {"id":"OV7_oGdQGII","title":"Bố cô dâu khóc sụt sùi rồi quẩy cực sung gây bão mạng","channel":"baosuckhoedoisongboyte"},
-    {"id":"FoxhFyz2skY","title":"Người đàn ông nước ngoài đập phá ô tô bẻ cần gạt nước ở Đà Nẵng","channel":"baosuckhoedoisongboyte"},
-    {"id":"R1oC_I8dFPU","title":"Thanh niên buông tay lái đứng trên xe máy khi đổ đèo ở Đắk Lắk","channel":"baosuckhoedoisongboyte"},
-    {"id":"U0Ft6ChWAIo","title":"Cô giáo kể phút tháo chạy khỏi xe khách trước khi bị lũ vò nát ở Cao Bằng","channel":"baosuckhoedoisongboyte"},
+    {"id":"FoxhFyz2skY","title":"Người đàn ông nước ngoài đập phá ô tô bẻ cần gạt nước ở Đà N�ng","channel":"baosuckhoedoisongboyte"},
+    {"id":"R1oC_I8dFPU","title":"Thanh niên buông tay lái đứng trên xe máy khi đổ đèo ở Đ�k L�k","channel":"baosuckhoedoisongboyte"},
+    {"id":"U0Ft6ChWAIo","title":"Cô giáo kể phút tháo chạy kh�i xe khách trước khi bị l� vò nát ở Cao Bằng","channel":"baosuckhoedoisongboyte"},
     {"id":"hH0ANeze_4E","title":"Liên tiếp hàng chục con bò bị sét đánh chết trong ngày mưa dông","channel":"baosuckhoedoisongboyte"},
     {"id":"pXWt0QbAzRQ","title":"Va chạm giao thông người phụ nữ lăng mạ tài xế ô tô","channel":"baosuckhoedoisongboyte"},
-    {"id":"UWWLPY1OYt4","title":"CSGT chặn xe khách khống chế đối tượng cướp dây chuyền tại Gia Lai","channel":"baosuckhoedoisongboyte"},
+    {"id":"UWWLPY1OYt4","title":"CSGT ch�n xe khách khống chế đối tượng cướp dây chuyền tại Gia Lai","channel":"baosuckhoedoisongboyte"},
     {"id":"AxhVTQutsuo","title":"Xuất tinh sớm và những hiểu lầm thường gặp","channel":"baosuckhoedoisongboyte"},
     {"id":"cNy6FgaNxYM","title":"Cô dâu khóc sưng mắt vì 6 chỉ vàng không cánh mày bay trong ngày cưới","channel":"baosuckhoedoisongboyte"},
     {"id":"IDt_S6q59Ro","title":"Chở bạn gái không đội mũ bảo hiểm thanh niên đấm CSGT","channel":"baosuckhoedoisongboyte"},
-    {"id":"LFxJ9Ik6W0A","title":"Mệnh lệnh từ trái tim CSGT Hà Nội mở đường đưa bé 5 tháng tuổi đi cấp cứu","channel":"baosuckhoedoisongboyte"},
+    {"id":"LFxJ9Ik6W0A","title":"Mệnh lệnh từ trái tim CSGT Hà Nội m� đường đưa bé 5 tháng tuổi đi cấp c�u","channel":"baosuckhoedoisongboyte"},
 ]
 for _v in SHORTS_FALLBACK:
     _v.setdefault("link", "https://www.youtube.com/watch?v="+_v["id"])
@@ -119,10 +119,10 @@ def _short_default(): return {"views":0,"likes":0,"shares":0,"comments":[]}
 PRIORITY_LEAGUES = ["Ngoại Hạng Anh","FA Cup","Champions League","LaLiga","Copa del Rey","Serie A","Bundesliga","Ligue 1","V-League"]
 LEAGUE_IDS = {"nha":27110,"laliga":27233,"seriea":27044,"bundesliga":26891,"ligue1":27212}
 HL_LEAGUES = {
-    "premier-league":{"path":"anh/premier-league","name":"Premier League","emoji":"🏴󠁧󠁢󠁥󠁮󠁧󠁿"},
-    "fa-cup":{"path":"anh/fa-cup","name":"FA Cup","emoji":"🏆"},
+    "premier-league":{"path":"anh/premier-league","name":"Premier League","emoji":"�������"},
+    "fa-cup":{"path":"anh/fa-cup","name":"FA Cup","emoji":"�"},
     "bundesliga":{"path":"duc/bundesliga","name":"Bundesliga","emoji":"🇩🇪"},
-    "serie-a":{"path":"italy/serie-a","name":"Serie A","emoji":"🇮🇹"},
+    "serie-a":{"path":"italy/serie-a","name":"Serie A","emoji":"🇮�"},
     "la-liga":{"path":"tay-ban-nha/la-liga","name":"La Liga","emoji":"🇪🇸"},
     "champions-league":{"path":"cup-chau-au/uefa-champions-league","name":"Champions League","emoji":"⭐"},
     "europa-league":{"path":"cup-chau-au/uefa-europa-league","name":"Europa League","emoji":"🟠"},
@@ -222,7 +222,7 @@ def proxy_img(url: str = Query(...)):
 def _scrape_xemlaibongda_page(page_path, limit=20):
     """
     Scrape video từ xemlaibongda.top - Simple & Reliable
-    Dùng logic cũ đã test, không fetch từng trang (tránh timeout)
+    Dùng logic cũ đã test, không fetch t�ng trang (tránh timeout)
     """
     try:
         url = f"https://xemlaibongda.top/{page_path}" if page_path else "https://xemlaibongda.top/"
@@ -242,7 +242,7 @@ def _scrape_xemlaibongda_page(page_path, limit=20):
             if not href.startswith("http"):
                 href = "https://xemlaibongda.top" + href
             
-            # Bỏ query params
+            # B� query params
             clean_href = href.split("?")[0].split("#")[0]
             if clean_href in seen:
                 continue
@@ -312,7 +312,7 @@ def _scrape_xemlaibongda_page(page_path, limit=20):
                 if text and len(text) >= 5:
                     title = text[:100]
             
-            # Fallback: tạo title từ slug
+            # Fallback: tạo title t� slug
             if not title or len(title) < 3:
                 slug = clean_href.split("/video/")[-1].rstrip("/").split("/xem-lai/")[-1].rstrip("/")
                 title = slug.replace("-", " ").replace("_", " ").title()
@@ -342,7 +342,7 @@ def _scrape_xemlaibongda_page(page_path, limit=20):
         return []
 
 def _extract_img_src(a_tag):
-    """Extract image URL từ thẻ <a> và parent elements"""
+    """Extract image URL từ th� <a> và parent elements"""
     img = a_tag.find("img")
     if not img and a_tag.parent: 
         img = a_tag.parent.find("img")
@@ -418,7 +418,7 @@ def _extract_title(a_tag, href):
         if alt and len(alt) >= 3:
             return alt
     
-    # 4. Thử text content của <a> (loại bỏ quá dài)
+    # 4. Thử text content của <a> (loại b� quá dài)
     text = a_tag.get_text(" ", strip=True)
     if text and len(text) >= 3:
         # Lấy dòng đầu tiên nếu có nhiều dòng
@@ -504,30 +504,24 @@ def _yt_channel_shorts_requests(channel, count=15):
     except: return []
 
 def scrape_shorts():
-    """Scrape Dantri + SKĐS shorts - optimized with cache fallback"""
-    # Try to get fresh shorts, but use cached if scrape fails
-    vids = []
-    try:
-        # Import with timeout protection
-        from yt_scraper import get_vtvnambo_shorts
-        vids = get_vtvnambo_shorts(30)
-    except Exception as e:
-        print(f"scrape_shorts error: {e}")
-    
-    # Cache successful result first - then fallback if needed
-    // Always use fallback if no videos - ensures homepage never breaks
-  if not vids:
-        cached = _cached("yt_shorts_fallback")
-        if cached:
-            return cached
-        # Static fallback
-        vids = [v for v in SHORTS_FALLBACK]
-    
-    # Cache the result
-    _cache["yt_shorts_v3"] = {"d": vids, "t": time.time()}
-    _cache["yt_shorts_fallback"] = {"d": vids, "t": time.time()}
-    
-    return vids
+    vids=[]
+    with ThreadPoolExecutor(3) as ex:
+        futs=[ex.submit(_yt_channel_shorts_requests,ch,24) for ch in ["baodantri7941","baosuckhoedoisongboyte","vtvnambo"]]
+        for f in as_completed(futs):
+            try:
+                r=f.result()
+                if r: vids.extend(r)
+            except: pass
+    merged=[]; seen=set()
+    for v in vids:
+        vid=v.get("id")
+        if not vid or vid in seen: continue
+        seen.add(vid); merged.append(v)
+    for v in SHORTS_FALLBACK:
+        vid=v.get("id")
+        if not vid or vid in seen: continue
+        seen.add(vid); merged.append(v)
+    return merged[:60]
 
 # ===== VTV NAM BO & WC SHORTS - using yt-dlp =====
 from yt_scraper import get_vtvnambo_shorts, get_wc_related_shorts
@@ -731,7 +725,7 @@ def api_bdp_videos():
     return JSONResponse(_cached("bdp_videos",_f))
 
 # ===== NEWS =====
-VNE_CATS={"thoi-su":("https://vnexpress.net/thoi-su","Thời Sự"),"the-gioi":("https://vnexpress.net/the-gioi","Thế Giới"),"kinh-doanh":("https://vnexpress.net/kinh-doanh","Kinh Doanh"),"the-thao":("https://vnexpress.net/the-thao","Thể Thao"),"giai-tri":("https://vnexpress.net/giai-tri","Giải Trí"),"suc-khoe":("https://vnexpress.net/suc-khoe","Sức Khỏe"),"phap-luat":("https://vnexpress.net/phap-luat","Pháp Luật"),"giao-duc":("https://vnexpress.net/giao-duc","Giáo Dục"),"du-lich":("https://vnexpress.net/du-lich","Du Lịch"),"doi-song":("https://vnexpress.net/doi-song","Đời Sống")}
+VNE_CATS={"thoi-su":("https://vnexpress.net/thoi-su","Thời Sự"),"the-gioi":("https://vnexpress.net/the-gioi","Thế Giới"),"kinh-doanh":("https://vnexpress.net/kinh-doanh","Kinh Doanh"),"the-thao":("https://vnexpress.net/the-thao","Thể Thao"),"giai-tri":("https://vnexpress.net/giai-tri","Giải Trí"),"suc-khoe":("https://vnexpress.net/suc-khoe","S�c Kh�e"),"phap-luat":("https://vnexpress.net/phap-luat","Pháp Luật"),"giao-duc":("https://vnexpress.net/giao-duc","Giáo Dục"),"du-lich":("https://vnexpress.net/du-lich","Du Lịch"),"doi-song":("https://vnexpress.net/doi-song","Đời Sống")}
 
 def scrape_vne(cat_url):
     try: