Agung1453 commited on
Commit
7686bf7
·
verified ·
1 Parent(s): 44bd944

Create app.py

Browse files
Files changed (1) hide show
  1. app.py +60 -0
app.py ADDED
@@ -0,0 +1,60 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ import gradio as gr
2
+ import requests
3
+ from bs4 import BeautifulSoup
4
+ from transformers import pipeline
5
+
6
+ # Fungsi untuk mengambil dan mengekstrak teks dari URL
7
+ def fetch_web_content(url):
8
+ try:
9
+ # Mengambil konten dari URL
10
+ response = requests.get(url, timeout=10)
11
+ response.raise_for_status() # Memeriksa apakah request berhasil
12
+ # Parsing HTML dengan BeautifulSoup
13
+ soup = BeautifulSoup(response.text, 'html.parser')
14
+ # Mengambil teks dari elemen <p> (paragraf) sebagai contoh
15
+ paragraphs = soup.find_all('p')
16
+ text = ' '.join([para.get_text() for para in paragraphs])
17
+ if not text:
18
+ return "Tidak ada teks yang ditemukan di halaman tersebut."
19
+ return text[:2000] # Membatasi panjang teks untuk efisiensi
20
+ except Exception as e:
21
+ return f"Error saat mengambil konten: {str(e)}"
22
+
23
+ # Memuat model ringkasan dari Hugging Face
24
+ summarizer = pipeline('summarization', model='facebook/bart-large-cnn')
25
+
26
+ # Fungsi untuk merangkum teks
27
+ def summarize_text(text):
28
+ if len(text) < 50:
29
+ return "Teks terlalu pendek untuk dirangkum."
30
+ try:
31
+ summary = summarizer(text, max_length=150, min_length=30, do_sample=False)
32
+ return summary[0]['summary_text']
33
+ except Exception as e:
34
+ return f"Error saat merangkum: {str(e)}"
35
+
36
+ # Fungsi utama untuk antarmuka Gradio
37
+ def browse_and_process(url, summarize=False):
38
+ content = fetch_web_content(url)
39
+ if summarize:
40
+ summary = summarize_text(content)
41
+ return content, summary
42
+ return content, "Ringkasan tidak diminta."
43
+
44
+ # Membuat antarmuka Gradio
45
+ iface = gr.Interface(
46
+ fn=browse_and_process,
47
+ inputs=[
48
+ gr.Textbox(label="Masukkan URL (contoh: https://example.com)"),
49
+ gr.Checkbox(label="Ringkas konten menggunakan model Hugging Face")
50
+ ],
51
+ outputs=[
52
+ gr.Textbox(label="Konten dari Halaman Web"),
53
+ gr.Textbox(label="Ringkasan (jika diminta)")
54
+ ],
55
+ title="Web Content Fetcher dengan Gradio",
56
+ description="Masukkan URL untuk mengambil teks dari halaman web. Centang kotak untuk merangkum konten menggunakan model Hugging Face."
57
+ )
58
+
59
+ # Menjalankan antarmuka
60
+ iface.launch()