Update app.py
Browse files
app.py
CHANGED
|
@@ -69,6 +69,8 @@ UPLOAD_FOLDER = 'uploads'
|
|
| 69 |
app.config['UPLOAD_FOLDER'] = UPLOAD_FOLDER
|
| 70 |
os.makedirs(UPLOAD_FOLDER, exist_ok=True)
|
| 71 |
|
|
|
|
|
|
|
| 72 |
@app.route('/analyze', methods=['POST'])
|
| 73 |
def analyze_image():
|
| 74 |
try:
|
|
@@ -80,59 +82,82 @@ def analyze_image():
|
|
| 80 |
return jsonify({'error': 'No selected file'}), 400
|
| 81 |
|
| 82 |
if file:
|
|
|
|
| 83 |
unique_filename = str(uuid.uuid4()) + os.path.splitext(file.filename)[1]
|
| 84 |
filename = os.path.join(app.config['UPLOAD_FOLDER'], unique_filename)
|
| 85 |
file.save(filename)
|
| 86 |
|
| 87 |
-
#
|
| 88 |
-
|
| 89 |
-
image_rgb = cv2.cvtColor(image, cv2.COLOR_BGR2RGB) # Convertir en RGB pour l'API Gemini
|
| 90 |
-
|
| 91 |
-
# Préparer l'image pour l'API Gemini
|
| 92 |
image_part = {
|
| 93 |
-
|
| 94 |
-
|
| 95 |
}
|
|
|
|
| 96 |
|
| 97 |
-
#
|
| 98 |
-
|
| 99 |
-
try:
|
| 100 |
-
model = genai.GenerativeModel("gemini-1.5-flash-exp", safety_settings=safety_settings, generation_config=generation_config)
|
| 101 |
-
response = model.generate_content([DETECTION_PROMPT, image_part])
|
| 102 |
-
cleaned_response_text = response.text.replace('\n', '')
|
| 103 |
|
|
|
|
|
|
|
| 104 |
if cleaned_response_text.startswith("```json"):
|
| 105 |
cleaned_response_text = cleaned_response_text[7:]
|
| 106 |
if cleaned_response_text.endswith("```"):
|
| 107 |
cleaned_response_text = cleaned_response_text[:-3]
|
| 108 |
-
|
| 109 |
detection_results = json.loads(cleaned_response_text)
|
|
|
|
|
|
|
|
|
|
| 110 |
|
| 111 |
-
|
| 112 |
-
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 113 |
box = item['box_2d']
|
| 114 |
-
label =
|
| 115 |
-
|
| 116 |
-
|
| 117 |
-
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 118 |
|
| 119 |
-
|
| 120 |
-
|
| 121 |
|
| 122 |
-
|
| 123 |
-
|
| 124 |
-
|
|
|
|
| 125 |
|
| 126 |
-
# Générer la description
|
| 127 |
-
model = genai.GenerativeModel("gemini-2.0-flash-exp", safety_settings=safety_settings, generation_config=generation_config)
|
| 128 |
response = model.generate_content([DESCRIPTION_PROMPT, image_part])
|
| 129 |
description = response.text
|
| 130 |
|
| 131 |
-
|
| 132 |
-
|
| 133 |
-
'
|
| 134 |
-
'
|
| 135 |
-
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 136 |
|
| 137 |
except Exception as e:
|
| 138 |
print(f"Une erreur s'est produite : {e}")
|
|
|
|
| 69 |
app.config['UPLOAD_FOLDER'] = UPLOAD_FOLDER
|
| 70 |
os.makedirs(UPLOAD_FOLDER, exist_ok=True)
|
| 71 |
|
| 72 |
+
|
| 73 |
+
|
| 74 |
@app.route('/analyze', methods=['POST'])
|
| 75 |
def analyze_image():
|
| 76 |
try:
|
|
|
|
| 82 |
return jsonify({'error': 'No selected file'}), 400
|
| 83 |
|
| 84 |
if file:
|
| 85 |
+
# Générer un nom de fichier unique pour éviter les conflits
|
| 86 |
unique_filename = str(uuid.uuid4()) + os.path.splitext(file.filename)[1]
|
| 87 |
filename = os.path.join(app.config['UPLOAD_FOLDER'], unique_filename)
|
| 88 |
file.save(filename)
|
| 89 |
|
| 90 |
+
# 1. Détection d'objets avec Gemini
|
| 91 |
+
model = genai.GenerativeModel("gemini-2.0-flash-exp",safety_settings=safety_settings,generation_config=generation_config)
|
|
|
|
|
|
|
|
|
|
| 92 |
image_part = {
|
| 93 |
+
"mime_type": "image/jpeg", # Assurez-vous que cela corresponde au type de votre image
|
| 94 |
+
"data": open(filename, "rb").read() # Le fichier est lu ici
|
| 95 |
}
|
| 96 |
+
response = model.generate_content([DETECTION_PROMPT, image_part])
|
| 97 |
|
| 98 |
+
# Nettoyer la réponse JSON en supprimant les sauts de ligne
|
| 99 |
+
cleaned_response_text = response.text.replace('\n', '')
|
|
|
|
|
|
|
|
|
|
|
|
|
| 100 |
|
| 101 |
+
try:
|
| 102 |
+
# Enlever les ```json et ``` au début et à la fin de la chaîne
|
| 103 |
if cleaned_response_text.startswith("```json"):
|
| 104 |
cleaned_response_text = cleaned_response_text[7:]
|
| 105 |
if cleaned_response_text.endswith("```"):
|
| 106 |
cleaned_response_text = cleaned_response_text[:-3]
|
|
|
|
| 107 |
detection_results = json.loads(cleaned_response_text)
|
| 108 |
+
except json.JSONDecodeError:
|
| 109 |
+
print(f"Erreur de décodage JSON : {cleaned_response_text}")
|
| 110 |
+
detection_results = [] # Initialiser à une liste vide en cas d'erreur
|
| 111 |
|
| 112 |
+
# 2. Dessiner les boîtes englobantes (avec gestion d'erreur)
|
| 113 |
+
image = Image.open(filename)
|
| 114 |
+
draw = ImageDraw.Draw(image)
|
| 115 |
+
|
| 116 |
+
draw_success = True # Indicateur de succès du dessin
|
| 117 |
+
|
| 118 |
+
for item in detection_results:
|
| 119 |
+
try:
|
| 120 |
box = item['box_2d']
|
| 121 |
+
label = item['label']
|
| 122 |
+
|
| 123 |
+
# Convertir la liste 'box' en tuple
|
| 124 |
+
box_tuple = tuple(box)
|
| 125 |
+
|
| 126 |
+
draw.rectangle(box_tuple, outline=(255, 0, 0), width=2)
|
| 127 |
+
text_position = (box[0], box[1] - 10)
|
| 128 |
+
|
| 129 |
+
# S'assurer que le label est une chaîne de caractère
|
| 130 |
+
label_str = str(label)
|
| 131 |
|
| 132 |
+
# Utiliser une couleur valide (blanc)
|
| 133 |
+
draw.text(text_position, label_str, fill="white")
|
| 134 |
|
| 135 |
+
except Exception as e:
|
| 136 |
+
print(f"Erreur lors du dessin des boîtes ou du texte : {e}")
|
| 137 |
+
draw_success = False # Échec du dessin
|
| 138 |
+
break # Sortir de la boucle en cas d'erreur
|
| 139 |
|
| 140 |
+
# 3. Générer la description (toujours exécuté)
|
|
|
|
| 141 |
response = model.generate_content([DESCRIPTION_PROMPT, image_part])
|
| 142 |
description = response.text
|
| 143 |
|
| 144 |
+
# 4. Renvoyer les résultats
|
| 145 |
+
if draw_success:
|
| 146 |
+
# Enregistrer l'image avec les boîtes si le dessin a réussi
|
| 147 |
+
output_filename = os.path.join(app.config['UPLOAD_FOLDER'], 'output_' + unique_filename)
|
| 148 |
+
image.save(output_filename)
|
| 149 |
+
return jsonify({
|
| 150 |
+
'image_path': '/uploads/' + 'output_' + unique_filename,
|
| 151 |
+
'description': description,
|
| 152 |
+
'detected_objects': detection_results
|
| 153 |
+
})
|
| 154 |
+
else:
|
| 155 |
+
# Renvoyer la description et les résultats de détection, même si le dessin a échoué
|
| 156 |
+
return jsonify({
|
| 157 |
+
'image_path': None, # Indiquer qu'aucune image n'a été générée
|
| 158 |
+
'description': description,
|
| 159 |
+
'detected_objects': detection_results
|
| 160 |
+
})
|
| 161 |
|
| 162 |
except Exception as e:
|
| 163 |
print(f"Une erreur s'est produite : {e}")
|