Create app.py

app.py

@@ -0,0 +1,75 @@
+import gradio as gr
+from huggingface_hub import InferenceClient
+import os
+
+# Liste der Ratsmitglieder (Du kannst die Modelle hier anpassen)
+COUNCIL_MEMBERS = {
+    "Strategist": "mistralai/Mistral-7B-Instruct-v0.3",
+    "Creative": "meta-llama/Meta-Llama-3-8B-Instruct",
+    "Critic": "google/gemma-2-9b-it"
+}
+
+# Dein HF_TOKEN sollte in den Space Settings hinterlegt sein
+client = InferenceClient(token=os.getenv("HF_TOKEN"))
+
+def ask_model(model_id, system_prompt, user_input):
+    messages = [
+        {"role": "system", "content": system_prompt},
+        {"role": "user", "content": user_input}
+    ]
+    response = ""
+    for message in client.chat_completion(
+        model=model_id,
+        messages=messages,
+        max_tokens=500,
+        stream=True
+    ):
+        response += message.choices[0].delta.content or ""
+    return response
+
+def run_council(user_prompt, rounds):
+    history = []
+    current_context = f"Die ursprüngliche Frage lautet: {user_prompt}\n\n"
+    
+    for r in range(int(rounds)):
+        round_header = f"--- RUNDE {r+1} ---"
+        history.append((None, f"## {round_header}"))
+        
+        round_notes = ""
+        for name, model_id in COUNCIL_MEMBERS.items():
+            system_msg = f"Du bist der {name} in einem Expertenrat. Diskutiere kurz und prägnant."
+            if r > 0:
+                system_msg += " Beziehe dich auf die vorherigen Argumente und finde einen Konsens."
+            
+            answer = ask_model(model_id, system_msg, current_context)
+            formatted_answer = f"**{name}**: {answer}"
+            
+            history.append((None, formatted_answer))
+            round_notes += f"\n{formatted_answer}\n"
+            yield history # Live-Update in der UI
+            
+        current_context += f"\nZusammenfassung Runde {r+1}:{round_notes}"
+
+    # Finale Einigung
+    final_prompt = "Fasse die Diskussion zusammen und gib eine finale, konsolidierte Antwort."
+    final_res = ask_model("mistralai/Mixtral-8x7B-Instruct-v0.1", "Du bist der Moderator.", current_context + final_prompt)
+    
+    history.append((None, "### 🏆 FINALE ENTSCHEIDUNG"))
+    history.append((None, final_res))
+    yield history
+
+# Gradio UI
+with gr.Blocks(theme=gr.themes.Soft()) as demo:
+    gr.Markdown("# 🏛️ PromptPlenum42 (aka LLMCouncil)")
+    gr.Markdown("Drei Experten-Modelle diskutieren deinen Prompt und versuchen, einen Konsens zu finden.")
+    
+    with gr.Row():
+        input_text = gr.Textbox(label="Dein Thema / Frage", placeholder="Sollten wir zum Mars fliegen?")
+        rounds_slider = gr.Slider(minimum=1, maximum=3, value=1, step=1, label="Diskussionsrunden")
+    
+    start_btn = gr.Button("Diskussion starten", variant="primary")
+    chatbot = gr.Chatbot(label="Council Protokoll", height=600)
+
+    start_btn.click(run_council, inputs=[input_text, rounds_slider], outputs=[chatbot])
+
+demo.launch()