update organismes publics agent

.gitignore

@@ -1,6 +1,6 @@
 .env
 */__pycache__
-
+.vscode
 notebooks/
 *.pyc
 local_tests/

spinoza_project/config.yaml

@@ -2,7 +2,7 @@ demo_name: Spinoza Q&A
 tabs:
   GIEC et IPBES: "*Outil dédié aux rapports du GIEC et de l'IPBES.*"
   Textes Juridiques: "*Outil dédié aux codes Français modifiés par la loi climat (21/73).*"
-  Documents Stratégiques: "*Outil dédié aux données centrées sur le plan politique (SNBC).*"
+  Organismes publics: "*Outil dédié aux données centrées sur les organismes publics (CITEPA, HCC, GREC SUD, ORCAE, OFB).*"
   ADEME:
     "*Outil dédié aux données issues de l'ADEME et nous avons sélectionnés notamment différentes catégories de rapports:*\n
     * *Les guides mis à disposition de la population*\n
@@ -16,7 +16,7 @@ tabs:
 source_mapping:
   GIEC et IPBES: "Science"
   Textes Juridiques: "Loi"
-  Documents Stratégiques: "Politique"
+  Organismes publics: "Organismes publics"
   ADEME: "ADEME"
   Presse: "Presse"
   AFP: "AFP"
@@ -24,7 +24,7 @@ source_mapping:
 prompt_naming:
   Science: "Science"
   Loi: "Loi"
-  Politique: "Politique"
+  Organismes publics: "Organismes publics"
   ADEME: "ADEME"
   Presse: "Presse"
   AFP: "AFP"

spinoza_project/source/frontend/gradio_utils.py

@@ -6,7 +6,6 @@ from spinoza_project.source.frontend.utils import (
     make_html_source,
     make_html_presse_source,
     make_html_afp_source,
-    make_html_politique_source,
 )
 from spinoza_project.source.backend.prompt_utils import (
     to_chat_instruction,
@@ -220,24 +219,6 @@ def get_sources(questions, qdrants, bdd_presse, bdd_afp, config):
                 ]
             )
 
-        elif tab == "Documents Stratégiques":
-            sources = qdrants[
-                config["source_mapping"][tab]
-            ].similarity_search_with_relevance_scores(
-                config["query_preprompt"]
-                + question.replace("<p>", "").replace("</p>\n", ""),
-                k=k,
-            )
-            sources = [
-                (doc, score) for doc, score in sources if score >= min_similarity
-            ]
-            formated.extend(
-                [
-                    make_html_politique_source(source[0], j, source[1], config)
-                    for j, source in zip(range(k * i + 1, k * (i + 1) + 1), sources)
-                ]
-            )
-
         else:
             sources = qdrants[
                 config["source_mapping"][tab]

spinoza_project/source/frontend/utils.py

@@ -107,22 +107,6 @@ def make_html_afp_source(source, i, score):
     """
 
 
-def make_html_politique_source(source, i, score, config):
-    meta = source.metadata
-    return f"""
-<div class="card" id="doc{i}">
-    <div class="card-content">
-        <h2>Doc {i} - {meta['file_name'].replace(".pdf", "").replace("_", " ").replace("-", " ")} - Page {meta['content_page_number'] + 1}</h2>
-        <p>{source.page_content.replace(config["passage_preprompt"], "")}</p>
-    </div>
-    <div class="card-footer">
-        <span>Politique - {meta['file_source_type']}</span>
-        <span>Relevance Score : {round(100*score,1)}%</span>
-    </div>
-</div>
-"""
-
-
 def make_html_source(source, i, score, config):
     meta = source.metadata
     return f"""