Update modules/text_analysis/discourse_analysis.py

modules/text_analysis/discourse_analysis.py

@@ -2,7 +2,6 @@ import streamlit as st
 import spacy
 import networkx as nx
 import matplotlib.pyplot as plt
-from collections import defaultdict
 from .semantic_analysis import (
     create_concept_graph,
     visualize_concept_graph,
@@ -16,15 +15,13 @@ def compare_semantic_analysis(text1, text2, nlp, lang):
     doc1 = nlp(text1)
     doc2 = nlp(text2)
 
-    # Identificar entidades y conceptos clave para ambos documentos
-    entities1, key_concepts1 = identify_and_contextualize_entities(doc1, lang)
-    entities2, key_concepts2 = identify_and_contextualize_entities(doc2, lang)
+    # Identificar conceptos clave para ambos documentos
+    key_concepts1 = identify_key_concepts(doc1)
+    key_concepts2 = identify_key_concepts(doc2)
 
     # Crear grafos de conceptos para ambos documentos
-    concepts1 = [concept for concept, _ in key_concepts1]
-    concepts2 = [concept for concept, _ in key_concepts2]
-    G1 = create_concept_graph(text1, concepts1)
-    G2 = create_concept_graph(text2, concepts2)
+    G1 = create_concept_graph(doc1, key_concepts1)
+    G2 = create_concept_graph(doc2, key_concepts2)
 
     # Visualizar los grafos de conceptos
     fig1 = visualize_concept_graph(G1, lang)
@@ -34,19 +31,17 @@ def compare_semantic_analysis(text1, text2, nlp, lang):
     fig1.suptitle("Documento 1: Relaciones Conceptuales", fontsize=16, fontweight='bold')
     fig2.suptitle("Documento 2: Relaciones Conceptuales", fontsize=16, fontweight='bold')
 
-    return fig1, fig2, entities1, entities2, key_concepts1, key_concepts2
+    return fig1, fig2, key_concepts1, key_concepts2
 
 def perform_discourse_analysis(text1, text2, nlp, lang):
-    graph1, graph2, entities1, entities2, key_concepts1, key_concepts2 = compare_semantic_analysis(text1, text2, nlp, lang)
+    graph1, graph2, key_concepts1, key_concepts2 = compare_semantic_analysis(text1, text2, nlp, lang)
     
     # Aquí puedes añadir más análisis de discurso si lo necesitas
-    # Por ejemplo, podrías comparar las entidades y conceptos clave entre los dos textos
+    # Por ejemplo, podrías comparar los conceptos clave entre los dos textos
 
     return {
         'graph1': graph1,
         'graph2': graph2,
-        'entities1': entities1,
-        'entities2': entities2,
         'key_concepts1': key_concepts1,
         'key_concepts2': key_concepts2
     }