restructured

Dockerfile

@@ -25,4 +25,5 @@ RUN playwright install chromium
 # Copy app code
 COPY --chown=user . /app
 
-CMD ["uvicorn", "app:app", "--host", "0.0.0.0", "--port", "7860"]
+CMD ["uvicorn", "app/main:app", "--host", "0.0.0.0", "--port", "7860"]
+

services.py → app/agent/services.py

@@ -7,10 +7,10 @@ from langchain.output_parsers import PydanticOutputParser
 from langchain_core.prompts import PromptTemplate
 from dotenv import load_dotenv
 
-from models import NarratorExtractionResponse, NarratorAnalysisResponse
-from tools.scrape_shamela import ShamelaNarratorExtractor
+from app.db.models import NarratorExtractionResponse, NarratorAnalysisResponse
+from app.tools.scrape_shamela import ShamelaNarratorExtractor
 
-from constants import EXTRACT_PROMPT, ANALYZE_PROMPT, SYNTHESIS_PROMPT
+from app.config.constants import EXTRACT_PROMPT, ANALYZE_PROMPT, SYNTHESIS_PROMPT
 import asyncio
 
 
@@ -223,13 +223,6 @@ class LLMService:
                 "success": True,
             }
 
-            return {
-                "overall_assessment": synthesis_result.content,
-                "individual_results": chain_results,
-                "chain_length": len(chain_results),
-                "success": True,
-            }
-
         except Exception as e:
             return {
                 "overall_assessment": f"Synthesis failed: {str(e)}",

routes.py → app/api/routes.py

@@ -2,7 +2,7 @@ from fastapi import APIRouter, HTTPException, status
 from fastapi.responses import JSONResponse
 from typing import List, Dict, Any
 
-from models import (
+from app.db.models import (
     HadithTextRequest,
     NarratorExtractionResponse,
     NarratorAnalysisRequest,
@@ -15,7 +15,7 @@ from models import (
     ChainAnalysisResult,
     ExtractAndAnalyzeMetadata,
 )
-from services import get_llm_service
+from app.agent.services import get_llm_service
 
 router = APIRouter(prefix="/api/v1", tags=["hadith-analysis"])
 

app.py → app/main.py

@@ -4,8 +4,8 @@ from fastapi.responses import JSONResponse
 import uvicorn
 import os
 
-from config import settings
-from routes import router
+from app.config.settings import settings
+from app.api.routes import router
 
 
 # Create FastAPI application

{tools → app/tools}/fetch.py

@@ -289,45 +289,4 @@ async def fetch_html_with_browser(url, browser_type='chromium', max_retries=5, m
             await asyncio.sleep(wait_time)
     
     print(f"[FAIL] Could not fetch {url} with {browser_type} after {max_retries} attempts.")
-    return None
-
-# Example usage
-async def main():
-    """Example usage with async functions."""
-    url = "https://shamela.ws/narrator/5710"
-    
-    print("=" * 60)
-    print("Testing basic fetch_html function...")
-    print("=" * 60)
-    
-    # Test basic function
-    html = await fetch_html(url, headless=True)  # Set headless=False to see the browser
-    if html:
-        with open("debug_shamela_basic.html", "w", encoding="utf-8") as f:
-            f.write(html)
-        print(f"[SUCCESS] Basic HTML saved to debug_shamela_basic.html ({len(html)} chars)")
-    else:
-        print("[FAILED] Could not fetch HTML with basic function")
-    
-    print("\n" + "=" * 60)
-    print("Testing enhanced fetch_html_with_js_execution function...")
-    print("=" * 60)
-    
-    # Test enhanced function
-    html_js = await fetch_html_with_js_execution(url, headless=True, wait_for_js=True)
-    if html_js:
-        with open("debug_shamela_js.html", "w", encoding="utf-8") as f:
-            f.write(html_js)
-        print(f"[SUCCESS] Enhanced HTML saved to debug_shamela_js.html ({len(html_js)} chars)")
-    else:
-        print("[FAILED] Could not fetch HTML with enhanced function")
-    
-    # Compare results
-    if html and html_js:
-        print(f"\n[INFO] Basic HTML length: {len(html)} chars")
-        print(f"[INFO] Enhanced HTML length: {len(html_js)} chars")
-        print(f"[INFO] Difference: {abs(len(html_js) - len(html))} chars")
-
-
-if __name__ == "__main__":
-    asyncio.run(main())
+    return None

{tools → app/tools}/scrape_shamela.py

@@ -314,19 +314,3 @@ class ShamelaNarratorExtractor:
         print(f"Total scholars: {info['extraction_metadata']['total_scholars']}")
         print(f"Biographical fields: {info['extraction_metadata']['biographical_fields']}")
         print(f"Total comments: {info['extraction_metadata']['total_comments']}")
-
-
-# Example usage
-# Example usage
-async def main():
-    """Example usage with async functions."""
-    narrator_name = "أَبُو بَكْرِ بْنُ أَبِي شَيْبَةَ"
-    
-    # Extract narrator information using the class
-    info = await ShamelaNarratorExtractor.extract_narrator_by_name(narrator_name)
-    
-    # Print the results
-    ShamelaNarratorExtractor.print_narrator_info(info)
-
-if __name__ == "__main__":
-    asyncio.run(main())

asd.ipynb

@@ -2,298 +2,64 @@
  "cells": [
   {
    "cell_type": "code",
-   "execution_count": 4,
-   "id": "b4667bde",
-   "metadata": {},
-   "outputs": [
-    {
-     "name": "stdout",
-     "output_type": "stream",
-     "text": [
-      "Searching for: \" ابن كثير\" site:shamela.ws/narrator\n",
-      "Extracted works for narrator:  ابن كثير\n",
-      "NarratorInfo(narrator_name=None, biographical_info={}, scholarly_critique=[], extraction_metadata={'total_scholars': 0, 'biographical_fields': 0, 'has_critique_section': False, 'total_comments': 0})\n"
-     ]
-    }
-   ],
-   "source": [
-    "from tools.scrape_shamela import ShamelaNarratorExtractor\n",
-    "\n",
-    "narrator_name = \" ابن كثير\"\n",
-    "if __name__ == \"__main__\":\n",
-    "    extractor = ShamelaNarratorExtractor()\n",
-    "    details = extractor.search_and_extract(narrator_name)\n",
-    "    print(f\"Extracted works for narrator: {narrator_name}\")\n",
-    "    print(details)\n"
-   ]
-  },
-  {
-   "cell_type": "code",
-   "execution_count": null,
-   "id": "e2e25f79",
+   "execution_count": 6,
+   "id": "f41e65f6",
    "metadata": {},
    "outputs": [],
    "source": [
-    "import requests\n",
     "from bs4 import BeautifulSoup\n",
-    "from typing import Dict, List, Any\n",
-    "from googlesearch import search\n",
-    "\n",
-    "def extract_narrator_info(html_content: str) -> Dict[str, Any]:\n",
-    "    \"\"\"\n",
-    "    Extract narrator information from Shamela.ws HTML content with better section separation.\n",
-    "    \n",
-    "    Args:\n",
-    "        html_content: HTML content from shamela.ws narrator page\n",
-    "        \n",
-    "    Returns:\n",
-    "        Dictionary containing extracted narrator information\n",
-    "    \"\"\"\n",
-    "    soup = BeautifulSoup(html_content, \"html.parser\")\n",
-    "    result = {}\n",
-    "\n",
-    "    # 1. Extract Narrator Name (from <h1>)\n",
-    "    name_tag = soup.find(\"h1\")\n",
-    "    result[\"narrator_name\"] = name_tag.text.strip() if name_tag else None\n",
-    "\n",
-    "    # 2. Extract Biographical Information (before الجرح والتعديل section)\n",
-    "    bio_info = {}\n",
-    "    container = soup.find(\"div\", class_=\"col-md-12\")\n",
-    "    \n",
-    "    # Keywords that indicate scholarly critique content (not biographical)\n",
-    "    critique_keywords = [\n",
-    "        \"ذكره\", \"قال\", \"وقال\", \"ثقة\", \"ضعيف\", \"صدوق\", \"كذاب\", \"متروك\",\n",
-    "        \"الثقات\", \"الضعفاء\", \"تهذيب\", \"الكاشف\", \"الميزان\", \"العجلي\",\n",
-    "        \"النسائي\", \"ابن سعد\", \"أحمد\", \"يعقوب\", \"ابن حبان\"\n",
-    "    ]\n",
-    "    \n",
-    "    if container:\n",
-    "        # Find the الجرح والتعديل header first\n",
-    "        critique_header = None\n",
-    "        for h4 in container.find_all(\"h4\"):\n",
-    "            if \"الجرح والتعديل\" in h4.text:\n",
-    "                critique_header = h4\n",
-    "                break\n",
-    "        \n",
-    "        # Process divs before the critique section\n",
-    "        for div in container.find_all(\"div\", recursive=False):\n",
-    "            # Stop when we reach the critique header\n",
-    "            if critique_header and div == critique_header:\n",
-    "                break\n",
-    "                \n",
-    "            b_tag = div.find(\"b\")\n",
-    "            if b_tag:\n",
-    "                key = b_tag.text.strip().rstrip(\":\").rstrip(\":\")\n",
-    "                \n",
-    "                # Skip if this looks like scholarly critique content\n",
-    "                is_critique_content = any(keyword in key for keyword in critique_keywords)\n",
-    "                if is_critique_content:\n",
-    "                    continue\n",
-    "                \n",
-    "                # Get the text after the <b> tag\n",
-    "                remaining_text = \"\"\n",
-    "                for sibling in b_tag.next_siblings:\n",
-    "                    if hasattr(sibling, 'strip'):\n",
-    "                        remaining_text += sibling.strip()\n",
-    "                    else:\n",
-    "                        remaining_text += str(sibling).strip()\n",
-    "                \n",
-    "                # Additional check: if the content contains critique keywords, skip it\n",
-    "                if remaining_text:\n",
-    "                    content_has_critique = any(keyword in remaining_text for keyword in critique_keywords)\n",
-    "                    if not content_has_critique:\n",
-    "                        bio_info[key] = remaining_text.strip()\n",
-    "\n",
-    "    result[\"biographical_info\"] = bio_info\n",
-    "\n",
-    "    # 3. Extract Scholarly Critique (after الجرح والتعديل header)\n",
-    "    scholarly_critique = []\n",
-    "    \n",
-    "    if container:\n",
-    "        critique_header = None\n",
-    "        for h4 in container.find_all(\"h4\"):\n",
-    "            if \"الجرح والتعديل\" in h4.text:\n",
-    "                critique_header = h4\n",
-    "                break\n",
-    "        \n",
-    "        if critique_header:\n",
-    "            current_scholar = None\n",
-    "            current_comments = []\n",
-    "            \n",
-    "            # Process all siblings after the critique header\n",
-    "            for element in critique_header.find_next_siblings():\n",
-    "                # Scholar name (in alert-info div)\n",
-    "                if (element.name == \"div\" and \n",
-    "                    \"alert-info\" in element.get(\"class\", [])):\n",
-    "                    \n",
-    "                    # Save previous scholar's data if exists\n",
-    "                    if current_scholar and current_comments:\n",
-    "                        scholarly_critique.append({\n",
-    "                            \"scholar\": current_scholar,\n",
-    "                            \"comments\": current_comments.copy()\n",
-    "                        })\n",
-    "                    \n",
-    "                    # Start new scholar\n",
-    "                    current_scholar = element.text.strip()\n",
-    "                    current_comments = []\n",
-    "                \n",
-    "                # Scholar comment (regular div)\n",
-    "                elif (element.name == \"div\" and \n",
-    "                      not \"alert-info\" in element.get(\"class\", []) and\n",
-    "                      element.text.strip()):\n",
-    "                    \n",
-    "                    comment_text = element.text.strip()\n",
-    "                    \n",
-    "                    # If no current scholar, extract scholar name from the comment\n",
-    "                    if not current_scholar:\n",
-    "                        # Look for patterns like \"قال ابن حبان\" or \"وذكره العجلي\"\n",
-    "                        for word in comment_text.split():\n",
-    "                            if any(scholar_name in word for scholar_name in \n",
-    "                                   [\"ابن حبان\", \"العجلي\", \"النسائي\", \"ابن سعد\", \"الذهبي\", \"ابن حجر\"]):\n",
-    "                                current_scholar = \"مختلف العلماء\"  # Mixed scholars\n",
-    "                                break\n",
-    "                        \n",
-    "                        if not current_scholar:\n",
-    "                            current_scholar = \"غير محدد\"  # Unspecified\n",
-    "                    \n",
-    "                    # Extract bold text if present\n",
-    "                    bold_tags = element.find_all(\"b\")\n",
-    "                    comment = {\n",
-    "                        \"text\": comment_text,\n",
-    "                        \"highlighted\": [b.text.strip() for b in bold_tags] if bold_tags else []\n",
-    "                    }\n",
-    "                    current_comments.append(comment)\n",
-    "            \n",
-    "            # Don't forget the last scholar\n",
-    "            if current_scholar and current_comments:\n",
-    "                scholarly_critique.append({\n",
-    "                    \"scholar\": current_scholar,\n",
-    "                    \"comments\": current_comments\n",
-    "                })\n",
-    "\n",
-    "    result[\"scholarly_critique\"] = scholarly_critique\n",
-    "\n",
-    "    # 4. Extract metadata\n",
-    "    result[\"extraction_metadata\"] = {\n",
-    "        \"total_scholars\": len(scholarly_critique),\n",
-    "        \"biographical_fields\": len(bio_info),\n",
-    "        \"has_critique_section\": len(scholarly_critique) > 0,\n",
-    "        \"total_comments\": sum(len(scholar[\"comments\"]) for scholar in scholarly_critique)\n",
-    "    }\n",
-    "\n",
-    "    return result\n",
-    "\n",
-    "def clean_biographical_info(bio_info: Dict[str, str]) -> Dict[str, str]:\n",
-    "    \"\"\"\n",
-    "    Additional cleaning function to remove any remaining critique content from bio info.\n",
-    "    \"\"\"\n",
-    "    cleaned_bio = {}\n",
-    "    \n",
-    "    # Define purely biographical field patterns\n",
-    "    bio_field_patterns = [\n",
-    "        \"الاسم\", \"الكنية\", \"النسب\", \"بلد\", \"تاريخ\", \"طبقة\", \"علاقات\"\n",
-    "    ]\n",
-    "    \n",
-    "    for key, value in bio_info.items():\n",
-    "        # Keep if it's clearly a biographical field\n",
-    "        if any(pattern in key for pattern in bio_field_patterns):\n",
-    "            cleaned_bio[key] = value\n",
-    "        # Or if it doesn't contain critique-style language\n",
-    "        elif not any(word in value for word in [\"قال\", \"ذكره\", \"ثقة\", \"ضعيف\"]):\n",
-    "            cleaned_bio[key] = value\n",
-    "    \n",
-    "    return cleaned_bio\n",
-    "\n",
-    "# Updated main extraction function\n",
-    "def extract_narrator_info_enhanced(html_content: str) -> Dict[str, Any]:\n",
-    "    \"\"\"Enhanced extraction with better cleaning.\"\"\"\n",
-    "    result = extract_narrator_info(html_content)\n",
-    "    \n",
-    "    # Apply additional cleaning to biographical info\n",
-    "    result[\"biographical_info\"] = clean_biographical_info(result[\"biographical_info\"])\n",
-    "    \n",
-    "    return result"
+    "from tools.fetch import fetch_html\n",
+    "\n",
+    "async def scrape_siyar_alaam_nubala():\n",
+    "    html = await fetch_html(\"https://www.islamweb.net/ar/library/content/60/531/%D8%B3%D8%B9%D9%8A%D8%AF-%D8%A8%D9%86-%D8%A7%D9%84%D9%85%D8%B3%D9%8A%D8%A8\")\n",
+    "    if html is None:\n",
+    "        return []\n",
+    "    soup = BeautifulSoup(html, \"html.parser\")\n",
+    "    divs = soup.find_all(\"div\", class_=\"bookcontent-dic\")\n",
+    "    texts = [div.get_text(strip=True) for div in divs]\n",
+    "    return texts\n"
    ]
   },
   {
    "cell_type": "code",
-   "execution_count": 6,
-   "id": "50c33021",
+   "execution_count": 7,
+   "id": "c50a7413",
    "metadata": {},
    "outputs": [
     {
      "name": "stdout",
      "output_type": "stream",
      "text": [
-      "Searching for narrator: مُحَمَّدُ بْنُ عَبْدِ الرَّحْمَنِ الْعَنْبَرِيُّ\n",
-      "Google search query: مُحَمَّدُ بْنُ عَبْدِ الرَّحْمَنِ الْعَنْبَرِيُّ site:shamela.ws/narrator\n",
-      "Search results: ['https://shamela.ws/narrator/5710', 'https://shamela.ws/narrator/3414', 'https://shamela.ws/narrator/484', 'https://shamela.ws/narrator/3133', 'https://shamela.ws/narrator/3340']\n"
+      "[INFO] Fetching https://www.islamweb.net/ar/library/content/60/531/%D8%B3%D8%B9%D9%8A%D8%AF-%D8%A8%D9%86-%D8%A7%D9%84%D9%85%D8%B3%D9%8A%D8%A8 (Attempt 1/5)\n"
+     ]
+    },
+    {
+     "name": "stdout",
+     "output_type": "stream",
+     "text": [
+      "[OK] https://www.islamweb.net/ar/library/content/60/531/%D8%B3%D8%B9%D9%8A%D8%AF-%D8%A8%D9%86-%D8%A7%D9%84%D9%85%D8%B3%D9%8A%D8%A8 (Attempt 1) | Preview: <!DOCTYPE html><html><head> \t\t<meta charset=\"utf-8\"> \t\t<meta http-equiv=\"X-UA-Compatible\" content=\"IE=edge\"> \t\t<meta name=\"language\" content=\"ar\"> \t\t ...\n",
+      "['سعيد بن المسيب ( ع )ابن حزن بن أبي وهب بن عمرو بن عائذ بن عمران بن مخزوم بن يقظة ، الإمام العلم ، أبو محمد القرشي المخزومي ، عالمأهلالمدينة، وسيد التابعين في زمانه . ولد[ص:218 ]لسنتين مضتا من خلافةعمررضي الله عنه وقيل : لأربع مضين منهابالمدينة.رأىعمر، وسمععثمان،وعليا،nindex.php?page=showalam&ids=47وزيد بن ثابت،وأبا موسى،وسعدا،nindex.php?page=showalam&ids=25وعائشةnindex.php?page=showalam&ids=3وأبا هريرة،nindex.php?page=showalam&ids=11وابن عباس،ومحمد بن مسلمة،nindex.php?page=showalam&ids=54وأم سلمة، وخلقا سواهم . وقيل : إنه سمع منعمر.وروى عنأبي بن كعبمرسلا ،وبلالكذلك ،nindex.php?page=showalam&ids=228وسعد بن عبادةكذلك ،وأبي ذرnindex.php?page=showalam&ids=4وأبي الدرداءكذلك ، وروايته عنعلي،وسعد،وعثمان،وأبي موسى،nindex.php?page=showalam&ids=25وعائشة،nindex.php?page=showalam&ids=11598وأم شريك،nindex.php?page=showalam&ids=12وابن عمر،nindex.php?page=showalam&ids=3وأبي هريرة،nindex.php?page=showalam&ids=11وابن عباس،nindex.php?page=showalam&ids=137وحكيم بن حزام،nindex.php?page=showalam&ids=12وعبد الله بن عمرو، وأبيهالمسيب،وأبي سعيدفي \" الصحيحين \" وعنحسان بن ثابت،nindex.php?page=showalam&ids=90وصفوان بن أمية،ومعمر بن عبد الله،ومعاوية،nindex.php?page=showalam&ids=54وأم سلمة، في صحيحمسلم. وروايته عنجبير بن مطعموجابر، وغيرهما فيnindex.php?page=showalam&ids=12070البخاري. وروايته عنعمرفي السنن الأربعة .وروى -أيضا- عنnindex.php?page=showalam&ids=47زيد بن ثابت،وسراقة بن مالك،وصهيب،والضحاك بن سفيان،وعبد الرحمن بن عثمان التيمي، وروايته عنعتاب بن أسيدفي السنن الأربعة ، وهو مرسل . وأرسل عن النبي -صلى الله عليه وسلم- وعنnindex.php?page=showalam&ids=1أبي بكر الصديقوكان زوج بنتnindex.php?page=showalam&ids=3أبي هريرة، وأعلم الناس بحديثه .روى عنه خلق : منهمإدريس بن صبيح،وأسامة بن زيد الليثي،وإسماعيل بن أمية، وبشيروعبد الرحمن بن حرملةوعبد الرحمن بن حميد بن عبد الرحمن،nindex.php?page=showalam&ids=16395وعبد الكريم الجزري،nindex.php?page=showalam&ids=16480وعبد ��لمجيد بن سهيل،وعبيد الله بن سليمان العبدي،وعثمان بن حكيم،nindex.php?page=showalam&ids=16566وعطاء الخراساني،وعقبة بن حريث[ص:219 ]وعلي بن جدعان،وعلي بن نفيل الحراني،وعمارة بن عبد الله بن طعمة،nindex.php?page=showalam&ids=16709وعمرو بن شعيب،nindex.php?page=showalam&ids=16705وعمرو بن دينار،nindex.php?page=showalam&ids=16718وعمرو بن مرة،وعمرو بن مسلم الليثي،وغيلان بن جرير،والقاسم بن عاصم، وابنهمحمد بن سعيد،وقتادة،ومحمد بن صفوان،ومحمد بن عبد الرحمن بن أبي لبيبة،nindex.php?page=showalam&ids=11958وأبو جعفر محمد بن علي،ومحمد بن عمرو بن عطاء،nindex.php?page=showalam&ids=12300والزهري،nindex.php?page=showalam&ids=16920وابن المنكدر،ومعبد بن هرمز،ومعمر بن أبي حبيبة،nindex.php?page=showalam&ids=17183وموسى بن وردان،وميسرة الأشجعي،nindex.php?page=showalam&ids=17188وميمون بن مهران،وأبو سهيل نافع بن مالك،وأبو معشر نجيح السندي، وهو عندالترمذي،وهاشم بن هاشم الوقاصي،ويحيى بن سعيد الأنصاري،ويزيد بن قسيط،ويزيد بن نعيم بن هزال،nindex.php?page=showalam&ids=17384ويعقوب بن عبد الله بن الأشج،ويونس بن سيف،وأبو جعفر الخطميوأبو قرة الأسدي، من \" التهذيب \" .وعنه :الزهري،وقتادة،nindex.php?page=showalam&ids=16705وعمرو بن دينار،ويحيى بن سعيد الأنصاري،nindex.php?page=showalam&ids=15562وبكير بن الأشج،nindex.php?page=showalam&ids=15854وداود بن أبي هند،nindex.php?page=showalam&ids=228وسعد بن إبراهيم،nindex.php?page=showalam&ids=16621وعلي بن زيد بن جدعان،nindex.php?page=showalam&ids=16100وشريك بن أبي نمر،وعبد الرحمن بن حرملةوبشر كثير .وكان ممن برز في العلم والعمل ، وقع لنا جملة من عالي حديثه .أخبرناأبو المعالي أحمد بن إسحاق القرافي، أنبأناالفتح بن عبد الله الكاتب، أنبأنامحمد بن عمر الشافعي،ومحمد بن أحمد الطرائفي،ومحمد بن علي بن الداية، قالوا : أنبأناأبو جعفر محمد بن أحمد بن المسلمة، أنبأناعبيد الله بن عبد الرحمن الزهريسنة ثمانين وثلاث مائة ، أنبأناجعفر بن[ص:220 ]محمد الفريابي، حدثناإبراهيم بن الحجاج السامي، حدثناحماد بن سلمة، عنnindex.php?page=showalam&ids=15854داود بن أبي هند، عنnindex.php?page=showalam&ids=15990سعيد بن المسيب، عنnindex.php?page=showalam&ids=3أبي هريرة-رضي الله عنه- ، أن رسول الله -صلى الله عليه وسلم- قال :nindex.php?page=hadith&LINKID=880037ثلاث من كن فيه فهو منافق وإن صام وصلى ، وزعم أنه مسلم : من إذا حدث كذب ، وإذا وعد أخلف ، وإذا ائتمن خان.هذا صحيح ، عال ، فيه دليل على أن هذه الخصال من كبار الذنوب .أخرجهمسلمعنnindex.php?page=showalam&ids=12175أبي نصر التمار، عنحماد بن سلمة، فوقع لنا بدلا عاليا مع علوه في نفسهلمسلمولنا ; فإن أعلى أنواع الإبدال أن يكون الحديث من أعلى حديث صاحب ذلك الكتاب ، ويقع لك بإسناد آخر أعلى بدرجة أو أكثر . والله أعلم .أخبرناإسحاق الأسدي، أنبأنايوسف الآدمي( ح ) وأنبأناأحمد بن سلامةقالا : أنبأناأبو المكارم الأصبهاني، قاليوسف سماعا، وقال الآخر إجازة : أنبأناأبو علي الحداد، أنبأناأبو نعيم، حدثناسليمان بن أحمد، حدثناأحمد بن داود المكي، حدثناحبيب كاتب مالك، حدثنا ابن أخيالزهري، عنالزهري، عنnindex.php?page=showalam&ids=15990سعيد بن المسيب، عنأبي بن كعب، قال : قال رسول الله -صلى الله عليه وسلم- :قال ليجبريل: ليبك الإسلام على موتعمر.هذا حديث منكر ،وحبيبليس بثقة ، مع أنسعيداعنأبيمنقطع .عبد العزيز بن المختار، عنعلي بن زيد، حدثنيسعيد بن المسيب بن حزنnindex.php?page=hadith&LINKID=880039أن جدهحزناأتى النبي -صلى الله عليه وسلم- فقال : ما اسمك؟ قال :حزن. قال : بل أنتسهل. قال : يا رسول الله ، اسم سماني به أبواي وعرفت به في الناس ، فسكت عنه النبي صلى الله عليه وسلم قالسعيد: فما زلنا تعرف الحزونة فينا أهل البيت.[ص:221 ]هذا حديث مرسل ، ومراسيلسعيدمحتج بها ، لكنعلي بن زيدليس بالحجة ، وأما الحديث فمروي بإسناد صحيح ، متصل ، ولفظه :nindex.php?page=hadith&LINKID=880040أن النبي -صلى الله عليه وسلم- قال له : ما اسمك؟ قال :حزن. قال : أنتسهل. فقال لا أغير اسما سمانيه أبي قالسعيد: فما زالت تلك الحزونة فينا بعد.العطاف بن خالد: عنأبي حرملة، عنابن المسيبقال : ما فاتتني الصلاة في جماعة منذ أربعين سنة .nindex.php?page=showalam&ids=16004سفيان الثوري: عنعثمان بن حكيم، سمعتnindex.php?page=showalam&ids=15990سعيد بن المسيبيقول : ما أذن المؤذن منذ ثلاثين سنة إلا وأنا في المسجد  . إسناده ثابت .حماد بن زيد: حدثنايزيد بن حازم، أنnindex.php?page=showalam&ids=15990سعيد بن المسيبكان يسرد الصوم .مسعرعنسعيد بن إبراهيم، سمعابن المسيبيقول : ما أحد أعلم بقضاء قضاه رسول الله -صلى الله عليه وسلم- ولاأبو بكر، ولاعمرمني .[ص:222 ]أسامة بن زيد: عننافع، أنابن عمرذكرnindex.php?page=showalam&ids=15990سعيد بن المسيبفقال : هو -والله- أحد المفتين  .قالnindex.php?page=showalam&ids=12251أحمد بن حنبلوغير واحد : مرسلاتnindex.php?page=showalam&ids=15990سعيد بن المسيبصحاح .وقالقتادة،ومكحول،nindex.php?page=showalam&ids=12300والزهري، وآخرون ، واللفظلقتادة: ما رأيت أعلم منnindex.php?page=showalam&ids=15990سعيد بن المسيب.قالnindex.php?page=showalam&ids=16604علي بن المديني: لا أعلم في التابعين أحدا أوسع علما منابن المسيب، هو عندي أجل التابعين .عبد الرحمن بن حرملة: سمعتابن المسيبيقول : حججت أربعين حجة  .قاليحيى بن سعيد الأنصاري: كانسعيديكثر أن يقول في مجلسه : اللهم سلم سلم .معن : سمعتnindex.php?page=showalam&ids=16867مالكايقول : قالابن المسيب: إن كنت لأسير الأيام والليالي في طلب الحديث الواحد  .ابن عيينة: عنإبراهيم بن طريف، عنحميد بن يعقوب، سمعnindex.php?page=showalam&ids=15990سعيد بن المسيبيقول : سمعت منعمركلمة ما بقي أحد سمعها غيري  .أبو إسحاق الشيباني: عنبكير بن الأخنس، عنسعيد بن[ص:223 ]المسيب، قال : سمعتعمرعلى المنبر وهو يقول : لا أجد أحدا جامع فلم يغتسل ، أنزل أو لم ينزل ، إلا عاقبته  .ابن عيينة : عنيحيى بن سعيد، عنابن المسيب، قال : ولدت لسنتين مضتا من خلافةعمروكانت خلافته عشر سنين وأربعة أشهر  .', 'سَعِيدُ بْنُ الْمُسَيَّبِ ( ع )ابْنُ حَزْنِ بْنِ أَبِي وَهْبِ بْنِ عَمْرِو بْنِ عَائِذِ بْنِ عِمْرَانَ بْنِ مَخْزُومِ بْنِ يَقَظَةَ ، الْإِمَامُ الْعَلَمُ ، أَبُو مُحَمَّدٍ الْقُرَشِيُّ الْمَخْزُومِيُّ ، عَالِمُأَهْلِالْمَدِينَةِ، وَسَيِّدُ التَّابِعِينَ فِي زَمَانِهِ . وُلِدَ[ص:218 ]لِسَنَتَيْنِ مَضَتَا مِنْ خِلَافَةِعُمَرَرَضِيَ اللَّهُ عَنْهُ وَقِيلَ : لِأَرْبَعٍ مَضَيْنَ مِنْهَابِالْمَدِينَةِ.رَأَىعُمَرَ، وَسَمِعَعُثْمَانَ،وَعَلِيًّا،nindex.php?page=showalam&ids=47وَزَيْدَ بْنَ ثَابِتٍ،وَأَبَا مُوسَى،وَسَعْدًا،nindex.php?page=showalam&ids=25وَعَائِشَةَnindex.php?page=showalam&ids=3وَأَبَا هُرَيْرَةَ،nindex.php?page=showalam&ids=11وَابْنَ عَبَّاسٍ،وَمُحَمَّدَ بْنَ مَسْلَمَةَ،nindex.php?page=showalam&ids=54وَأُمَّ سَلَمَةَ، وَخَلْقًا سِوَاهُمْ . وَقِيلَ : إِنَّهُ سَمِعَ مِنْعُمَرَ.وَرَوَى عَنْأُبَيِّ بْنِ كَعْبٍمُرْسَلًا ،وَبِلَالٍكَذَلِكَ ،nindex.php?page=showalam&ids=228وَسَعْدِ بْنِ عُبَادَةَكَذَلِكَ ،وَأَبِي ذَرٍّnindex.php?page=showalam&ids=4وَأَبِي الدَّرْدَاءِكَذَلِكَ ، وَرِوَايَتُهُ عَنْعَلِيٍّ،وَسَعْدٍ،وَعُثْمَانَ،وَأَبِي مُوسَى،nindex.php?page=showalam&ids=25وَعَائِشَةَ،nindex.php?page=showalam&ids=11598وَأُمِّ شَرِيكٍ،nindex.php?page=showalam&ids=12وَابْنِ عُمَرَ،nindex.php?page=showalam&ids=3وَأَبِي هُرَيْرَةَ،nindex.php?page=showalam&ids=11وَابْنِ عَبَّاسٍ،nindex.php?page=showalam&ids=137وَحَكِيمِ بْنِ حِزَامٍ،nindex.php?page=showalam&ids=12وَعَبْدِ اللَّهِ بْنِ عَمْرٍو، وَأَبِيهِالْمُسَيَّبِ،وَأَبِي سَعِيدٍفِي \" الصَّحِيحَيْنِ \" وَعَنْحَسَّانَ بْنِ ثَابِتٍ،nindex.php?page=showalam&ids=90وَصَفْوَانَ بْنِ أُمَيَّةَ،وَمَعْمَرِ بْنِ عَبْدِ اللَّهِ،وَمُعَاوِيَةَ،nindex.php?page=showalam&ids=54وَأُمِّ سَلَمَةَ، فِي صَحِيحِمُسْلِمٍ. وَرِوَايَتُهُ عَنْجُبَيْرِ بْنِ مُطْعِمٍوَجَابِرٍ، وَغَيْرِهِمَا فِيnindex.php?page=showalam&ids=12070الْبُخَارِيِّ. وَرِوَايَتُهُ عَنْعُمَرَفِي السُّنَنِ الْأَرْبَعَةِ .وَرَوَى -أَيْضًا- عَنْnindex.php?page=showalam&ids=47زَيْدِ بْنِ ثَابِتٍ،وَسُرَاقَةَ بْنِ مَالِكٍ،وَصُهَيْبٍ،وَالضَّحَّاكِ بْنِ سُفْيَانَ،وَعَبْدِ الرَّحْمَنِ بْنِ عُثْمَانَ التَّيْمِيِّ، وَرِوَايَتُهُ عَنْعَتَّابِ بْنِ أَسِيدٍفِي السُّنَنِ الْأَرْبَعَةِ ، وَهُوَ مُرْسَلٌ . وَأَرْسَلَ عَنِ النَّبِيِّ -صَلَّى اللَّهُ عَلَيْهِ وَسَلَّمَ- وَعَنْnindex.php?page=showalam&ids=1أَبِي بَكْرٍ الصِّدِّيقِوَكَانَ زَوْجَ بِنْتِnindex.php?page=showalam&ids=3أَبِي هُرَيْرَةَ، وَأَعْلَمَ النَّاسِ بِحَدِيثِهِ .رَوَى عَنْهُ خَلْقٌ : مِنْهُمْإِدْرِيسُ بْنُ صُبَيْحٍ،وَأُسَامَةُ بْنُ زَيْدٍ اللَّيْثِيُّ،وَإِسْمَاعِيلُ بْنُ أُمَيَّةَ، وَبَشِيرٌوَعَبْدُ الرَّحْمَنِ بْنُ حَرْمَلَةَوَعَبْدُ الرَّحْمَنِ بْنُ حُمَيْدِ بْنِ عَبْدِ الرَّحْمَنِ،nindex.php?page=showalam&ids=16395وَعَبْدُ الْكَرِيمِ الْجَزَرِيُّ،nindex.php?page=showalam&ids=16480وَعَبْدُ الْمَجِيدِ بْنُ سُهَيْلٍ،وَعُبَيْدُ اللَّهِ بْنُ سُلَيْمَانَ الْعَبْدِيُّ،وَعُثْمَانُ بْنُ حَكِيمٍ،nindex.php?page=showalam&ids=16566وَعَطَاءٌ الْخُرَاسَانِيُّ،وَعُقْبَةُ بْنُ حُرَيْثٍ[ص:219 ]وَعَلِيُّ بْنُ جُدْعَانَ،وَعَلِيُّ بْنُ نُفَيْلٍ الْحَرَّانِيُّ،وَعُمَارَةُ بْنُ عَبْدِ اللَّهِ بْنِ طُعْمَةَ،nindex.php?page=showalam&ids=16709وَعَمْرُو بْنُ شُعَيْبٍ،nindex.php?page=showalam&ids=16705وَعَمْرُو بْنُ دِينَارٍ،nindex.php?page=showalam&ids=16718وَعَمْرُو بْنُ مُرَّةَ،وَعَمْرُو بْنُ مُسْلِمٍ اللَّيْثِيُّ،وَغَيْلَانُ بْنُ جَرِيرٍ،وَالْقَاسِمُ بْنُ عَاصِمٍ، وَابْنُهُمُحَمَّدُ بْنُ سَعِيدٍ،وَقَتَادَةُ،وَمُحَمَّدُ بْنُ صَفْوَانَ،وَمُحَمَّدُ بْنُ عَبْدِ الرَّحْمَنِ بْنِ أَبِي لَبِيبَةَ،nindex.php?page=showalam&ids=11958وَأَبُو جَعْفَرٍ مُحَمَّدُ بْنُ عَلِيٍّ،وَمُحَمَّدُ بْنُ عَمْرِو بْنِ عَطَاءٍ،nindex.php?page=showalam&ids=12300وَالزُّهْرِيُّ،nindex.php?page=showalam&ids=16920وَابْنُ الْمُنْكَدِرِ،وَمَعْبَدُ بْنُ هُرْمُزٍ،وَمَعْمَرُ بْنُ أَبِي حَبِيبَةَ،nindex.php?page=showalam&ids=17183وَمُوسَى بْنُ وَرْدَانَ،وَمَيْسَرَةُ الْأَشْجَعِيُّ،nindex.php?page=showalam&ids=17188وَمَيْمُونُ بْنُ مِهْرَانَ،وَأَبُو سُهَيْلٍ نَافِعُ بْنُ مَالِكٍ،وَأَبُو مَعْشَرٍ نَجِيحُ السِّنْدِيُّ، وَهُوَ عِنْدَالتِّرْمِذِيِّ،وَهَاشِمُ بْنُ هَاشِمٍ الْوَقَّاصِي،وَيَحْيَى بْنُ سَعِيدٍ الْأَنْصَارِيُّ،وَيَزِيدُ بْنُ قُسَيْطٍ،وَيَزِيدُ بْنُ نُعَيْمِ بْنِ هُزَالٍ،nindex.php?page=showalam&ids=17384وَيَعْقُوبُ بْنُ عَبْدِ اللَّهِ بْنِ الْأَشَجِّ،وَيُونُسُ بْنُ سَيْفٍ،وَأَبُو جَعْفَرٍ الْخَطْمِيُّوَأَبُو قُرَّةَ الْأَسَدِيُّ، مِنَ \" التَّهْذِيبِ \" .وَعَنْهُ :الزُّهْرِيُّ،وَقَتَادَةُ،nindex.php?page=showalam&ids=16705وَعَمْرُو بْنُ دِينَارٍ،وَيَحْيَى بْنُ سَعِيدٍ الْأَنْصَارِيُّ،nindex.php?page=showalam&ids=15562وَبُكَيْرُ بْنُ الْأَشَجِّ،nindex.php?page=showalam&ids=15854وَدَاوُدُ بْنُ أَبِي هِنْدٍ،nindex.php?page=showalam&ids=228وَسَعْدُ بْنُ إِبْرَاهِيمَ،nindex.php?page=showalam&ids=16621وَعَلِيُّ بْنُ زَيْدِ بْنِ جُدْعَانَ،nindex.php?page=showalam&ids=16100وَشَرِيكُ بْنُ أَبِي نَمِرٍ،وَعَبْدُ الرَّحْمَنِ بْنُ حَرْمَلَةَوَبَشَرٌ كَثِيرٌ .وَكَانَ مِمَّنْ بَرَزَ فِي الْعِلْمِ وَالْعَمَلِ ، وَقَعَ لَنَا جُمْلَةٌ مِنْ عَالِي حَدِيثِهِ .أَخْبَرَنَاأَبُو الْمَعَالِي أَحْمَدُ بْنُ إِسْحَاقَ الْقَرَافِيُّ، أَنْبَأَنَاالْفَتْحُ بْنُ عَبْدِ اللَّهِ الْكَاتِبُ، أَنْبَأَنَامُحَمَّدُ بْنُ عُمَرَ الشَّافِعِيُّ،وَمُحَمَّدُ بْنُ أَحْمَدَ الطَّرَائِفِيُّ،وَمُحَمَّدُ بْنُ عَلِيِّ بْنِ الدَّايَةِ، قَالُوا : أَنْبَأَنَاأَبُو جَعْفَرٍ مُحَمَّدُ بْنُ أَحْمَدَ بْنِ الْمُسْلِمَةِ، أَنْبَأَنَاعُبَيْدُ اللَّهِ بْنُ عَبْدِ الرَّحْمَنِ الزُّهْرِيُّسَنَةَ ثَمَانِينَ وَثَلَاثِ مِائَةٍ ، أَنْبَأَنَاجَعْفَرُ بْنُ[ص:220 ]مُحَمَّدٍ الْفِرْيَابِيُّ، حَدَّثَنَاإِبْرَاهِيمُ بْنُ الْحَجَّاجِ السَّامِيُّ، حَدَّثَنَاحَمَّادُ بْنُ سَلَمَةَ، عَنْnindex.php?page=showalam&ids=15854دَاوُدَ بْنِ أَبِي هِنْدٍ، عَنْnindex.php?page=showalam&ids=15990سَعِيدِ بْنِ الْمُسَيَّبِ، عَنْnindex.php?page=showalam&ids=3أَبِي هُرَيْرَةَ-رَضِيَ اللَّهُ عَنْهُ- ، أَنَّ رَسُولَ اللَّهِ -صَلَّى اللَّهُ عَلَيْهِ وَسَلَّمَ- قَالَ :nindex.php?page=hadith&LINKID=880037ثَلَاثٌ مَنْ كُنَّ فِيهِ فَهُوَ مُنَافِقٌ وَإِنْ صَامَ وَصَلَّى ، وَزَعَمَ أَنَّهُ مُسْلِمٌ : مَنْ إِذَا حَدَّثَ كَذَبَ ، وَإِذَا وَعَدَ أَخْلَفَ ، وَإِذَا ائْتُمِنَ خَانَ.هَذَا صَحِيحٌ ، عَالٍ ، فِيهِ دَلِيلٌ عَلَى أَنَّ هَذِهِ الْخِصَالَ مِنْ كِبَارِ الذُّنُوبِ .أَخْرَجَهُمُسْلِمٌعَنْnindex.php?page=showalam&ids=12175أَبِي نَصْرٍ التَّمَّارِ، عَنْحَمَّادِ بْنِ سَلَمَةَ، فَوَقَعَ لَنَا بَدَلًا عَالِيًا مَعَ عُلُوِّهِ فِي نَفْسِهِلِمُسْلِمٍوَلَنَا ; فَإِنَّ أَعْلَى أَنْوَاعِ الْإِبْدَالِ أَنْ يَكُونَ الْحَدِيثُ مِنْ أَعْلَى حَدِيثِ صَاحِبِ ذَلِكَ الْكِتَابِ ، وَيَقَعُ لَكَ بِإِسْنَادٍ آخَرَ أَعْلَى بِدَرَجَةٍ أَوْ أَكْثَرَ . وَاللَّهُ أَعْلَمُ .أَخْبَرَنَاإِسْحَاقُ الْأَسَدِيُّ، أَنْبَأَنَايُوسُفُ الْآدَمِيُّ( ح ) وَأَنْبَأَنَاأَحْمَدُ بْنُ سَلَامَةَقَالَا : أَنْبَأَنَاأَبُو الْمَكَارِمِ الْأَصْبَهَانِيُّ، قَالَيُوسُفُ سَمَاعًا، وَقَالَ الْآخَرُ إِجَازَةً : أَنْبَأَنَاأَبُو عَلِيٍّ الْحَدَّادُ، أَنْبَأَنَاأَبُو نُعَيْمٍ، حَدَّثَنَاسُلَيْمَانُ بْنُ أَحْمَدَ، حَدَّثَنَاأَحْمَدُ بْنُ دَاوُدَ الْمَكِّيُّ، حَدَّثَنَاحَبِيبٌ كَاتِبُ مَالِكٍ، حَدَّثَنَا ابْنُ أَخِيالزُّهْرِيِّ، عَنِالزُّهْرِيِّ، عَنْnindex.php?page=showalam&ids=15990سَعِيدِ بْنِ الْمُسَيَّبِ، عَنْأُبَيِّ بْنِ كَعْبٍ، قَالَ : قَالَ رَسُولُ اللَّهِ -صَلَّى اللَّهُ عَلَيْهِ وَسَلَّمَ- :قَالَ لِيجِبْرِيلُ: لِيَبْكِ الْإِسْلَامُ عَلَى مَوْتِعُمَرَ.هَذَا حَدِيثٌ مُنْكَرٌ ،وَحَبِيبٌلَيْسَ بِثِقَةٍ ، مَعَ أَنَّسَعِيدًاعَنْأُبَيٍّمُنْقَطِعٌ .عَبْدُ الْعَزِيزِ بْنُ الْمُخْتَارِ، عَنْعَلِيِّ بْنِ زَيْدٍ، حَدَّثَنِيسَعِيدُ بْنُ الْمُسَيَّبِ بْنِ حَزْنٍnindex.php?page=hadith&LINKID=880039أَنَّ جَدَّهُحَزْنًاأَتَى النَّبِيَّ -صَلَّى اللَّهُ عَلَيْهِ وَسَلَّمَ- فَقَالَ : مَا اسْمُكَ؟ قَالَ :حَزْنٌ. قَالَ : بَلْ أَنْتَسَهْلٌ. قَالَ : يَا رَسُولَ اللَّهِ ، اسْمٌ سَمَّانِي بِهِ أَبَوَايَ وَعُرِفْتُ بِهِ فِي النَّاسِ ، فَسَكَتَ عَنْهُ النَّبِيُّ صَلَّى اللَّهُ عَلَيْهِ وَسَلَّمَ قَالَسَعِيدٌ: فَمَا زِلْنَا تُعْرَفُ الْحُزُونَةُ فِينَا أَهْلَ الْبَيْتِ.[ص:221 ]هَذَا حَدِيثٌ مُرْسَلٌ ، وَمَرَاسِيلُسَعِيدٍمُحْتَجٌّ بِهَا ، لَكِنَّعَلِيَّ بْنَ زَيْدٍلَيْسَ بِالْحُجَّةِ ، وَأَمَّا الْحَدِيثُ فَمَرْوِيٌّ بِإِسْنَادٍ صَحِيحٍ ، مُتَّصِلٍ ، وَلَفْظُهُ :nindex.php?page=hadith&LINKID=880040أَنَّ النَّبِيَّ -صَلَّى اللَّهُ عَلَيْهِ وَسَلَّمَ- قَالَ لَهُ : مَا اسْمُكَ؟ قَالَ :حَزْنٌ. قَالَ : أَنْتَسَهْلٌ. فَقَالَ لَا أُغَيِّرُ اسْمًا سَمَّانِيهِ أَبِي قَالَسَعِيدٌ: فَمَا زَالَتْ تِلْكَ الْحُزُونَةُ فِينَا بَعْدُ.الْعَطَّافُ بْنُ خَالِدٍ: عَنْأَبِي حَرْمَلَةَ، عَنِابْنِ الْمُسَيَّبِقَالَ : مَا فَاتَتْنِي الصَّلَاةُ فِي جَمَاعَةٍ مُنْذُ أَرْبَعِينَ سَنَةً .nindex.php?page=showalam&ids=16004سُفْيَانُ الثَّوْرِيُّ: عَنْعُثْمَانَ بْنِ حَكِيمٍ، سَمِعْتُnindex.php?page=showalam&ids=15990سَعِيدَ بْنَ الْمُسَيَّبِيَقُولُ : مَا أَذَّنَ الْمُؤَذِّنُ مُنْذُ ثَلَاثِينَ سَنَةً إِلَّا وَأَنَا فِي الْمَسْجِدِ  . إِسْنَادُهُ ثَابِتٌ .حَمَّادُ بْنُ زَيْدٍ: حَدَّثَنَايَزِيدُ بْنُ حَازِمٍ، أَنَّnindex.php?page=showalam&ids=15990سَعِيدَ بْنَ الْمُسَيَّبِكَانَ يَسْرُدُ الصَّوْمَ .مِسْعَرٌعَنْسَعِيدِ بْنِ إِبْرَاهِيمَ، سَمِعَابْنَ الْمُسَيَّبِيَقُولُ : مَا أَحَدٌ أَعْلَمُ بِقَضَاءٍ قَضَاهُ رَسُولُ اللَّهِ -صَلَّى اللَّهُ عَلَيْهِ وَسَلَّمَ- وَلَاأَبُو بَكْرٍ، وَلَاعُمَرُمِنِّي .[ص:222 ]أُسَامَةُ بْنُ زَيْدٍ: عَنْنَافِعٍ، أَنَّابْنَ عُمَرَذَكَرَnindex.php?page=showalam&ids=15990سَعِيدَ بْنَ الْمُسَيَّبِفَقَالَ : هُوَ -وَاللَّهِ- أَحَدُ الْمُفْتِينَ  .قَالَnindex.php?page=showalam&ids=12251أَحْمَدُ بْنُ حَنْبَلٍوَغَيْرُ وَاحِدٍ : مُرْسَلَاتُnindex.php?page=showalam&ids=15990سَعِيدِ بْنِ الْمُسَيَّبِصِحَاحٌ .وَقَالَقَتَادَةُ،وَمَكْحُولٌ،nindex.php?page=showalam&ids=12300وَالزُّهْرِيُّ، وَآخَرُونَ ، وَاللَّفْظُلِقَتَادَةَ: مَا رَأَيْتُ أَعْلَمَ مِنْnindex.php?page=showalam&ids=15990سَعِيدِ بْنِ الْمُسَيَّبِ.قَالَnindex.php?page=showalam&ids=16604عَلِيُّ بْنُ الْمَدِينِيِّ: لَا أَعْلَمُ فِي التَّابِعِينَ أَحَدًا أَوْسَعَ عِلْمًا مِنْابْنِ الْمُسَيَّبِ، هُوَ عِنْدِي أَجَلُّ التَّابِعِينَ .عَبْدُ الرَّحْمَنِ بْنُ حَرْمَلَةَ: سَمِعْتُابْنَ الْمُسَيَّبِيَقُولُ : حَجَجْتُ أَرْبَعِينَ حِجَّةً  .قَالَيَحْيَى بْنُ سَعِيدٍ الْأَنْصَارِيُّ: كَانَسَعِيدٌيُكْثِرُ أَنْ يَقُولَ فِي مَجْلِسِهِ : اللَّهُمَّ سَلِّمْ سَلِّمْ .مَعْنٌ : سَمِعْتُnindex.php?page=showalam&ids=16867مَالِكًايَقُولُ : قَالَابْنُ الْمُسَيَّبِ: إِنُ كُنْتُ لَأَسِيرُ الْأَيَّامَ وَاللَّيَالِيَ فِي طَلَبِ الْحَدِيثِ الْوَاحِدِ  .ابْنُ عُيَيْنَةَ: عَنْإِبْرَاهِيمَ بْنِ طَرِيفٍ، عَنْحُمَيْدِ بْنِ يَعْقُوبَ، سَمِعَnindex.php?page=showalam&ids=15990سَعِيدَ بْنَ الْمُسَيَّبِيَقُولُ : سَمِعْتُ مِنْعُمَرَكَلِمَةً مَا بَقِيَ أَحَدٌ سَمِعَهَا غَيْرِي  .أَبُو إِسْحَاقَ الشَّيْبَانِيُّ: عَنْبُكَيْرِ بْنِ الْأَخْنَسِ، عَنْسَعِيدِ بْنِ[ص:223 ]الْمُسَيَّبِ، قَالَ : سَمِعْتُعُمَرَعَلَى الْمِنْبَرِ وَهُوَ يَقُولُ : لَا أَجِدُ أَحَدًا جَامَعَ فَلَمْ يَغْتَسِلْ ، أَنْزَلَ أَوْ لَمْ يُنْزِلْ ، إِلَّا عَاقَبْتُهُ  .ابْنُ عُيَيْنَةَ : عَنْيَحْيَى بْنِ سَعِيدٍ، عَنِابْنِ الْمُسَيَّبِ، قَالَ : وُلِدْتُ لِسَنَتَيْنِ مَضَتَا مِنْ خِلَافَةِعُمَرَوَكَانَتْ خِلَافَتُهُ عَشْرَ سِنِينَ وَأَرْبَعَةَ أَشْهُرٍ  .']\n"
+     ]
+    },
+    {
+     "name": "stderr",
+     "output_type": "stream",
+     "text": [
+      "/tmp/ipykernel_13652/1161671790.py:1: RuntimeWarning: coroutine 'scrape_siyar_alaam_nubala' was never awaited\n",
+      "  result =  await scrape_siyar_alaam_nubala()\n",
+      "RuntimeWarning: Enable tracemalloc to get the object allocation traceback\n"
      ]
     }
    ],
    "source": [
-    "narrator_name = \"مُحَمَّدُ بْنُ عَبْدِ الرَّحْمَنِ الْعَنْبَرِيُّ\"\n",
-    "\n",
-    "if __name__ == \"__main__\":\n",
-    "    # Use googlesearch to find the narrator page on shamela.ws\n",
-    "    query = f'{narrator_name.strip()} site:shamela.ws/narrator'\n",
-    "    search_results = list(search(query, num_results=5))\n",
-    "\n",
-    "    print(f\"Searching for narrator: {narrator_name}\")\n",
-    "    print(f\"Google search query: {query}\")\n",
-    "    print(f\"Search results: {search_results}\")\n",
-    "\n",
-    "    # if search_results:\n",
-    "    #     # Extract URL from SearchResult object\n",
-    "    #     url = search_results[0] if hasattr(search_results[0], 'url') else str(search_results[0])\n",
-    "    #     print(f\"Found narrator page: {url}\")\n",
-    "        \n",
-    "    #     # Fetch the HTML content\n",
-    "    #     response = requests.get(url)\n",
-    "    #     if response.status_code == 200:\n",
-    "    #         html_content = response.text\n",
-    "    #         info = extract_narrator_info_enhanced(html_content)\n",
-    "    #     else:\n",
-    "    #         print(f\"Failed to fetch page: {response.status_code}\")\n",
-    "    #         info = {}\n",
-    "\n",
-    "    # else:\n",
-    "    #     info = {\n",
-    "    #         \"narrator_name\": narrator_name,\n",
-    "    #         \"biographical_info\": {},\n",
-    "    #         \"scholarly_critique\": [],\n",
-    "    #         \"extraction_metadata\": {\n",
-    "    #             \"total_scholars\": 0,\n",
-    "    #             \"biographical_fields\": 0,\n",
-    "    #             \"has_critique_section\": True,\n",
-    "    #             \"total_comments\": 0\n",
-    "    #         }\n",
-    "    #     }\n",
-    "\n",
-    "    # print(\"=== NARRATOR INFORMATION ===\")\n",
-    "    # print(f\"Name: {info['narrator_name']}\")\n",
-    "    # print(f\"\\n=== BIOGRAPHICAL INFO ===\")\n",
-    "    # for key, value in info['biographical_info'].items():\n",
-    "    #     print(f\"{key}: {value}\")\n",
-    "\n",
-    "    # print(f\"\\n=== SCHOLARLY CRITIQUE ===\")\n",
-    "    # for scholar_data in info['scholarly_critique']:\n",
-    "    #     print(f\"\\nScholar: {scholar_data['scholar']}\")\n",
-    "    #     for comment in scholar_data['comments']:\n",
-    "    #         print(f\"  - {comment['text']}\")\n",
-    "    #         if comment['highlighted']:\n",
-    "    #             print(f\"    Highlighted: {comment['highlighted']}\")\n",
-    "\n",
-    "    # print(f\"\\n=== METADATA ===\")\n",
-    "    # print(f\"Total scholars: {info['extraction_metadata']['total_scholars']}\")\n",
-    "    # print(f\"Biographical fields: {info['extraction_metadata']['biographical_fields']}\")\n",
-    "    # print(f\"Total comments: {info['extraction_metadata']['total_comments']}\")\n"
+    "result =  await scrape_siyar_alaam_nubala()\n",
+    "print(result)"
    ]
   },
   {
    "cell_type": "code",
    "execution_count": null,
-   "id": "6ff2b660",
+   "id": "9ebfe517",
    "metadata": {},
    "outputs": [],
    "source": []

docs/README_Enhanced_Narrator_Agent.md

@@ -1,190 +0,0 @@
-# Enhanced Narrator Analyzer Agent
-
-## Overview
-
-The Enhanced Narrator Analyzer Agent is an intelligent system that combines multiple data sources to provide comprehensive analysis of hadith narrators. It integrates:
-
-1. **Shamela.ws Scraping**: Automatically extracts narrator information from Shamela.ws
-2. **LLM Analysis**: Uses Google's Gemini model for intelligent reasoning and synthesis
-3. **Scholarly Assessment**: Applies traditional hadith criticism methodologies
-
-## Key Features
-
-### 🔍 Multi-Source Analysis
-- **Shamela Data**: Extracts biographical info and scholarly opinions from Shamela.ws
-- **LLM Knowledge**: Leverages AI's knowledge of Islamic hadith literature
-- **Data Synthesis**: Intelligently combines both sources for comprehensive assessment
-
-### 🔗 Chain Analysis
-- **Individual Narrator Analysis**: Detailed assessment of each narrator
-- **Chain Synthesis**: Overall assessment considering the "weakest link" principle
-- **Scholarly Methodology**: Applies traditional hadith criticism standards
-
-### 📊 Structured Output
-- **Reliability Grades**: Thiqah, Saduq, Da'if, Matruk, Majhul
-- **Confidence Levels**: High, Medium, Low
-- **Detailed Reasoning**: Comprehensive explanations for all assessments
-- **Practical Recommendations**: Guidance for hadith scholars
-
-## API Endpoints
-
-### 1. Enhanced Narrator Analysis
-```http
-POST /api/v1/analyze-narrator
-```
-Analyzes a single narrator using both Shamela data and LLM knowledge.
-
-**Request:**
-```json
-{
-  "narrator_name": "زرارة بن أعين"
-}
-```
-
-**Response:**
-```json
-{
-  "narrator_name": "زرارة بن أعين",
-  "reliability_grade": "Thiqah",
-  "confidence_level": "High",
-  "reasoning": "Detailed analysis combining Shamela data and scholarly knowledge...",
-  "scholarly_consensus": "Analysis of what scholars have said...",
-  "biographical_info": "Basic biographical information...",
-  "recommendation": "Practical guidance for hadith scholars...",
-  "success": true,
-  "message": "Analysis completed using Shamela data (3 scholars) + LLM knowledge"
-}
-```
-
-### 2. Narrator Chain Analysis
-```http
-POST /api/v1/analyze-narrator-chain
-```
-Analyzes a complete chain of narrators with synthesis.
-
-**Request:**
-```json
-["زرارة بن أعين", "أبو جعفر الباقر", "جابر بن عبد الله"]
-```
-
-**Response:**
-```json
-{
-  "chain": ["narrator1", "narrator2", "narrator3"],
-  "individual_analyses": {
-    "narrator1": { "detailed analysis..." },
-    "narrator2": { "detailed analysis..." },
-    "narrator3": { "detailed analysis..." }
-  },
-  "chain_synthesis": {
-    "overall_assessment": "Comprehensive chain evaluation...",
-    "success": true
-  },
-  "metadata": {
-    "total_narrators": 3,
-    "successful_analyses": 3,
-    "analysis_method": "Enhanced agent with Shamela.ws + LLM"
-  }
-}
-```
-
-### 3. Complete Hadith Analysis
-```http
-POST /api/v1/extract-and-analyze
-```
-Complete workflow: extract narrators from hadith text and analyze the chain.
-
-**Request:**
-```json
-{
-  "hadith_text": "حدثنا زرارة بن أعين عن أبي جعفر الباقر..."
-}
-```
-
-## Technical Architecture
-
-### Data Flow
-1. **Input**: Narrator name or hadith text
-2. **Shamela Scraping**: Automated extraction of narrator data
-3. **Data Formatting**: Structure Shamela data for LLM consumption
-4. **LLM Analysis**: Intelligent reasoning combining all sources
-5. **Output**: Structured, comprehensive assessment
-
-### Integration Components
-
-#### ShamelaNarratorExtractor
-- Searches Google for Shamela.ws narrator pages
-- Extracts biographical information and scholarly critiques
-- Provides structured data with quality metadata
-
-#### Enhanced LLM Service
-- Formats Shamela data for optimal LLM understanding
-- Uses sophisticated prompts for scholarly analysis
-- Applies traditional hadith criticism methodologies
-
-#### Chain Analysis Features
-- Individual narrator assessment
-- Chain-level synthesis considering cumulative effects
-- Practical recommendations for hadith acceptance
-
-## Scholarly Methodology
-
-### Reliability Grades
-- **Thiqah (ثقة)**: Trustworthy - strong consensus of reliability
-- **Saduq (صدوق)**: Truthful - generally reliable with minor reservations  
-- **Da'if (ضعيف)**: Weak - significant concerns about reliability
-- **Matruk (متروك)**: Abandoned - severe weakness, narrations rejected
-- **Majhul (مجهول)**: Unknown - insufficient reliable information
-
-### Analysis Framework
-1. **Prioritize Classical Scholars**: Ibn Hajar, Dhahabi, Ibn Hibban, etc.
-2. **Consider Scholarly Consensus**: Weight of agreement among authorities
-3. **Balance Criticism vs Praise**: Appropriate evaluation of mixed opinions
-4. **Historical Context**: Account for time period and scholarly methodology
-5. **Practical Application**: Provide actionable guidance for hadith scholars
-
-### Confidence Assessment
-- **High**: Strong evidence from multiple reliable sources
-- **Medium**: Good evidence with some limitations or disagreement
-- **Low**: Limited evidence or significant uncertainty
-
-## Usage Examples
-
-### Testing the Enhanced Agent
-```bash
-python test_enhanced_narrator_agent.py
-```
-
-This will run comprehensive tests demonstrating:
-- Single narrator analysis with Shamela integration
-- Chain analysis with synthesis
-- Unknown narrator handling
-- Error handling and edge cases
-
-### API Integration
-The enhanced analyzer integrates seamlessly with existing FastAPI endpoints and maintains backward compatibility while adding powerful new features.
-
-## Benefits
-
-### For Researchers
-- **Comprehensive Data**: Combines multiple authoritative sources
-- **Time Saving**: Automated data gathering and analysis
-- **Scholarly Rigor**: Applies traditional methodologies systematically
-
-### For Developers
-- **Structured Output**: Easy integration with other systems
-- **Scalable**: Can analyze individual narrators or complete chains
-- **Reliable**: Robust error handling and quality metadata
-
-### For Students
-- **Educational**: Detailed reasoning explains traditional methodology
-- **Accessible**: Converts complex scholarly assessments into clear guidance
-- **Comprehensive**: Provides both specific and general insights
-
-## Future Enhancements
-
-1. **Additional Sources**: Integration with more classical texts and databases
-2. **Comparative Analysis**: Cross-referencing multiple narrator evaluation works
-3. **Historical Timeline**: Temporal analysis of narrator relationships
-4. **Visualization**: Graphical representation of narrator chains and assessments
-5. **Caching**: Performance optimization for frequently analyzed narrators

docs/README_ShamelaNarratorExtractor.md

@@ -1,246 +0,0 @@
-# ShamelaNarratorExtractor Documentation
-
-## Overview
-
-The `ShamelaNarratorExtractor` class is a comprehensive tool for extracting narrator information from Shamela.ws (المكتبة الشاملة) that can be easily integrated into LangGraph workflows.
-
-## Features
-
-- **Automated Search**: Searches Google for narrator pages on Shamela.ws
-- **Structured Extraction**: Extracts biographical information and scholarly critiques
-- **Type Safety**: Uses dataclasses for type-safe data structures
-- **LangGraph Ready**: Designed to work seamlessly with LangGraph nodes
-- **Error Handling**: Robust error handling and reporting
-- **Backwards Compatibility**: Provides legacy function support
-
-## Data Structures
-
-### NarratorComment
-```python
-@dataclass
-class NarratorComment:
-    text: str                    # The comment text
-    highlighted: List[str]       # Highlighted/bold text in the comment
-```
-
-### ScholarCritique
-```python
-@dataclass
-class ScholarCritique:
-    scholar: str                 # Name of the scholar
-    comments: List[NarratorComment]  # List of comments from this scholar
-```
-
-### NarratorInfo
-```python
-@dataclass
-class NarratorInfo:
-    narrator_name: Optional[str]              # Name of the narrator
-    biographical_info: Dict[str, str]         # Biographical information
-    scholarly_critique: List[ScholarCritique] # Scholarly critiques
-    extraction_metadata: Dict[str, Any]       # Extraction statistics and metadata
-```
-
-## Main Class: ShamelaNarratorExtractor
-
-### Constructor
-```python
-extractor = ShamelaNarratorExtractor()
-```
-
-No parameters required. Initializes the extractor with default settings.
-
-### Primary Method: search_and_extract()
-
-```python
-def search_and_extract(self, narrator_name: str) -> NarratorInfo:
-    """
-    Main method for LangGraph nodes: searches for narrator and extracts information.
-    
-    Args:
-        narrator_name: Name of the narrator to search for
-        
-    Returns:
-        NarratorInfo object containing all extracted information
-    """
-```
-
-**Example Usage:**
-```python
-extractor = ShamelaNarratorExtractor()
-narrator_info = extractor.search_and_extract("الزهري")
-
-print(f"Narrator: {narrator_info.narrator_name}")
-print(f"Biographical fields: {len(narrator_info.biographical_info)}")
-print(f"Number of scholars: {len(narrator_info.scholarly_critique)}")
-```
-
-### Utility Method: to_dict()
-
-```python
-def to_dict(self, narrator_info: NarratorInfo) -> Dict[str, Any]:
-    """Convert NarratorInfo object to dictionary for backwards compatibility."""
-```
-
-Converts the structured `NarratorInfo` object to a dictionary format for easier serialization or backwards compatibility.
-
-## LangGraph Integration
-
-### Basic Node Implementation
-
-```python
-def narrator_extraction_node(state: GraphState) -> GraphState:
-    """LangGraph node that extracts narrator information."""
-    try:
-        extractor = ShamelaNarratorExtractor()
-        narrator_name = state.get("narrator_name", "")
-        
-        if not narrator_name:
-            return {**state, "error": "No narrator name provided"}
-        
-        narrator_info = extractor.search_and_extract(narrator_name)
-        narrator_dict = extractor.to_dict(narrator_info)
-        
-        return {
-            **state,
-            "narrator_info": narrator_dict,
-            "processed": True
-        }
-    except Exception as e:
-        return {**state, "error": str(e)}
-```
-
-### State Schema Example
-
-```python
-class GraphState(TypedDict):
-    narrator_name: str
-    narrator_info: Dict[str, Any]
-    error: str
-    processed: bool
-```
-
-## Error Handling
-
-The class provides comprehensive error handling:
-
-1. **Search Errors**: When no Shamela.ws pages are found
-2. **Network Errors**: When requests fail
-3. **Parsing Errors**: When HTML structure is unexpected
-4. **General Errors**: Catches all other exceptions
-
-Errors are reported in the `extraction_metadata` field:
-
-```python
-narrator_info = extractor.search_and_extract("invalid_name")
-if "error" in narrator_info.extraction_metadata:
-    print(f"Error: {narrator_info.extraction_metadata['error']}")
-```
-
-## Extracted Information Types
-
-### Biographical Information
-- **الاسم** (Name)
-- **الكنية** (Kunya/Nickname)
-- **النسب** (Lineage)
-- **بلد** (Country/Place)
-- **تاريخ** (Date/Timeline)
-- **طبقة** (Generation/Class)
-- **علاقات** (Relationships)
-
-### Scholarly Critique
-- **Scholar Names**: Names of the critics (العجلي، ابن حبان، النسائي، etc.)
-- **Comments**: Their evaluations and comments
-- **Highlighted Terms**: Important terms marked in the original text
-
-### Metadata
-- **total_scholars**: Number of different scholars who commented
-- **biographical_fields**: Number of biographical data points found
-- **has_critique_section**: Whether scholarly critique section exists
-- **total_comments**: Total number of individual comments
-
-## Performance Considerations
-
-- **Caching**: Consider implementing caching for repeated searches
-- **Rate Limiting**: Google search has rate limits; implement delays if needed
-- **Timeout**: Default timeout is 10 seconds for HTTP requests
-- **Memory**: Large HTML pages may use significant memory
-
-## Legacy Compatibility
-
-The following legacy functions are maintained for backwards compatibility:
-
-```python
-# Legacy functions (use ShamelaNarratorExtractor instead)
-extract_narrator_info(html_content: str) -> Dict[str, Any]
-clean_biographical_info(bio_info: Dict[str, str]) -> Dict[str, str]
-extract_narrator_info_enhanced(html_content: str) -> Dict[str, Any]
-get_shamela_content(query: str) -> str
-```
-
-## Dependencies
-
-```bash
-pip install beautifulsoup4 requests googlesearch-python
-```
-
-## Example Complete Workflow
-
-```python
-from scrape_shamela import ShamelaNarratorExtractor
-
-# Initialize extractor
-extractor = ShamelaNarratorExtractor()
-
-# Extract information
-narrator_info = extractor.search_and_extract("أبو هريرة")
-
-# Check for errors
-if "error" in narrator_info.extraction_metadata:
-    print(f"Error: {narrator_info.extraction_metadata['error']}")
-else:
-    # Access structured data
-    print(f"Name: {narrator_info.narrator_name}")
-    
-    # Biographical info
-    for key, value in narrator_info.biographical_info.items():
-        print(f"{key}: {value}")
-    
-    # Scholarly critiques
-    for critique in narrator_info.scholarly_critique:
-        print(f"Scholar: {critique.scholar}")
-        for comment in critique.comments:
-            print(f"  Comment: {comment.text}")
-            if comment.highlighted:
-                print(f"  Highlighted: {comment.highlighted}")
-    
-    # Convert to dict if needed
-    narrator_dict = extractor.to_dict(narrator_info)
-```
-
-## Best Practices
-
-1. **Always check for errors** in the extraction_metadata
-2. **Use type hints** when working with the data structures
-3. **Handle network timeouts** gracefully
-4. **Cache results** when possible to avoid repeated searches
-5. **Validate narrator names** before searching
-6. **Use the structured objects** rather than legacy dictionary format when possible
-
-## Troubleshooting
-
-### Common Issues
-
-1. **No search results**: Verify narrator name spelling and existence on Shamela.ws
-2. **Network timeouts**: Check internet connection and consider increasing timeout
-3. **Parsing errors**: Shamela.ws may have changed their HTML structure
-4. **Rate limiting**: Implement delays between multiple searches
-
-### Debug Mode
-
-To enable debugging, modify the search method to print more information:
-
-```python
-# Add this after search_results in _get_shamela_content method
-print(f"Found {len(search_results)} results: {search_results}")
-```

test_enhanced_narrator_agent.py → tests/test_enhanced_narrator_agent.py

@@ -12,7 +12,7 @@ from pathlib import Path
 project_root = Path(__file__).parent
 sys.path.insert(0, str(project_root))
 
-from services import LLMService
+from app.agent.services import LLMService
 from pprint import pprint