Update main.py

main.py

@@ -1022,32 +1022,76 @@ async def ChiffresClesMetier(url, codes):
         for i in range(0,len(codeArray)):
             response = requests.get(url + codeArray[i])
             soup = BeautifulSoup(response.text, "html.parser")
+            if soup.select('h1#titreMetier'):
+                alltitre = soup.select('h1#titreMetier')
+            else:
+                alltitre = [" "]
+            if soup.select('div.jobs_item-container-flex'):
+                allembauches = soup.select('div.jobs_item-container-flex')
+            else:
+                allembauches = [" "]
+            if soup.select('div.key-number_block.shadow.inset'):
+                allsalaires = soup.select('div.key-number_block.shadow.inset')
+            else:
+                allsalaires = [" "]
+            if soup.select('tbody.sectorTable__body'):
+                allsalairesMedian = soup.select('tbody.sectorTable__body')
+            else:
+                allsalairesMedian = [" "]
+            if soup.select('div.dynamism_canvas-wrapper > p.sr-only'):
+                allDiff = soup.select('div.dynamism_canvas-wrapper > p.sr-only')
+            else:
+                allDiff = [" "]
+            if soup.select('div.tabs-main-data_persp-col2'):
+                allDiffOrigin = soup.select('div.tabs-main-data_persp-col2')
+            else:
+                allDiffOrigin = [" "]
+            allTypeContrat = ""
+            if soup.find_all("div", class_="hiring-contract_legende_item ng-star-inserted"):
+                allContrat = soup.find_all("div", class_="hiring-contract_legende_item ng-star-inserted")
+                for j in range(0,len(allContrat)):
+                    allTypeContrat = allTypeContrat + removeTags(allContrat[j]) + ", "
+            if soup.find_all("div", class_="horizontal-graph_patterns"):
+                allEntreprise = soup.find_all("div", class_="horizontal-graph_patterns")
+            else:
+                allEntreprise = [" "]
+            all = all + "\n\nChiffres-clés Métier " + removeTags(alltitre[0]) + ":\nDemandeurs d'emploi et Offres d'emploi : " + removeTags(allembauches[0]) + ". Salaires proposés dans les offres : " + removeTags(allsalaires[0]) + ". Salaires médians constatés : " + removeTags(allsalairesMedian[0]) + ". Difficultés de recrutement pour les entreprises : " + removeTags(allDiff[0]) + ". Origine des difficultés : " + removeTags(allDiffOrigin[0]) + ". Répartition des embauches par type de contrat : " + allTypeContrat + ". Répartition des embauches par taille d'entreprise : " + removeTags(allEntreprise[0]) + "."
+    else:
+        response = requests.get(url + codes)
+        soup = BeautifulSoup(response.text, "html.parser")
+        if soup.select('h1#titreMetier'):
             alltitre = soup.select('h1#titreMetier')
+        else:
+            alltitre = [" "]
+        if soup.select('div.jobs_item-container-flex'):
             allembauches = soup.select('div.jobs_item-container-flex')
+        else:
+            allembauches = [" "]
+        if soup.select('div.key-number_block.shadow.inset'):
             allsalaires = soup.select('div.key-number_block.shadow.inset')
+        else:
+            allsalaires = [" "]
+        if soup.select('tbody.sectorTable__body'):
             allsalairesMedian = soup.select('tbody.sectorTable__body')
+        else:
+            allsalairesMedian = [" "]
+        if soup.select('div.dynamism_canvas-wrapper > p.sr-only'):
             allDiff = soup.select('div.dynamism_canvas-wrapper > p.sr-only')
+        else:
+            allDiff = [" "]
+        if soup.select('div.tabs-main-data_persp-col2'):
             allDiffOrigin = soup.select('div.tabs-main-data_persp-col2')
+        else:
+            allDiffOrigin = [" "]
+        allTypeContrat = ""
+        if soup.find_all("div", class_="hiring-contract_legende_item ng-star-inserted"):
             allContrat = soup.find_all("div", class_="hiring-contract_legende_item ng-star-inserted")
-            allTypeContrat = ""
             for j in range(0,len(allContrat)):
                 allTypeContrat = allTypeContrat + removeTags(allContrat[j]) + ", "
+        if soup.find_all("div", class_="horizontal-graph_patterns"):
             allEntreprise = soup.find_all("div", class_="horizontal-graph_patterns")
-            all = all + "\n\nChiffres-clés Métier " + removeTags(alltitre[0]) + ":\nDemandeurs d'emploi et Offres d'emploi : " + removeTags(allembauches[0]) + ". Salaires proposés dans les offres : " + removeTags(allsalaires[0]) + ". Salaires médians constatés : " + removeTags(allsalairesMedian[0]) + ". Difficultés de recrutement pour les entreprises : " + removeTags(allDiff[0]) + ". Origine des difficultés : " + removeTags(allDiffOrigin[0]) + ". Répartition des embauches par type de contrat : " + allTypeContrat + ". Répartition des embauches par taille d'entreprise : " + removeTags(allEntreprise[0]) + "."
-    else:
-        response = requests.get(url + codes)
-        soup = BeautifulSoup(response.text, "html.parser")
-        alltitre = soup.select('h1#titreMetier')
-        allembauches = soup.select('div.jobs_item-container-flex')
-        allsalaires = soup.select('div.key-number_block.shadow.inset')
-        allsalairesMedian = soup.select('tbody.sectorTable__body')
-        allDiff = soup.select('div.dynamism_canvas-wrapper > p.sr-only')
-        allDiffOrigin = soup.select('div.tabs-main-data_persp-col2')
-        allContrat = soup.find_all("div", class_="hiring-contract_legende_item ng-star-inserted")
-        allTypeContrat = ""
-        for j in range(0,len(allContrat)):
-            allTypeContrat = allTypeContrat + removeTags(allContrat[j]) + ", "
-        allEntreprise = soup.find_all("div", class_="horizontal-graph_patterns")
+        else:
+            allEntreprise = [" "]
         all = "\n\nChiffres-clés Métier " + removeTags(alltitre[0]) + ":\nDemandeurs d'emploi et Offres d'emploi : " + removeTags(allembauches[0]) + ". Salaires proposés dans les offres : " + removeTags(allsalaires[0]) + ". Salaires médians constatés : " + removeTags(allsalairesMedian[0]) + ". Difficultés de recrutement pour les entreprises : " + removeTags(allDiff[0]) + ". Origine des difficultés : " + removeTags(allDiffOrigin[0]) + ". Répartition des embauches par type de contrat : " + allTypeContrat + ". Répartition des embauches par taille d'entreprise : " + removeTags(allEntreprise[0]) + "."
     return all