{ "architectures": [ "BertForSequenceClassification" ], "attention_probs_dropout_prob": 0.1, "classifier_dropout": null, "hidden_act": "gelu", "hidden_dropout_prob": 0.1, "hidden_size": 768, "id2label": { "0": "A01B", "1": "A01C", "2": "A01D", "3": "A01F", "4": "A01G", "5": "A01H", "6": "A01J", "7": "A01K", "8": "A01L", "9": "A01M", "10": "A01N", "11": "A21B", "12": "A21C", "13": "A21D", "14": "A22B", "15": "A22C", "16": "A23B", "17": "A23C", "18": "A23D", "19": "A23F", "20": "A23G", "21": "A23J", "22": "A23K", "23": "A23L", "24": "A23N", "25": "A23P", "26": "A23V", "27": "A23Y", "28": "A24B", "29": "A24C", "30": "A24D", "31": "A24F", "32": "A41B", "33": "A41C", "34": "A41D", "35": "A41F", "36": "A41G", "37": "A41H", "38": "A42B", "39": "A42C", "40": "A43B", "41": "A43C", "42": "A43D", "43": "A44B", "44": "A44C", "45": "A44D", "46": "A45B", "47": "A45C", "48": "A45D", "49": "A45F", "50": "A46B", "51": "A46D", "52": "A47B", "53": "A47C", "54": "A47D", "55": "A47F", "56": "A47G", "57": "A47H", "58": "A47J", "59": "A47K", "60": "A47L", "61": "A61B", "62": "A61C", "63": "A61D", "64": "A61F", "65": "A61G", "66": "A61H", "67": "A61J", "68": "A61K", "69": "A61L", "70": "A61M", "71": "A61N", "72": "A61Q", "73": "A62B", "74": "A62C", "75": "A62D", "76": "A63B", "77": "A63C", "78": "A63D", "79": "A63F", "80": "A63G", "81": "A63H", "82": "A63J", "83": "A63K", "84": "B01B", "85": "B01D", "86": "B01F", "87": "B01J", "88": "B01L", "89": "B02B", "90": "B02C", "91": "B03B", "92": "B03C", "93": "B03D", "94": "B04B", "95": "B04C", "96": "B05B", "97": "B05C", "98": "B05D", "99": "B06B", "100": "B07B", "101": "B07C", "102": "B08B", "103": "B09B", "104": "B09C", "105": "B21B", "106": "B21C", "107": "B21D", "108": "B21F", "109": "B21G", "110": "B21H", "111": "B21J", "112": "B21K", "113": "B21L", "114": "B22C", "115": "B22D", "116": "B22F", "117": "B23B", "118": "B23C", "119": "B23D", "120": "B23F", "121": "B23G", "122": "B23H", "123": "B23K", "124": "B23P", "125": "B23Q", "126": "B24B", "127": "B24C", "128": "B24D", "129": "B25B", "130": "B25C", "131": "B25D", "132": "B25F", "133": "B25G", "134": "B25H", "135": "B25J", "136": "B26B", "137": "B26D", "138": "B26F", "139": "B27B", "140": "B27C", "141": "B27D", "142": "B27F", "143": "B27G", "144": "B27H", "145": "B27J", "146": "B27K", "147": "B27L", "148": "B27M", "149": "B27N", "150": "B28B", "151": "B28C", "152": "B28D", "153": "B29B", "154": "B29C", "155": "B29D", "156": "B29K", "157": "B29L", "158": "B30B", "159": "B31B", "160": "B31C", "161": "B31D", "162": "B31F", "163": "B32B", "164": "B33Y", "165": "B41B", "166": "B41C", "167": "B41D", "168": "B41F", "169": "B41G", "170": "B41J", "171": "B41K", "172": "B41L", "173": "B41M", "174": "B41N", "175": "B41P", "176": "B42B", "177": "B42C", "178": "B42D", "179": "B42F", "180": "B42P", "181": "B43K", "182": "B43L", "183": "B43M", "184": "B44B", "185": "B44C", "186": "B44D", "187": "B44F", "188": "B60B", "189": "B60C", "190": "B60D", "191": "B60F", "192": "B60G", "193": "B60H", "194": "B60J", "195": "B60K", "196": "B60L", "197": "B60M", "198": "B60N", "199": "B60P", "200": "B60Q", "201": "B60R", "202": "B60S", "203": "B60T", "204": "B60V", "205": "B60W", "206": "B60Y", "207": "B61B", "208": "B61C", "209": "B61D", "210": "B61F", "211": "B61G", "212": "B61H", "213": "B61J", "214": "B61K", "215": "B61L", "216": "B62B", "217": "B62C", "218": "B62D", "219": "B62H", "220": "B62J", "221": "B62K", "222": "B62L", "223": "B62M", "224": "B63B", "225": "B63C", "226": "B63G", "227": "B63H", "228": "B63J", "229": "B64B", "230": "B64C", "231": "B64D", "232": "B64F", "233": "B64G", "234": "B65B", "235": "B65C", "236": "B65D", "237": "B65F", "238": "B65G", "239": "B65H", "240": "B66B", "241": "B66C", "242": "B66D", "243": "B66F", "244": "B67B", "245": "B67C", "246": "B67D", "247": "B68B", "248": "B68C", "249": "B68F", "250": "B68G", "251": "B81B", "252": "B81C", "253": "B82B", "254": "B82Y", "255": "C01B", "256": "C01C", "257": "C01D", "258": "C01F", "259": "C01G", "260": "C01P", "261": "C02F", "262": "C03B", "263": "C03C", "264": "C04B", "265": "C05B", "266": "C05C", "267": "C05D", "268": "C05F", "269": "C05G", "270": "C06B", "271": "C06C", "272": "C06D", "273": "C06F", "274": "C07B", "275": "C07C", "276": "C07D", "277": "C07F", "278": "C07G", "279": "C07H", "280": "C07J", "281": "C07K", "282": "C08B", "283": "C08C", "284": "C08F", "285": "C08G", "286": "C08H", "287": "C08J", "288": "C08K", "289": "C08L", "290": "C09B", "291": "C09C", "292": "C09D", "293": "C09F", "294": "C09G", "295": "C09H", "296": "C09J", "297": "C09K", "298": "C10B", "299": "C10C", "300": "C10F", "301": "C10G", "302": "C10H", "303": "C10J", "304": "C10K", "305": "C10L", "306": "C10M", "307": "C10N", "308": "C11B", "309": "C11C", "310": "C11D", "311": "C12C", "312": "C12F", "313": "C12G", "314": "C12H", "315": "C12J", "316": "C12L", "317": "C12M", "318": "C12N", "319": "C12P", "320": "C12Q", "321": "C12R", "322": "C12Y", "323": "C13B", "324": "C13K", "325": "C14B", "326": "C14C", "327": "C21B", "328": "C21C", "329": "C21D", "330": "C22B", "331": "C22C", "332": "C22F", "333": "C23C", "334": "C23D", "335": "C23F", "336": "C23G", "337": "C25B", "338": "C25C", "339": "C25D", "340": "C25F", "341": "C30B", "342": "C40B", "343": "D01B", "344": "D01C", "345": "D01D", "346": "D01F", "347": "D01G", "348": "D01H", "349": "D02G", "350": "D02H", "351": "D02J", "352": "D03C", "353": "D03D", "354": "D03J", "355": "D04B", "356": "D04C", "357": "D04D", "358": "D04G", "359": "D04H", "360": "D05B", "361": "D05C", "362": "D05D", "363": "D06B", "364": "D06C", "365": "D06F", "366": "D06G", "367": "D06H", "368": "D06J", "369": "D06L", "370": "D06M", "371": "D06N", "372": "D06P", "373": "D06Q", "374": "D07B", "375": "D10B", "376": "D21B", "377": "D21C", "378": "D21D", "379": "D21F", "380": "D21G", "381": "D21H", "382": "D21J", "383": "E01B", "384": "E01C", "385": "E01D", "386": "E01F", "387": "E01H", "388": "E02B", "389": "E02C", "390": "E02D", "391": "E02F", "392": "E03B", "393": "E03C", "394": "E03D", "395": "E03F", "396": "E04B", "397": "E04C", "398": "E04D", "399": "E04F", "400": "E04G", "401": "E04H", "402": "E05B", "403": "E05C", "404": "E05D", "405": "E05F", "406": "E05G", "407": "E05Y", "408": "E06B", "409": "E06C", "410": "E21B", "411": "E21C", "412": "E21D", "413": "E21F", "414": "F01B", "415": "F01C", "416": "F01D", "417": "F01K", "418": "F01L", "419": "F01M", "420": "F01N", "421": "F01P", "422": "F02B", "423": "F02C", "424": "F02D", "425": "F02F", "426": "F02G", "427": "F02K", "428": "F02M", "429": "F02N", "430": "F02P", "431": "F02W", "432": "F03B", "433": "F03C", "434": "F03D", "435": "F03G", "436": "F03H", "437": "F04B", "438": "F04C", "439": "F04D", "440": "F04F", "441": "F05B", "442": "F05C", "443": "F05D", "444": "F15B", "445": "F15C", "446": "F15D", "447": "F16B", "448": "F16C", "449": "F16D", "450": "F16F", "451": "F16G", "452": "F16H", "453": "F16J", "454": "F16K", "455": "F16L", "456": "F16M", "457": "F16N", "458": "F16P", "459": "F16S", "460": "F16T", "461": "F17B", "462": "F17C", "463": "F17D", "464": "F21H", "465": "F21K", "466": "F21L", "467": "F21S", "468": "F21V", "469": "F21W", "470": "F21Y", "471": "F22B", "472": "F22D", "473": "F22G", "474": "F23B", "475": "F23C", "476": "F23D", "477": "F23G", "478": "F23H", "479": "F23J", "480": "F23K", "481": "F23L", "482": "F23M", "483": "F23N", "484": "F23Q", "485": "F23R", "486": "F24B", "487": "F24C", "488": "F24D", "489": "F24F", "490": "F24H", "491": "F24J", "492": "F25B", "493": "F25C", "494": "F25D", "495": "F25J", "496": "F26B", "497": "F27B", "498": "F27D", "499": "F27M", "500": "F28B", "501": "F28C", "502": "F28D", "503": "F28F", "504": "F28G", "505": "F41A", "506": "F41B", "507": "F41C", "508": "F41F", "509": "F41G", "510": "F41H", "511": "F41J", "512": "F42B", "513": "F42C", "514": "F42D", "515": "G01B", "516": "G01C", "517": "G01D", "518": "G01F", "519": "G01G", "520": "G01H", "521": "G01J", "522": "G01K", "523": "G01L", "524": "G01M", "525": "G01N", "526": "G01P", "527": "G01Q", "528": "G01R", "529": "G01S", "530": "G01T", "531": "G01V", "532": "G01W", "533": "G02B", "534": "G02C", "535": "G02F", "536": "G03B", "537": "G03C", "538": "G03D", "539": "G03F", "540": "G03G", "541": "G03H", "542": "G04B", "543": "G04C", "544": "G04D", "545": "G04F", "546": "G04G", "547": "G04R", "548": "G05B", "549": "G05D", "550": "G05F", "551": "G05G", "552": "G06C", "553": "G06D", "554": "G06E", "555": "G06F", "556": "G06G", "557": "G06J", "558": "G06K", "559": "G06M", "560": "G06N", "561": "G06Q", "562": "G06T", "563": "G07B", "564": "G07C", "565": "G07D", "566": "G07F", "567": "G07G", "568": "G08B", "569": "G08C", "570": "G08G", "571": "G09B", "572": "G09C", "573": "G09D", "574": "G09F", "575": "G09G", "576": "G10B", "577": "G10C", "578": "G10D", "579": "G10F", "580": "G10G", "581": "G10H", "582": "G10K", "583": "G10L", "584": "G11B", "585": "G11C", "586": "G12B", "587": "G21B", "588": "G21C", "589": "G21D", "590": "G21F", "591": "G21G", "592": "G21H", "593": "G21J", "594": "G21K", "595": "G21Y", "596": "H01B", "597": "H01C", "598": "H01F", "599": "H01G", "600": "H01H", "601": "H01J", "602": "H01K", "603": "H01L", "604": "H01M", "605": "H01P", "606": "H01Q", "607": "H01R", "608": "H01S", "609": "H01T", "610": "H02B", "611": "H02G", "612": "H02H", "613": "H02J", "614": "H02K", "615": "H02M", "616": "H02N", "617": "H02P", "618": "H02S", "619": "H03B", "620": "H03C", "621": "H03D", "622": "H03F", "623": "H03G", "624": "H03H", "625": "H03J", "626": "H03K", "627": "H03L", "628": "H03M", "629": "H04B", "630": "H04H", "631": "H04J", "632": "H04K", "633": "H04L", "634": "H04M", "635": "H04N", "636": "H04Q", "637": "H04R", "638": "H04S", "639": "H04T", "640": "H04W", "641": "H05B", "642": "H05C", "643": "H05F", "644": "H05G", "645": "H05H", "646": "H05K", "647": "Y02B", "648": "Y02C", "649": "Y02E", "650": "Y02P", "651": "Y02T", "652": "Y02W", "653": "Y04S", "654": "Y10S", "655": "Y10T" }, "initializer_range": 0.02, "intermediate_size": 3072, "label2id": { "A01B": 0, "A01C": 1, "A01D": 2, "A01F": 3, "A01G": 4, "A01H": 5, "A01J": 6, "A01K": 7, "A01L": 8, "A01M": 9, "A01N": 10, "A21B": 11, "A21C": 12, "A21D": 13, "A22B": 14, "A22C": 15, "A23B": 16, "A23C": 17, "A23D": 18, "A23F": 19, "A23G": 20, "A23J": 21, "A23K": 22, "A23L": 23, "A23N": 24, "A23P": 25, "A23V": 26, "A23Y": 27, "A24B": 28, "A24C": 29, "A24D": 30, "A24F": 31, "A41B": 32, "A41C": 33, "A41D": 34, "A41F": 35, "A41G": 36, "A41H": 37, "A42B": 38, "A42C": 39, "A43B": 40, "A43C": 41, "A43D": 42, "A44B": 43, "A44C": 44, "A44D": 45, "A45B": 46, "A45C": 47, "A45D": 48, "A45F": 49, "A46B": 50, "A46D": 51, "A47B": 52, "A47C": 53, "A47D": 54, "A47F": 55, "A47G": 56, "A47H": 57, "A47J": 58, "A47K": 59, "A47L": 60, "A61B": 61, "A61C": 62, "A61D": 63, "A61F": 64, "A61G": 65, "A61H": 66, "A61J": 67, "A61K": 68, "A61L": 69, "A61M": 70, "A61N": 71, "A61Q": 72, "A62B": 73, "A62C": 74, "A62D": 75, "A63B": 76, "A63C": 77, "A63D": 78, "A63F": 79, "A63G": 80, "A63H": 81, "A63J": 82, "A63K": 83, "B01B": 84, "B01D": 85, "B01F": 86, "B01J": 87, "B01L": 88, "B02B": 89, "B02C": 90, "B03B": 91, "B03C": 92, "B03D": 93, "B04B": 94, "B04C": 95, "B05B": 96, "B05C": 97, "B05D": 98, "B06B": 99, "B07B": 100, "B07C": 101, "B08B": 102, "B09B": 103, "B09C": 104, "B21B": 105, "B21C": 106, "B21D": 107, "B21F": 108, "B21G": 109, "B21H": 110, "B21J": 111, "B21K": 112, "B21L": 113, "B22C": 114, "B22D": 115, "B22F": 116, "B23B": 117, "B23C": 118, "B23D": 119, "B23F": 120, "B23G": 121, "B23H": 122, "B23K": 123, "B23P": 124, "B23Q": 125, "B24B": 126, "B24C": 127, "B24D": 128, "B25B": 129, "B25C": 130, "B25D": 131, "B25F": 132, "B25G": 133, "B25H": 134, "B25J": 135, "B26B": 136, "B26D": 137, "B26F": 138, "B27B": 139, "B27C": 140, "B27D": 141, "B27F": 142, "B27G": 143, "B27H": 144, "B27J": 145, "B27K": 146, "B27L": 147, "B27M": 148, "B27N": 149, "B28B": 150, "B28C": 151, "B28D": 152, "B29B": 153, "B29C": 154, "B29D": 155, "B29K": 156, "B29L": 157, "B30B": 158, "B31B": 159, "B31C": 160, "B31D": 161, "B31F": 162, "B32B": 163, "B33Y": 164, "B41B": 165, "B41C": 166, "B41D": 167, "B41F": 168, "B41G": 169, "B41J": 170, "B41K": 171, "B41L": 172, "B41M": 173, "B41N": 174, "B41P": 175, "B42B": 176, "B42C": 177, "B42D": 178, "B42F": 179, "B42P": 180, "B43K": 181, "B43L": 182, "B43M": 183, "B44B": 184, "B44C": 185, "B44D": 186, "B44F": 187, "B60B": 188, "B60C": 189, "B60D": 190, "B60F": 191, "B60G": 192, "B60H": 193, "B60J": 194, "B60K": 195, "B60L": 196, "B60M": 197, "B60N": 198, "B60P": 199, "B60Q": 200, "B60R": 201, "B60S": 202, "B60T": 203, "B60V": 204, "B60W": 205, "B60Y": 206, "B61B": 207, "B61C": 208, "B61D": 209, "B61F": 210, "B61G": 211, "B61H": 212, "B61J": 213, "B61K": 214, "B61L": 215, "B62B": 216, "B62C": 217, "B62D": 218, "B62H": 219, "B62J": 220, "B62K": 221, "B62L": 222, "B62M": 223, "B63B": 224, "B63C": 225, "B63G": 226, "B63H": 227, "B63J": 228, "B64B": 229, "B64C": 230, "B64D": 231, "B64F": 232, "B64G": 233, "B65B": 234, "B65C": 235, "B65D": 236, "B65F": 237, "B65G": 238, "B65H": 239, "B66B": 240, "B66C": 241, "B66D": 242, "B66F": 243, "B67B": 244, "B67C": 245, "B67D": 246, "B68B": 247, "B68C": 248, "B68F": 249, "B68G": 250, "B81B": 251, "B81C": 252, "B82B": 253, "B82Y": 254, "C01B": 255, "C01C": 256, "C01D": 257, "C01F": 258, "C01G": 259, "C01P": 260, "C02F": 261, "C03B": 262, "C03C": 263, "C04B": 264, "C05B": 265, "C05C": 266, "C05D": 267, "C05F": 268, "C05G": 269, "C06B": 270, "C06C": 271, "C06D": 272, "C06F": 273, "C07B": 274, "C07C": 275, "C07D": 276, "C07F": 277, "C07G": 278, "C07H": 279, "C07J": 280, "C07K": 281, "C08B": 282, "C08C": 283, "C08F": 284, "C08G": 285, "C08H": 286, "C08J": 287, "C08K": 288, "C08L": 289, "C09B": 290, "C09C": 291, "C09D": 292, "C09F": 293, "C09G": 294, "C09H": 295, "C09J": 296, "C09K": 297, "C10B": 298, "C10C": 299, "C10F": 300, "C10G": 301, "C10H": 302, "C10J": 303, "C10K": 304, "C10L": 305, "C10M": 306, "C10N": 307, "C11B": 308, "C11C": 309, "C11D": 310, "C12C": 311, "C12F": 312, "C12G": 313, "C12H": 314, "C12J": 315, "C12L": 316, "C12M": 317, "C12N": 318, "C12P": 319, "C12Q": 320, "C12R": 321, "C12Y": 322, "C13B": 323, "C13K": 324, "C14B": 325, "C14C": 326, "C21B": 327, "C21C": 328, "C21D": 329, "C22B": 330, "C22C": 331, "C22F": 332, "C23C": 333, "C23D": 334, "C23F": 335, "C23G": 336, "C25B": 337, "C25C": 338, "C25D": 339, "C25F": 340, "C30B": 341, "C40B": 342, "D01B": 343, "D01C": 344, "D01D": 345, "D01F": 346, "D01G": 347, "D01H": 348, "D02G": 349, "D02H": 350, "D02J": 351, "D03C": 352, "D03D": 353, "D03J": 354, "D04B": 355, "D04C": 356, "D04D": 357, "D04G": 358, "D04H": 359, "D05B": 360, "D05C": 361, "D05D": 362, "D06B": 363, "D06C": 364, "D06F": 365, "D06G": 366, "D06H": 367, "D06J": 368, "D06L": 369, "D06M": 370, "D06N": 371, "D06P": 372, "D06Q": 373, "D07B": 374, "D10B": 375, "D21B": 376, "D21C": 377, "D21D": 378, "D21F": 379, "D21G": 380, "D21H": 381, "D21J": 382, "E01B": 383, "E01C": 384, "E01D": 385, "E01F": 386, "E01H": 387, "E02B": 388, "E02C": 389, "E02D": 390, "E02F": 391, "E03B": 392, "E03C": 393, "E03D": 394, "E03F": 395, "E04B": 396, "E04C": 397, "E04D": 398, "E04F": 399, "E04G": 400, "E04H": 401, "E05B": 402, "E05C": 403, "E05D": 404, "E05F": 405, "E05G": 406, "E05Y": 407, "E06B": 408, "E06C": 409, "E21B": 410, "E21C": 411, "E21D": 412, "E21F": 413, "F01B": 414, "F01C": 415, "F01D": 416, "F01K": 417, "F01L": 418, "F01M": 419, "F01N": 420, "F01P": 421, "F02B": 422, "F02C": 423, "F02D": 424, "F02F": 425, "F02G": 426, "F02K": 427, "F02M": 428, "F02N": 429, "F02P": 430, "F02W": 431, "F03B": 432, "F03C": 433, "F03D": 434, "F03G": 435, "F03H": 436, "F04B": 437, "F04C": 438, "F04D": 439, "F04F": 440, "F05B": 441, "F05C": 442, "F05D": 443, "F15B": 444, "F15C": 445, "F15D": 446, "F16B": 447, "F16C": 448, "F16D": 449, "F16F": 450, "F16G": 451, "F16H": 452, "F16J": 453, "F16K": 454, "F16L": 455, "F16M": 456, "F16N": 457, "F16P": 458, "F16S": 459, "F16T": 460, "F17B": 461, "F17C": 462, "F17D": 463, "F21H": 464, "F21K": 465, "F21L": 466, "F21S": 467, "F21V": 468, "F21W": 469, "F21Y": 470, "F22B": 471, "F22D": 472, "F22G": 473, "F23B": 474, "F23C": 475, "F23D": 476, "F23G": 477, "F23H": 478, "F23J": 479, "F23K": 480, "F23L": 481, "F23M": 482, "F23N": 483, "F23Q": 484, "F23R": 485, "F24B": 486, "F24C": 487, "F24D": 488, "F24F": 489, "F24H": 490, "F24J": 491, "F25B": 492, "F25C": 493, "F25D": 494, "F25J": 495, "F26B": 496, "F27B": 497, "F27D": 498, "F27M": 499, "F28B": 500, "F28C": 501, "F28D": 502, "F28F": 503, "F28G": 504, "F41A": 505, "F41B": 506, "F41C": 507, "F41F": 508, "F41G": 509, "F41H": 510, "F41J": 511, "F42B": 512, "F42C": 513, "F42D": 514, "G01B": 515, "G01C": 516, "G01D": 517, "G01F": 518, "G01G": 519, "G01H": 520, "G01J": 521, "G01K": 522, "G01L": 523, "G01M": 524, "G01N": 525, "G01P": 526, "G01Q": 527, "G01R": 528, "G01S": 529, "G01T": 530, "G01V": 531, "G01W": 532, "G02B": 533, "G02C": 534, "G02F": 535, "G03B": 536, "G03C": 537, "G03D": 538, "G03F": 539, "G03G": 540, "G03H": 541, "G04B": 542, "G04C": 543, "G04D": 544, "G04F": 545, "G04G": 546, "G04R": 547, "G05B": 548, "G05D": 549, "G05F": 550, "G05G": 551, "G06C": 552, "G06D": 553, "G06E": 554, "G06F": 555, "G06G": 556, "G06J": 557, "G06K": 558, "G06M": 559, "G06N": 560, "G06Q": 561, "G06T": 562, "G07B": 563, "G07C": 564, "G07D": 565, "G07F": 566, "G07G": 567, "G08B": 568, "G08C": 569, "G08G": 570, "G09B": 571, "G09C": 572, "G09D": 573, "G09F": 574, "G09G": 575, "G10B": 576, "G10C": 577, "G10D": 578, "G10F": 579, "G10G": 580, "G10H": 581, "G10K": 582, "G10L": 583, "G11B": 584, "G11C": 585, "G12B": 586, "G21B": 587, "G21C": 588, "G21D": 589, "G21F": 590, "G21G": 591, "G21H": 592, "G21J": 593, "G21K": 594, "G21Y": 595, "H01B": 596, "H01C": 597, "H01F": 598, "H01G": 599, "H01H": 600, "H01J": 601, "H01K": 602, "H01L": 603, "H01M": 604, "H01P": 605, "H01Q": 606, "H01R": 607, "H01S": 608, "H01T": 609, "H02B": 610, "H02G": 611, "H02H": 612, "H02J": 613, "H02K": 614, "H02M": 615, "H02N": 616, "H02P": 617, "H02S": 618, "H03B": 619, "H03C": 620, "H03D": 621, "H03F": 622, "H03G": 623, "H03H": 624, "H03J": 625, "H03K": 626, "H03L": 627, "H03M": 628, "H04B": 629, "H04H": 630, "H04J": 631, "H04K": 632, "H04L": 633, "H04M": 634, "H04N": 635, "H04Q": 636, "H04R": 637, "H04S": 638, "H04T": 639, "H04W": 640, "H05B": 641, "H05C": 642, "H05F": 643, "H05G": 644, "H05H": 645, "H05K": 646, "Y02B": 647, "Y02C": 648, "Y02E": 649, "Y02P": 650, "Y02T": 651, "Y02W": 652, "Y04S": 653, "Y10S": 654, "Y10T": 655 }, "layer_norm_eps": 1e-12, "max_position_embeddings": 512, "model_type": "bert", "num_attention_heads": 12, "num_hidden_layers": 12, "pad_token_id": 0, "position_embedding_type": "absolute", "torch_dtype": "float32", "transformers_version": "4.53.0", "type_vocab_size": 2, "use_cache": true, "vocab_size": 30522, "num_labels": 656 }