gyr66 commited on
Commit
c0a496b
·
1 Parent(s): 8001a7e

End of training

Browse files
README.md CHANGED
@@ -17,8 +17,8 @@ should probably proofread and complete it, then remove this comment. -->
17
 
18
  This model is a fine-tuned version of [roberta-base](https://huggingface.co/roberta-base) on an unknown dataset.
19
  It achieves the following results on the evaluation set:
20
- - Loss: 2.5574
21
- - F1: 0.4290
22
 
23
  ## Model description
24
 
 
17
 
18
  This model is a fine-tuned version of [roberta-base](https://huggingface.co/roberta-base) on an unknown dataset.
19
  It achieves the following results on the evaluation set:
20
+ - Loss: 2.5120
21
+ - F1: 0.4292
22
 
23
  ## Model description
24
 
all_results.json ADDED
@@ -0,0 +1,14 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "epoch": 10.0,
3
+ "eval_f1": 0.4291906813901389,
4
+ "eval_loss": 2.5120413303375244,
5
+ "eval_runtime": 2.5912,
6
+ "eval_samples": 1200,
7
+ "eval_samples_per_second": 463.109,
8
+ "eval_steps_per_second": 7.333,
9
+ "train_loss": 1.298073563620309,
10
+ "train_runtime": 598.9546,
11
+ "train_samples": 6800,
12
+ "train_samples_per_second": 113.531,
13
+ "train_steps_per_second": 1.786
14
+ }
eval_results.json ADDED
@@ -0,0 +1,9 @@
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "epoch": 10.0,
3
+ "eval_f1": 0.4291906813901389,
4
+ "eval_loss": 2.5120413303375244,
5
+ "eval_runtime": 2.5912,
6
+ "eval_samples": 1200,
7
+ "eval_samples_per_second": 463.109,
8
+ "eval_steps_per_second": 7.333
9
+ }
predict_results.txt ADDED
@@ -0,0 +1,2718 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ index prediction
2
+ 0 14
3
+ 1 18
4
+ 2 18
5
+ 3 6
6
+ 4 1
7
+ 5 18
8
+ 6 16
9
+ 7 18
10
+ 8 18
11
+ 9 14
12
+ 10 6
13
+ 11 9
14
+ 12 6
15
+ 13 18
16
+ 14 8
17
+ 15 18
18
+ 16 6
19
+ 17 3
20
+ 18 18
21
+ 19 18
22
+ 20 14
23
+ 21 4
24
+ 22 3
25
+ 23 2
26
+ 24 3
27
+ 25 18
28
+ 26 18
29
+ 27 17
30
+ 28 12
31
+ 29 8
32
+ 30 1
33
+ 31 14
34
+ 32 18
35
+ 33 1
36
+ 34 2
37
+ 35 17
38
+ 36 13
39
+ 37 18
40
+ 38 3
41
+ 39 1
42
+ 40 18
43
+ 41 3
44
+ 42 3
45
+ 43 6
46
+ 44 8
47
+ 45 4
48
+ 46 4
49
+ 47 4
50
+ 48 8
51
+ 49 18
52
+ 50 6
53
+ 51 18
54
+ 52 13
55
+ 53 16
56
+ 54 18
57
+ 55 8
58
+ 56 6
59
+ 57 0
60
+ 58 18
61
+ 59 9
62
+ 60 9
63
+ 61 16
64
+ 62 18
65
+ 63 12
66
+ 64 18
67
+ 65 18
68
+ 66 18
69
+ 67 16
70
+ 68 14
71
+ 69 16
72
+ 70 18
73
+ 71 8
74
+ 72 1
75
+ 73 8
76
+ 74 6
77
+ 75 18
78
+ 76 18
79
+ 77 18
80
+ 78 6
81
+ 79 18
82
+ 80 18
83
+ 81 2
84
+ 82 0
85
+ 83 17
86
+ 84 15
87
+ 85 3
88
+ 86 14
89
+ 87 17
90
+ 88 13
91
+ 89 14
92
+ 90 8
93
+ 91 18
94
+ 92 18
95
+ 93 4
96
+ 94 6
97
+ 95 6
98
+ 96 14
99
+ 97 3
100
+ 98 6
101
+ 99 18
102
+ 100 14
103
+ 101 18
104
+ 102 18
105
+ 103 2
106
+ 104 1
107
+ 105 18
108
+ 106 1
109
+ 107 0
110
+ 108 14
111
+ 109 18
112
+ 110 14
113
+ 111 18
114
+ 112 18
115
+ 113 17
116
+ 114 18
117
+ 115 1
118
+ 116 18
119
+ 117 18
120
+ 118 13
121
+ 119 3
122
+ 120 6
123
+ 121 18
124
+ 122 8
125
+ 123 16
126
+ 124 14
127
+ 125 16
128
+ 126 3
129
+ 127 9
130
+ 128 3
131
+ 129 18
132
+ 130 3
133
+ 131 14
134
+ 132 18
135
+ 133 18
136
+ 134 4
137
+ 135 18
138
+ 136 18
139
+ 137 13
140
+ 138 8
141
+ 139 18
142
+ 140 10
143
+ 141 18
144
+ 142 18
145
+ 143 8
146
+ 144 18
147
+ 145 11
148
+ 146 4
149
+ 147 18
150
+ 148 18
151
+ 149 17
152
+ 150 18
153
+ 151 18
154
+ 152 13
155
+ 153 14
156
+ 154 14
157
+ 155 8
158
+ 156 2
159
+ 157 2
160
+ 158 0
161
+ 159 15
162
+ 160 14
163
+ 161 18
164
+ 162 8
165
+ 163 3
166
+ 164 18
167
+ 165 17
168
+ 166 18
169
+ 167 18
170
+ 168 18
171
+ 169 18
172
+ 170 6
173
+ 171 18
174
+ 172 8
175
+ 173 18
176
+ 174 1
177
+ 175 9
178
+ 176 6
179
+ 177 8
180
+ 178 18
181
+ 179 18
182
+ 180 6
183
+ 181 6
184
+ 182 16
185
+ 183 18
186
+ 184 18
187
+ 185 13
188
+ 186 4
189
+ 187 9
190
+ 188 18
191
+ 189 11
192
+ 190 0
193
+ 191 13
194
+ 192 18
195
+ 193 0
196
+ 194 14
197
+ 195 0
198
+ 196 17
199
+ 197 6
200
+ 198 6
201
+ 199 8
202
+ 200 2
203
+ 201 4
204
+ 202 3
205
+ 203 16
206
+ 204 6
207
+ 205 2
208
+ 206 18
209
+ 207 5
210
+ 208 18
211
+ 209 13
212
+ 210 2
213
+ 211 8
214
+ 212 4
215
+ 213 18
216
+ 214 18
217
+ 215 5
218
+ 216 4
219
+ 217 18
220
+ 218 1
221
+ 219 14
222
+ 220 17
223
+ 221 18
224
+ 222 14
225
+ 223 15
226
+ 224 18
227
+ 225 17
228
+ 226 4
229
+ 227 12
230
+ 228 2
231
+ 229 18
232
+ 230 8
233
+ 231 18
234
+ 232 14
235
+ 233 1
236
+ 234 5
237
+ 235 18
238
+ 236 18
239
+ 237 15
240
+ 238 0
241
+ 239 1
242
+ 240 3
243
+ 241 5
244
+ 242 2
245
+ 243 3
246
+ 244 16
247
+ 245 17
248
+ 246 6
249
+ 247 2
250
+ 248 8
251
+ 249 6
252
+ 250 4
253
+ 251 8
254
+ 252 17
255
+ 253 18
256
+ 254 2
257
+ 255 18
258
+ 256 1
259
+ 257 16
260
+ 258 11
261
+ 259 18
262
+ 260 18
263
+ 261 6
264
+ 262 16
265
+ 263 14
266
+ 264 1
267
+ 265 6
268
+ 266 18
269
+ 267 2
270
+ 268 18
271
+ 269 6
272
+ 270 5
273
+ 271 6
274
+ 272 18
275
+ 273 13
276
+ 274 2
277
+ 275 6
278
+ 276 14
279
+ 277 17
280
+ 278 17
281
+ 279 18
282
+ 280 17
283
+ 281 6
284
+ 282 18
285
+ 283 18
286
+ 284 14
287
+ 285 4
288
+ 286 2
289
+ 287 1
290
+ 288 6
291
+ 289 18
292
+ 290 18
293
+ 291 14
294
+ 292 2
295
+ 293 14
296
+ 294 8
297
+ 295 18
298
+ 296 6
299
+ 297 6
300
+ 298 18
301
+ 299 18
302
+ 300 18
303
+ 301 11
304
+ 302 17
305
+ 303 3
306
+ 304 13
307
+ 305 18
308
+ 306 16
309
+ 307 18
310
+ 308 14
311
+ 309 17
312
+ 310 18
313
+ 311 1
314
+ 312 14
315
+ 313 16
316
+ 314 2
317
+ 315 13
318
+ 316 18
319
+ 317 4
320
+ 318 6
321
+ 319 16
322
+ 320 18
323
+ 321 13
324
+ 322 13
325
+ 323 6
326
+ 324 18
327
+ 325 14
328
+ 326 18
329
+ 327 15
330
+ 328 14
331
+ 329 16
332
+ 330 2
333
+ 331 14
334
+ 332 15
335
+ 333 9
336
+ 334 18
337
+ 335 17
338
+ 336 18
339
+ 337 18
340
+ 338 8
341
+ 339 4
342
+ 340 18
343
+ 341 18
344
+ 342 18
345
+ 343 6
346
+ 344 18
347
+ 345 3
348
+ 346 18
349
+ 347 13
350
+ 348 3
351
+ 349 18
352
+ 350 4
353
+ 351 18
354
+ 352 18
355
+ 353 15
356
+ 354 18
357
+ 355 18
358
+ 356 0
359
+ 357 17
360
+ 358 8
361
+ 359 17
362
+ 360 1
363
+ 361 18
364
+ 362 8
365
+ 363 17
366
+ 364 18
367
+ 365 17
368
+ 366 6
369
+ 367 6
370
+ 368 15
371
+ 369 18
372
+ 370 11
373
+ 371 18
374
+ 372 1
375
+ 373 16
376
+ 374 6
377
+ 375 6
378
+ 376 0
379
+ 377 17
380
+ 378 18
381
+ 379 15
382
+ 380 11
383
+ 381 1
384
+ 382 6
385
+ 383 6
386
+ 384 14
387
+ 385 18
388
+ 386 18
389
+ 387 18
390
+ 388 14
391
+ 389 18
392
+ 390 8
393
+ 391 9
394
+ 392 18
395
+ 393 8
396
+ 394 13
397
+ 395 18
398
+ 396 17
399
+ 397 6
400
+ 398 14
401
+ 399 1
402
+ 400 6
403
+ 401 1
404
+ 402 1
405
+ 403 1
406
+ 404 1
407
+ 405 14
408
+ 406 18
409
+ 407 11
410
+ 408 1
411
+ 409 6
412
+ 410 8
413
+ 411 5
414
+ 412 18
415
+ 413 18
416
+ 414 13
417
+ 415 3
418
+ 416 0
419
+ 417 4
420
+ 418 4
421
+ 419 14
422
+ 420 18
423
+ 421 13
424
+ 422 6
425
+ 423 11
426
+ 424 11
427
+ 425 16
428
+ 426 2
429
+ 427 2
430
+ 428 6
431
+ 429 8
432
+ 430 18
433
+ 431 18
434
+ 432 18
435
+ 433 2
436
+ 434 6
437
+ 435 17
438
+ 436 18
439
+ 437 18
440
+ 438 1
441
+ 439 14
442
+ 440 17
443
+ 441 2
444
+ 442 17
445
+ 443 17
446
+ 444 4
447
+ 445 18
448
+ 446 18
449
+ 447 18
450
+ 448 8
451
+ 449 1
452
+ 450 17
453
+ 451 18
454
+ 452 18
455
+ 453 11
456
+ 454 1
457
+ 455 4
458
+ 456 6
459
+ 457 18
460
+ 458 11
461
+ 459 6
462
+ 460 17
463
+ 461 2
464
+ 462 6
465
+ 463 4
466
+ 464 4
467
+ 465 9
468
+ 466 6
469
+ 467 6
470
+ 468 8
471
+ 469 2
472
+ 470 0
473
+ 471 2
474
+ 472 1
475
+ 473 6
476
+ 474 18
477
+ 475 0
478
+ 476 18
479
+ 477 16
480
+ 478 14
481
+ 479 18
482
+ 480 6
483
+ 481 16
484
+ 482 16
485
+ 483 18
486
+ 484 18
487
+ 485 0
488
+ 486 18
489
+ 487 18
490
+ 488 1
491
+ 489 4
492
+ 490 17
493
+ 491 2
494
+ 492 1
495
+ 493 1
496
+ 494 15
497
+ 495 18
498
+ 496 18
499
+ 497 18
500
+ 498 2
501
+ 499 0
502
+ 500 15
503
+ 501 4
504
+ 502 1
505
+ 503 8
506
+ 504 4
507
+ 505 6
508
+ 506 3
509
+ 507 18
510
+ 508 1
511
+ 509 4
512
+ 510 11
513
+ 511 0
514
+ 512 12
515
+ 513 14
516
+ 514 2
517
+ 515 14
518
+ 516 18
519
+ 517 17
520
+ 518 18
521
+ 519 18
522
+ 520 1
523
+ 521 16
524
+ 522 8
525
+ 523 11
526
+ 524 1
527
+ 525 6
528
+ 526 2
529
+ 527 4
530
+ 528 6
531
+ 529 18
532
+ 530 3
533
+ 531 15
534
+ 532 18
535
+ 533 1
536
+ 534 1
537
+ 535 12
538
+ 536 18
539
+ 537 18
540
+ 538 18
541
+ 539 8
542
+ 540 17
543
+ 541 0
544
+ 542 18
545
+ 543 14
546
+ 544 17
547
+ 545 18
548
+ 546 3
549
+ 547 18
550
+ 548 2
551
+ 549 12
552
+ 550 8
553
+ 551 6
554
+ 552 2
555
+ 553 4
556
+ 554 18
557
+ 555 0
558
+ 556 18
559
+ 557 15
560
+ 558 18
561
+ 559 8
562
+ 560 17
563
+ 561 8
564
+ 562 14
565
+ 563 18
566
+ 564 18
567
+ 565 6
568
+ 566 17
569
+ 567 6
570
+ 568 8
571
+ 569 4
572
+ 570 18
573
+ 571 13
574
+ 572 14
575
+ 573 2
576
+ 574 6
577
+ 575 6
578
+ 576 12
579
+ 577 3
580
+ 578 15
581
+ 579 14
582
+ 580 13
583
+ 581 6
584
+ 582 13
585
+ 583 18
586
+ 584 15
587
+ 585 11
588
+ 586 18
589
+ 587 18
590
+ 588 18
591
+ 589 13
592
+ 590 1
593
+ 591 18
594
+ 592 16
595
+ 593 8
596
+ 594 16
597
+ 595 0
598
+ 596 14
599
+ 597 6
600
+ 598 18
601
+ 599 18
602
+ 600 16
603
+ 601 1
604
+ 602 8
605
+ 603 18
606
+ 604 2
607
+ 605 18
608
+ 606 17
609
+ 607 1
610
+ 608 3
611
+ 609 14
612
+ 610 14
613
+ 611 8
614
+ 612 5
615
+ 613 14
616
+ 614 6
617
+ 615 16
618
+ 616 0
619
+ 617 6
620
+ 618 6
621
+ 619 8
622
+ 620 1
623
+ 621 2
624
+ 622 0
625
+ 623 14
626
+ 624 18
627
+ 625 16
628
+ 626 13
629
+ 627 8
630
+ 628 18
631
+ 629 6
632
+ 630 18
633
+ 631 0
634
+ 632 0
635
+ 633 18
636
+ 634 18
637
+ 635 5
638
+ 636 18
639
+ 637 2
640
+ 638 6
641
+ 639 18
642
+ 640 1
643
+ 641 17
644
+ 642 6
645
+ 643 18
646
+ 644 18
647
+ 645 18
648
+ 646 4
649
+ 647 1
650
+ 648 4
651
+ 649 14
652
+ 650 18
653
+ 651 9
654
+ 652 18
655
+ 653 4
656
+ 654 0
657
+ 655 14
658
+ 656 18
659
+ 657 8
660
+ 658 0
661
+ 659 14
662
+ 660 16
663
+ 661 18
664
+ 662 6
665
+ 663 18
666
+ 664 3
667
+ 665 3
668
+ 666 2
669
+ 667 18
670
+ 668 18
671
+ 669 6
672
+ 670 4
673
+ 671 3
674
+ 672 16
675
+ 673 14
676
+ 674 18
677
+ 675 18
678
+ 676 18
679
+ 677 18
680
+ 678 17
681
+ 679 17
682
+ 680 18
683
+ 681 17
684
+ 682 13
685
+ 683 2
686
+ 684 18
687
+ 685 18
688
+ 686 18
689
+ 687 8
690
+ 688 4
691
+ 689 1
692
+ 690 14
693
+ 691 17
694
+ 692 4
695
+ 693 8
696
+ 694 4
697
+ 695 18
698
+ 696 18
699
+ 697 6
700
+ 698 18
701
+ 699 11
702
+ 700 18
703
+ 701 2
704
+ 702 18
705
+ 703 0
706
+ 704 0
707
+ 705 16
708
+ 706 5
709
+ 707 1
710
+ 708 8
711
+ 709 18
712
+ 710 14
713
+ 711 18
714
+ 712 18
715
+ 713 13
716
+ 714 4
717
+ 715 3
718
+ 716 16
719
+ 717 6
720
+ 718 4
721
+ 719 1
722
+ 720 17
723
+ 721 17
724
+ 722 17
725
+ 723 2
726
+ 724 18
727
+ 725 4
728
+ 726 18
729
+ 727 18
730
+ 728 18
731
+ 729 18
732
+ 730 1
733
+ 731 18
734
+ 732 8
735
+ 733 8
736
+ 734 2
737
+ 735 1
738
+ 736 11
739
+ 737 4
740
+ 738 1
741
+ 739 0
742
+ 740 3
743
+ 741 6
744
+ 742 6
745
+ 743 17
746
+ 744 8
747
+ 745 2
748
+ 746 8
749
+ 747 0
750
+ 748 8
751
+ 749 18
752
+ 750 13
753
+ 751 0
754
+ 752 18
755
+ 753 1
756
+ 754 6
757
+ 755 18
758
+ 756 6
759
+ 757 18
760
+ 758 18
761
+ 759 6
762
+ 760 1
763
+ 761 8
764
+ 762 8
765
+ 763 0
766
+ 764 3
767
+ 765 1
768
+ 766 15
769
+ 767 14
770
+ 768 8
771
+ 769 4
772
+ 770 18
773
+ 771 18
774
+ 772 0
775
+ 773 11
776
+ 774 1
777
+ 775 3
778
+ 776 4
779
+ 777 3
780
+ 778 18
781
+ 779 4
782
+ 780 1
783
+ 781 16
784
+ 782 14
785
+ 783 8
786
+ 784 18
787
+ 785 14
788
+ 786 18
789
+ 787 0
790
+ 788 11
791
+ 789 17
792
+ 790 6
793
+ 791 18
794
+ 792 2
795
+ 793 4
796
+ 794 16
797
+ 795 13
798
+ 796 8
799
+ 797 18
800
+ 798 8
801
+ 799 18
802
+ 800 18
803
+ 801 5
804
+ 802 13
805
+ 803 8
806
+ 804 18
807
+ 805 4
808
+ 806 13
809
+ 807 2
810
+ 808 18
811
+ 809 3
812
+ 810 18
813
+ 811 16
814
+ 812 17
815
+ 813 18
816
+ 814 6
817
+ 815 4
818
+ 816 18
819
+ 817 18
820
+ 818 2
821
+ 819 2
822
+ 820 14
823
+ 821 13
824
+ 822 18
825
+ 823 18
826
+ 824 6
827
+ 825 15
828
+ 826 6
829
+ 827 9
830
+ 828 0
831
+ 829 6
832
+ 830 17
833
+ 831 8
834
+ 832 4
835
+ 833 8
836
+ 834 11
837
+ 835 8
838
+ 836 18
839
+ 837 18
840
+ 838 13
841
+ 839 17
842
+ 840 0
843
+ 841 18
844
+ 842 18
845
+ 843 14
846
+ 844 14
847
+ 845 6
848
+ 846 3
849
+ 847 14
850
+ 848 18
851
+ 849 18
852
+ 850 2
853
+ 851 18
854
+ 852 8
855
+ 853 2
856
+ 854 8
857
+ 855 4
858
+ 856 1
859
+ 857 0
860
+ 858 1
861
+ 859 6
862
+ 860 14
863
+ 861 6
864
+ 862 1
865
+ 863 18
866
+ 864 2
867
+ 865 18
868
+ 866 6
869
+ 867 3
870
+ 868 17
871
+ 869 6
872
+ 870 1
873
+ 871 17
874
+ 872 18
875
+ 873 14
876
+ 874 16
877
+ 875 18
878
+ 876 8
879
+ 877 18
880
+ 878 1
881
+ 879 8
882
+ 880 4
883
+ 881 9
884
+ 882 17
885
+ 883 18
886
+ 884 1
887
+ 885 1
888
+ 886 15
889
+ 887 18
890
+ 888 0
891
+ 889 14
892
+ 890 4
893
+ 891 17
894
+ 892 3
895
+ 893 8
896
+ 894 16
897
+ 895 13
898
+ 896 13
899
+ 897 6
900
+ 898 18
901
+ 899 14
902
+ 900 14
903
+ 901 8
904
+ 902 6
905
+ 903 2
906
+ 904 18
907
+ 905 18
908
+ 906 18
909
+ 907 14
910
+ 908 14
911
+ 909 18
912
+ 910 12
913
+ 911 14
914
+ 912 18
915
+ 913 18
916
+ 914 17
917
+ 915 0
918
+ 916 18
919
+ 917 6
920
+ 918 2
921
+ 919 16
922
+ 920 12
923
+ 921 16
924
+ 922 13
925
+ 923 16
926
+ 924 12
927
+ 925 14
928
+ 926 18
929
+ 927 18
930
+ 928 18
931
+ 929 4
932
+ 930 18
933
+ 931 2
934
+ 932 4
935
+ 933 3
936
+ 934 2
937
+ 935 2
938
+ 936 1
939
+ 937 18
940
+ 938 6
941
+ 939 18
942
+ 940 11
943
+ 941 6
944
+ 942 18
945
+ 943 18
946
+ 944 18
947
+ 945 6
948
+ 946 18
949
+ 947 14
950
+ 948 0
951
+ 949 3
952
+ 950 3
953
+ 951 5
954
+ 952 1
955
+ 953 1
956
+ 954 17
957
+ 955 18
958
+ 956 13
959
+ 957 1
960
+ 958 18
961
+ 959 18
962
+ 960 18
963
+ 961 13
964
+ 962 4
965
+ 963 18
966
+ 964 5
967
+ 965 5
968
+ 966 6
969
+ 967 4
970
+ 968 16
971
+ 969 3
972
+ 970 18
973
+ 971 1
974
+ 972 18
975
+ 973 1
976
+ 974 18
977
+ 975 16
978
+ 976 18
979
+ 977 18
980
+ 978 18
981
+ 979 15
982
+ 980 3
983
+ 981 18
984
+ 982 6
985
+ 983 2
986
+ 984 5
987
+ 985 13
988
+ 986 2
989
+ 987 16
990
+ 988 1
991
+ 989 6
992
+ 990 9
993
+ 991 1
994
+ 992 18
995
+ 993 18
996
+ 994 18
997
+ 995 4
998
+ 996 18
999
+ 997 13
1000
+ 998 18
1001
+ 999 4
1002
+ 1000 5
1003
+ 1001 1
1004
+ 1002 14
1005
+ 1003 18
1006
+ 1004 8
1007
+ 1005 15
1008
+ 1006 4
1009
+ 1007 13
1010
+ 1008 13
1011
+ 1009 18
1012
+ 1010 18
1013
+ 1011 0
1014
+ 1012 2
1015
+ 1013 1
1016
+ 1014 1
1017
+ 1015 6
1018
+ 1016 8
1019
+ 1017 3
1020
+ 1018 18
1021
+ 1019 17
1022
+ 1020 11
1023
+ 1021 0
1024
+ 1022 4
1025
+ 1023 4
1026
+ 1024 8
1027
+ 1025 8
1028
+ 1026 8
1029
+ 1027 14
1030
+ 1028 13
1031
+ 1029 15
1032
+ 1030 18
1033
+ 1031 18
1034
+ 1032 18
1035
+ 1033 0
1036
+ 1034 17
1037
+ 1035 18
1038
+ 1036 6
1039
+ 1037 18
1040
+ 1038 6
1041
+ 1039 17
1042
+ 1040 8
1043
+ 1041 18
1044
+ 1042 4
1045
+ 1043 5
1046
+ 1044 5
1047
+ 1045 11
1048
+ 1046 18
1049
+ 1047 6
1050
+ 1048 18
1051
+ 1049 14
1052
+ 1050 18
1053
+ 1051 18
1054
+ 1052 14
1055
+ 1053 2
1056
+ 1054 1
1057
+ 1055 6
1058
+ 1056 1
1059
+ 1057 14
1060
+ 1058 14
1061
+ 1059 6
1062
+ 1060 6
1063
+ 1061 0
1064
+ 1062 15
1065
+ 1063 3
1066
+ 1064 8
1067
+ 1065 13
1068
+ 1066 8
1069
+ 1067 0
1070
+ 1068 18
1071
+ 1069 18
1072
+ 1070 17
1073
+ 1071 18
1074
+ 1072 1
1075
+ 1073 2
1076
+ 1074 13
1077
+ 1075 6
1078
+ 1076 17
1079
+ 1077 6
1080
+ 1078 2
1081
+ 1079 18
1082
+ 1080 17
1083
+ 1081 18
1084
+ 1082 1
1085
+ 1083 9
1086
+ 1084 16
1087
+ 1085 2
1088
+ 1086 1
1089
+ 1087 14
1090
+ 1088 17
1091
+ 1089 2
1092
+ 1090 6
1093
+ 1091 8
1094
+ 1092 8
1095
+ 1093 14
1096
+ 1094 18
1097
+ 1095 11
1098
+ 1096 2
1099
+ 1097 18
1100
+ 1098 6
1101
+ 1099 2
1102
+ 1100 18
1103
+ 1101 18
1104
+ 1102 4
1105
+ 1103 13
1106
+ 1104 18
1107
+ 1105 6
1108
+ 1106 6
1109
+ 1107 14
1110
+ 1108 14
1111
+ 1109 0
1112
+ 1110 18
1113
+ 1111 18
1114
+ 1112 2
1115
+ 1113 2
1116
+ 1114 8
1117
+ 1115 18
1118
+ 1116 6
1119
+ 1117 6
1120
+ 1118 0
1121
+ 1119 18
1122
+ 1120 16
1123
+ 1121 6
1124
+ 1122 9
1125
+ 1123 5
1126
+ 1124 8
1127
+ 1125 13
1128
+ 1126 8
1129
+ 1127 0
1130
+ 1128 4
1131
+ 1129 2
1132
+ 1130 0
1133
+ 1131 9
1134
+ 1132 11
1135
+ 1133 2
1136
+ 1134 18
1137
+ 1135 1
1138
+ 1136 3
1139
+ 1137 18
1140
+ 1138 1
1141
+ 1139 6
1142
+ 1140 2
1143
+ 1141 6
1144
+ 1142 13
1145
+ 1143 18
1146
+ 1144 18
1147
+ 1145 1
1148
+ 1146 1
1149
+ 1147 1
1150
+ 1148 18
1151
+ 1149 8
1152
+ 1150 16
1153
+ 1151 3
1154
+ 1152 4
1155
+ 1153 18
1156
+ 1154 8
1157
+ 1155 6
1158
+ 1156 18
1159
+ 1157 18
1160
+ 1158 4
1161
+ 1159 1
1162
+ 1160 0
1163
+ 1161 6
1164
+ 1162 0
1165
+ 1163 14
1166
+ 1164 18
1167
+ 1165 3
1168
+ 1166 8
1169
+ 1167 1
1170
+ 1168 14
1171
+ 1169 14
1172
+ 1170 0
1173
+ 1171 0
1174
+ 1172 18
1175
+ 1173 14
1176
+ 1174 8
1177
+ 1175 8
1178
+ 1176 17
1179
+ 1177 16
1180
+ 1178 0
1181
+ 1179 8
1182
+ 1180 1
1183
+ 1181 8
1184
+ 1182 18
1185
+ 1183 17
1186
+ 1184 18
1187
+ 1185 18
1188
+ 1186 18
1189
+ 1187 9
1190
+ 1188 6
1191
+ 1189 1
1192
+ 1190 14
1193
+ 1191 17
1194
+ 1192 18
1195
+ 1193 18
1196
+ 1194 14
1197
+ 1195 18
1198
+ 1196 6
1199
+ 1197 13
1200
+ 1198 8
1201
+ 1199 6
1202
+ 1200 8
1203
+ 1201 14
1204
+ 1202 2
1205
+ 1203 8
1206
+ 1204 17
1207
+ 1205 17
1208
+ 1206 2
1209
+ 1207 9
1210
+ 1208 8
1211
+ 1209 13
1212
+ 1210 1
1213
+ 1211 18
1214
+ 1212 0
1215
+ 1213 11
1216
+ 1214 11
1217
+ 1215 18
1218
+ 1216 17
1219
+ 1217 6
1220
+ 1218 18
1221
+ 1219 18
1222
+ 1220 1
1223
+ 1221 18
1224
+ 1222 16
1225
+ 1223 3
1226
+ 1224 17
1227
+ 1225 0
1228
+ 1226 1
1229
+ 1227 0
1230
+ 1228 18
1231
+ 1229 17
1232
+ 1230 6
1233
+ 1231 6
1234
+ 1232 18
1235
+ 1233 1
1236
+ 1234 17
1237
+ 1235 3
1238
+ 1236 8
1239
+ 1237 18
1240
+ 1238 2
1241
+ 1239 8
1242
+ 1240 3
1243
+ 1241 13
1244
+ 1242 18
1245
+ 1243 6
1246
+ 1244 6
1247
+ 1245 18
1248
+ 1246 6
1249
+ 1247 6
1250
+ 1248 13
1251
+ 1249 14
1252
+ 1250 13
1253
+ 1251 6
1254
+ 1252 17
1255
+ 1253 2
1256
+ 1254 4
1257
+ 1255 1
1258
+ 1256 3
1259
+ 1257 18
1260
+ 1258 1
1261
+ 1259 18
1262
+ 1260 6
1263
+ 1261 17
1264
+ 1262 18
1265
+ 1263 18
1266
+ 1264 18
1267
+ 1265 8
1268
+ 1266 3
1269
+ 1267 18
1270
+ 1268 15
1271
+ 1269 11
1272
+ 1270 8
1273
+ 1271 2
1274
+ 1272 5
1275
+ 1273 6
1276
+ 1274 18
1277
+ 1275 16
1278
+ 1276 18
1279
+ 1277 8
1280
+ 1278 18
1281
+ 1279 1
1282
+ 1280 8
1283
+ 1281 18
1284
+ 1282 6
1285
+ 1283 18
1286
+ 1284 18
1287
+ 1285 4
1288
+ 1286 17
1289
+ 1287 18
1290
+ 1288 8
1291
+ 1289 13
1292
+ 1290 3
1293
+ 1291 4
1294
+ 1292 2
1295
+ 1293 18
1296
+ 1294 17
1297
+ 1295 18
1298
+ 1296 6
1299
+ 1297 3
1300
+ 1298 8
1301
+ 1299 18
1302
+ 1300 18
1303
+ 1301 13
1304
+ 1302 18
1305
+ 1303 14
1306
+ 1304 18
1307
+ 1305 6
1308
+ 1306 18
1309
+ 1307 18
1310
+ 1308 1
1311
+ 1309 18
1312
+ 1310 1
1313
+ 1311 18
1314
+ 1312 9
1315
+ 1313 12
1316
+ 1314 14
1317
+ 1315 18
1318
+ 1316 11
1319
+ 1317 6
1320
+ 1318 1
1321
+ 1319 1
1322
+ 1320 2
1323
+ 1321 17
1324
+ 1322 1
1325
+ 1323 6
1326
+ 1324 18
1327
+ 1325 18
1328
+ 1326 14
1329
+ 1327 0
1330
+ 1328 18
1331
+ 1329 18
1332
+ 1330 2
1333
+ 1331 4
1334
+ 1332 14
1335
+ 1333 18
1336
+ 1334 6
1337
+ 1335 2
1338
+ 1336 11
1339
+ 1337 15
1340
+ 1338 14
1341
+ 1339 11
1342
+ 1340 4
1343
+ 1341 9
1344
+ 1342 8
1345
+ 1343 18
1346
+ 1344 5
1347
+ 1345 2
1348
+ 1346 8
1349
+ 1347 16
1350
+ 1348 11
1351
+ 1349 9
1352
+ 1350 6
1353
+ 1351 0
1354
+ 1352 18
1355
+ 1353 13
1356
+ 1354 1
1357
+ 1355 18
1358
+ 1356 1
1359
+ 1357 8
1360
+ 1358 8
1361
+ 1359 6
1362
+ 1360 2
1363
+ 1361 18
1364
+ 1362 14
1365
+ 1363 14
1366
+ 1364 5
1367
+ 1365 0
1368
+ 1366 18
1369
+ 1367 18
1370
+ 1368 3
1371
+ 1369 1
1372
+ 1370 14
1373
+ 1371 1
1374
+ 1372 0
1375
+ 1373 6
1376
+ 1374 6
1377
+ 1375 3
1378
+ 1376 3
1379
+ 1377 1
1380
+ 1378 9
1381
+ 1379 6
1382
+ 1380 0
1383
+ 1381 17
1384
+ 1382 17
1385
+ 1383 11
1386
+ 1384 17
1387
+ 1385 18
1388
+ 1386 12
1389
+ 1387 6
1390
+ 1388 6
1391
+ 1389 8
1392
+ 1390 2
1393
+ 1391 17
1394
+ 1392 12
1395
+ 1393 1
1396
+ 1394 18
1397
+ 1395 18
1398
+ 1396 6
1399
+ 1397 3
1400
+ 1398 18
1401
+ 1399 18
1402
+ 1400 14
1403
+ 1401 1
1404
+ 1402 0
1405
+ 1403 3
1406
+ 1404 2
1407
+ 1405 8
1408
+ 1406 18
1409
+ 1407 18
1410
+ 1408 18
1411
+ 1409 18
1412
+ 1410 18
1413
+ 1411 18
1414
+ 1412 18
1415
+ 1413 18
1416
+ 1414 0
1417
+ 1415 6
1418
+ 1416 18
1419
+ 1417 14
1420
+ 1418 18
1421
+ 1419 18
1422
+ 1420 18
1423
+ 1421 18
1424
+ 1422 2
1425
+ 1423 18
1426
+ 1424 14
1427
+ 1425 18
1428
+ 1426 1
1429
+ 1427 17
1430
+ 1428 6
1431
+ 1429 18
1432
+ 1430 18
1433
+ 1431 14
1434
+ 1432 18
1435
+ 1433 1
1436
+ 1434 18
1437
+ 1435 4
1438
+ 1436 6
1439
+ 1437 0
1440
+ 1438 6
1441
+ 1439 18
1442
+ 1440 2
1443
+ 1441 18
1444
+ 1442 11
1445
+ 1443 18
1446
+ 1444 3
1447
+ 1445 18
1448
+ 1446 4
1449
+ 1447 13
1450
+ 1448 18
1451
+ 1449 17
1452
+ 1450 13
1453
+ 1451 18
1454
+ 1452 8
1455
+ 1453 18
1456
+ 1454 18
1457
+ 1455 18
1458
+ 1456 6
1459
+ 1457 16
1460
+ 1458 18
1461
+ 1459 8
1462
+ 1460 6
1463
+ 1461 12
1464
+ 1462 8
1465
+ 1463 1
1466
+ 1464 16
1467
+ 1465 13
1468
+ 1466 0
1469
+ 1467 18
1470
+ 1468 1
1471
+ 1469 15
1472
+ 1470 4
1473
+ 1471 6
1474
+ 1472 8
1475
+ 1473 13
1476
+ 1474 18
1477
+ 1475 14
1478
+ 1476 18
1479
+ 1477 13
1480
+ 1478 2
1481
+ 1479 18
1482
+ 1480 17
1483
+ 1481 14
1484
+ 1482 13
1485
+ 1483 13
1486
+ 1484 6
1487
+ 1485 4
1488
+ 1486 3
1489
+ 1487 17
1490
+ 1488 1
1491
+ 1489 1
1492
+ 1490 15
1493
+ 1491 6
1494
+ 1492 18
1495
+ 1493 3
1496
+ 1494 14
1497
+ 1495 6
1498
+ 1496 18
1499
+ 1497 18
1500
+ 1498 14
1501
+ 1499 4
1502
+ 1500 4
1503
+ 1501 18
1504
+ 1502 11
1505
+ 1503 18
1506
+ 1504 6
1507
+ 1505 6
1508
+ 1506 4
1509
+ 1507 0
1510
+ 1508 5
1511
+ 1509 18
1512
+ 1510 18
1513
+ 1511 11
1514
+ 1512 1
1515
+ 1513 8
1516
+ 1514 1
1517
+ 1515 18
1518
+ 1516 18
1519
+ 1517 13
1520
+ 1518 1
1521
+ 1519 18
1522
+ 1520 18
1523
+ 1521 5
1524
+ 1522 18
1525
+ 1523 0
1526
+ 1524 14
1527
+ 1525 14
1528
+ 1526 2
1529
+ 1527 18
1530
+ 1528 6
1531
+ 1529 2
1532
+ 1530 6
1533
+ 1531 15
1534
+ 1532 6
1535
+ 1533 4
1536
+ 1534 17
1537
+ 1535 14
1538
+ 1536 18
1539
+ 1537 18
1540
+ 1538 6
1541
+ 1539 18
1542
+ 1540 18
1543
+ 1541 0
1544
+ 1542 14
1545
+ 1543 6
1546
+ 1544 9
1547
+ 1545 13
1548
+ 1546 18
1549
+ 1547 8
1550
+ 1548 15
1551
+ 1549 18
1552
+ 1550 5
1553
+ 1551 18
1554
+ 1552 18
1555
+ 1553 6
1556
+ 1554 18
1557
+ 1555 8
1558
+ 1556 3
1559
+ 1557 18
1560
+ 1558 1
1561
+ 1559 8
1562
+ 1560 2
1563
+ 1561 3
1564
+ 1562 6
1565
+ 1563 18
1566
+ 1564 2
1567
+ 1565 18
1568
+ 1566 15
1569
+ 1567 2
1570
+ 1568 13
1571
+ 1569 13
1572
+ 1570 4
1573
+ 1571 18
1574
+ 1572 0
1575
+ 1573 18
1576
+ 1574 18
1577
+ 1575 0
1578
+ 1576 0
1579
+ 1577 6
1580
+ 1578 14
1581
+ 1579 0
1582
+ 1580 18
1583
+ 1581 0
1584
+ 1582 3
1585
+ 1583 13
1586
+ 1584 6
1587
+ 1585 6
1588
+ 1586 17
1589
+ 1587 13
1590
+ 1588 8
1591
+ 1589 17
1592
+ 1590 17
1593
+ 1591 18
1594
+ 1592 6
1595
+ 1593 18
1596
+ 1594 13
1597
+ 1595 14
1598
+ 1596 1
1599
+ 1597 6
1600
+ 1598 2
1601
+ 1599 2
1602
+ 1600 1
1603
+ 1601 18
1604
+ 1602 2
1605
+ 1603 5
1606
+ 1604 17
1607
+ 1605 8
1608
+ 1606 18
1609
+ 1607 18
1610
+ 1608 5
1611
+ 1609 18
1612
+ 1610 8
1613
+ 1611 17
1614
+ 1612 2
1615
+ 1613 14
1616
+ 1614 14
1617
+ 1615 18
1618
+ 1616 18
1619
+ 1617 0
1620
+ 1618 18
1621
+ 1619 3
1622
+ 1620 18
1623
+ 1621 14
1624
+ 1622 6
1625
+ 1623 0
1626
+ 1624 2
1627
+ 1625 16
1628
+ 1626 4
1629
+ 1627 18
1630
+ 1628 14
1631
+ 1629 4
1632
+ 1630 2
1633
+ 1631 14
1634
+ 1632 6
1635
+ 1633 18
1636
+ 1634 4
1637
+ 1635 18
1638
+ 1636 6
1639
+ 1637 6
1640
+ 1638 6
1641
+ 1639 11
1642
+ 1640 2
1643
+ 1641 1
1644
+ 1642 2
1645
+ 1643 16
1646
+ 1644 4
1647
+ 1645 18
1648
+ 1646 1
1649
+ 1647 1
1650
+ 1648 16
1651
+ 1649 16
1652
+ 1650 1
1653
+ 1651 18
1654
+ 1652 8
1655
+ 1653 18
1656
+ 1654 6
1657
+ 1655 8
1658
+ 1656 18
1659
+ 1657 18
1660
+ 1658 0
1661
+ 1659 13
1662
+ 1660 14
1663
+ 1661 4
1664
+ 1662 18
1665
+ 1663 18
1666
+ 1664 6
1667
+ 1665 2
1668
+ 1666 18
1669
+ 1667 18
1670
+ 1668 8
1671
+ 1669 8
1672
+ 1670 18
1673
+ 1671 0
1674
+ 1672 1
1675
+ 1673 18
1676
+ 1674 14
1677
+ 1675 6
1678
+ 1676 8
1679
+ 1677 16
1680
+ 1678 2
1681
+ 1679 18
1682
+ 1680 13
1683
+ 1681 0
1684
+ 1682 6
1685
+ 1683 1
1686
+ 1684 2
1687
+ 1685 4
1688
+ 1686 17
1689
+ 1687 18
1690
+ 1688 8
1691
+ 1689 1
1692
+ 1690 18
1693
+ 1691 18
1694
+ 1692 18
1695
+ 1693 4
1696
+ 1694 18
1697
+ 1695 8
1698
+ 1696 18
1699
+ 1697 0
1700
+ 1698 1
1701
+ 1699 18
1702
+ 1700 18
1703
+ 1701 18
1704
+ 1702 0
1705
+ 1703 18
1706
+ 1704 18
1707
+ 1705 18
1708
+ 1706 3
1709
+ 1707 8
1710
+ 1708 14
1711
+ 1709 8
1712
+ 1710 8
1713
+ 1711 17
1714
+ 1712 3
1715
+ 1713 14
1716
+ 1714 13
1717
+ 1715 17
1718
+ 1716 13
1719
+ 1717 6
1720
+ 1718 0
1721
+ 1719 1
1722
+ 1720 17
1723
+ 1721 1
1724
+ 1722 3
1725
+ 1723 16
1726
+ 1724 0
1727
+ 1725 1
1728
+ 1726 1
1729
+ 1727 6
1730
+ 1728 17
1731
+ 1729 14
1732
+ 1730 0
1733
+ 1731 14
1734
+ 1732 8
1735
+ 1733 14
1736
+ 1734 14
1737
+ 1735 3
1738
+ 1736 14
1739
+ 1737 18
1740
+ 1738 1
1741
+ 1739 1
1742
+ 1740 18
1743
+ 1741 18
1744
+ 1742 3
1745
+ 1743 14
1746
+ 1744 12
1747
+ 1745 18
1748
+ 1746 6
1749
+ 1747 2
1750
+ 1748 18
1751
+ 1749 14
1752
+ 1750 12
1753
+ 1751 8
1754
+ 1752 13
1755
+ 1753 4
1756
+ 1754 0
1757
+ 1755 13
1758
+ 1756 18
1759
+ 1757 1
1760
+ 1758 18
1761
+ 1759 4
1762
+ 1760 14
1763
+ 1761 18
1764
+ 1762 11
1765
+ 1763 18
1766
+ 1764 13
1767
+ 1765 6
1768
+ 1766 18
1769
+ 1767 18
1770
+ 1768 1
1771
+ 1769 8
1772
+ 1770 18
1773
+ 1771 18
1774
+ 1772 2
1775
+ 1773 6
1776
+ 1774 4
1777
+ 1775 18
1778
+ 1776 14
1779
+ 1777 18
1780
+ 1778 18
1781
+ 1779 1
1782
+ 1780 18
1783
+ 1781 3
1784
+ 1782 2
1785
+ 1783 14
1786
+ 1784 17
1787
+ 1785 4
1788
+ 1786 6
1789
+ 1787 16
1790
+ 1788 18
1791
+ 1789 13
1792
+ 1790 10
1793
+ 1791 6
1794
+ 1792 14
1795
+ 1793 17
1796
+ 1794 18
1797
+ 1795 4
1798
+ 1796 1
1799
+ 1797 6
1800
+ 1798 18
1801
+ 1799 18
1802
+ 1800 6
1803
+ 1801 6
1804
+ 1802 3
1805
+ 1803 18
1806
+ 1804 6
1807
+ 1805 4
1808
+ 1806 18
1809
+ 1807 8
1810
+ 1808 6
1811
+ 1809 4
1812
+ 1810 18
1813
+ 1811 0
1814
+ 1812 16
1815
+ 1813 13
1816
+ 1814 6
1817
+ 1815 18
1818
+ 1816 16
1819
+ 1817 13
1820
+ 1818 1
1821
+ 1819 4
1822
+ 1820 17
1823
+ 1821 8
1824
+ 1822 4
1825
+ 1823 18
1826
+ 1824 18
1827
+ 1825 1
1828
+ 1826 2
1829
+ 1827 18
1830
+ 1828 1
1831
+ 1829 8
1832
+ 1830 1
1833
+ 1831 8
1834
+ 1832 0
1835
+ 1833 2
1836
+ 1834 4
1837
+ 1835 3
1838
+ 1836 10
1839
+ 1837 13
1840
+ 1838 18
1841
+ 1839 18
1842
+ 1840 2
1843
+ 1841 18
1844
+ 1842 18
1845
+ 1843 8
1846
+ 1844 11
1847
+ 1845 18
1848
+ 1846 18
1849
+ 1847 1
1850
+ 1848 18
1851
+ 1849 18
1852
+ 1850 2
1853
+ 1851 18
1854
+ 1852 6
1855
+ 1853 18
1856
+ 1854 6
1857
+ 1855 4
1858
+ 1856 17
1859
+ 1857 11
1860
+ 1858 5
1861
+ 1859 18
1862
+ 1860 1
1863
+ 1861 8
1864
+ 1862 17
1865
+ 1863 18
1866
+ 1864 6
1867
+ 1865 13
1868
+ 1866 18
1869
+ 1867 1
1870
+ 1868 16
1871
+ 1869 18
1872
+ 1870 6
1873
+ 1871 13
1874
+ 1872 6
1875
+ 1873 6
1876
+ 1874 18
1877
+ 1875 1
1878
+ 1876 16
1879
+ 1877 2
1880
+ 1878 6
1881
+ 1879 18
1882
+ 1880 18
1883
+ 1881 8
1884
+ 1882 6
1885
+ 1883 18
1886
+ 1884 14
1887
+ 1885 18
1888
+ 1886 13
1889
+ 1887 18
1890
+ 1888 11
1891
+ 1889 18
1892
+ 1890 17
1893
+ 1891 18
1894
+ 1892 18
1895
+ 1893 6
1896
+ 1894 18
1897
+ 1895 18
1898
+ 1896 18
1899
+ 1897 18
1900
+ 1898 8
1901
+ 1899 6
1902
+ 1900 1
1903
+ 1901 0
1904
+ 1902 14
1905
+ 1903 8
1906
+ 1904 12
1907
+ 1905 11
1908
+ 1906 18
1909
+ 1907 2
1910
+ 1908 18
1911
+ 1909 1
1912
+ 1910 15
1913
+ 1911 17
1914
+ 1912 4
1915
+ 1913 4
1916
+ 1914 18
1917
+ 1915 18
1918
+ 1916 18
1919
+ 1917 13
1920
+ 1918 1
1921
+ 1919 17
1922
+ 1920 18
1923
+ 1921 8
1924
+ 1922 13
1925
+ 1923 8
1926
+ 1924 1
1927
+ 1925 18
1928
+ 1926 18
1929
+ 1927 18
1930
+ 1928 6
1931
+ 1929 18
1932
+ 1930 6
1933
+ 1931 4
1934
+ 1932 17
1935
+ 1933 13
1936
+ 1934 17
1937
+ 1935 6
1938
+ 1936 13
1939
+ 1937 13
1940
+ 1938 18
1941
+ 1939 5
1942
+ 1940 6
1943
+ 1941 5
1944
+ 1942 8
1945
+ 1943 14
1946
+ 1944 3
1947
+ 1945 15
1948
+ 1946 18
1949
+ 1947 6
1950
+ 1948 8
1951
+ 1949 18
1952
+ 1950 17
1953
+ 1951 6
1954
+ 1952 6
1955
+ 1953 8
1956
+ 1954 3
1957
+ 1955 17
1958
+ 1956 18
1959
+ 1957 8
1960
+ 1958 11
1961
+ 1959 13
1962
+ 1960 17
1963
+ 1961 18
1964
+ 1962 18
1965
+ 1963 18
1966
+ 1964 18
1967
+ 1965 18
1968
+ 1966 0
1969
+ 1967 15
1970
+ 1968 18
1971
+ 1969 11
1972
+ 1970 9
1973
+ 1971 2
1974
+ 1972 14
1975
+ 1973 1
1976
+ 1974 9
1977
+ 1975 18
1978
+ 1976 17
1979
+ 1977 8
1980
+ 1978 17
1981
+ 1979 18
1982
+ 1980 14
1983
+ 1981 6
1984
+ 1982 4
1985
+ 1983 3
1986
+ 1984 1
1987
+ 1985 18
1988
+ 1986 18
1989
+ 1987 4
1990
+ 1988 6
1991
+ 1989 6
1992
+ 1990 14
1993
+ 1991 18
1994
+ 1992 18
1995
+ 1993 18
1996
+ 1994 18
1997
+ 1995 14
1998
+ 1996 2
1999
+ 1997 8
2000
+ 1998 6
2001
+ 1999 6
2002
+ 2000 11
2003
+ 2001 14
2004
+ 2002 1
2005
+ 2003 6
2006
+ 2004 18
2007
+ 2005 16
2008
+ 2006 8
2009
+ 2007 6
2010
+ 2008 0
2011
+ 2009 8
2012
+ 2010 18
2013
+ 2011 1
2014
+ 2012 13
2015
+ 2013 6
2016
+ 2014 18
2017
+ 2015 4
2018
+ 2016 6
2019
+ 2017 14
2020
+ 2018 2
2021
+ 2019 6
2022
+ 2020 18
2023
+ 2021 4
2024
+ 2022 14
2025
+ 2023 14
2026
+ 2024 18
2027
+ 2025 17
2028
+ 2026 18
2029
+ 2027 14
2030
+ 2028 18
2031
+ 2029 18
2032
+ 2030 13
2033
+ 2031 18
2034
+ 2032 5
2035
+ 2033 18
2036
+ 2034 3
2037
+ 2035 17
2038
+ 2036 6
2039
+ 2037 18
2040
+ 2038 6
2041
+ 2039 1
2042
+ 2040 1
2043
+ 2041 12
2044
+ 2042 6
2045
+ 2043 2
2046
+ 2044 3
2047
+ 2045 6
2048
+ 2046 0
2049
+ 2047 18
2050
+ 2048 18
2051
+ 2049 5
2052
+ 2050 13
2053
+ 2051 13
2054
+ 2052 18
2055
+ 2053 18
2056
+ 2054 6
2057
+ 2055 3
2058
+ 2056 9
2059
+ 2057 18
2060
+ 2058 0
2061
+ 2059 6
2062
+ 2060 3
2063
+ 2061 4
2064
+ 2062 13
2065
+ 2063 0
2066
+ 2064 4
2067
+ 2065 0
2068
+ 2066 8
2069
+ 2067 6
2070
+ 2068 18
2071
+ 2069 14
2072
+ 2070 16
2073
+ 2071 3
2074
+ 2072 18
2075
+ 2073 8
2076
+ 2074 8
2077
+ 2075 16
2078
+ 2076 14
2079
+ 2077 6
2080
+ 2078 11
2081
+ 2079 18
2082
+ 2080 18
2083
+ 2081 8
2084
+ 2082 4
2085
+ 2083 8
2086
+ 2084 6
2087
+ 2085 18
2088
+ 2086 18
2089
+ 2087 17
2090
+ 2088 17
2091
+ 2089 0
2092
+ 2090 0
2093
+ 2091 8
2094
+ 2092 18
2095
+ 2093 4
2096
+ 2094 6
2097
+ 2095 18
2098
+ 2096 18
2099
+ 2097 14
2100
+ 2098 6
2101
+ 2099 6
2102
+ 2100 9
2103
+ 2101 0
2104
+ 2102 18
2105
+ 2103 13
2106
+ 2104 18
2107
+ 2105 3
2108
+ 2106 18
2109
+ 2107 3
2110
+ 2108 2
2111
+ 2109 14
2112
+ 2110 18
2113
+ 2111 18
2114
+ 2112 3
2115
+ 2113 15
2116
+ 2114 18
2117
+ 2115 17
2118
+ 2116 17
2119
+ 2117 1
2120
+ 2118 18
2121
+ 2119 3
2122
+ 2120 6
2123
+ 2121 8
2124
+ 2122 14
2125
+ 2123 18
2126
+ 2124 18
2127
+ 2125 18
2128
+ 2126 18
2129
+ 2127 11
2130
+ 2128 18
2131
+ 2129 11
2132
+ 2130 18
2133
+ 2131 18
2134
+ 2132 18
2135
+ 2133 1
2136
+ 2134 3
2137
+ 2135 6
2138
+ 2136 18
2139
+ 2137 1
2140
+ 2138 18
2141
+ 2139 18
2142
+ 2140 0
2143
+ 2141 18
2144
+ 2142 2
2145
+ 2143 3
2146
+ 2144 18
2147
+ 2145 16
2148
+ 2146 9
2149
+ 2147 17
2150
+ 2148 16
2151
+ 2149 12
2152
+ 2150 17
2153
+ 2151 3
2154
+ 2152 18
2155
+ 2153 18
2156
+ 2154 14
2157
+ 2155 0
2158
+ 2156 3
2159
+ 2157 6
2160
+ 2158 14
2161
+ 2159 18
2162
+ 2160 13
2163
+ 2161 8
2164
+ 2162 17
2165
+ 2163 8
2166
+ 2164 6
2167
+ 2165 2
2168
+ 2166 8
2169
+ 2167 6
2170
+ 2168 13
2171
+ 2169 8
2172
+ 2170 4
2173
+ 2171 12
2174
+ 2172 2
2175
+ 2173 3
2176
+ 2174 6
2177
+ 2175 11
2178
+ 2176 1
2179
+ 2177 4
2180
+ 2178 18
2181
+ 2179 18
2182
+ 2180 18
2183
+ 2181 1
2184
+ 2182 18
2185
+ 2183 6
2186
+ 2184 8
2187
+ 2185 18
2188
+ 2186 18
2189
+ 2187 6
2190
+ 2188 14
2191
+ 2189 8
2192
+ 2190 6
2193
+ 2191 17
2194
+ 2192 2
2195
+ 2193 8
2196
+ 2194 3
2197
+ 2195 2
2198
+ 2196 14
2199
+ 2197 18
2200
+ 2198 8
2201
+ 2199 8
2202
+ 2200 11
2203
+ 2201 6
2204
+ 2202 18
2205
+ 2203 18
2206
+ 2204 18
2207
+ 2205 0
2208
+ 2206 6
2209
+ 2207 2
2210
+ 2208 1
2211
+ 2209 17
2212
+ 2210 14
2213
+ 2211 2
2214
+ 2212 17
2215
+ 2213 1
2216
+ 2214 8
2217
+ 2215 14
2218
+ 2216 18
2219
+ 2217 0
2220
+ 2218 6
2221
+ 2219 14
2222
+ 2220 8
2223
+ 2221 8
2224
+ 2222 13
2225
+ 2223 11
2226
+ 2224 13
2227
+ 2225 6
2228
+ 2226 17
2229
+ 2227 8
2230
+ 2228 18
2231
+ 2229 1
2232
+ 2230 18
2233
+ 2231 4
2234
+ 2232 17
2235
+ 2233 18
2236
+ 2234 3
2237
+ 2235 12
2238
+ 2236 14
2239
+ 2237 8
2240
+ 2238 13
2241
+ 2239 6
2242
+ 2240 17
2243
+ 2241 15
2244
+ 2242 3
2245
+ 2243 2
2246
+ 2244 6
2247
+ 2245 1
2248
+ 2246 14
2249
+ 2247 4
2250
+ 2248 17
2251
+ 2249 16
2252
+ 2250 2
2253
+ 2251 16
2254
+ 2252 18
2255
+ 2253 1
2256
+ 2254 6
2257
+ 2255 5
2258
+ 2256 0
2259
+ 2257 1
2260
+ 2258 14
2261
+ 2259 8
2262
+ 2260 4
2263
+ 2261 18
2264
+ 2262 6
2265
+ 2263 3
2266
+ 2264 8
2267
+ 2265 18
2268
+ 2266 0
2269
+ 2267 2
2270
+ 2268 0
2271
+ 2269 17
2272
+ 2270 8
2273
+ 2271 3
2274
+ 2272 8
2275
+ 2273 3
2276
+ 2274 0
2277
+ 2275 6
2278
+ 2276 18
2279
+ 2277 18
2280
+ 2278 1
2281
+ 2279 6
2282
+ 2280 8
2283
+ 2281 3
2284
+ 2282 18
2285
+ 2283 6
2286
+ 2284 1
2287
+ 2285 4
2288
+ 2286 6
2289
+ 2287 13
2290
+ 2288 3
2291
+ 2289 4
2292
+ 2290 15
2293
+ 2291 14
2294
+ 2292 18
2295
+ 2293 12
2296
+ 2294 15
2297
+ 2295 8
2298
+ 2296 8
2299
+ 2297 18
2300
+ 2298 8
2301
+ 2299 18
2302
+ 2300 18
2303
+ 2301 14
2304
+ 2302 6
2305
+ 2303 11
2306
+ 2304 2
2307
+ 2305 18
2308
+ 2306 18
2309
+ 2307 14
2310
+ 2308 14
2311
+ 2309 2
2312
+ 2310 18
2313
+ 2311 11
2314
+ 2312 16
2315
+ 2313 4
2316
+ 2314 2
2317
+ 2315 4
2318
+ 2316 8
2319
+ 2317 4
2320
+ 2318 13
2321
+ 2319 18
2322
+ 2320 6
2323
+ 2321 2
2324
+ 2322 6
2325
+ 2323 18
2326
+ 2324 4
2327
+ 2325 16
2328
+ 2326 18
2329
+ 2327 18
2330
+ 2328 17
2331
+ 2329 6
2332
+ 2330 11
2333
+ 2331 4
2334
+ 2332 18
2335
+ 2333 18
2336
+ 2334 1
2337
+ 2335 8
2338
+ 2336 15
2339
+ 2337 18
2340
+ 2338 4
2341
+ 2339 8
2342
+ 2340 13
2343
+ 2341 6
2344
+ 2342 11
2345
+ 2343 1
2346
+ 2344 11
2347
+ 2345 17
2348
+ 2346 5
2349
+ 2347 6
2350
+ 2348 13
2351
+ 2349 0
2352
+ 2350 6
2353
+ 2351 18
2354
+ 2352 18
2355
+ 2353 6
2356
+ 2354 4
2357
+ 2355 8
2358
+ 2356 0
2359
+ 2357 2
2360
+ 2358 18
2361
+ 2359 18
2362
+ 2360 10
2363
+ 2361 6
2364
+ 2362 18
2365
+ 2363 1
2366
+ 2364 18
2367
+ 2365 2
2368
+ 2366 18
2369
+ 2367 18
2370
+ 2368 16
2371
+ 2369 18
2372
+ 2370 16
2373
+ 2371 18
2374
+ 2372 0
2375
+ 2373 4
2376
+ 2374 1
2377
+ 2375 6
2378
+ 2376 14
2379
+ 2377 13
2380
+ 2378 0
2381
+ 2379 3
2382
+ 2380 14
2383
+ 2381 1
2384
+ 2382 0
2385
+ 2383 8
2386
+ 2384 18
2387
+ 2385 17
2388
+ 2386 2
2389
+ 2387 18
2390
+ 2388 2
2391
+ 2389 18
2392
+ 2390 11
2393
+ 2391 18
2394
+ 2392 8
2395
+ 2393 11
2396
+ 2394 14
2397
+ 2395 1
2398
+ 2396 2
2399
+ 2397 0
2400
+ 2398 6
2401
+ 2399 17
2402
+ 2400 18
2403
+ 2401 2
2404
+ 2402 8
2405
+ 2403 11
2406
+ 2404 6
2407
+ 2405 18
2408
+ 2406 18
2409
+ 2407 18
2410
+ 2408 16
2411
+ 2409 8
2412
+ 2410 13
2413
+ 2411 18
2414
+ 2412 6
2415
+ 2413 15
2416
+ 2414 6
2417
+ 2415 18
2418
+ 2416 1
2419
+ 2417 6
2420
+ 2418 18
2421
+ 2419 17
2422
+ 2420 6
2423
+ 2421 14
2424
+ 2422 8
2425
+ 2423 11
2426
+ 2424 1
2427
+ 2425 1
2428
+ 2426 18
2429
+ 2427 2
2430
+ 2428 17
2431
+ 2429 13
2432
+ 2430 4
2433
+ 2431 6
2434
+ 2432 4
2435
+ 2433 3
2436
+ 2434 18
2437
+ 2435 6
2438
+ 2436 2
2439
+ 2437 13
2440
+ 2438 18
2441
+ 2439 16
2442
+ 2440 2
2443
+ 2441 18
2444
+ 2442 4
2445
+ 2443 17
2446
+ 2444 4
2447
+ 2445 6
2448
+ 2446 2
2449
+ 2447 1
2450
+ 2448 13
2451
+ 2449 17
2452
+ 2450 3
2453
+ 2451 4
2454
+ 2452 6
2455
+ 2453 18
2456
+ 2454 16
2457
+ 2455 11
2458
+ 2456 14
2459
+ 2457 18
2460
+ 2458 6
2461
+ 2459 18
2462
+ 2460 18
2463
+ 2461 4
2464
+ 2462 18
2465
+ 2463 18
2466
+ 2464 14
2467
+ 2465 1
2468
+ 2466 6
2469
+ 2467 0
2470
+ 2468 18
2471
+ 2469 18
2472
+ 2470 8
2473
+ 2471 18
2474
+ 2472 1
2475
+ 2473 18
2476
+ 2474 13
2477
+ 2475 4
2478
+ 2476 6
2479
+ 2477 18
2480
+ 2478 8
2481
+ 2479 18
2482
+ 2480 1
2483
+ 2481 17
2484
+ 2482 2
2485
+ 2483 2
2486
+ 2484 18
2487
+ 2485 14
2488
+ 2486 18
2489
+ 2487 4
2490
+ 2488 18
2491
+ 2489 4
2492
+ 2490 11
2493
+ 2491 18
2494
+ 2492 0
2495
+ 2493 8
2496
+ 2494 11
2497
+ 2495 17
2498
+ 2496 17
2499
+ 2497 18
2500
+ 2498 8
2501
+ 2499 12
2502
+ 2500 16
2503
+ 2501 3
2504
+ 2502 18
2505
+ 2503 0
2506
+ 2504 0
2507
+ 2505 8
2508
+ 2506 18
2509
+ 2507 18
2510
+ 2508 6
2511
+ 2509 2
2512
+ 2510 16
2513
+ 2511 8
2514
+ 2512 11
2515
+ 2513 8
2516
+ 2514 13
2517
+ 2515 17
2518
+ 2516 2
2519
+ 2517 18
2520
+ 2518 4
2521
+ 2519 17
2522
+ 2520 3
2523
+ 2521 3
2524
+ 2522 1
2525
+ 2523 13
2526
+ 2524 13
2527
+ 2525 2
2528
+ 2526 18
2529
+ 2527 1
2530
+ 2528 17
2531
+ 2529 4
2532
+ 2530 6
2533
+ 2531 1
2534
+ 2532 18
2535
+ 2533 8
2536
+ 2534 14
2537
+ 2535 2
2538
+ 2536 18
2539
+ 2537 8
2540
+ 2538 16
2541
+ 2539 6
2542
+ 2540 18
2543
+ 2541 17
2544
+ 2542 8
2545
+ 2543 0
2546
+ 2544 1
2547
+ 2545 14
2548
+ 2546 18
2549
+ 2547 2
2550
+ 2548 18
2551
+ 2549 18
2552
+ 2550 1
2553
+ 2551 0
2554
+ 2552 3
2555
+ 2553 17
2556
+ 2554 18
2557
+ 2555 18
2558
+ 2556 6
2559
+ 2557 14
2560
+ 2558 6
2561
+ 2559 13
2562
+ 2560 1
2563
+ 2561 13
2564
+ 2562 18
2565
+ 2563 6
2566
+ 2564 16
2567
+ 2565 6
2568
+ 2566 18
2569
+ 2567 18
2570
+ 2568 17
2571
+ 2569 14
2572
+ 2570 18
2573
+ 2571 11
2574
+ 2572 8
2575
+ 2573 18
2576
+ 2574 6
2577
+ 2575 18
2578
+ 2576 0
2579
+ 2577 1
2580
+ 2578 18
2581
+ 2579 18
2582
+ 2580 3
2583
+ 2581 18
2584
+ 2582 11
2585
+ 2583 0
2586
+ 2584 14
2587
+ 2585 2
2588
+ 2586 17
2589
+ 2587 13
2590
+ 2588 17
2591
+ 2589 6
2592
+ 2590 11
2593
+ 2591 3
2594
+ 2592 18
2595
+ 2593 8
2596
+ 2594 18
2597
+ 2595 14
2598
+ 2596 0
2599
+ 2597 6
2600
+ 2598 1
2601
+ 2599 8
2602
+ 2600 18
2603
+ 2601 6
2604
+ 2602 18
2605
+ 2603 11
2606
+ 2604 1
2607
+ 2605 1
2608
+ 2606 18
2609
+ 2607 8
2610
+ 2608 18
2611
+ 2609 15
2612
+ 2610 6
2613
+ 2611 18
2614
+ 2612 6
2615
+ 2613 1
2616
+ 2614 18
2617
+ 2615 14
2618
+ 2616 6
2619
+ 2617 11
2620
+ 2618 8
2621
+ 2619 18
2622
+ 2620 11
2623
+ 2621 0
2624
+ 2622 8
2625
+ 2623 6
2626
+ 2624 14
2627
+ 2625 11
2628
+ 2626 1
2629
+ 2627 14
2630
+ 2628 0
2631
+ 2629 18
2632
+ 2630 4
2633
+ 2631 6
2634
+ 2632 6
2635
+ 2633 18
2636
+ 2634 4
2637
+ 2635 4
2638
+ 2636 1
2639
+ 2637 18
2640
+ 2638 1
2641
+ 2639 18
2642
+ 2640 1
2643
+ 2641 0
2644
+ 2642 1
2645
+ 2643 18
2646
+ 2644 1
2647
+ 2645 1
2648
+ 2646 14
2649
+ 2647 17
2650
+ 2648 8
2651
+ 2649 16
2652
+ 2650 18
2653
+ 2651 18
2654
+ 2652 18
2655
+ 2653 2
2656
+ 2654 4
2657
+ 2655 18
2658
+ 2656 2
2659
+ 2657 14
2660
+ 2658 12
2661
+ 2659 6
2662
+ 2660 3
2663
+ 2661 4
2664
+ 2662 8
2665
+ 2663 14
2666
+ 2664 11
2667
+ 2665 8
2668
+ 2666 18
2669
+ 2667 14
2670
+ 2668 18
2671
+ 2669 4
2672
+ 2670 14
2673
+ 2671 18
2674
+ 2672 18
2675
+ 2673 18
2676
+ 2674 6
2677
+ 2675 18
2678
+ 2676 14
2679
+ 2677 18
2680
+ 2678 16
2681
+ 2679 11
2682
+ 2680 18
2683
+ 2681 18
2684
+ 2682 6
2685
+ 2683 8
2686
+ 2684 18
2687
+ 2685 18
2688
+ 2686 18
2689
+ 2687 6
2690
+ 2688 18
2691
+ 2689 1
2692
+ 2690 12
2693
+ 2691 0
2694
+ 2692 4
2695
+ 2693 18
2696
+ 2694 16
2697
+ 2695 17
2698
+ 2696 18
2699
+ 2697 18
2700
+ 2698 3
2701
+ 2699 13
2702
+ 2700 6
2703
+ 2701 18
2704
+ 2702 1
2705
+ 2703 1
2706
+ 2704 17
2707
+ 2705 18
2708
+ 2706 18
2709
+ 2707 6
2710
+ 2708 18
2711
+ 2709 3
2712
+ 2710 8
2713
+ 2711 8
2714
+ 2712 18
2715
+ 2713 18
2716
+ 2714 17
2717
+ 2715 16
2718
+ 2716 18
runs/Dec30_12-01-33_01d221258d33/events.out.tfevents.1703938337.01d221258d33.7965.1 ADDED
@@ -0,0 +1,3 @@
 
 
 
 
1
+ version https://git-lfs.github.com/spec/v1
2
+ oid sha256:670d5f284a53a2e71a18abbe7cc0351b09a109d9817d2a28a77a5496a930203f
3
+ size 405
train_results.json ADDED
@@ -0,0 +1,8 @@
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "epoch": 10.0,
3
+ "train_loss": 1.298073563620309,
4
+ "train_runtime": 598.9546,
5
+ "train_samples": 6800,
6
+ "train_samples_per_second": 113.531,
7
+ "train_steps_per_second": 1.786
8
+ }
trainer_state.json ADDED
@@ -0,0 +1,178 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "best_metric": 0.4291906813901389,
3
+ "best_model_checkpoint": "./output/relation_extraction_roberta_base/checkpoint-963",
4
+ "epoch": 10.0,
5
+ "eval_steps": 500,
6
+ "global_step": 1070,
7
+ "is_hyper_param_search": false,
8
+ "is_local_process_zero": true,
9
+ "is_world_process_zero": true,
10
+ "log_history": [
11
+ {
12
+ "epoch": 1.0,
13
+ "learning_rate": 4.5e-05,
14
+ "loss": 2.8498,
15
+ "step": 107
16
+ },
17
+ {
18
+ "epoch": 1.0,
19
+ "eval_f1": 0.053951570618237285,
20
+ "eval_loss": 2.6697919368743896,
21
+ "eval_runtime": 2.5903,
22
+ "eval_samples_per_second": 463.265,
23
+ "eval_steps_per_second": 7.335,
24
+ "step": 107
25
+ },
26
+ {
27
+ "epoch": 2.0,
28
+ "learning_rate": 4e-05,
29
+ "loss": 2.4514,
30
+ "step": 214
31
+ },
32
+ {
33
+ "epoch": 2.0,
34
+ "eval_f1": 0.15570882245647932,
35
+ "eval_loss": 2.2383241653442383,
36
+ "eval_runtime": 2.5762,
37
+ "eval_samples_per_second": 465.804,
38
+ "eval_steps_per_second": 7.375,
39
+ "step": 214
40
+ },
41
+ {
42
+ "epoch": 3.0,
43
+ "learning_rate": 3.5e-05,
44
+ "loss": 2.0199,
45
+ "step": 321
46
+ },
47
+ {
48
+ "epoch": 3.0,
49
+ "eval_f1": 0.2755954145408674,
50
+ "eval_loss": 1.9595829248428345,
51
+ "eval_runtime": 2.5961,
52
+ "eval_samples_per_second": 462.236,
53
+ "eval_steps_per_second": 7.319,
54
+ "step": 321
55
+ },
56
+ {
57
+ "epoch": 4.0,
58
+ "learning_rate": 3e-05,
59
+ "loss": 1.6452,
60
+ "step": 428
61
+ },
62
+ {
63
+ "epoch": 4.0,
64
+ "eval_f1": 0.3250642674784511,
65
+ "eval_loss": 1.9245597124099731,
66
+ "eval_runtime": 2.6965,
67
+ "eval_samples_per_second": 445.017,
68
+ "eval_steps_per_second": 7.046,
69
+ "step": 428
70
+ },
71
+ {
72
+ "epoch": 5.0,
73
+ "learning_rate": 2.5e-05,
74
+ "loss": 1.2583,
75
+ "step": 535
76
+ },
77
+ {
78
+ "epoch": 5.0,
79
+ "eval_f1": 0.37965408693840236,
80
+ "eval_loss": 1.9094653129577637,
81
+ "eval_runtime": 2.7978,
82
+ "eval_samples_per_second": 428.907,
83
+ "eval_steps_per_second": 6.791,
84
+ "step": 535
85
+ },
86
+ {
87
+ "epoch": 6.0,
88
+ "learning_rate": 2e-05,
89
+ "loss": 0.9493,
90
+ "step": 642
91
+ },
92
+ {
93
+ "epoch": 6.0,
94
+ "eval_f1": 0.3963663601536282,
95
+ "eval_loss": 2.2247843742370605,
96
+ "eval_runtime": 2.7577,
97
+ "eval_samples_per_second": 435.149,
98
+ "eval_steps_per_second": 6.89,
99
+ "step": 642
100
+ },
101
+ {
102
+ "epoch": 7.0,
103
+ "learning_rate": 1.5e-05,
104
+ "loss": 0.6915,
105
+ "step": 749
106
+ },
107
+ {
108
+ "epoch": 7.0,
109
+ "eval_f1": 0.40079193118108436,
110
+ "eval_loss": 2.1882429122924805,
111
+ "eval_runtime": 2.7475,
112
+ "eval_samples_per_second": 436.766,
113
+ "eval_steps_per_second": 6.915,
114
+ "step": 749
115
+ },
116
+ {
117
+ "epoch": 8.0,
118
+ "learning_rate": 1e-05,
119
+ "loss": 0.4993,
120
+ "step": 856
121
+ },
122
+ {
123
+ "epoch": 8.0,
124
+ "eval_f1": 0.4258100227415372,
125
+ "eval_loss": 2.3671979904174805,
126
+ "eval_runtime": 2.5859,
127
+ "eval_samples_per_second": 464.054,
128
+ "eval_steps_per_second": 7.348,
129
+ "step": 856
130
+ },
131
+ {
132
+ "epoch": 9.0,
133
+ "learning_rate": 5e-06,
134
+ "loss": 0.354,
135
+ "step": 963
136
+ },
137
+ {
138
+ "epoch": 9.0,
139
+ "eval_f1": 0.4291906813901389,
140
+ "eval_loss": 2.5120413303375244,
141
+ "eval_runtime": 2.7759,
142
+ "eval_samples_per_second": 432.299,
143
+ "eval_steps_per_second": 6.845,
144
+ "step": 963
145
+ },
146
+ {
147
+ "epoch": 10.0,
148
+ "learning_rate": 0.0,
149
+ "loss": 0.262,
150
+ "step": 1070
151
+ },
152
+ {
153
+ "epoch": 10.0,
154
+ "eval_f1": 0.42896169266509715,
155
+ "eval_loss": 2.5574376583099365,
156
+ "eval_runtime": 2.8234,
157
+ "eval_samples_per_second": 425.014,
158
+ "eval_steps_per_second": 6.729,
159
+ "step": 1070
160
+ },
161
+ {
162
+ "epoch": 10.0,
163
+ "step": 1070,
164
+ "total_flos": 4443650073600000.0,
165
+ "train_loss": 1.298073563620309,
166
+ "train_runtime": 598.9546,
167
+ "train_samples_per_second": 113.531,
168
+ "train_steps_per_second": 1.786
169
+ }
170
+ ],
171
+ "logging_steps": 500,
172
+ "max_steps": 1070,
173
+ "num_train_epochs": 10,
174
+ "save_steps": 500,
175
+ "total_flos": 4443650073600000.0,
176
+ "trial_name": null,
177
+ "trial_params": null
178
+ }