Asilarkness commited on
Commit
7b717c3
·
verified ·
1 Parent(s): 8bda0df

Add v3 evaluation artifact v3_math_dev_scores.json

Browse files
candidates/budgie-alignment-v2/reasoning-sft-then-rl-v3/recovery/v3_math_dev_scores.json ADDED
@@ -0,0 +1,78 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "leader": {
3
+ "correct": 1,
4
+ "total": 32,
5
+ "items": [
6
+ false,
7
+ false,
8
+ false,
9
+ false,
10
+ false,
11
+ false,
12
+ false,
13
+ false,
14
+ false,
15
+ false,
16
+ false,
17
+ false,
18
+ false,
19
+ false,
20
+ false,
21
+ false,
22
+ false,
23
+ false,
24
+ false,
25
+ false,
26
+ false,
27
+ true,
28
+ false,
29
+ false,
30
+ false,
31
+ false,
32
+ false,
33
+ false,
34
+ false,
35
+ false,
36
+ false,
37
+ false
38
+ ]
39
+ },
40
+ "candidate_a0p005": {
41
+ "correct": 1,
42
+ "total": 32,
43
+ "items": [
44
+ false,
45
+ false,
46
+ false,
47
+ false,
48
+ false,
49
+ false,
50
+ false,
51
+ false,
52
+ false,
53
+ false,
54
+ false,
55
+ false,
56
+ false,
57
+ false,
58
+ false,
59
+ false,
60
+ false,
61
+ false,
62
+ false,
63
+ false,
64
+ false,
65
+ true,
66
+ false,
67
+ false,
68
+ false,
69
+ false,
70
+ false,
71
+ false,
72
+ false,
73
+ false,
74
+ false,
75
+ false
76
+ ]
77
+ }
78
+ }