| A | B | C | D | E | F | G | H | I | J | K | L | M | N | O | P | Q | R | S | T | U | V | W | X | Y | Z | AA | AB | AC | AD | ||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
1 | s | Name | Mean | Std | Neel Nanda | Evan Hubinger | Adam Scherlis | Victoria Krakovna | Janos Kramar | Dane Sherburn | Charlie Steiner | Nick Turner | Ramana Kumar | Simeon Campos | Aron Malmborg | Jenny Nitishinskaya | Charbel-Raphael Segerie | Arthur Conmy | Curt Tigges | Mark Bissell | Claude Haiku | GPT-4o mini | |||||||||
2 | 3 | Auditing | 6.7 | 1.81 | 9 | 5 | 4 | 9 | 6 | 4 | 7 | 6 | 6 | 8 | 8 | 4 | 5 | 7 | 7 | 8 | 7 | 10 | |||||||||
3 | 7 | Improving Feedback | 6.5 | 1.91 | 6 | 8 | 8 | 4 | 4 | 9 | 8 | 6 | 6 | 8.5 | 7 | 3 | 3 | 7 | 8 | 6 | 8 | 8 | |||||||||
4 | 1 | Force multiplier | 6.6 | 1.79 | 8 | 8 | 8 | 8 | 3 | 7 | 5 | 8 | 5 | 5 | 7 | 5 | 4 | 6 | 6 | 7 | 8 | 10 | |||||||||
5 | 6 | Threat model evidence | 6.4 | 2.01 | 8.5 | 6 | 4 | 9 | 8 | 7 | 5 | 9 | 6 | 3.5 | 9 | 4 | 4 | 6 | 4 | 7 | 7 | 9 | |||||||||
6 | 2 | Better prediction | 6.3 | 2.11 | 8 | 6 | 8 | 6 | 3 | 5 | 4 | 8 | 6 | 6 | 8 | 5 | 2 | 4 | 8 | 8 | 9 | 9 | |||||||||
7 | 4 | Auditing for deception | 6.1 | 1.64 | 9 | 5 | 4 | 8 | 7 | 5 | 6 | 6 | 5 | 7 | 9 | 4 | 4 | 5 | 7 | 5 | 6 | 8 | |||||||||
8 | 8 | Informed oversight | 5.9 | 2.04 | 8 | 7 | 4 | 7 | 4 | 8 | 4 | 4 | 5 | 8 | 7 | 4 | 3 | 3 | 8 | 6 | 8 | 9 | |||||||||
9 | 12 | Cultural shift 1 | 5.6 | 1.89 | 4 | 6 | 4 | 5 | 7 | 7 | 6 | 7 | 7 | 6 | 8 | 2 | 3 | 5 | 4 | 3 | 8 | 8 | |||||||||
10 | 9 | In the loss function | 5.4 | 1.78 | 5 | 7 | 4 | 5 | 4 | 6 | 3 | 6 | 6 | 7.5 | 5 | 4 | 3 | 8 | 6 | 2 | 7 | 8 | |||||||||
11 | 10 | Norm setting | 5.3 | 2.19 | 5 | 6 | 4 | 5 | 4 | 8 | 6 | 7 | 3 | 7 | 8 | 2 | 2 | 6 | 6 | 1 | 7 | 8 | |||||||||
12 | 17 | Forecasting discontinuities | 5.5 | 1.89 | 7 | 5 | 8 | 6 | 6 | 7 | 4 | 5 | 6 | 8 | 3 | 3 | 3 | 2 | 6 | 5 | 8 | 7 | |||||||||
13 | 14 | Epistemic learned helplessness | 5.5 | 1.65 | 7.5 | 4 | 8 | 4 | 6 | 3 | 3 | 8 | 5 | 6 | 4 | 4 | 5 | 7 | 5 | 6 | 7 | 7 | |||||||||
14 | 5 | Enabling coordination | 5.4 | 1.98 | 6 | 3 | 4 | 4 | 4 | 4 | 9 | 6 | 3 | 6 | 8 | 5 | 3 | 6 | 5 | 5 | 8 | 9 | |||||||||
15 | 16 | Get AIs to do it | 5.2 | 1.99 | 6 | 7 | 8 | 5 | 7 | 3 | 4 | 3 | 5 | 4 | 5 | 2 | 5 | 4 | 6 | 3 | 8 | 9 | |||||||||
16 | 18 | Intervening on training | 5.1 | 2.38 | 7.5 | 8 | 4 | 6 | 6 | 8 | 6 | 5 | 7 | 4 | 4 | 3 | 3 | 1 | 2 | 2 | 7 | 9 | |||||||||
17 | 11 | Regulation | 5.1 | 2.22 | 6.5 | 3 | 4 | 3 | 3 | 4 | 2 | 5 | 6 | 8 | 7 | 4 | 4 | 4 | 5 | 4 | 9 | 10 | |||||||||
18 | 13 | Cultural shift 2 | 4.9 | 1.73 | 4 | 6 | 4 | 3 | 5 | 8 | 3 | 6 | 7 | 5 | 5 | 3 | 3 | 4 | 5 | 3 | 8 | 7 | |||||||||
19 | 15 | Microscope AI | 5.0 | 2.00 | 3 | 7 | 4 | 3 | 3 | 9 | 2 | 4 | 5 | 6.5 | 3 | 5 | 8 | 5 | 4 | 7 | 6 | ||||||||||
20 | 20 | ELK | 5.3 | 2.30 | 6 | 8 | 3 | 3 | 7 | 5 | 4 | 3 | 2 | 3 | 7 | 9 | 8 | 6 | |||||||||||||
21 | 19 | Auditing a training run | 4.9 | 2.22 | 5.5 | 8 | 4 | 4 | 6 | 8 | 2 | 5 | 4 | 7 | 3 | 2 | 1 | 4 | 5 | 4 | 8 | 8 | |||||||||
22 | |||||||||||||||||||||||||||||||
23 | |||||||||||||||||||||||||||||||
24 | |||||||||||||||||||||||||||||||
25 | |||||||||||||||||||||||||||||||
26 | |||||||||||||||||||||||||||||||
27 | |||||||||||||||||||||||||||||||
28 | |||||||||||||||||||||||||||||||
29 | |||||||||||||||||||||||||||||||
30 | |||||||||||||||||||||||||||||||
31 | |||||||||||||||||||||||||||||||
32 | |||||||||||||||||||||||||||||||
33 | |||||||||||||||||||||||||||||||
34 | |||||||||||||||||||||||||||||||
35 | |||||||||||||||||||||||||||||||
36 | |||||||||||||||||||||||||||||||
37 | |||||||||||||||||||||||||||||||
38 | |||||||||||||||||||||||||||||||
39 | |||||||||||||||||||||||||||||||
40 | |||||||||||||||||||||||||||||||
41 | |||||||||||||||||||||||||||||||
42 | |||||||||||||||||||||||||||||||
43 | |||||||||||||||||||||||||||||||
44 | |||||||||||||||||||||||||||||||
45 | |||||||||||||||||||||||||||||||
46 | |||||||||||||||||||||||||||||||
47 | |||||||||||||||||||||||||||||||
48 | |||||||||||||||||||||||||||||||
49 | |||||||||||||||||||||||||||||||
50 | |||||||||||||||||||||||||||||||
51 | |||||||||||||||||||||||||||||||
52 | |||||||||||||||||||||||||||||||
53 | |||||||||||||||||||||||||||||||
54 | |||||||||||||||||||||||||||||||
55 | |||||||||||||||||||||||||||||||
56 | |||||||||||||||||||||||||||||||
57 | |||||||||||||||||||||||||||||||
58 | |||||||||||||||||||||||||||||||
59 | |||||||||||||||||||||||||||||||
60 | |||||||||||||||||||||||||||||||
61 | |||||||||||||||||||||||||||||||
62 | |||||||||||||||||||||||||||||||
63 | |||||||||||||||||||||||||||||||
64 | |||||||||||||||||||||||||||||||
65 | |||||||||||||||||||||||||||||||
66 | |||||||||||||||||||||||||||||||
67 | |||||||||||||||||||||||||||||||
68 | |||||||||||||||||||||||||||||||
69 | |||||||||||||||||||||||||||||||
70 | |||||||||||||||||||||||||||||||
71 | |||||||||||||||||||||||||||||||
72 | |||||||||||||||||||||||||||||||
73 | |||||||||||||||||||||||||||||||
74 | |||||||||||||||||||||||||||||||
75 | |||||||||||||||||||||||||||||||
76 | |||||||||||||||||||||||||||||||
77 | |||||||||||||||||||||||||||||||
78 | |||||||||||||||||||||||||||||||
79 | |||||||||||||||||||||||||||||||
80 | |||||||||||||||||||||||||||||||
81 | |||||||||||||||||||||||||||||||
82 | |||||||||||||||||||||||||||||||
83 | |||||||||||||||||||||||||||||||
84 | |||||||||||||||||||||||||||||||
85 | |||||||||||||||||||||||||||||||
86 | |||||||||||||||||||||||||||||||
87 | |||||||||||||||||||||||||||||||
88 | |||||||||||||||||||||||||||||||
89 | |||||||||||||||||||||||||||||||
90 | |||||||||||||||||||||||||||||||
91 | |||||||||||||||||||||||||||||||
92 | |||||||||||||||||||||||||||||||
93 | |||||||||||||||||||||||||||||||
94 | |||||||||||||||||||||||||||||||
95 | |||||||||||||||||||||||||||||||
96 | |||||||||||||||||||||||||||||||
97 | |||||||||||||||||||||||||||||||
98 | |||||||||||||||||||||||||||||||
99 | |||||||||||||||||||||||||||||||
100 |