A | B | C | D | E | F | G | H | I | J | K | L | M | N | O | P | Q | R | S | T | U | V | W | X | Y | Z | AA | AB | AC | AD | ||
---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
1 | team | run | representation | training | tokens | input | reference | Event Extraction | Negation Resolution | Opinion Analysis | Average | Rank | |||||||||||||||||||
2 | P | R | F1 | P | R | F1 | P | R | F1 | ||||||||||||||||||||||
3 | ecnu | 0 | UD v2.0 | English 2.0 | 204,585 | tt | 49.48 | 39.00 | 43.62 | 99.17 | 45.45 | 62.33 | 60.27 | 57.42 | 58.81 | 54.92 | |||||||||||||||
4 | ecnu | 1 | UD v2.0 | English 2.0 | 204,585 | tt | 50.72 | 38.97 | 44.08 | 99.17 | 45.45 | 62.33 | 62.86 | 60.04 | 61.42 | 55.94 | |||||||||||||||
5 | ecnu | 2 | UD v2.0 | English 2.0 | 204,585 | tt | 52.24 | 40.23 | 45.46 | 99.17 | 45.45 | 62.33 | 62.15 | 59.75 | 60.93 | 56.24 | 5 | ||||||||||||||
6 | ecnu | 3 | UD v2.0 | English 2.0 | 204,585 | tt | 54.53 | 35.58 | 43.06 | 99.18 | 45.83 | 62.69 | 62.11 | 58.17 | 60.08 | 55.28 | |||||||||||||||
7 | ecnu | 4 | UD v2.0 | English 2.0 | 204,585 | tt | 60.69 | 35.76 | 45.00 | 99.15 | 43.94 | 60.89 | 63.32 | 61.07 | 62.17 | 56.02 | |||||||||||||||
8 | oxford | 0 | EDS | ||||||||||||||||||||||||||||
9 | paris-stanford | 0 | DM | WSJ 00–20 (SDP Sub-Set) | 802,717 | txt | 59.11 | 37.71 | 46.04 | 99.12 | 42.80 | 59.78 | 65.04 | 51.32 | 57.37 | 54.40 | |||||||||||||||
10 | paris-stanford | 1 | PAS | WSJ 00–20 (SDP Sub-Set) | 802,717 | txt | 52.39 | 40.98 | 45.99 | 99.09 | 41.29 | 58.29 | 65.80 | 52.73 | 58.54 | 54.27 | |||||||||||||||
11 | paris-stanford | 2 | UD v1 basic | WSJ 00–20 (SDP Sub-Set) | 802,717 | txt | 55.79 | 44.56 | 49.55 | 99.04 | 39.02 | 55.98 | 65.87 | 61.30 | 63.50 | 56.34 | |||||||||||||||
12 | paris-stanford | 3 | UD v1 enhanced | WSJ 00–20 (SDP Sub-Set) | 802,717 | txt | 57.48 | 41.64 | 48.29 | 99.06 | 39.77 | 56.75 | 66.22 | 62.43 | 64.27 | 56.44 | |||||||||||||||
13 | paris-stanford | 4 | UD v1 enhanced++ | WSJ 00–20 (SDP Sub-Set) | 802,717 | txt | 58.55 | 39.50 | 47.17 | 99.03 | 38.64 | 55.59 | 65.10 | 61.75 | 63.38 | 55.38 | |||||||||||||||
14 | paris-stanford | 5 | UD v1 enhanced++ diathesis | WSJ 00–20 (SDP Sub-Set) | 802,717 | txt | 55.58 | 43.37 | 48.72 | 99.03 | 38.64 | 55.59 | 66.62 | 62.03 | 64.24 | 56.18 | |||||||||||||||
15 | paris-stanford | 6 | UD v1 enhanced++ diathesis-- | WSJ 00–20 (SDP Sub-Set) | 802,717 | txt | 58.11 | 39.19 | 46.81 | 99.06 | 39.77 | 56.75 | 64.21 | 60.27 | 62.18 | 55.25 | |||||||||||||||
16 | paris-stanford | 7 | UD v1 basic | WSJ, Brown, GENIA | 1,692,030 | txt | 57.69 | 42.80 | 49.14 | 99.05 | 39.39 | 56.36 | 65.78 | 60.96 | 63.28 | 56.26 | |||||||||||||||
17 | paris-stanford | 8 | UD v1 enhanced | WSJ, Brown, GENIA | 1,692,030 | txt | 54.90 | 44.75 | 49.31 | 99.07 | 40.15 | 57.14 | 65.59 | 62.42 | 63.97 | 56.81 | 3 | ||||||||||||||
18 | paris-stanford | 9 | UD v1 enhanced++ | WSJ, Brown, GENIA | 1,692,030 | txt | 58.03 | 43.02 | 49.41 | 99.04 | 39.02 | 55.98 | 66.77 | 61.04 | 63.78 | 56.39 | |||||||||||||||
19 | paris-stanford | 10 | UD v1 enhanced++ diathesis | WSJ, Brown, GENIA | 1,692,030 | txt | 59.88 | 40.19 | 48.10 | 98.97 | 36.36 | 53.18 | 65.86 | 60.92 | 63.29 | 54.86 | |||||||||||||||
20 | paris-stanford | 11 | UD v1 enhanced++ diathesis-- | WSJ, Brown, GENIA | 1,692,030 | txt | 58.92 | 40.07 | 47.70 | 99.06 | 39.77 | 56.75 | 64.90 | 60.56 | 62.65 | 55.70 | |||||||||||||||
21 | peking | 0 | DM | SDP 2015 | 802,717 | tt | 59.28 | 34.22 | 43.39 | 99.15 | 43.94 | 60.89 | 65.63 | 53.64 | 59.03 | 54.44 | |||||||||||||||
22 | peking | 1 | CCD | SDP 2016 | 801,149 | tt | 58.26 | 40.07 | 47.48 | 99.15 | 44.32 | 61.26 | 66.57 | 54.55 | 59.96 | 56.23 | 6 | ||||||||||||||
23 | peking | 2 | DM | SDP 2015 | 802,717 | tt | |||||||||||||||||||||||||
24 | peking | 3 | CCD | SDP 2016 | 801,149 | tt | |||||||||||||||||||||||||
25 | peking | 4 | DM | SDP 2015 | 802,717 | tt | 55.42 | 40.95 | 47.10 | 99.10 | 41.67 | 58.67 | 65.74 | 53.66 | 59.09 | 54.95 | |||||||||||||||
26 | peking | 5 | CCD | SDP 2016 | 801,149 | tt | 54.73 | 42.17 | 47.64 | 99.12 | 42.42 | 59.41 | 66.97 | 54.84 | 60.30 | 55.78 | |||||||||||||||
27 | prague | 0 | UD v2.0 | English 2.0 | 204,585 | txt | CoNLL 2017 | 53.84 | 36.61 | 43.58 | 99.10 | 41.83 | 58.83 | 62.61 | 57.21 | 59.79 | 54.07 | ||||||||||||||
28 | prague | 1 | UD v2.0 | English 2.0 | 204,585 | tt | 56.35 | 38.21 | 45.54 | 99.16 | 44.70 | 61.62 | 62.31 | 59.74 | 61.00 | 56.05 | 7 | ||||||||||||||
29 | prague | 2 | UD v2.0 | English, LinES, ParTUT 2.0 | 292,205 | txt | 53.22 | 37.87 | 44.25 | 99.12 | 42.97 | 59.95 | 63.45 | 54.63 | 58.71 | 54.30 | |||||||||||||||
30 | prague | 3 | UD v2.0 | English 2.0 | 192,552 | txt | CoNLL 2017 | 51.91 | 36.27 | 42.70 | 99.12 | 42.97 | 59.95 | 61.26 | 56.72 | 58.90 | 53.85 | ||||||||||||||
31 | prague | 4 | UD v1.2 | English 2.0 | 204,585 | txt | 51.71 | 37.12 | 43.22 | 98.90 | 34.22 | 50.85 | 61.00 | 56.25 | 58.53 | 50.86 | |||||||||||||||
32 | stanford-paris | 0 | Stanford Basic | WSJ, Brown, GENIA | 1,692,030 | txt | 56.93 | 45.03 | 50.29 | 99.22 | 48.48 | 65.13 | 67.26 | 60.54 | 63.72 | 59.71 | |||||||||||||||
33 | stanford-paris | 1 | UD v1 basic | WSJ 00–20 (SDP Sub-Set) | 802,717 | txt | 57.59 | 40.76 | 47.73 | 99.19 | 46.21 | 63.05 | 67.47 | 61.30 | 64.24 | 58.34 | |||||||||||||||
34 | stanford-paris | 2 | UD v1 enhanced | WSJ 00–20 (SDP Sub-Set) | 802,717 | txt | 57.24 | 40.98 | 47.76 | 99.20 | 46.97 | 63.75 | 67.69 | 61.02 | 64.18 | 58.57 | |||||||||||||||
35 | stanford-paris | 3 | UD v1 enhanced++ | WSJ 00–20 (SDP Sub-Set) | 802,717 | txt | 56.76 | 42.74 | 48.76 | 99.21 | 47.35 | 64.10 | 67.43 | 61.58 | 64.37 | 59.08 | |||||||||||||||
36 | stanford-paris | 4 | UD v1 enhanced++ diathesis | WSJ 00–20 (SDP Sub-Set) | 802,717 | txt | 58.86 | 40.51 | 47.99 | 99.19 | 46.21 | 63.05 | 66.68 | 61.95 | 64.23 | 58.42 | |||||||||||||||
37 | stanford-paris | 5 | UD v1 basic | WSJ, Brown, GENIA | 1,692,030 | txt | 58.75 | 42.21 | 49.13 | 99.22 | 48.11 | 64.80 | 68.18 | 61.56 | 64.70 | 59.54 | |||||||||||||||
38 | stanford-paris | 6 | UD v1 enhanced | WSJ, Brown, GENIA | 1,692,030 | txt | 58.36 | 44.09 | 50.23 | 99.24 | 49.62 | 66.16 | 68.86 | 61.81 | 65.14 | 60.51 | 1 | ||||||||||||||
39 | stanford-paris | 7 | UD v1 enhanced++ | WSJ, Brown, GENIA | 1,692,030 | txt | 62.30 | 41.55 | 49.85 | 99.20 | 46.97 | 63.75 | 68.44 | 62.25 | 65.20 | 59.60 | |||||||||||||||
40 | stanford-paris | 8 | UD v1 enhanced++ diathesis | WSJ, Brown, GENIA | 1,692,030 | txt | 57.47 | 44.47 | 50.14 | 99.21 | 47.73 | 64.45 | 67.64 | 62.57 | 65.01 | 59.87 | |||||||||||||||
41 | stanford-paris | 9 | UD v1 enhanced++ diathesis-- | WSJ 00–20 (SDP Sub-Set) | 802,717 | txt | 55.29 | 43.21 | 48.51 | 99.16 | 44.70 | 61.62 | 66.68 | 61.42 | 63.94 | 58.02 | |||||||||||||||
42 | stanford-paris | 10 | UD v1 enhanced++ diathesis-- | WSJ, Brown, GENIA | 1,692,030 | txt | 57.22 | 42.83 | 48.99 | 99.22 | 48.48 | 65.13 | 67.30 | 62.01 | 64.55 | 59.56 | |||||||||||||||
43 | szeged | 0 | CoNLL'08 | tt | 60.20 | 39.69 | 47.84 | 99.17 | 45.08 | 61.98 | 66.73 | 65.04 | 65.87 | 58.57 | 2 | ||||||||||||||||
44 | szeged | 1 | tt | 59.09 | 39.53 | 47.37 | 99.14 | 43.56 | 60.53 | 67.04 | 65.63 | 66.33 | 58.07 | ||||||||||||||||||
45 | szeged | 2 | tt | 57.93 | 39.13 | 46.71 | 99.15 | 44.32 | 61.26 | 66.05 | 60.45 | 63.13 | 57.03 | ||||||||||||||||||
46 | szeged | 3 | tt | 55.14 | 40.48 | 46.69 | 99.12 | 42.80 | 59.78 | 65.35 | 61.28 | 63.25 | 56.57 | ||||||||||||||||||
47 | szeged | 4 | tt | 55.12 | 39.41 | 45.96 | 99.11 | 42.05 | 59.05 | 63.37 | 61.66 | 62.50 | 55.84 | ||||||||||||||||||
48 | upf | 0 | SSyntS | WSJ 02–21 | 958,167 | txt | 53.21 | 41.36 | 46.54 | 99.12 | 42.80 | 59.78 | 66.25 | 61.19 | 63.62 | 56.65 | 4 | ||||||||||||||
49 | upf | 1 | DSyntS | WSJ 02–21 | 958,167 | txt | 54.06 | 39.94 | 45.94 | 98.15 | 20.08 | 33.34 | 64.65 | 56.71 | 60.42 | 46.57 | |||||||||||||||
50 | upf | 2 | PredArg | WSJ 02–21 | 958,167 | txt | 56.37 | 39.63 | 46.54 | 97.96 | 18.18 | 30.67 | 61.03 | 51.50 | 55.86 | 44.36 | |||||||||||||||
51 | uw | 0 | DM | SDP 2015 | 802,717 | tt | 54.86 | 35.14 | 42.84 | 99.06 | 39.77 | 56.75 | 67.31 | 54.41 | 60.18 | 53.26 | 8 | ||||||||||||||
52 | |||||||||||||||||||||||||||||||
53 | |||||||||||||||||||||||||||||||
54 | |||||||||||||||||||||||||||||||
55 | |||||||||||||||||||||||||||||||
56 | |||||||||||||||||||||||||||||||
57 | |||||||||||||||||||||||||||||||
58 | |||||||||||||||||||||||||||||||
59 | |||||||||||||||||||||||||||||||
60 | |||||||||||||||||||||||||||||||
61 | |||||||||||||||||||||||||||||||
62 | |||||||||||||||||||||||||||||||
63 | |||||||||||||||||||||||||||||||
64 | |||||||||||||||||||||||||||||||
65 | |||||||||||||||||||||||||||||||
66 | |||||||||||||||||||||||||||||||
67 | |||||||||||||||||||||||||||||||
68 | |||||||||||||||||||||||||||||||
69 | |||||||||||||||||||||||||||||||
70 | |||||||||||||||||||||||||||||||
71 | |||||||||||||||||||||||||||||||
72 | |||||||||||||||||||||||||||||||
73 | |||||||||||||||||||||||||||||||
74 | |||||||||||||||||||||||||||||||
75 | |||||||||||||||||||||||||||||||
76 | |||||||||||||||||||||||||||||||
77 | |||||||||||||||||||||||||||||||
78 | |||||||||||||||||||||||||||||||
79 | |||||||||||||||||||||||||||||||
80 | |||||||||||||||||||||||||||||||
81 | |||||||||||||||||||||||||||||||
82 | |||||||||||||||||||||||||||||||
83 | |||||||||||||||||||||||||||||||
84 | |||||||||||||||||||||||||||||||
85 | |||||||||||||||||||||||||||||||
86 | |||||||||||||||||||||||||||||||
87 | |||||||||||||||||||||||||||||||
88 | |||||||||||||||||||||||||||||||
89 | |||||||||||||||||||||||||||||||
90 | |||||||||||||||||||||||||||||||
91 | |||||||||||||||||||||||||||||||
92 | |||||||||||||||||||||||||||||||
93 | |||||||||||||||||||||||||||||||
94 | |||||||||||||||||||||||||||||||
95 | |||||||||||||||||||||||||||||||
96 | |||||||||||||||||||||||||||||||
97 | |||||||||||||||||||||||||||||||
98 | |||||||||||||||||||||||||||||||
99 | |||||||||||||||||||||||||||||||
100 |