| A | B | C | D | E | F | G | H | I | J | K | L | M | N | O | P | Q | R | S | T | U | V | W | X | Y | Z | |
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
1 | LLM | Precision | Recall | F1_Score | Accuracy | |||||||||||||||||||||
2 | claude-3.5-sonnet | 0.345679 | 0.509091 | 0.411765 | 0.907834 | |||||||||||||||||||||
3 | Qwen2.5-Coder-32B-Instruct | 0.198473 | 0.472727 | 0.279570 | 0.849776 | |||||||||||||||||||||
4 | claude-3-5-haiku | 0.219512 | 0.327273 | 0.262774 | 0.882831 | |||||||||||||||||||||
5 | gpt-4o-mini | 0.238806 | 0.290909 | 0.262295 | 0.896074 | |||||||||||||||||||||
6 | gpt-4o | 0.235294 | 0.290909 | 0.260163 | 0.895040 | |||||||||||||||||||||
7 | finetuned-lamma3.1-8b | 0.164179 | 0.400000 | 0.232804 | 0.838350 | |||||||||||||||||||||
8 | mixtral-8x7b-32768 | 0.150000 | 0.436364 | 0.223256 | 0.814650 | |||||||||||||||||||||
9 | gemma-7b-it | 0.121622 | 0.490909 | 0.194946 | 0.759698 | |||||||||||||||||||||
10 | Qwen2.5-72B-Instruct | 0.125926 | 0.309091 | 0.178947 | 0.827051 | |||||||||||||||||||||
11 | gemma2-9b-it | 0.138462 | 0.176471 | 0.155172 | 0.883194 | |||||||||||||||||||||
12 | llama3-8b-8192 | 0.079470 | 0.218182 | 0.116505 | 0.801743 | |||||||||||||||||||||
13 | gemini-1.5-flash-8b | 0.082474 | 0.145455 | 0.105263 | 0.849057 | |||||||||||||||||||||
14 | llama3-groq-70b | 0.032432 | 0.109091 | 0.050000 | 0.749451 | |||||||||||||||||||||
15 | ||||||||||||||||||||||||||
16 | ||||||||||||||||||||||||||
17 | ||||||||||||||||||||||||||
18 | ||||||||||||||||||||||||||
19 | ||||||||||||||||||||||||||
20 | ||||||||||||||||||||||||||
21 | ||||||||||||||||||||||||||
22 | ||||||||||||||||||||||||||
23 | ||||||||||||||||||||||||||
24 | ||||||||||||||||||||||||||
25 | ||||||||||||||||||||||||||
26 | ||||||||||||||||||||||||||
27 | ||||||||||||||||||||||||||
28 | ||||||||||||||||||||||||||
29 | ||||||||||||||||||||||||||
30 | ||||||||||||||||||||||||||
31 | ||||||||||||||||||||||||||
32 | ||||||||||||||||||||||||||
33 | ||||||||||||||||||||||||||
34 | ||||||||||||||||||||||||||
35 | ||||||||||||||||||||||||||
36 | ||||||||||||||||||||||||||
37 | ||||||||||||||||||||||||||
38 | ||||||||||||||||||||||||||
39 | ||||||||||||||||||||||||||
40 | ||||||||||||||||||||||||||
41 | ||||||||||||||||||||||||||
42 | ||||||||||||||||||||||||||
43 | ||||||||||||||||||||||||||
44 | ||||||||||||||||||||||||||
45 | ||||||||||||||||||||||||||
46 | ||||||||||||||||||||||||||
47 | ||||||||||||||||||||||||||
48 | ||||||||||||||||||||||||||
49 | ||||||||||||||||||||||||||
50 | ||||||||||||||||||||||||||
51 | ||||||||||||||||||||||||||
52 | ||||||||||||||||||||||||||
53 | ||||||||||||||||||||||||||
54 | ||||||||||||||||||||||||||
55 | ||||||||||||||||||||||||||
56 | ||||||||||||||||||||||||||
57 | ||||||||||||||||||||||||||
58 | ||||||||||||||||||||||||||
59 | ||||||||||||||||||||||||||
60 | ||||||||||||||||||||||||||
61 | ||||||||||||||||||||||||||
62 | ||||||||||||||||||||||||||
63 | ||||||||||||||||||||||||||
64 | ||||||||||||||||||||||||||
65 | ||||||||||||||||||||||||||
66 | ||||||||||||||||||||||||||
67 | ||||||||||||||||||||||||||
68 | ||||||||||||||||||||||||||
69 | ||||||||||||||||||||||||||
70 | ||||||||||||||||||||||||||
71 | ||||||||||||||||||||||||||
72 | ||||||||||||||||||||||||||
73 | ||||||||||||||||||||||||||
74 | ||||||||||||||||||||||||||
75 | ||||||||||||||||||||||||||
76 | ||||||||||||||||||||||||||
77 | ||||||||||||||||||||||||||
78 | ||||||||||||||||||||||||||
79 | ||||||||||||||||||||||||||
80 | ||||||||||||||||||||||||||
81 | ||||||||||||||||||||||||||
82 | ||||||||||||||||||||||||||
83 | ||||||||||||||||||||||||||
84 | ||||||||||||||||||||||||||
85 | ||||||||||||||||||||||||||
86 | ||||||||||||||||||||||||||
87 | ||||||||||||||||||||||||||
88 | ||||||||||||||||||||||||||
89 | ||||||||||||||||||||||||||
90 | ||||||||||||||||||||||||||
91 | ||||||||||||||||||||||||||
92 | ||||||||||||||||||||||||||
93 | ||||||||||||||||||||||||||
94 | ||||||||||||||||||||||||||
95 | ||||||||||||||||||||||||||
96 | ||||||||||||||||||||||||||
97 | ||||||||||||||||||||||||||
98 | ||||||||||||||||||||||||||
99 | ||||||||||||||||||||||||||
100 |