A | B | C | D | E | F | G | H | I | J | K | L | M | N | O | P | Q | R | S | T | U | V | W | X | Y | Z | |
---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
1 | After Bug fix | Single query | ||||||||||||||||||||||||
2 | Throughput (measured over 30 seconds) | |||||||||||||||||||||||||
3 | Single instance | time per query (seconds) | ||||||||||||||||||||||||
4 | 1 | 225.466 | 0.00258 | |||||||||||||||||||||||
5 | 10 | 388.633 | 0.0182 | |||||||||||||||||||||||
6 | 50 | 344.1 | 0.1121 | |||||||||||||||||||||||
7 | 100 | 359.833 | 0.2199 | |||||||||||||||||||||||
8 | 500 | 383.33 | 1.02 | |||||||||||||||||||||||
9 | 1000 | 394.9 | 1.967 | |||||||||||||||||||||||
10 | ||||||||||||||||||||||||||
11 | Two instances (distributed) | time per query (seconds) | ||||||||||||||||||||||||
12 | 1 | 194.6 | 0.0038 | |||||||||||||||||||||||
13 | 10 | 347.333 | 0.024 | |||||||||||||||||||||||
14 | 50 | 336.866 | 0.1287 | |||||||||||||||||||||||
15 | 100 | 338.6 | 0.2581 | |||||||||||||||||||||||
16 | 500 | |||||||||||||||||||||||||
17 | 1000 | |||||||||||||||||||||||||
18 | ||||||||||||||||||||||||||
19 | ||||||||||||||||||||||||||
20 | Two instances (in same machine) | time per query (seconds) | ||||||||||||||||||||||||
21 | 1 | 207.33 | 0.00298 | |||||||||||||||||||||||
22 | 10 | 307.266 | 0.0255 | |||||||||||||||||||||||
23 | 50 | 302.1 | 0.144 | |||||||||||||||||||||||
24 | 100 | 295.633 | 0.2983 | |||||||||||||||||||||||
25 | 500 | 268.4 | 1.693 | |||||||||||||||||||||||
26 | 1000 | panic: interface conversion: interface {} is nil, not map[string]interface {} | ||||||||||||||||||||||||
27 | ||||||||||||||||||||||||||
28 | Different queries | |||||||||||||||||||||||||
29 | Throughput (measured over 30 seconds) | |||||||||||||||||||||||||
30 | Single instance | time per query (seconds) | ||||||||||||||||||||||||
31 | 1 | 125.9 | 0.0046 | |||||||||||||||||||||||
32 | 10 | 158.866 | 0.0467 | |||||||||||||||||||||||
33 | 50 | 175.733 | 0.23573 | |||||||||||||||||||||||
34 | 100 | 181.3 | 0.4675 | |||||||||||||||||||||||
35 | 500 | 205.566 | 2.2036 | |||||||||||||||||||||||
36 | 1000 | 410.1 | 1.7672 | |||||||||||||||||||||||
37 | ||||||||||||||||||||||||||
38 | Two instances (distributed) | time per query (seconds) | ||||||||||||||||||||||||
39 | 1 | 202.5 | 0.0035 | |||||||||||||||||||||||
40 | 10 | 355.8 | 0.02238 | |||||||||||||||||||||||
41 | 50 | 355.33 | 0.1199 | |||||||||||||||||||||||
42 | 100 | 355.266 | 0.2453 | |||||||||||||||||||||||
43 | 500 | 369.6 | 1.164 | |||||||||||||||||||||||
44 | 1000 | panic: interface conversion: interface {} is nil, not map[string]interface {} | ||||||||||||||||||||||||
45 | ||||||||||||||||||||||||||
46 | All actors, directors | Over three runs of 30 seconds | ||||||||||||||||||||||||
47 | Single instance | time per query (seconds) | ||||||||||||||||||||||||
48 | 1 | 383.455 | 0.001038 | |||||||||||||||||||||||
49 | 10 | 727.755 | 0.00909 | |||||||||||||||||||||||
50 | 50 | 774.488 | 0.0549 | |||||||||||||||||||||||
51 | 100 | 786.47 | 0.112 | |||||||||||||||||||||||
52 | 500 | 815.46 | 0.567 | |||||||||||||||||||||||
53 | 1000 | 816.644 | 0.786 | |||||||||||||||||||||||
54 | ||||||||||||||||||||||||||
55 | Two instances (distributed) | time per query (seconds) | ||||||||||||||||||||||||
56 | 1 | 341.422 | 0.0018 | |||||||||||||||||||||||
57 | 10 | 806.955 | 0.0097 | |||||||||||||||||||||||
58 | 50 | 773.9222 | 0.0571 | (Thoush the cpu usage of other instance doesnt reach 100, so it can handle more) | ||||||||||||||||||||||
59 | 100 | 818.111 | 0.111 | |||||||||||||||||||||||
60 | 500 | 832.255 | 0.57 | |||||||||||||||||||||||
61 | 1000 | 862.74 | 1.1061 | |||||||||||||||||||||||
62 | ||||||||||||||||||||||||||
63 | 4 core machine | All actor/director | ||||||||||||||||||||||||
64 | Two instances (distributed) | time per query (seconds) | ||||||||||||||||||||||||
65 | 1 | 359.42 | 0.0017 | |||||||||||||||||||||||
66 | 10 | 1421.84 | 0.0048 | |||||||||||||||||||||||
67 | 50 | 1521.55 | 0.027 | |||||||||||||||||||||||
68 | 100 | 1549.47 | 0.0543 | |||||||||||||||||||||||
69 | 500 | 1592.94 | 0.276 | |||||||||||||||||||||||
70 | 1000 | 1539.65 | 0.577 | |||||||||||||||||||||||
71 | ||||||||||||||||||||||||||
72 | New Experiment | |||||||||||||||||||||||||
73 | centralised | |||||||||||||||||||||||||
74 | Throughput (Number of queries per second) | time per query (seconds) | min | max | SD | |||||||||||||||||||||
75 | 1 | 320 | 0.0015 | 0.00026 | 0.11294 | -0.0166 | 0.0454 | |||||||||||||||||||
76 | 10 | 451.6 | 0.015123 | 0.00047 | 0.482402 | |||||||||||||||||||||
77 | 50 | 474.94 | 0.0974 | 0.000702 | 1.2696 | |||||||||||||||||||||
78 | 100 | 483.5 | 0.2047 | 0.8648 | 0.00085 | -0.051 | 0.392 | |||||||||||||||||||
79 | 500 | 500.54 | 1.0037 | 0.00094 | 2.695 | |||||||||||||||||||||
80 | 1000 | 573.06 | 1.306 | 0.00097 | 2.958 | -0.03 | 2.6783 | |||||||||||||||||||
81 | ||||||||||||||||||||||||||
82 | ||||||||||||||||||||||||||
83 | 2 instance | |||||||||||||||||||||||||
84 | Throughput (Number of queries per second) | time per query (seconds) | min | max | SD | |||||||||||||||||||||
85 | 1 | 297.06 | 0.00226 | 0.00067 | 0.1509 | |||||||||||||||||||||
86 | 10 | 598.44 | 0.0132 | 0.00096 | 0.3201 | |||||||||||||||||||||
87 | 50 | 630.72 | 0.07191 | 0.00099 | 0.4371 | |||||||||||||||||||||
88 | 100 | 624.78 | 0.1493 | 0.00099 | 0.5923 | |||||||||||||||||||||
89 | 500 | 656.28 | 0.7394 | 0.00099 | 1.593 | |||||||||||||||||||||
90 | 1000 | 667.88 | 1.4988 | 0.001 | 2.576 | |||||||||||||||||||||
91 | ||||||||||||||||||||||||||
92 | 5 instance | |||||||||||||||||||||||||
93 | Throughput (Number of queries per second) | time per query (seconds) | min | max | SD | |||||||||||||||||||||
94 | 1 | 196.1 | 0.0036 | 0.0006 | 0.145 | |||||||||||||||||||||
95 | 10 | 643.62 | 0.0125 | 0.0008 | 0.2429 | |||||||||||||||||||||
96 | 50 | 883.04 | 0.05014 | 0.00097 | 0.31049 | |||||||||||||||||||||
97 | 100 | 900.08 | 0.10156 | 0.00099 | 0.4459 | |||||||||||||||||||||
98 | 500 | 993.72 | 0.493 | 0.00099 | 1.555 | |||||||||||||||||||||
99 | 1000 | 1040.96 | 0.962 | 0.00099 | 1.8465 | |||||||||||||||||||||
100 |