A | B | C | D | E | F | G | H | I | J | K | L | M | N | O | P | Q | R | S | T | U | V | W | X | Y | Z | |
---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
1 | ||||||||||||||||||||||||||
2 | Danyal | Trial Number | Time (min:sec) | Comments | ||||||||||||||||||||||
3 | Note I: 'stuck block' can be considered a failure, even if subsequent actions get the block to actually drop correct. I count them as place failures. | |||||||||||||||||||||||||
4 | [This ambiguity is why we need to be careful when discussing "failure cases" because we can be lenient or strict.] | |||||||||||||||||||||||||
5 | [We should make a distinction between recoverable failures and irrecoverable failures. That would help.] | |||||||||||||||||||||||||
6 | Note II: "First set" refers to moving the first six blocks from one side of the board to another. The "second set" refers to moving those six back to the original side. Doing both sets completes a trajectory. | |||||||||||||||||||||||||
7 | Note III: we are very strict in assigning grasp failures, basically any time we need to even do a second grasp "motion" is a failure. But those are corrected quickly by humans. | |||||||||||||||||||||||||
8 | ||||||||||||||||||||||||||
9 | (NOT REPORTING THESE) | First set failure | Second set failure | Irrecoverable | (He had no irrecoverable failures among all of his 34 trajectories) | |||||||||||||||||||||
10 | Hand-over | 1 | 1:19 | "Place failure" on the second set, did not drop correctly, Danyal corrected it. (I have a bad video, see Minho's videos.) | 0 | |||||||||||||||||||||
11 | 2 | 1:05 | No failure cases. (I have a bad video, see Minho's videos.) | 0 | ||||||||||||||||||||||
12 | 3 | 1:16 | Had a 'stuck block' on first set but the next drop was able to hit it... otherwise no issues. | 0 | ||||||||||||||||||||||
13 | 4 | 1:11 | "Place failure" on the second set, third block. Danyal corrected it. | 0 | ||||||||||||||||||||||
14 | 5 | 1:21 | No failure cases, was a bit long due to repeated attempts to drop at correct spot. | 0 | ||||||||||||||||||||||
15 | 6 | 1:17 | Had a 'stuck block' on first set but Danyal nudged the block to drop correctly. | 0 | ||||||||||||||||||||||
16 | 7 | 1:15 | No failure cases. | 0 | ||||||||||||||||||||||
17 | 8 | 1:04 | "Grasp failure" on the second set (fifth block) where Danyal grabbed it and missed, but was able to get it on the next grip. | 0 | ||||||||||||||||||||||
18 | 9 | 1:06 | No failure cases. | 0 | ||||||||||||||||||||||
19 | 10 | 1:02 | "Place failure" on second set, third block, Danyal was able to correct for it by picking it up afterwards. | 0 | ||||||||||||||||||||||
20 | (REPORT THIS -- DUAL ARM) | Pick failures | Place failures | Time (s) | Attempts | |||||||||||||||||||||
21 | No handover | 1 | 0:43 | Had a 'stuck block / place failure' on first set, third pair, subsequent action was able to fix it. | 1 | 0 | 0 | 1 | 43 | 12 | 3.583333333 | |||||||||||||||
22 | 2 | 0:38 | No failure cases. | 0 | 0 | 0 | 38 | 12 | 3.166666667 | |||||||||||||||||
23 | 3 | 0:32 | No failure cases. | 0 | 0 | 0 | 32 | 12 | 2.666666667 | |||||||||||||||||
24 | 4 | 0:35 | "Grasp failure" on first set, first pair, subsequent action was able to grasp it correctly. | 1 | 0 | 1 | 0 | 35 | 13 | 2.692307692 | ||||||||||||||||
25 | 5 | 0:34 | No failure cases. | 0 | 0 | 0 | 34 | 12 | 2.833333333 | |||||||||||||||||
26 | 6 | 0:31 | No failure cases. | 0 | 0 | 0 | 31 | 12 | 2.583333333 | |||||||||||||||||
27 | 7 | 0:31 | Had a 'stuck block / place failure' on the first set, but that was easily corrected, and it was also due to positioning of an existing block). | 1 | 0 | 0 | 1 | 31 | 12 | 2.583333333 | ||||||||||||||||
28 | 8 | 0:28 | "Grasp failure" on second set, last pair, but was quickly corrected. | 1 | 0 | 1 | 0 | 28 | 13 | 2.153846154 | ||||||||||||||||
29 | 9 | 0:27 | No failure cases. | 0 | 0 | 0 | 27 | 12 | 2.25 | |||||||||||||||||
30 | 10 | 0:31 | Had a 'stuck block / place failure' on the first set, but it was easiliy corrected in a subsequent action. | 1 | 0 | 0 | 1 | 31 | 12 | 2.583333333 | ||||||||||||||||
31 | (REPORT THIS -- SINGLE ARM) | 122 | 2.709615385 | AVERAGE TO REPORT | ||||||||||||||||||||||
32 | One arm (Nov 18) | 1 | 0:55 | No failure cases. | 0 | 0 | 0 | For this all trials had 12 attempts. | ||||||||||||||||||
33 | 2 | 0:48 | No failure cases. | 0 | 0 | 0 | Therefore we take average time of each trial, and divide by 12 to get the time per attempt. | |||||||||||||||||||
34 | 3 | 0:58 | No failure cases (could MAYBE argue a grasp failure on first set but really hard to justify even by our strict criteria) | 0 | 0 | 0 | Pretty straightforward. | |||||||||||||||||||
35 | 4 | 0:56 | No failure cases. | 0 | 0 | 0 | 55.3 | 12 | 4.608333333 | |||||||||||||||||
36 | 5 | 0:52 | No failure cases. | 0 | 0 | 0 | ||||||||||||||||||||
37 | 6 | 0:58 | No failure cases. | 0 | 0 | 0 | ||||||||||||||||||||
38 | 7 | 1:00 | No failure cases. | 0 | 0 | 0 | ||||||||||||||||||||
39 | 8 | 0:55 | No failure cases. | 0 | 0 | 0 | ||||||||||||||||||||
40 | 9 | 0:58 | No failure cases. | 0 | 0 | 0 | ||||||||||||||||||||
41 | 10 | 0:53 | No failure cases. | 0 | 0 | 0 | This is only because we know he did 12 attempts for each episode. Otherwise we'd have to do extra calculations. | |||||||||||||||||||
42 | Total attempts | Num success | Time | Per attempt | ||||||||||||||||||||||
43 | Two arm no H-over (Dec 06) | 1 | 0:45 | Place failure and grasp failure on first set, quickly corrected (especially grasp, this is harsh). Place failure on second set. | 2 | 1 | 0 | 1 | 2 | 12 | 9 | 41.5 | 12 | 3.458333333 | ||||||||||||
44 | 2 | 0:38 | Place failure on second set, quickly corrected. | 0 | 0 | 0 | 0 | 1 | 12 | 11 | ||||||||||||||||
45 | Sums + average | 24 | 0.8333333333 | |||||||||||||||||||||||
46 | One arm no H-over (Dec 06) | 1 | 1:04 | No failure cases, though a bit silly in that he was able to get two blocks at once due to stickiness of the paint. | 0 | 0 | 0 | 0 | 0 | 12 | 12 | 61 | 12 | 5.083333333 | ||||||||||||
47 | 2 | 0:58 | Place failure, first set, corrected. No failure cases (pooossibly grasp for first set but that'd be VERY harsh). | 1 | 0 | 0 | 0 | 1 | 12 | 11 | ||||||||||||||||
48 | Note: this is not a count of the failure type but which *set* it was. | Sums + average | 24 | 0.9583333333 | ||||||||||||||||||||||
49 | Not the same as what we have in the dvrk automated spreadsheet, | |||||||||||||||||||||||||
50 | where we count the number of failure cases. | |||||||||||||||||||||||||
51 | See the next columns for that. | |||||||||||||||||||||||||
52 | ||||||||||||||||||||||||||
53 | ||||||||||||||||||||||||||
54 | ||||||||||||||||||||||||||
55 | ||||||||||||||||||||||||||
56 | ||||||||||||||||||||||||||
57 | ||||||||||||||||||||||||||
58 | ||||||||||||||||||||||||||
59 | ||||||||||||||||||||||||||
60 | ||||||||||||||||||||||||||
61 | ||||||||||||||||||||||||||
62 | ||||||||||||||||||||||||||
63 | ||||||||||||||||||||||||||
64 | ||||||||||||||||||||||||||
65 | ||||||||||||||||||||||||||
66 | ||||||||||||||||||||||||||
67 | ||||||||||||||||||||||||||
68 | ||||||||||||||||||||||||||
69 | ||||||||||||||||||||||||||
70 | ||||||||||||||||||||||||||
71 | ||||||||||||||||||||||||||
72 | ||||||||||||||||||||||||||
73 | ||||||||||||||||||||||||||
74 | ||||||||||||||||||||||||||
75 | ||||||||||||||||||||||||||
76 | ||||||||||||||||||||||||||
77 | ||||||||||||||||||||||||||
78 | ||||||||||||||||||||||||||
79 | ||||||||||||||||||||||||||
80 | ||||||||||||||||||||||||||
81 | ||||||||||||||||||||||||||
82 | ||||||||||||||||||||||||||
83 | ||||||||||||||||||||||||||
84 | ||||||||||||||||||||||||||
85 | ||||||||||||||||||||||||||
86 | ||||||||||||||||||||||||||
87 | ||||||||||||||||||||||||||
88 | ||||||||||||||||||||||||||
89 | ||||||||||||||||||||||||||
90 | ||||||||||||||||||||||||||
91 | ||||||||||||||||||||||||||
92 | ||||||||||||||||||||||||||
93 | ||||||||||||||||||||||||||
94 | ||||||||||||||||||||||||||
95 | ||||||||||||||||||||||||||
96 | ||||||||||||||||||||||||||
97 | ||||||||||||||||||||||||||
98 | ||||||||||||||||||||||||||
99 | ||||||||||||||||||||||||||
100 |