No. of cases | Â | Â | States at t1 | Â | Â | Â | Â | Actions at t1 | Â | Â | |
---|---|---|---|---|---|---|---|---|---|---|---|
 | i 1 | i 2 | i 3 | i 4 | i 5 | i 6 | a 1 | a 2 | a 3 | a 4 | a 5 |
22 | 2 | 0 | 0 | 1 | 1 | 1 | 0 | 0 | 0 | 0 | 1 |
 |  |  |  |  |  |  | 0 | 0 | 1 | 0 | 1 |
 |  |  |  |  |  |  | 0 | 0 | 1 | 1 | 1 |
 |  |  |  |  |  |  | 1 | 0 | 0 | 0 | 1 |
 |  |  |  |  |  |  | 1 | 0 | 1 | 0 | 1 |
 |  |  |  |  |  |  | 1 | 0 | 1 | 1 | 1 |
16 | 2 | 0 | 0 | 1 | 1 | 2 | 1 | 0 | 0 | 1 | 1 |
 |  |  |  |  |  |  | 1 | 0 | 1 | 0 | 1 |
 |  |  |  |  |  |  | 1 | 0 | 1 | 1 | 0 |
 |  |  |  |  |  |  | 1 | 0 | 1 | 1 | 1 |
 |  |  |  |  |  |  | 1 | 1 | 1 | 1 | 1 |
...... | ...... | ...... | ...... | ...... | ...... | ...... | ...... | ...... | ...... | ...... | ...... |