Logo AND Algorithmique Numérique Distribuée

Public GIT Repository
eb31d21baa9ebab5a3936d7e7878a6e92cfed2cd
[simgrid.git] / examples / msg / platform-failures / platform-failures.tesh
1 #!/usr/bin/env tesh
2
3 p Testing a simple master/worker example application handling failures TCP crosstraffic DISABLED
4
5 ! output sort 19
6 $ $SG_TEST_EXENV ${bindir:=.}/platform-failures$EXEEXT --log=xbt_cfg.thres:critical --log=no_loc ${platfdir}/small_platform_with_failures.xml ${srcdir}/../app-masterworker/app-masterworker_d.xml --cfg=path:${srcdir} --cfg=network/crosstraffic:0 "--log=root.fmt:[%10.6r]%e(%i:%P@%h)%e%m%n" --log=surf_cpu.t:verbose
7 > [  0.000000] (0:maestro@) Cannot launch process 'worker' on failed host 'Fafard'
8 > [  0.000000] (1:master@Tremblay) Got 5 workers and 20 tasks to process
9 > [  0.000000] (1:master@Tremblay) Send a message to worker-0
10 > [  0.010309] (1:master@Tremblay) Send to worker-0 completed
11 > [  0.010309] (2:worker@Tremblay) Start execution...
12 > [  0.000000] (2:worker@Tremblay) Waiting a message on worker-0
13 > [  0.000000] (3:worker@Jupiter) Waiting a message on worker-1
14 > [  0.000000] (4:worker@Ginette) Waiting a message on worker-3
15 > [  0.000000] (5:worker@Bourassa) Waiting a message on worker-4
16 > [  0.010309] (1:master@Tremblay) Send a message to worker-1
17 > [  1.000000] (0:maestro@) Restart processes on host Fafard
18 > [  1.000000] (6:worker@Fafard) Waiting a message on worker-2
19 > [  1.000000] (1:master@Tremblay) Mmh. Something went wrong with 'worker-1'. Nevermind. Let's keep going!
20 > [  1.000000] (1:master@Tremblay) Send a message to worker-2
21 > [  1.000000] (3:worker@Jupiter) Gloups. The cpu on which I'm running just turned off!. See you!
22 > [  2.000000] (1:master@Tremblay) Mmh. Something went wrong with 'worker-2'. Nevermind. Let's keep going!
23 > [  2.000000] (6:worker@Fafard) Gloups. The cpu on which I'm running just turned off!. See you!
24 > [  2.000000] (0:maestro@) Restart processes on host Jupiter
25 > [  2.000000] (1:master@Tremblay) Send a message to worker-3
26 > [  2.000000] (7:worker@Jupiter) Waiting a message on worker-1
27 > [  2.010309] (2:worker@Tremblay) Execution complete.
28 > [  2.010309] (2:worker@Tremblay) Waiting a message on worker-0
29 > [  3.030928] (1:master@Tremblay) Send to worker-3 completed
30 > [  3.030928] (1:master@Tremblay) Send a message to worker-4
31 > [  3.030928] (4:worker@Ginette) Start execution...
32 > [  4.061856] (1:master@Tremblay) Send to worker-4 completed
33 > [  4.061856] (1:master@Tremblay) Send a message to worker-0
34 > [  4.061856] (5:worker@Bourassa) Start execution...
35 > [  4.072165] (1:master@Tremblay) Send to worker-0 completed
36 > [  4.072165] (1:master@Tremblay) Send a message to worker-1
37 > [  4.072165] (2:worker@Tremblay) Start execution...
38 > [  5.030928] (4:worker@Ginette) Execution complete.
39 > [  5.030928] (4:worker@Ginette) Waiting a message on worker-3
40 > [  5.103093] (1:master@Tremblay) Send to worker-1 completed
41 > [  5.103093] (1:master@Tremblay) Send a message to worker-2
42 > [  5.103093] (7:worker@Jupiter) Start execution...
43 > [  6.061856] (5:worker@Bourassa) Execution complete.
44 > [  6.061856] (5:worker@Bourassa) Waiting a message on worker-4
45 > [  6.072165] (2:worker@Tremblay) Execution complete.
46 > [  6.072165] (2:worker@Tremblay) Waiting a message on worker-0
47 > [  7.103093] (7:worker@Jupiter) Execution complete.
48 > [  7.103093] (7:worker@Jupiter) Waiting a message on worker-1
49 > [ 15.103093] (1:master@Tremblay) Mmh. Got timeouted while speaking to 'worker-2'. Nevermind. Let's keep going!
50 > [ 15.103093] (1:master@Tremblay) Send a message to worker-3
51 > [ 15.103093] (1:master@Tremblay) Mmh. Something went wrong with 'worker-3'. Nevermind. Let's keep going!
52 > [ 15.103093] (1:master@Tremblay) Send a message to worker-4
53 > [ 15.103093] (4:worker@Ginette) Mmh. Something went wrong. Nevermind. Let's keep going!
54 > [ 15.103093] (4:worker@Ginette) Waiting a message on worker-3
55 > [ 16.134021] (1:master@Tremblay) Send to worker-4 completed
56 > [ 16.134021] (1:master@Tremblay) Send a message to worker-0
57 > [ 16.134021] (5:worker@Bourassa) Start execution...
58 > [ 16.144330] (1:master@Tremblay) Send to worker-0 completed
59 > [ 16.144330] (1:master@Tremblay) Send a message to worker-1
60 > [ 16.144330] (2:worker@Tremblay) Start execution...
61 > [ 17.175258] (1:master@Tremblay) Send to worker-1 completed
62 > [ 17.175258] (1:master@Tremblay) Send a message to worker-2
63 > [ 17.175258] (7:worker@Jupiter) Start execution...
64 > [ 18.134021] (5:worker@Bourassa) Execution complete.
65 > [ 18.134021] (5:worker@Bourassa) Waiting a message on worker-4
66 > [ 18.144330] (2:worker@Tremblay) Execution complete.
67 > [ 18.144330] (2:worker@Tremblay) Waiting a message on worker-0
68 > [ 19.175258] (7:worker@Jupiter) Execution complete.
69 > [ 19.175258] (7:worker@Jupiter) Waiting a message on worker-1
70 > [ 27.175258] (1:master@Tremblay) Mmh. Got timeouted while speaking to 'worker-2'. Nevermind. Let's keep going!
71 > [ 27.175258] (1:master@Tremblay) Send a message to worker-3
72 > [ 28.206186] (1:master@Tremblay) Send to worker-3 completed
73 > [ 28.206186] (1:master@Tremblay) Send a message to worker-4
74 > [ 28.206186] (1:master@Tremblay) Mmh. Something went wrong with 'worker-4'. Nevermind. Let's keep going!
75 > [ 28.206186] (1:master@Tremblay) Send a message to worker-0
76 > [ 28.206186] (4:worker@Ginette) Start execution...
77 > [ 28.206186] (5:worker@Bourassa) Mmh. Something went wrong. Nevermind. Let's keep going!
78 > [ 28.206186] (5:worker@Bourassa) Waiting a message on worker-4
79 > [ 28.216495] (1:master@Tremblay) Send to worker-0 completed
80 > [ 28.216495] (1:master@Tremblay) Send a message to worker-1
81 > [ 28.216495] (2:worker@Tremblay) Start execution...
82 > [ 29.247423] (1:master@Tremblay) Send to worker-1 completed
83 > [ 29.247423] (1:master@Tremblay) Send a message to worker-2
84 > [ 29.247423] (7:worker@Jupiter) Start execution...
85 > [ 30.206186] (4:worker@Ginette) Execution complete.
86 > [ 30.206186] (4:worker@Ginette) Waiting a message on worker-3
87 > [ 30.216495] (2:worker@Tremblay) Execution complete.
88 > [ 30.216495] (2:worker@Tremblay) Waiting a message on worker-0
89 > [ 31.247423] (7:worker@Jupiter) Execution complete.
90 > [ 31.247423] (7:worker@Jupiter) Waiting a message on worker-1
91 > [ 39.247423] (1:master@Tremblay) Mmh. Got timeouted while speaking to 'worker-2'. Nevermind. Let's keep going!
92 > [ 39.247423] (1:master@Tremblay) Send a message to worker-3
93 > [ 40.278351] (1:master@Tremblay) Send to worker-3 completed
94 > [ 40.278351] (1:master@Tremblay) Send a message to worker-4
95 > [ 40.278351] (4:worker@Ginette) Start execution...
96 > [ 41.000000] (4:worker@Ginette) Gloups. The cpu on which I'm running just turned off!. See you!
97 > [ 41.309278] (1:master@Tremblay) Send to worker-4 completed
98 > [ 41.309278] (1:master@Tremblay) All tasks have been dispatched. Let's tell everybody the computation is over.
99 > [ 41.309278] (2:worker@Tremblay) I'm done. See you!
100 > [ 41.309278] (5:worker@Bourassa) Start execution...
101 > [ 41.309278] (7:worker@Jupiter) I'm done. See you!
102 > [ 42.309278] (1:master@Tremblay) Mmh. Got timeouted while speaking to 'worker-2'. Nevermind. Let's keep going!
103 > [ 43.309278] (0:maestro@) Simulation time 43.3093
104 > [ 43.309278] (1:master@Tremblay) Mmh. Got timeouted while speaking to 'worker-3'. Nevermind. Let's keep going!
105 > [ 43.309278] (1:master@Tremblay) Goodbye now!
106 > [ 43.309278] (5:worker@Bourassa) Execution complete.
107 > [ 43.309278] (5:worker@Bourassa) Waiting a message on worker-4
108 > [ 43.309278] (5:worker@Bourassa) I'm done. See you!
109
110 p Testing a simple master/worker example application handling failures. TCP crosstraffic ENABLED
111
112 ! output sort 19
113 $ $SG_TEST_EXENV ${bindir:=.}/platform-failures$EXEEXT --log=xbt_cfg.thres:critical --log=no_loc ${platfdir}/small_platform_with_failures.xml ${srcdir}/../app-masterworker/app-masterworker_d.xml --cfg=path:${srcdir} "--log=root.fmt:[%10.6r]%e(%i:%P@%h)%e%m%n" --log=surf_cpu.t:verbose
114 > [  0.000000] (0:maestro@) Cannot launch process 'worker' on failed host 'Fafard'
115 > [  0.000000] (1:master@Tremblay) Got 5 workers and 20 tasks to process
116 > [  0.000000] (1:master@Tremblay) Send a message to worker-0
117 > [  0.000000] (2:worker@Tremblay) Waiting a message on worker-0
118 > [  0.000000] (3:worker@Jupiter) Waiting a message on worker-1
119 > [  0.000000] (4:worker@Ginette) Waiting a message on worker-3
120 > [  0.000000] (5:worker@Bourassa) Waiting a message on worker-4
121 > [  0.010825] (2:worker@Tremblay) Start execution...
122 > [  0.010825] (1:master@Tremblay) Send to worker-0 completed
123 > [  0.010825] (1:master@Tremblay) Send a message to worker-1
124 > [  1.000000] (0:maestro@) Restart processes on host Fafard
125 > [  1.000000] (6:worker@Fafard) Waiting a message on worker-2
126 > [  1.000000] (1:master@Tremblay) Mmh. Something went wrong with 'worker-1'. Nevermind. Let's keep going!
127 > [  1.000000] (1:master@Tremblay) Send a message to worker-2
128 > [  1.000000] (3:worker@Jupiter) Gloups. The cpu on which I'm running just turned off!. See you!
129 > [  2.000000] (0:maestro@) Restart processes on host Jupiter
130 > [  2.000000] (7:worker@Jupiter) Waiting a message on worker-1
131 > [  2.000000] (1:master@Tremblay) Mmh. Something went wrong with 'worker-2'. Nevermind. Let's keep going!
132 > [  2.000000] (1:master@Tremblay) Send a message to worker-3
133 > [  2.000000] (6:worker@Fafard) Gloups. The cpu on which I'm running just turned off!. See you!
134 > [  2.010825] (2:worker@Tremblay) Execution complete.
135 > [  2.010825] (2:worker@Tremblay) Waiting a message on worker-0
136 > [  3.082474] (4:worker@Ginette) Start execution...
137 > [  3.082474] (1:master@Tremblay) Send to worker-3 completed
138 > [  3.082474] (1:master@Tremblay) Send a message to worker-4
139 > [  4.164948] (5:worker@Bourassa) Start execution...
140 > [  4.164948] (1:master@Tremblay) Send to worker-4 completed
141 > [  4.164948] (1:master@Tremblay) Send a message to worker-0
142 > [  4.175773] (2:worker@Tremblay) Start execution...
143 > [  4.175773] (1:master@Tremblay) Send to worker-0 completed
144 > [  4.175773] (1:master@Tremblay) Send a message to worker-1
145 > [  5.082474] (4:worker@Ginette) Execution complete.
146 > [  5.082474] (4:worker@Ginette) Waiting a message on worker-3
147 > [  5.258247] (7:worker@Jupiter) Start execution...
148 > [  5.258247] (1:master@Tremblay) Send to worker-1 completed
149 > [  5.258247] (1:master@Tremblay) Send a message to worker-2
150 > [  6.164948] (5:worker@Bourassa) Execution complete.
151 > [  6.164948] (5:worker@Bourassa) Waiting a message on worker-4
152 > [  6.175773] (2:worker@Tremblay) Execution complete.
153 > [  6.175773] (2:worker@Tremblay) Waiting a message on worker-0
154 > [  7.258247] (7:worker@Jupiter) Execution complete.
155 > [  7.258247] (7:worker@Jupiter) Waiting a message on worker-1
156 > [ 15.258247] (1:master@Tremblay) Mmh. Got timeouted while speaking to 'worker-2'. Nevermind. Let's keep going!
157 > [ 15.258247] (1:master@Tremblay) Send a message to worker-3
158 > [ 15.258247] (4:worker@Ginette) Mmh. Something went wrong. Nevermind. Let's keep going!
159 > [ 15.258247] (4:worker@Ginette) Waiting a message on worker-3
160 > [ 15.258247] (1:master@Tremblay) Mmh. Something went wrong with 'worker-3'. Nevermind. Let's keep going!
161 > [ 15.258247] (1:master@Tremblay) Send a message to worker-4
162 > [ 16.340722] (5:worker@Bourassa) Start execution...
163 > [ 16.340722] (1:master@Tremblay) Send to worker-4 completed
164 > [ 16.340722] (1:master@Tremblay) Send a message to worker-0
165 > [ 16.351546] (2:worker@Tremblay) Start execution...
166 > [ 16.351546] (1:master@Tremblay) Send to worker-0 completed
167 > [ 16.351546] (1:master@Tremblay) Send a message to worker-1
168 > [ 17.434021] (7:worker@Jupiter) Start execution...
169 > [ 17.434021] (1:master@Tremblay) Send to worker-1 completed
170 > [ 17.434021] (1:master@Tremblay) Send a message to worker-2
171 > [ 18.340722] (5:worker@Bourassa) Execution complete.
172 > [ 18.340722] (5:worker@Bourassa) Waiting a message on worker-4
173 > [ 18.351546] (2:worker@Tremblay) Execution complete.
174 > [ 18.351546] (2:worker@Tremblay) Waiting a message on worker-0
175 > [ 19.434021] (7:worker@Jupiter) Execution complete.
176 > [ 19.434021] (7:worker@Jupiter) Waiting a message on worker-1
177 > [ 27.434021] (1:master@Tremblay) Mmh. Got timeouted while speaking to 'worker-2'. Nevermind. Let's keep going!
178 > [ 27.434021] (1:master@Tremblay) Send a message to worker-3
179 > [ 28.516495] (4:worker@Ginette) Start execution...
180 > [ 28.516495] (1:master@Tremblay) Send to worker-3 completed
181 > [ 28.516495] (1:master@Tremblay) Send a message to worker-4
182 > [ 28.516495] (5:worker@Bourassa) Mmh. Something went wrong. Nevermind. Let's keep going!
183 > [ 28.516495] (5:worker@Bourassa) Waiting a message on worker-4
184 > [ 28.516495] (1:master@Tremblay) Mmh. Something went wrong with 'worker-4'. Nevermind. Let's keep going!
185 > [ 28.516495] (1:master@Tremblay) Send a message to worker-0
186 > [ 28.527320] (2:worker@Tremblay) Start execution...
187 > [ 28.527320] (1:master@Tremblay) Send to worker-0 completed
188 > [ 28.527320] (1:master@Tremblay) Send a message to worker-1
189 > [ 29.609794] (7:worker@Jupiter) Start execution...
190 > [ 29.609794] (1:master@Tremblay) Send to worker-1 completed
191 > [ 29.609794] (1:master@Tremblay) Send a message to worker-2
192 > [ 30.516495] (4:worker@Ginette) Execution complete.
193 > [ 30.516495] (4:worker@Ginette) Waiting a message on worker-3
194 > [ 30.527320] (2:worker@Tremblay) Execution complete.
195 > [ 30.527320] (2:worker@Tremblay) Waiting a message on worker-0
196 > [ 31.609794] (7:worker@Jupiter) Execution complete.
197 > [ 31.609794] (7:worker@Jupiter) Waiting a message on worker-1
198 > [ 39.609794] (1:master@Tremblay) Mmh. Got timeouted while speaking to 'worker-2'. Nevermind. Let's keep going!
199 > [ 39.609794] (1:master@Tremblay) Send a message to worker-3
200 > [ 40.692268] (4:worker@Ginette) Start execution...
201 > [ 40.692268] (1:master@Tremblay) Send to worker-3 completed
202 > [ 40.692268] (1:master@Tremblay) Send a message to worker-4
203 > [ 41.000000] (4:worker@Ginette) Gloups. The cpu on which I'm running just turned off!. See you!
204 > [ 41.774742] (5:worker@Bourassa) Start execution...
205 > [ 41.774742] (1:master@Tremblay) Send to worker-4 completed
206 > [ 41.774742] (1:master@Tremblay) All tasks have been dispatched. Let's tell everybody the computation is over.
207 > [ 41.774742] (2:worker@Tremblay) I'm done. See you!
208 > [ 41.774742] (7:worker@Jupiter) I'm done. See you!
209 > [ 42.774742] (1:master@Tremblay) Mmh. Got timeouted while speaking to 'worker-2'. Nevermind. Let's keep going!
210 > [ 43.774742] (5:worker@Bourassa) Execution complete.
211 > [ 43.774742] (5:worker@Bourassa) Waiting a message on worker-4
212 > [ 43.774742] (1:master@Tremblay) Mmh. Got timeouted while speaking to 'worker-3'. Nevermind. Let's keep going!
213 > [ 43.774742] (5:worker@Bourassa) I'm done. See you!
214 > [ 43.774742] (1:master@Tremblay) Goodbye now!
215 > [ 43.774742] (0:maestro@) Simulation time 43.7747
216
217 p Testing a simple master/worker example application handling failures. CPU_TI optimization enabled
218
219 ! output sort 19
220 $ $SG_TEST_EXENV ${bindir:=.}/platform-failures$EXEEXT --log=xbt_cfg.thres:critical --log=no_loc ${platfdir}/small_platform_with_failures.xml ${srcdir}/../app-masterworker/app-masterworker_d.xml --cfg=path:${srcdir} --cfg=cpu/optim:TI "--log=root.fmt:[%10.6r]%e(%i:%P@%h)%e%m%n" --log=surf_cpu.t:verbose
221 > [  0.000000] (0:maestro@) Cannot launch process 'worker' on failed host 'Fafard'
222 > [  0.000000] (1:master@Tremblay) Got 5 workers and 20 tasks to process
223 > [  0.000000] (1:master@Tremblay) Send a message to worker-0
224 > [  0.000000] (2:worker@Tremblay) Waiting a message on worker-0
225 > [  0.000000] (3:worker@Jupiter) Waiting a message on worker-1
226 > [  0.000000] (4:worker@Ginette) Waiting a message on worker-3
227 > [  0.000000] (5:worker@Bourassa) Waiting a message on worker-4
228 > [  0.010825] (1:master@Tremblay) Send to worker-0 completed
229 > [  0.010825] (1:master@Tremblay) Send a message to worker-1
230 > [  0.010825] (2:worker@Tremblay) Start execution...
231 > [  1.000000] (0:maestro@) Restart processes on host Fafard
232 > [  1.000000] (1:master@Tremblay) Mmh. Something went wrong with 'worker-1'. Nevermind. Let's keep going!
233 > [  1.000000] (1:master@Tremblay) Send a message to worker-2
234 > [  1.000000] (3:worker@Jupiter) Gloups. The cpu on which I'm running just turned off!. See you!
235 > [  1.000000] (6:worker@Fafard) Waiting a message on worker-2
236 > [  2.000000] (0:maestro@) Restart processes on host Jupiter
237 > [  2.000000] (1:master@Tremblay) Mmh. Something went wrong with 'worker-2'. Nevermind. Let's keep going!
238 > [  2.000000] (1:master@Tremblay) Send a message to worker-3
239 > [  2.000000] (6:worker@Fafard) Gloups. The cpu on which I'm running just turned off!. See you!
240 > [  2.000000] (7:worker@Jupiter) Waiting a message on worker-1
241 > [  2.010825] (2:worker@Tremblay) Execution complete.
242 > [  2.010825] (2:worker@Tremblay) Waiting a message on worker-0
243 > [  3.082474] (1:master@Tremblay) Send to worker-3 completed
244 > [  3.082474] (1:master@Tremblay) Send a message to worker-4
245 > [  3.082474] (4:worker@Ginette) Start execution...
246 > [  4.164948] (1:master@Tremblay) Send to worker-4 completed
247 > [  4.164948] (1:master@Tremblay) Send a message to worker-0
248 > [  4.164948] (5:worker@Bourassa) Start execution...
249 > [  4.175773] (1:master@Tremblay) Send to worker-0 completed
250 > [  4.175773] (1:master@Tremblay) Send a message to worker-1
251 > [  4.175773] (2:worker@Tremblay) Start execution...
252 > [  5.082474] (4:worker@Ginette) Execution complete.
253 > [  5.082474] (4:worker@Ginette) Waiting a message on worker-3
254 > [  5.258247] (1:master@Tremblay) Send to worker-1 completed
255 > [  5.258247] (1:master@Tremblay) Send a message to worker-2
256 > [  5.258247] (7:worker@Jupiter) Start execution...
257 > [  6.164948] (5:worker@Bourassa) Execution complete.
258 > [  6.164948] (5:worker@Bourassa) Waiting a message on worker-4
259 > [  6.175773] (2:worker@Tremblay) Execution complete.
260 > [  6.175773] (2:worker@Tremblay) Waiting a message on worker-0
261 > [  7.258247] (7:worker@Jupiter) Execution complete.
262 > [  7.258247] (7:worker@Jupiter) Waiting a message on worker-1
263 > [ 15.258247] (1:master@Tremblay) Mmh. Got timeouted while speaking to 'worker-2'. Nevermind. Let's keep going!
264 > [ 15.258247] (1:master@Tremblay) Send a message to worker-3
265 > [ 15.258247] (1:master@Tremblay) Mmh. Something went wrong with 'worker-3'. Nevermind. Let's keep going!
266 > [ 15.258247] (1:master@Tremblay) Send a message to worker-4
267 > [ 15.258247] (4:worker@Ginette) Mmh. Something went wrong. Nevermind. Let's keep going!
268 > [ 15.258247] (4:worker@Ginette) Waiting a message on worker-3
269 > [ 16.340722] (1:master@Tremblay) Send to worker-4 completed
270 > [ 16.340722] (1:master@Tremblay) Send a message to worker-0
271 > [ 16.340722] (5:worker@Bourassa) Start execution...
272 > [ 16.351546] (1:master@Tremblay) Send to worker-0 completed
273 > [ 16.351546] (1:master@Tremblay) Send a message to worker-1
274 > [ 16.351546] (2:worker@Tremblay) Start execution...
275 > [ 17.434021] (1:master@Tremblay) Send to worker-1 completed
276 > [ 17.434021] (1:master@Tremblay) Send a message to worker-2
277 > [ 17.434021] (7:worker@Jupiter) Start execution...
278 > [ 18.340722] (5:worker@Bourassa) Execution complete.
279 > [ 18.340722] (5:worker@Bourassa) Waiting a message on worker-4
280 > [ 18.351546] (2:worker@Tremblay) Execution complete.
281 > [ 18.351546] (2:worker@Tremblay) Waiting a message on worker-0
282 > [ 19.434021] (7:worker@Jupiter) Execution complete.
283 > [ 19.434021] (7:worker@Jupiter) Waiting a message on worker-1
284 > [ 27.434021] (1:master@Tremblay) Mmh. Got timeouted while speaking to 'worker-2'. Nevermind. Let's keep going!
285 > [ 27.434021] (1:master@Tremblay) Send a message to worker-3
286 > [ 28.516495] (1:master@Tremblay) Send to worker-3 completed
287 > [ 28.516495] (1:master@Tremblay) Send a message to worker-4
288 > [ 28.516495] (1:master@Tremblay) Mmh. Something went wrong with 'worker-4'. Nevermind. Let's keep going!
289 > [ 28.516495] (1:master@Tremblay) Send a message to worker-0
290 > [ 28.516495] (4:worker@Ginette) Start execution...
291 > [ 28.516495] (5:worker@Bourassa) Mmh. Something went wrong. Nevermind. Let's keep going!
292 > [ 28.516495] (5:worker@Bourassa) Waiting a message on worker-4
293 > [ 28.527320] (1:master@Tremblay) Send to worker-0 completed
294 > [ 28.527320] (1:master@Tremblay) Send a message to worker-1
295 > [ 28.527320] (2:worker@Tremblay) Start execution...
296 > [ 29.609794] (1:master@Tremblay) Send to worker-1 completed
297 > [ 29.609794] (1:master@Tremblay) Send a message to worker-2
298 > [ 29.609794] (7:worker@Jupiter) Start execution...
299 > [ 30.516495] (4:worker@Ginette) Execution complete.
300 > [ 30.516495] (4:worker@Ginette) Waiting a message on worker-3
301 > [ 30.527320] (2:worker@Tremblay) Execution complete.
302 > [ 30.527320] (2:worker@Tremblay) Waiting a message on worker-0
303 > [ 31.609794] (7:worker@Jupiter) Execution complete.
304 > [ 31.609794] (7:worker@Jupiter) Waiting a message on worker-1
305 > [ 39.609794] (1:master@Tremblay) Mmh. Got timeouted while speaking to 'worker-2'. Nevermind. Let's keep going!
306 > [ 39.609794] (1:master@Tremblay) Send a message to worker-3
307 > [ 40.692268] (1:master@Tremblay) Send to worker-3 completed
308 > [ 40.692268] (1:master@Tremblay) Send a message to worker-4
309 > [ 40.692268] (4:worker@Ginette) Start execution...
310 > [ 41.000000] (4:worker@Ginette) Gloups. The cpu on which I'm running just turned off!. See you!
311 > [ 41.774742] (1:master@Tremblay) Send to worker-4 completed
312 > [ 41.774742] (1:master@Tremblay) All tasks have been dispatched. Let's tell everybody the computation is over.
313 > [ 41.774742] (2:worker@Tremblay) I'm done. See you!
314 > [ 41.774742] (5:worker@Bourassa) Start execution...
315 > [ 41.774742] (7:worker@Jupiter) I'm done. See you!
316 > [ 42.774742] (1:master@Tremblay) Mmh. Got timeouted while speaking to 'worker-2'. Nevermind. Let's keep going!
317 > [ 43.774742] (0:maestro@) Simulation time 43.7747
318 > [ 43.774742] (1:master@Tremblay) Mmh. Got timeouted while speaking to 'worker-3'. Nevermind. Let's keep going!
319 > [ 43.774742] (1:master@Tremblay) Goodbye now!
320 > [ 43.774742] (5:worker@Bourassa) Execution complete.
321 > [ 43.774742] (5:worker@Bourassa) Waiting a message on worker-4
322 > [ 43.774742] (5:worker@Bourassa) I'm done. See you!