examples/smpi/replay/smpi_replay.tesh

   1 # use the tested library, not the installed one
   2 # (since we want to pass it to the child, it has to be redefined before each command)
   3 # Go for the first test
   4
   5 p Test of trace replay with SMPI (one trace for all processes)
   6
   7 < replay/actions_bcast.txt
   8 $ mkfile replay/one_trace
   9
  10 $ ../../bin/smpirun -ext smpi_replay --log=replay.thresh:critical --log=smpi_replay.thresh:verbose --log=no_loc --cfg=smpi/cpu_threshold:1 -np 3 -platform ${srcdir:=.}/replay/replay_platform.xml -hostfile ${srcdir:=.}/hostfile ./smpi_replay replay/one_trace
  11 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'maxmin/precision' to '1e-9'
  12 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'network/model' to 'SMPI'
  13 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'network/TCP_gamma' to '4194304'
  14 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'smpi/cpu_threshold' to '1'
  15 > [0.000000] [surf_config/INFO] Switching workstation model to compound since you changed the network and/or cpu model(s)
  16 > [Fafard:2:(0) 65.176535] [smpi_replay/VERBOSE] 2 bcast 5e8 65.176535
  17 > [Fafard:2:(0) 71.729958] [smpi_replay/VERBOSE] 2 compute 5e8 6.553424
  18 > [Jupiter:1:(0) 73.739750] [smpi_replay/VERBOSE] 1 bcast 5e8 73.739750
  19 > [Tremblay:0:(0) 73.739750] [smpi_replay/VERBOSE] 0 bcast 5e8 73.739750
  20 > [Jupiter:1:(0) 76.361119] [smpi_replay/VERBOSE] 1 compute 2e8 2.621369
  21 > [Tremblay:0:(0) 78.836850] [smpi_replay/VERBOSE] 0 compute 5e8 5.097100
  22 > [Fafard:2:(0) 144.013385] [smpi_replay/VERBOSE] 2 bcast 5e8 72.283426
  23 > [Fafard:2:(0) 150.566808] [smpi_replay/VERBOSE] 2 compute 5e8 6.553424
  24 > [Jupiter:1:(0) 152.576600] [smpi_replay/VERBOSE] 1 bcast 5e8 76.215480
  25 > [Tremblay:0:(0) 152.576600] [smpi_replay/VERBOSE] 0 bcast 5e8 73.739750
  26 > [Jupiter:1:(0) 155.197969] [smpi_replay/VERBOSE] 1 compute 2e8 2.621369
  27 > [Tremblay:0:(0) 157.673699] [smpi_replay/VERBOSE] 0 compute 5e8 5.097100
  28 > [Fafard:2:(0) 229.403658] [smpi_replay/VERBOSE] 2 reduce 5e8 5e8 78.836850
  29 > [Tremblay:0:(0) 236.510549] [smpi_replay/VERBOSE] 0 reduce 5e8 5e8 78.836850
  30 > [Jupiter:1:(0) 237.966873] [smpi_replay/VERBOSE] 1 reduce 5e8 5e8 82.768904
  31 > [Jupiter:1:(0) 237.966873] [smpi_replay/INFO] Simulation time 237.967
  32
  33 $ rm -f replay/one_trace
  34
  35 p The same with tracing activated
  36
  37 < replay/actions_bcast.txt
  38 $ mkfile replay/one_trace
  39
  40 $ ../../bin/smpirun -ext smpi_replay --log=replay.thresh:critical --log=no_loc  --cfg=tracing:1 --cfg=tracing/smpi:1 --cfg=tracing/smpi/computing:1 --cfg=smpi/cpu_threshold:1 -np 3 -platform ${srcdir:=.}/replay/replay_platform.xml -hostfile ${srcdir:=.}/hostfile ./smpi_replay replay/one_trace
  41 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'maxmin/precision' to '1e-9'
  42 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'network/model' to 'SMPI'
  43 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'network/TCP_gamma' to '4194304'
  44 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'tracing' to '1'
  45 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'tracing/smpi' to '1'
  46 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'tracing/smpi/computing' to '1'
  47 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'smpi/cpu_threshold' to '1'
  48 > [0.000000] [surf_config/INFO] Switching workstation model to compound since you changed the network and/or cpu model(s)
  49 > [Jupiter:1:(0) 237.966873] [smpi_replay/INFO] Simulation time 237.967
  50
  51 $ rm -f replay/one_trace
  52
  53
  54 $ tail -n +3 ./simgrid.trace
  55 > %EventDef PajeDefineContainerType 0
  56 > %       Alias string
  57 > %       Type string
  58 > %       Name string
  59 > %EndEventDef
  60 > %EventDef PajeDefineVariableType 1
  61 > %       Alias string
  62 > %       Type string
  63 > %       Name string
  64 > %       Color color
  65 > %EndEventDef
  66 > %EventDef PajeDefineStateType 2
  67 > %       Alias string
  68 > %       Type string
  69 > %       Name string
  70 > %EndEventDef
  71 > %EventDef PajeDefineEventType 3
  72 > %       Alias string
  73 > %       Type string
  74 > %       Name string
  75 > %EndEventDef
  76 > %EventDef PajeDefineLinkType 4
  77 > %       Alias string
  78 > %       Type string
  79 > %       StartContainerType string
  80 > %       EndContainerType string
  81 > %       Name string
  82 > %EndEventDef
  83 > %EventDef PajeDefineEntityValue 5
  84 > %       Alias string
  85 > %       Type string
  86 > %       Name string
  87 > %       Color color
  88 > %EndEventDef
  89 > %EventDef PajeCreateContainer 6
  90 > %       Time date
  91 > %       Alias string
  92 > %       Type string
  93 > %       Container string
  94 > %       Name string
  95 > %EndEventDef
  96 > %EventDef PajeDestroyContainer 7
  97 > %       Time date
  98 > %       Type string
  99 > %       Name string
 100 > %EndEventDef
 101 > %EventDef PajeSetVariable 8
 102 > %       Time date
 103 > %       Type string
 104 > %       Container string
 105 > %       Value double
 106 > %EndEventDef
 107 > %EventDef PajeAddVariable 9
 108 > %       Time date
 109 > %       Type string
 110 > %       Container string
 111 > %       Value double
 112 > %EndEventDef
 113 > %EventDef PajeSubVariable 10
 114 > %       Time date
 115 > %       Type string
 116 > %       Container string
 117 > %       Value double
 118 > %EndEventDef
 119 > %EventDef PajeSetState 11
 120 > %       Time date
 121 > %       Type string
 122 > %       Container string
 123 > %       Value string
 124 > %EndEventDef
 125 > %EventDef PajePushState 12
 126 > %       Time date
 127 > %       Type string
 128 > %       Container string
 129 > %       Value string
 130 > %EndEventDef
 131 > %EventDef PajePopState 13
 132 > %       Time date
 133 > %       Type string
 134 > %       Container string
 135 > %EndEventDef
 136 > %EventDef PajeResetState 14
 137 > %       Time date
 138 > %       Type string
 139 > %       Container string
 140 > %EndEventDef
 141 > %EventDef PajeStartLink 15
 142 > %       Time date
 143 > %       Type string
 144 > %       Container string
 145 > %       Value string
 146 > %       StartContainer string
 147 > %       Key string
 148 > %EndEventDef
 149 > %EventDef PajeEndLink 16
 150 > %       Time date
 151 > %       Type string
 152 > %       Container string
 153 > %       Value string
 154 > %       EndContainer string
 155 > %       Key string
 156 > %EndEventDef
 157 > %EventDef PajeNewEvent 17
 158 > %       Time date
 159 > %       Type string
 160 > %       Container string
 161 > %       Value string
 162 > %EndEventDef
 163 > 0 1 0 MPI
 164 > 2 2 1 MPI_STATE
 165 > 4 3 0 1 1 MPI_LINK
 166 > 6 0 1 1 0 "rank-0"
 167 > 5 4 2 computing "0 1 1"
 168 > 5 5 2 action_bcast "0 0.78 0.39"
 169 > 6 0 2 1 0 "rank-1"
 170 > 6 0 3 1 0 "rank-2"
 171 > 12 0 2 1 4
 172 > 13 0 2 1
 173 > 12 0 2 1 5
 174 > 12 0 2 2 4
 175 > 13 0 2 2
 176 > 12 0 2 2 5
 177 > 12 0 2 3 4
 178 > 13 0 2 3
 179 > 12 0 2 3 5
 180 > 13 65.176535 2 3
 181 > 12 65.176535 2 3 4
 182 > 13 71.729958 2 3
 183 > 12 71.729958 2 3 5
 184 > 13 73.739750 2 2
 185 > 12 73.739750 2 2 4
 186 > 13 73.739750 2 1
 187 > 12 73.739750 2 1 4
 188 > 5 6 2 action_reduce "0 1 0"
 189 > 13 76.361119 2 2
 190 > 12 76.361119 2 2 5
 191 > 13 78.836850 2 1
 192 > 12 78.836850 2 1 5
 193 > 13 144.013385 2 3
 194 > 12 144.013385 2 3 4
 195 > 13 150.566808 2 3
 196 > 12 150.566808 2 3 6
 197 > 13 152.576600 2 2
 198 > 12 152.576600 2 2 4
 199 > 13 152.576600 2 1
 200 > 12 152.576600 2 1 4
 201 > 13 155.197969 2 2
 202 > 12 155.197969 2 2 6
 203 > 13 157.673699 2 1
 204 > 12 157.673699 2 1 6
 205 > 13 229.403658 2 3
 206 > 12 229.403658 2 3 4
 207 > 13 229.403658 2 3
 208 > 7 229.403658 1 3
 209 > 13 236.510549 2 1
 210 > 12 236.510549 2 1 4
 211 > 13 236.510549 2 1
 212 > 7 236.510549 1 1
 213 > 13 237.966873 2 2
 214 > 12 237.966873 2 2 4
 215 > 13 237.966873 2 2
 216 > 7 237.966873 1 2
 217
 218 $ rm -f ./simgrid.trace
 219
 220 p Another test of trace replay with SMPI (one trace per process)
 221 $ ../../bin/smpirun -ext smpi_replay --log=replay.thresh:critical --log=smpi_replay.thresh:verbose --log=no_loc --cfg=smpi/cpu_threshold:1 -np 2 -platform ${srcdir:=.}/replay/replay_platform.xml -hostfile ${srcdir:=.}/hostfile ./smpi_replay ${srcdir:=.}/replay/split_traces
 222 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'maxmin/precision' to '1e-9'
 223 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'network/model' to 'SMPI'
 224 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'network/TCP_gamma' to '4194304'
 225 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'smpi/cpu_threshold' to '1'
 226 > [0.000000] [surf_config/INFO] Switching workstation model to compound since you changed the network and/or cpu model(s)
 227 > [Tremblay:0:(0) 0.164463] [smpi_replay/VERBOSE] 0 send 1 1e6 0.164463
 228 > [Jupiter:1:(0) 0.164463] [smpi_replay/VERBOSE] 1 recv 0 1e6 0.164463
 229 > [Jupiter:1:(0) 13.271310] [smpi_replay/VERBOSE] 1 compute 1e9 13.106847
 230 > [Jupiter:1:(0) 13.271310] [smpi_replay/VERBOSE] 1 Isend 0 1e6 0.000000
 231 > [Jupiter:1:(0) 13.271310] [smpi_replay/VERBOSE] 1 Irecv 0 1e6 0.000000
 232 > [Tremblay:0:(0) 13.435773] [smpi_replay/VERBOSE] 0 recv 1 1e6 13.271310
 233 > [Jupiter:1:(0) 13.600235] [smpi_replay/VERBOSE] 1 wait 0.328926
 234 > [Tremblay:0:(0) 13.600235] [smpi_replay/VERBOSE] 0 send 1 1e6 0.164463
 235 > [Tremblay:0:(0) 13.600235] [smpi_replay/INFO] Simulation time 13.6002
 236
 237
 238 p Test of barrier replay with SMPI (one trace for all processes)
 239
 240 < replay/actions_barrier.txt
 241 $ mkfile replay/one_trace
 242
 243 $ ../../bin/smpirun -ext smpi_replay --log=replay.thresh:critical --log=smpi_replay.thresh:verbose --log=no_loc --cfg=smpi/cpu_threshold:1 -np 3 -platform ${srcdir:=.}/replay/replay_platform.xml -hostfile ${srcdir:=.}/hostfile ./smpi_replay replay/one_trace
 244 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'maxmin/precision' to '1e-9'
 245 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'network/model' to 'SMPI'
 246 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'network/TCP_gamma' to '4194304'
 247 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'smpi/cpu_threshold' to '1'
 248 > [0.000000] [surf_config/INFO] Switching workstation model to compound since you changed the network and/or cpu model(s)
 249 > [Tremblay:0:(0) 1.491472] [smpi_replay/VERBOSE] 0 send 1 1e7 1.491472
 250 > [Jupiter:1:(0) 1.491472] [smpi_replay/VERBOSE] 1 recv 0 1e7 1.491472
 251 > [Tremblay:0:(0) 1.495453] [smpi_replay/VERBOSE] 0 barrier 0.003981
 252 > [Jupiter:1:(0) 1.498398] [smpi_replay/VERBOSE] 1 barrier 0.006926
 253 > [Fafard:2:(0) 1.499434] [smpi_replay/VERBOSE] 2 barrier 1.499434
 254 > [Tremblay:0:(0) 2.495453] [smpi_replay/VERBOSE] 0 compute 98095000 1.000000
 255 > [Jupiter:1:(0) 2.498398] [smpi_replay/VERBOSE] 1 compute 76296000 1.000000
 256 > [Fafard:2:(0) 2.499434] [smpi_replay/VERBOSE] 2 compute 76296000 1.000000
 257 > [Fafard:2:(0) 2.499434] [smpi_replay/INFO] Simulation time 2.49943
 258
 259 $ rm -f replay/one_trace
 260
 261 p Test of Isend replay with SMPI (one trace for all processes)
 262
 263 < replay/actions_with_isend.txt
 264 $ mkfile replay/one_trace
 265
 266 $ ../../bin/smpirun -ext smpi_replay --log=replay.thresh:critical --log=smpi_replay.thresh:verbose --log=no_loc --cfg=smpi/cpu_threshold:1 -np 3 -platform ${srcdir:=.}/replay/replay_platform.xml -hostfile ${srcdir:=.}/hostfile ./smpi_replay replay/one_trace
 267 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'maxmin/precision' to '1e-9'
 268 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'network/model' to 'SMPI'
 269 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'network/TCP_gamma' to '4194304'
 270 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'smpi/cpu_threshold' to '1'
 271 > [0.000000] [surf_config/INFO] Switching workstation model to compound since you changed the network and/or cpu model(s)
 272 > [Jupiter:1:(0) 0.000000] [smpi_replay/VERBOSE] 1 Irecv 0 1e9 0.000000
 273 > [Fafard:2:(0) 0.000000] [smpi_replay/VERBOSE] 2 Irecv 1 1e9 0.000000
 274 > [Fafard:2:(0) 6.553424] [smpi_replay/VERBOSE] 2 compute 5e8 6.553424
 275 > [Jupiter:1:(0) 13.106847] [smpi_replay/VERBOSE] 1 compute 1e9 13.106847
 276 > [Tremblay:0:(0) 147.462483] [smpi_replay/VERBOSE] 0 send 1 1e9 147.462483
 277 > [Jupiter:1:(0) 147.462483] [smpi_replay/VERBOSE] 1 wait 134.355636
 278 > [Tremblay:0:(0) 157.656682] [smpi_replay/VERBOSE] 0 compute 1e9 10.194200
 279 > [Fafard:2:(0) 294.947973] [smpi_replay/VERBOSE] 2 wait 288.394550
 280 > [Jupiter:1:(0) 294.947973] [smpi_replay/VERBOSE] 1 send 2 1e9 147.485491
 281 > [Fafard:2:(0) 294.947973] [smpi_replay/VERBOSE] 2 Isend 0 1e9 0.000000
 282 > [Fafard:2:(0) 301.501397] [smpi_replay/VERBOSE] 2 compute 5e8 6.553424
 283 > [Tremblay:0:(0) 425.278035] [smpi_replay/VERBOSE] 0 recv 2 1e9 267.621353
 284 > [Tremblay:0:(0) 425.278035] [smpi_replay/INFO] Simulation time 425.278
 285
 286 $ rm -f replay/one_trace
 287
 288 p Test of Isend replay with SMPI (one trace for all processes)
 289
 290 < replay/actions_allReduce.txt
 291 $ mkfile replay/one_trace
 292
 293 $ ../../bin/smpirun -ext smpi_replay --log=replay.thresh:critical --log=smpi_replay.thresh:verbose --log=no_loc --cfg=smpi/cpu_threshold:1 -np 3 -platform ${srcdir:=.}/replay/replay_platform.xml -hostfile ${srcdir:=.}/hostfile ./smpi_replay replay/one_trace
 294 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'maxmin/precision' to '1e-9'
 295 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'network/model' to 'SMPI'
 296 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'network/TCP_gamma' to '4194304'
 297 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'smpi/cpu_threshold' to '1'
 298 > [0.000000] [surf_config/INFO] Switching workstation model to compound since you changed the network and/or cpu model(s)
 299 > [Fafard:2:(0) 144.013385] [smpi_replay/VERBOSE] 2 allReduce 5e8 5e8 144.013385
 300 > [Fafard:2:(0) 150.566808] [smpi_replay/VERBOSE] 2 compute 5e8 6.553424
 301 > [Jupiter:1:(0) 154.032923] [smpi_replay/VERBOSE] 1 allReduce 5e8 5e8 154.032923
 302 > [Tremblay:0:(0) 154.032923] [smpi_replay/VERBOSE] 0 allReduce 5e8 5e8 154.032923
 303 > [Tremblay:0:(0) 159.130023] [smpi_replay/VERBOSE] 0 compute 5e8 5.097100
 304 > [Jupiter:1:(0) 160.586347] [smpi_replay/VERBOSE] 1 compute 5e8 6.553424
 305 > [Jupiter:1:(0) 160.586347] [smpi_replay/INFO] Simulation time 160.586
 306
 307 $ rm -f replay/one_trace
 308
 309 p Test of AllToAll replay with SMPI (one trace for all processes)
 310
 311 < replay/actions_alltoall.txt
 312 $ mkfile replay/one_trace
 313
 314 $ ../../bin/smpirun -ext smpi_replay --log=replay.thresh:critical --log=smpi_replay.thresh:verbose --log=no_loc --cfg=smpi/cpu_threshold:1 -np 3 -platform ${srcdir:=.}/replay/replay_platform.xml -hostfile ${srcdir:=.}/hostfile ./smpi_replay replay/one_trace
 315 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'maxmin/precision' to '1e-9'
 316 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'network/model' to 'SMPI'
 317 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'network/TCP_gamma' to '4194304'
 318 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'smpi/cpu_threshold' to '1'
 319 > [0.000000] [surf_config/INFO] Switching workstation model to compound since you changed the network and/or cpu model(s)
 320 > [Tremblay:0:(0) 0.004041] [smpi_replay/VERBOSE] 0 allToAll 500 500 0.004041
 321 > [Jupiter:1:(0) 0.006920] [smpi_replay/VERBOSE] 1 allToAll 500 500 0.006920
 322 > [Fafard:2:(0) 0.006920] [smpi_replay/VERBOSE] 2 allToAll 500 500 0.006920
 323 > [Fafard:2:(0) 0.006920] [smpi_replay/INFO] Simulation time 0.00692004
 324
 325 $ rm -f replay/one_trace
 326
 327 p Test of AllToAllv replay with SMPI (one trace for all processes)
 328
 329 < replay/actions_alltoallv.txt
 330 $ mkfile replay/one_trace
 331
 332 $ ../../bin/smpirun -ext smpi_replay --log=replay.thresh:critical --log=smpi_replay.thresh:verbose --log=no_loc --cfg=smpi/cpu_threshold:1 -np 3 -platform ${srcdir:=.}/replay/replay_platform.xml -hostfile ${srcdir:=.}/hostfile ./smpi_replay replay/one_trace
 333 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'maxmin/precision' to '1e-9'
 334 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'network/model' to 'SMPI'
 335 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'network/TCP_gamma' to '4194304'
 336 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'smpi/cpu_threshold' to '1'
 337 > [0.000000] [surf_config/INFO] Switching workstation model to compound since you changed the network and/or cpu model(s)
 338 > [Tremblay:0:(0) 0.003999] [smpi_replay/VERBOSE] 0 allToAllV 100 1 40 30 1 20 150 1000 1 80 100 1 20 110 0.003999
 339 > [Jupiter:1:(0) 0.006934] [smpi_replay/VERBOSE] 1 allToAllV 1000 80 1 40 1 100 160 1000 40 1 30 10 70 140 0.006934
 340 > [Fafard:2:(0) 0.006936] [smpi_replay/VERBOSE] 2 allToAllV 1000 100 30 1 1 120 150 1000 30 40 1 1 50 60 0.006936
 341 > [Fafard:2:(0) 0.006936] [smpi_replay/INFO] Simulation time 0.00693554
 342
 343 $ rm -f replay/one_trace
 344
 345 p Test of waitall replay with SMPI (one trace for all processes)
 346
 347 < replay/actions_waitall.txt
 348 $ mkfile replay/one_trace
 349
 350 $ ../../bin/smpirun -ext smpi_replay --log=replay.thresh:critical --log=smpi_replay.thresh:verbose --log=no_loc --cfg=smpi/cpu_threshold:1 -np 3 -platform ${srcdir:=.}/replay/replay_platform.xml -hostfile ${srcdir:=.}/hostfile ./smpi_replay replay/one_trace
 351 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'maxmin/precision' to '1e-9'
 352 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'network/model' to 'SMPI'
 353 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'network/TCP_gamma' to '4194304'
 354 > [0.000000] [xbt_cfg/INFO] Configuration change: Set 'smpi/cpu_threshold' to '1'
 355 > [0.000000] [surf_config/INFO] Switching workstation model to compound since you changed the network and/or cpu model(s)
 356 > [Tremblay:0:(0) 0.000000] [smpi_replay/VERBOSE] 0 Irecv 1 2000 0.000000
 357 > [Jupiter:1:(0) 0.000000] [smpi_replay/VERBOSE] 1 Isend 0 2000 0.000000
 358 > [Fafard:2:(0) 0.000000] [smpi_replay/VERBOSE] 2 Irecv 1 3000 0.000000
 359 > [Tremblay:0:(0) 0.000000] [smpi_replay/VERBOSE] 0 Irecv 2 3000 0.000000
 360 > [Jupiter:1:(0) 0.000000] [smpi_replay/VERBOSE] 1 Isend 2 3000 0.000000
 361 > [Jupiter:1:(0) 0.000000] [smpi_replay/VERBOSE] 1 waitAll 0.000000
 362 > [Fafard:2:(0) 0.000000] [smpi_replay/VERBOSE] 2 Isend 0 3000 0.000000
 363 > [Tremblay:0:(0) 0.003787] [smpi_replay/VERBOSE] 0 waitAll 0.003787
 364 > [Fafard:2:(0) 0.006220] [smpi_replay/VERBOSE] 2 waitAll 0.006220
 365 > [Fafard:2:(0) 0.006220] [smpi_replay/INFO] Simulation time 0.00622039
 366
 367 $ rm -f replay/one_trace