src/smpi/smpi_pmpi.c

   1 /* Copyright (c) 2007, 2008, 2009, 2010. The SimGrid Team.
   2  * All rights reserved.                                                     */
   3
   4 /* This program is free software; you can redistribute it and/or modify it
   5   * under the terms of the license (GNU LGPL) which comes with this package. */
   6
   7 #include "private.h"
   8 #include "smpi_mpi_dt_private.h"
   9
  10 XBT_LOG_NEW_DEFAULT_SUBCATEGORY(smpi_pmpi, smpi,
  11                                 "Logging specific to SMPI (pmpi)");
  12
  13 #ifdef HAVE_TRACING
  14 //this function need to be here because of the calls to smpi_bench
  15 void TRACE_smpi_set_category(const char *category)
  16 {
  17   //need to end bench otherwise categories for execution tasks are wrong
  18   smpi_bench_end();
  19   TRACE_internal_smpi_set_category (category);
  20   //begin bench after changing process's category
  21   smpi_bench_begin();
  22 }
  23 #endif
  24
  25 /* PMPI User level calls */
  26
  27 int PMPI_Init(int *argc, char ***argv)
  28 {
  29   smpi_process_init(argc, argv);
  30 #ifdef HAVE_TRACING
  31   int rank = smpi_process_index();
  32   TRACE_smpi_init(rank);
  33
  34   TRACE_smpi_computing_init(rank);
  35 #endif
  36   smpi_bench_begin();
  37   return MPI_SUCCESS;
  38 }
  39
  40 int PMPI_Finalize(void)
  41 {
  42   smpi_process_finalize();
  43   smpi_bench_end();
  44 #ifdef HAVE_TRACING
  45   int rank = smpi_process_index();
  46   TRACE_smpi_computing_out(rank);
  47   TRACE_smpi_finalize(smpi_process_index());
  48 #endif
  49   smpi_process_destroy();
  50   return MPI_SUCCESS;
  51 }
  52
  53 int PMPI_Init_thread(int *argc, char ***argv, int required, int *provided)
  54 {
  55   if (provided != NULL) {
  56     *provided = MPI_THREAD_MULTIPLE;
  57   }
  58   return MPI_Init(argc, argv);
  59 }
  60
  61 int PMPI_Query_thread(int *provided)
  62 {
  63   int retval;
  64
  65   smpi_bench_end();
  66   if (provided == NULL) {
  67     retval = MPI_ERR_ARG;
  68   } else {
  69     *provided = MPI_THREAD_MULTIPLE;
  70     retval = MPI_SUCCESS;
  71   }
  72   smpi_bench_begin();
  73   return retval;
  74 }
  75
  76 int PMPI_Is_thread_main(int *flag)
  77 {
  78   int retval;
  79
  80   smpi_bench_end();
  81   if (flag == NULL) {
  82     retval = MPI_ERR_ARG;
  83   } else {
  84     *flag = smpi_process_index() == 0;
  85     retval = MPI_SUCCESS;
  86   }
  87   smpi_bench_begin();
  88   return retval;
  89 }
  90
  91 int PMPI_Abort(MPI_Comm comm, int errorcode)
  92 {
  93   smpi_bench_end();
  94   smpi_process_destroy();
  95 #ifdef HAVE_TRACING
  96   int rank = smpi_process_index();
  97   TRACE_smpi_computing_out(rank);
  98 #endif
  99   // FIXME: should kill all processes in comm instead
 100   simcall_process_kill(SIMIX_process_self());
 101   return MPI_SUCCESS;
 102 }
 103
 104 double PMPI_Wtime(void)
 105 {
 106   double time;
 107
 108   smpi_bench_end();
 109   time = SIMIX_get_clock();
 110   smpi_bench_begin();
 111   return time;
 112 }
 113 extern double sg_maxmin_precision;
 114 double PMPI_Wtick(void)
 115 {
 116   return sg_maxmin_precision;
 117 }
 118
 119 int PMPI_Address(void *location, MPI_Aint * address)
 120 {
 121   int retval;
 122
 123   smpi_bench_end();
 124   if (!address) {
 125     retval = MPI_ERR_ARG;
 126   } else {
 127     *address = (MPI_Aint) location;
 128     retval = MPI_SUCCESS;
 129   }
 130   smpi_bench_begin();
 131   return retval;
 132 }
 133
 134 int PMPI_Type_free(MPI_Datatype * datatype)
 135 {
 136   int retval;
 137
 138   smpi_bench_end();
 139   if (!datatype) {
 140     retval = MPI_ERR_ARG;
 141   } else {
 142     smpi_datatype_free(datatype);
 143     retval = MPI_SUCCESS;
 144   }
 145   smpi_bench_begin();
 146   return retval;
 147 }
 148
 149 int PMPI_Type_size(MPI_Datatype datatype, int *size)
 150 {
 151   int retval;
 152
 153   smpi_bench_end();
 154   if (datatype == MPI_DATATYPE_NULL) {
 155     retval = MPI_ERR_TYPE;
 156   } else if (size == NULL) {
 157     retval = MPI_ERR_ARG;
 158   } else {
 159     *size = (int) smpi_datatype_size(datatype);
 160     retval = MPI_SUCCESS;
 161   }
 162   smpi_bench_begin();
 163   return retval;
 164 }
 165
 166 int PMPI_Type_get_extent(MPI_Datatype datatype, MPI_Aint * lb, MPI_Aint * extent)
 167 {
 168   int retval;
 169
 170   smpi_bench_end();
 171   if (datatype == MPI_DATATYPE_NULL) {
 172     retval = MPI_ERR_TYPE;
 173   } else if (lb == NULL || extent == NULL) {
 174     retval = MPI_ERR_ARG;
 175   } else {
 176     retval = smpi_datatype_extent(datatype, lb, extent);
 177   }
 178   smpi_bench_begin();
 179   return retval;
 180 }
 181
 182 int PMPI_Type_extent(MPI_Datatype datatype, MPI_Aint * extent)
 183 {
 184   int retval;
 185   MPI_Aint dummy;
 186
 187   smpi_bench_end();
 188   if (datatype == MPI_DATATYPE_NULL) {
 189     retval = MPI_ERR_TYPE;
 190   } else if (extent == NULL) {
 191     retval = MPI_ERR_ARG;
 192   } else {
 193     retval = smpi_datatype_extent(datatype, &dummy, extent);
 194   }
 195   smpi_bench_begin();
 196   return retval;
 197 }
 198
 199 int PMPI_Type_lb(MPI_Datatype datatype, MPI_Aint * disp)
 200 {
 201   int retval;
 202
 203   smpi_bench_end();
 204   if (datatype == MPI_DATATYPE_NULL) {
 205     retval = MPI_ERR_TYPE;
 206   } else if (disp == NULL) {
 207     retval = MPI_ERR_ARG;
 208   } else {
 209     *disp = smpi_datatype_lb(datatype);
 210     retval = MPI_SUCCESS;
 211   }
 212   smpi_bench_begin();
 213   return retval;
 214 }
 215
 216 int PMPI_Type_ub(MPI_Datatype datatype, MPI_Aint * disp)
 217 {
 218   int retval;
 219
 220   smpi_bench_end();
 221   if (datatype == MPI_DATATYPE_NULL) {
 222     retval = MPI_ERR_TYPE;
 223   } else if (disp == NULL) {
 224     retval = MPI_ERR_ARG;
 225   } else {
 226     *disp = smpi_datatype_ub(datatype);
 227     retval = MPI_SUCCESS;
 228   }
 229   smpi_bench_begin();
 230   return retval;
 231 }
 232
 233 int PMPI_Op_create(MPI_User_function * function, int commute, MPI_Op * op)
 234 {
 235   int retval;
 236
 237   smpi_bench_end();
 238   if (function == NULL || op == NULL) {
 239     retval = MPI_ERR_ARG;
 240   } else {
 241     *op = smpi_op_new(function, commute);
 242     retval = MPI_SUCCESS;
 243   }
 244   smpi_bench_begin();
 245   return retval;
 246 }
 247
 248 int PMPI_Op_free(MPI_Op * op)
 249 {
 250   int retval;
 251
 252   smpi_bench_end();
 253   if (op == NULL) {
 254     retval = MPI_ERR_ARG;
 255   } else if (*op == MPI_OP_NULL) {
 256     retval = MPI_ERR_OP;
 257   } else {
 258     smpi_op_destroy(*op);
 259     *op = MPI_OP_NULL;
 260     retval = MPI_SUCCESS;
 261   }
 262   smpi_bench_begin();
 263   return retval;
 264 }
 265
 266 int PMPI_Group_free(MPI_Group * group)
 267 {
 268   int retval;
 269
 270   smpi_bench_end();
 271   if (group == NULL) {
 272     retval = MPI_ERR_ARG;
 273   } else {
 274     smpi_group_destroy(*group);
 275     *group = MPI_GROUP_NULL;
 276     retval = MPI_SUCCESS;
 277   }
 278   smpi_bench_begin();
 279   return retval;
 280 }
 281
 282 int PMPI_Group_size(MPI_Group group, int *size)
 283 {
 284   int retval;
 285
 286   smpi_bench_end();
 287   if (group == MPI_GROUP_NULL) {
 288     retval = MPI_ERR_GROUP;
 289   } else if (size == NULL) {
 290     retval = MPI_ERR_ARG;
 291   } else {
 292     *size = smpi_group_size(group);
 293     retval = MPI_SUCCESS;
 294   }
 295   smpi_bench_begin();
 296   return retval;
 297 }
 298
 299 int PMPI_Group_rank(MPI_Group group, int *rank)
 300 {
 301   int retval;
 302
 303   smpi_bench_end();
 304   if (group == MPI_GROUP_NULL) {
 305     retval = MPI_ERR_GROUP;
 306   } else if (rank == NULL) {
 307     retval = MPI_ERR_ARG;
 308   } else {
 309     *rank = smpi_group_rank(group, smpi_process_index());
 310     retval = MPI_SUCCESS;
 311   }
 312   smpi_bench_begin();
 313   return retval;
 314 }
 315
 316 int PMPI_Group_translate_ranks(MPI_Group group1, int n, int *ranks1,
 317                               MPI_Group group2, int *ranks2)
 318 {
 319   int retval, i, index;
 320
 321   smpi_bench_end();
 322   if (group1 == MPI_GROUP_NULL || group2 == MPI_GROUP_NULL) {
 323     retval = MPI_ERR_GROUP;
 324   } else {
 325     for (i = 0; i < n; i++) {
 326       index = smpi_group_index(group1, ranks1[i]);
 327       ranks2[i] = smpi_group_rank(group2, index);
 328     }
 329     retval = MPI_SUCCESS;
 330   }
 331   smpi_bench_begin();
 332   return retval;
 333 }
 334
 335 int PMPI_Group_compare(MPI_Group group1, MPI_Group group2, int *result)
 336 {
 337   int retval;
 338
 339   smpi_bench_end();
 340   if (group1 == MPI_GROUP_NULL || group2 == MPI_GROUP_NULL) {
 341     retval = MPI_ERR_GROUP;
 342   } else if (result == NULL) {
 343     retval = MPI_ERR_ARG;
 344   } else {
 345     *result = smpi_group_compare(group1, group2);
 346     retval = MPI_SUCCESS;
 347   }
 348   smpi_bench_begin();
 349   return retval;
 350 }
 351
 352 int PMPI_Group_union(MPI_Group group1, MPI_Group group2,
 353                     MPI_Group * newgroup)
 354 {
 355   int retval, i, proc1, proc2, size, size2;
 356
 357   smpi_bench_end();
 358   if (group1 == MPI_GROUP_NULL || group2 == MPI_GROUP_NULL) {
 359     retval = MPI_ERR_GROUP;
 360   } else if (newgroup == NULL) {
 361     retval = MPI_ERR_ARG;
 362   } else {
 363     size = smpi_group_size(group1);
 364     size2 = smpi_group_size(group2);
 365     for (i = 0; i < size2; i++) {
 366       proc2 = smpi_group_index(group2, i);
 367       proc1 = smpi_group_rank(group1, proc2);
 368       if (proc1 == MPI_UNDEFINED) {
 369         size++;
 370       }
 371     }
 372     if (size == 0) {
 373       *newgroup = MPI_GROUP_EMPTY;
 374     } else {
 375       *newgroup = smpi_group_new(size);
 376       size2 = smpi_group_size(group1);
 377       for (i = 0; i < size2; i++) {
 378         proc1 = smpi_group_index(group1, i);
 379         smpi_group_set_mapping(*newgroup, proc1, i);
 380       }
 381       for (i = size2; i < size; i++) {
 382         proc2 = smpi_group_index(group2, i - size2);
 383         smpi_group_set_mapping(*newgroup, proc2, i);
 384       }
 385     }
 386     smpi_group_use(*newgroup);
 387     retval = MPI_SUCCESS;
 388   }
 389   smpi_bench_begin();
 390   return retval;
 391 }
 392
 393 int PMPI_Group_intersection(MPI_Group group1, MPI_Group group2,
 394                            MPI_Group * newgroup)
 395 {
 396   int retval, i, proc1, proc2, size, size2;
 397
 398   smpi_bench_end();
 399   if (group1 == MPI_GROUP_NULL || group2 == MPI_GROUP_NULL) {
 400     retval = MPI_ERR_GROUP;
 401   } else if (newgroup == NULL) {
 402     retval = MPI_ERR_ARG;
 403   } else {
 404     size = smpi_group_size(group1);
 405     size2 = smpi_group_size(group2);
 406     for (i = 0; i < size2; i++) {
 407       proc2 = smpi_group_index(group2, i);
 408       proc1 = smpi_group_rank(group1, proc2);
 409       if (proc1 == MPI_UNDEFINED) {
 410         size--;
 411       }
 412     }
 413     if (size == 0) {
 414       *newgroup = MPI_GROUP_EMPTY;
 415     } else {
 416       *newgroup = smpi_group_new(size);
 417       size2 = smpi_group_size(group1);
 418       for (i = 0; i < size2; i++) {
 419         proc1 = smpi_group_index(group1, i);
 420         proc2 = smpi_group_rank(group2, proc1);
 421         if (proc2 != MPI_UNDEFINED) {
 422           smpi_group_set_mapping(*newgroup, proc1, i);
 423         }
 424       }
 425     }
 426     smpi_group_use(*newgroup);
 427     retval = MPI_SUCCESS;
 428   }
 429   smpi_bench_begin();
 430   return retval;
 431 }
 432
 433 int PMPI_Group_difference(MPI_Group group1, MPI_Group group2, MPI_Group * newgroup)
 434 {
 435   int retval, i, proc1, proc2, size, size2;
 436
 437   smpi_bench_end();
 438   if (group1 == MPI_GROUP_NULL || group2 == MPI_GROUP_NULL) {
 439     retval = MPI_ERR_GROUP;
 440   } else if (newgroup == NULL) {
 441     retval = MPI_ERR_ARG;
 442   } else {
 443     size = size2 = smpi_group_size(group1);
 444     for (i = 0; i < size2; i++) {
 445       proc1 = smpi_group_index(group1, i);
 446       proc2 = smpi_group_rank(group2, proc1);
 447       if (proc2 != MPI_UNDEFINED) {
 448         size--;
 449       }
 450     }
 451     if (size == 0) {
 452       *newgroup = MPI_GROUP_EMPTY;
 453     } else {
 454       *newgroup = smpi_group_new(size);
 455       for (i = 0; i < size2; i++) {
 456         proc1 = smpi_group_index(group1, i);
 457         proc2 = smpi_group_rank(group2, proc1);
 458         if (proc2 == MPI_UNDEFINED) {
 459           smpi_group_set_mapping(*newgroup, proc1, i);
 460         }
 461       }
 462     }
 463     smpi_group_use(*newgroup);
 464     retval = MPI_SUCCESS;
 465   }
 466   smpi_bench_begin();
 467   return retval;
 468 }
 469
 470 int PMPI_Group_incl(MPI_Group group, int n, int *ranks, MPI_Group * newgroup)
 471 {
 472   int retval, i, index;
 473
 474   smpi_bench_end();
 475   if (group == MPI_GROUP_NULL) {
 476     retval = MPI_ERR_GROUP;
 477   } else if (newgroup == NULL) {
 478     retval = MPI_ERR_ARG;
 479   } else {
 480     if (n == 0) {
 481       *newgroup = MPI_GROUP_EMPTY;
 482     } else if (n == smpi_group_size(group)) {
 483       *newgroup = group;
 484     } else {
 485       *newgroup = smpi_group_new(n);
 486       for (i = 0; i < n; i++) {
 487         index = smpi_group_index(group, ranks[i]);
 488         smpi_group_set_mapping(*newgroup, index, i);
 489       }
 490     }
 491     smpi_group_use(*newgroup);
 492     retval = MPI_SUCCESS;
 493   }
 494   smpi_bench_begin();
 495   return retval;
 496 }
 497
 498 int PMPI_Group_excl(MPI_Group group, int n, int *ranks, MPI_Group * newgroup)
 499 {
 500   int retval, i, size, rank, index;
 501
 502   smpi_bench_end();
 503   if (group == MPI_GROUP_NULL) {
 504     retval = MPI_ERR_GROUP;
 505   } else if (newgroup == NULL) {
 506     retval = MPI_ERR_ARG;
 507   } else {
 508     if (n == 0) {
 509       *newgroup = group;
 510     } else if (n == smpi_group_size(group)) {
 511       *newgroup = MPI_GROUP_EMPTY;
 512     } else {
 513       size = smpi_group_size(group) - n;
 514       *newgroup = smpi_group_new(size);
 515       rank = 0;
 516       while (rank < size) {
 517         for (i = 0; i < n; i++) {
 518           if (ranks[i] == rank) {
 519             break;
 520           }
 521         }
 522         if (i >= n) {
 523           index = smpi_group_index(group, rank);
 524           smpi_group_set_mapping(*newgroup, index, rank);
 525           rank++;
 526         }
 527       }
 528     }
 529     smpi_group_use(*newgroup);
 530     retval = MPI_SUCCESS;
 531   }
 532   smpi_bench_begin();
 533   return retval;
 534 }
 535
 536 int PMPI_Group_range_incl(MPI_Group group, int n, int ranges[][3],
 537                          MPI_Group * newgroup)
 538 {
 539   int retval, i, j, rank, size, index;
 540
 541   smpi_bench_end();
 542   if (group == MPI_GROUP_NULL) {
 543     retval = MPI_ERR_GROUP;
 544   } else if (newgroup == NULL) {
 545     retval = MPI_ERR_ARG;
 546   } else {
 547     if (n == 0) {
 548       *newgroup = MPI_GROUP_EMPTY;
 549     } else {
 550       size = 0;
 551       for (i = 0; i < n; i++) {
 552         for (rank = ranges[i][0];       /* First */
 553              rank >= 0 && rank <= ranges[i][1]; /* Last */
 554              rank += ranges[i][2] /* Stride */ ) {
 555           size++;
 556         }
 557       }
 558       if (size == smpi_group_size(group)) {
 559         *newgroup = group;
 560       } else {
 561         *newgroup = smpi_group_new(size);
 562         j = 0;
 563         for (i = 0; i < n; i++) {
 564           for (rank = ranges[i][0];     /* First */
 565                rank >= 0 && rank <= ranges[i][1];       /* Last */
 566                rank += ranges[i][2] /* Stride */ ) {
 567             index = smpi_group_index(group, rank);
 568             smpi_group_set_mapping(*newgroup, index, j);
 569             j++;
 570           }
 571         }
 572       }
 573     }
 574     smpi_group_use(*newgroup);
 575     retval = MPI_SUCCESS;
 576   }
 577   smpi_bench_begin();
 578   return retval;
 579 }
 580
 581 int PMPI_Group_range_excl(MPI_Group group, int n, int ranges[][3],
 582                          MPI_Group * newgroup)
 583 {
 584   int retval, i, newrank, rank, size, index, add;
 585
 586   smpi_bench_end();
 587   if (group == MPI_GROUP_NULL) {
 588     retval = MPI_ERR_GROUP;
 589   } else if (newgroup == NULL) {
 590     retval = MPI_ERR_ARG;
 591   } else {
 592     if (n == 0) {
 593       *newgroup = group;
 594     } else {
 595       size = smpi_group_size(group);
 596       for (i = 0; i < n; i++) {
 597         for (rank = ranges[i][0];       /* First */
 598              rank >= 0 && rank <= ranges[i][1]; /* Last */
 599              rank += ranges[i][2] /* Stride */ ) {
 600           size--;
 601         }
 602       }
 603       if (size == 0) {
 604         *newgroup = MPI_GROUP_EMPTY;
 605       } else {
 606         *newgroup = smpi_group_new(size);
 607         newrank = 0;
 608         while (newrank < size) {
 609           for (i = 0; i < n; i++) {
 610             add = 1;
 611             for (rank = ranges[i][0];   /* First */
 612                  rank >= 0 && rank <= ranges[i][1];     /* Last */
 613                  rank += ranges[i][2] /* Stride */ ) {
 614               if (rank == newrank) {
 615                 add = 0;
 616                 break;
 617               }
 618             }
 619             if (add == 1) {
 620               index = smpi_group_index(group, newrank);
 621               smpi_group_set_mapping(*newgroup, index, newrank);
 622             }
 623           }
 624         }
 625       }
 626     }
 627     smpi_group_use(*newgroup);
 628     retval = MPI_SUCCESS;
 629   }
 630   smpi_bench_begin();
 631   return retval;
 632 }
 633
 634 int PMPI_Comm_rank(MPI_Comm comm, int *rank)
 635 {
 636   int retval;
 637
 638   smpi_bench_end();
 639   if (comm == MPI_COMM_NULL) {
 640     retval = MPI_ERR_COMM;
 641   } else if (rank == NULL) {
 642     retval = MPI_ERR_ARG;
 643   } else {
 644     *rank = smpi_comm_rank(comm);
 645     retval = MPI_SUCCESS;
 646   }
 647   smpi_bench_begin();
 648   return retval;
 649 }
 650
 651 int PMPI_Comm_size(MPI_Comm comm, int *size)
 652 {
 653   int retval;
 654
 655   smpi_bench_end();
 656   if (comm == MPI_COMM_NULL) {
 657     retval = MPI_ERR_COMM;
 658   } else if (size == NULL) {
 659     retval = MPI_ERR_ARG;
 660   } else {
 661     *size = smpi_comm_size(comm);
 662     retval = MPI_SUCCESS;
 663   }
 664   smpi_bench_begin();
 665   return retval;
 666 }
 667
 668 int PMPI_Comm_get_name (MPI_Comm comm, char* name, int* len)
 669 {
 670   int retval;
 671
 672   smpi_bench_end();
 673   if (comm == MPI_COMM_NULL)  {
 674     retval = MPI_ERR_COMM;
 675   } else if (name == NULL || len == NULL)  {
 676     retval = MPI_ERR_ARG;
 677   } else {
 678     smpi_comm_get_name(comm, name, len);
 679     retval = MPI_SUCCESS;
 680   }
 681   smpi_bench_begin();
 682   return retval;
 683 }
 684
 685 int PMPI_Comm_group(MPI_Comm comm, MPI_Group * group)
 686 {
 687   int retval;
 688
 689   smpi_bench_end();
 690   if (comm == MPI_COMM_NULL) {
 691     retval = MPI_ERR_COMM;
 692   } else if (group == NULL) {
 693     retval = MPI_ERR_ARG;
 694   } else {
 695     *group = smpi_comm_group(comm);
 696     retval = MPI_SUCCESS;
 697   }
 698   smpi_bench_begin();
 699   return retval;
 700 }
 701
 702 int PMPI_Comm_compare(MPI_Comm comm1, MPI_Comm comm2, int *result)
 703 {
 704   int retval;
 705
 706   smpi_bench_end();
 707   if (comm1 == MPI_COMM_NULL || comm2 == MPI_COMM_NULL) {
 708     retval = MPI_ERR_COMM;
 709   } else if (result == NULL) {
 710     retval = MPI_ERR_ARG;
 711   } else {
 712     if (comm1 == comm2) {       /* Same communicators means same groups */
 713       *result = MPI_IDENT;
 714     } else {
 715       *result =
 716           smpi_group_compare(smpi_comm_group(comm1),
 717                              smpi_comm_group(comm2));
 718       if (*result == MPI_IDENT) {
 719         *result = MPI_CONGRUENT;
 720       }
 721     }
 722     retval = MPI_SUCCESS;
 723   }
 724   smpi_bench_begin();
 725   return retval;
 726 }
 727
 728 int PMPI_Comm_dup(MPI_Comm comm, MPI_Comm * newcomm)
 729 {
 730   int retval;
 731
 732   smpi_bench_end();
 733   if (comm == MPI_COMM_NULL) {
 734     retval = MPI_ERR_COMM;
 735   } else if (newcomm == NULL) {
 736     retval = MPI_ERR_ARG;
 737   } else {
 738     *newcomm = smpi_comm_new(smpi_comm_group(comm));
 739     retval = MPI_SUCCESS;
 740   }
 741   smpi_bench_begin();
 742   return retval;
 743 }
 744
 745 int PMPI_Comm_create(MPI_Comm comm, MPI_Group group, MPI_Comm * newcomm)
 746 {
 747   int retval;
 748
 749   smpi_bench_end();
 750   if (comm == MPI_COMM_NULL) {
 751     retval = MPI_ERR_COMM;
 752   } else if (group == MPI_GROUP_NULL) {
 753     retval = MPI_ERR_GROUP;
 754   } else if (newcomm == NULL) {
 755     retval = MPI_ERR_ARG;
 756   } else {
 757     *newcomm = smpi_comm_new(group);
 758     retval = MPI_SUCCESS;
 759   }
 760   smpi_bench_begin();
 761   return retval;
 762 }
 763
 764 int PMPI_Comm_free(MPI_Comm * comm)
 765 {
 766   int retval;
 767
 768   smpi_bench_end();
 769   if (comm == NULL) {
 770     retval = MPI_ERR_ARG;
 771   } else if (*comm == MPI_COMM_NULL) {
 772     retval = MPI_ERR_COMM;
 773   } else {
 774     smpi_comm_destroy(*comm);
 775     *comm = MPI_COMM_NULL;
 776     retval = MPI_SUCCESS;
 777   }
 778   smpi_bench_begin();
 779   return retval;
 780 }
 781
 782 int PMPI_Comm_disconnect(MPI_Comm * comm)
 783 {
 784   /* TODO: wait until all communication in comm are done */
 785   int retval;
 786
 787   smpi_bench_end();
 788   if (comm == NULL) {
 789     retval = MPI_ERR_ARG;
 790   } else if (*comm == MPI_COMM_NULL) {
 791     retval = MPI_ERR_COMM;
 792   } else {
 793     smpi_comm_destroy(*comm);
 794     *comm = MPI_COMM_NULL;
 795     retval = MPI_SUCCESS;
 796   }
 797   smpi_bench_begin();
 798   return retval;
 799 }
 800
 801 int PMPI_Comm_split(MPI_Comm comm, int color, int key, MPI_Comm* comm_out)
 802 {
 803   int retval;
 804
 805   smpi_bench_end();
 806   if (comm_out == NULL) {
 807     retval = MPI_ERR_ARG;
 808   } else if (comm == MPI_COMM_NULL) {
 809     retval = MPI_ERR_COMM;
 810   } else {
 811     *comm_out = smpi_comm_split(comm, color, key);
 812     retval = MPI_SUCCESS;
 813   }
 814   smpi_bench_begin();
 815   return retval;
 816 }
 817
 818 int PMPI_Send_init(void *buf, int count, MPI_Datatype datatype, int dst,
 819                   int tag, MPI_Comm comm, MPI_Request * request)
 820 {
 821   int retval;
 822
 823   smpi_bench_end();
 824   if (request == NULL) {
 825     retval = MPI_ERR_ARG;
 826   } else if (comm == MPI_COMM_NULL) {
 827     retval = MPI_ERR_COMM;
 828   } else if (dst == MPI_PROC_NULL) {
 829     retval = MPI_SUCCESS;
 830   } else {
 831     *request = smpi_mpi_send_init(buf, count, datatype, dst, tag, comm);
 832     retval = MPI_SUCCESS;
 833   }
 834   smpi_bench_begin();
 835   return retval;
 836 }
 837
 838 int PMPI_Recv_init(void *buf, int count, MPI_Datatype datatype, int src,
 839                   int tag, MPI_Comm comm, MPI_Request * request)
 840 {
 841   int retval;
 842
 843   smpi_bench_end();
 844   if (request == NULL) {
 845     retval = MPI_ERR_ARG;
 846   } else if (comm == MPI_COMM_NULL) {
 847     retval = MPI_ERR_COMM;
 848   } else if (src == MPI_PROC_NULL) {
 849       retval = MPI_SUCCESS;
 850   } else {
 851     *request = smpi_mpi_recv_init(buf, count, datatype, src, tag, comm);
 852     retval = MPI_SUCCESS;
 853   }
 854   smpi_bench_begin();
 855   return retval;
 856 }
 857
 858 int PMPI_Start(MPI_Request * request)
 859 {
 860   int retval;
 861
 862   smpi_bench_end();
 863   if (request == NULL || *request == MPI_REQUEST_NULL) {
 864     retval = MPI_ERR_ARG;
 865   } else {
 866     smpi_mpi_start(*request);
 867     retval = MPI_SUCCESS;
 868   }
 869   smpi_bench_begin();
 870   return retval;
 871 }
 872
 873 int PMPI_Startall(int count, MPI_Request * requests)
 874 {
 875   int retval;
 876
 877   smpi_bench_end();
 878   if (requests == NULL) {
 879     retval = MPI_ERR_ARG;
 880   } else {
 881     smpi_mpi_startall(count, requests);
 882     retval = MPI_SUCCESS;
 883   }
 884   smpi_bench_begin();
 885   return retval;
 886 }
 887
 888 int PMPI_Request_free(MPI_Request * request)
 889 {
 890   int retval;
 891
 892   smpi_bench_end();
 893   if (request == MPI_REQUEST_NULL) {
 894     retval = MPI_ERR_ARG;
 895   } else {
 896     smpi_mpi_request_free(request);
 897     retval = MPI_SUCCESS;
 898   }
 899   smpi_bench_begin();
 900   return retval;
 901 }
 902
 903 int PMPI_Irecv(void *buf, int count, MPI_Datatype datatype, int src,
 904               int tag, MPI_Comm comm, MPI_Request * request)
 905 {
 906   int retval;
 907
 908   smpi_bench_end();
 909
 910   if (request == NULL) {
 911     retval = MPI_ERR_ARG;
 912   } else if (comm == MPI_COMM_NULL) {
 913     retval = MPI_ERR_COMM;
 914   } else if (src == MPI_PROC_NULL) {
 915     *request = MPI_REQUEST_NULL;
 916     retval = MPI_SUCCESS;
 917   } else if (src!=MPI_ANY_SOURCE && (src >= smpi_group_size(smpi_comm_group(comm)) || src <0)){
 918     retval = MPI_ERR_COMM;
 919   } else if (count < 0) {
 920     retval = MPI_ERR_COUNT;
 921   } else if (buf==NULL && count > 0) {
 922     retval = MPI_ERR_COUNT;
 923   } else if (datatype == MPI_DATATYPE_NULL){
 924     retval = MPI_ERR_TYPE;
 925   } else if(tag<0 && tag !=  MPI_ANY_TAG){
 926     retval = MPI_ERR_TAG;
 927   } else {
 928
 929 #ifdef HAVE_TRACING
 930   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
 931   int src_traced = smpi_group_index(smpi_comm_group(comm), src);
 932   TRACE_smpi_ptp_in(rank, src_traced, rank, __FUNCTION__);
 933 #endif
 934
 935     *request = smpi_mpi_irecv(buf, count, datatype, src, tag, comm);
 936     retval = MPI_SUCCESS;
 937
 938 #ifdef HAVE_TRACING
 939   TRACE_smpi_ptp_out(rank, src_traced, rank, __FUNCTION__);
 940   (*request)->recv = 1;
 941 #endif
 942   }
 943
 944   smpi_bench_begin();
 945   return retval;
 946 }
 947
 948
 949 int PMPI_Isend(void *buf, int count, MPI_Datatype datatype, int dst,
 950               int tag, MPI_Comm comm, MPI_Request * request)
 951 {
 952   int retval;
 953
 954   smpi_bench_end();
 955   if (request == NULL) {
 956     retval = MPI_ERR_ARG;
 957   } else if (comm == MPI_COMM_NULL) {
 958     retval = MPI_ERR_COMM;
 959   } else if (dst == MPI_PROC_NULL) {
 960     *request = MPI_REQUEST_NULL;
 961     retval = MPI_SUCCESS;
 962   } else if (dst >= smpi_group_size(smpi_comm_group(comm)) || dst <0){
 963     retval = MPI_ERR_COMM;
 964   } else if (count < 0) {
 965     retval = MPI_ERR_COUNT;
 966   } else if (buf==NULL && count > 0) {
 967     retval = MPI_ERR_COUNT;
 968   } else if (datatype == MPI_DATATYPE_NULL){
 969     retval = MPI_ERR_TYPE;
 970   } else if(tag<0 && tag !=  MPI_ANY_TAG){
 971     retval = MPI_ERR_TAG;
 972   } else {
 973
 974 #ifdef HAVE_TRACING
 975   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
 976   TRACE_smpi_computing_out(rank);
 977   int dst_traced = smpi_group_index(smpi_comm_group(comm), dst);
 978   TRACE_smpi_ptp_in(rank, rank, dst_traced, __FUNCTION__);
 979   TRACE_smpi_send(rank, rank, dst_traced);
 980 #endif
 981
 982     *request = smpi_mpi_isend(buf, count, datatype, dst, tag, comm);
 983     retval = MPI_SUCCESS;
 984
 985 #ifdef HAVE_TRACING
 986   TRACE_smpi_ptp_out(rank, rank, dst_traced, __FUNCTION__);
 987   (*request)->send = 1;
 988   TRACE_smpi_computing_in(rank);
 989 #endif
 990   }
 991
 992   smpi_bench_begin();
 993   return retval;
 994 }
 995
 996
 997
 998 int PMPI_Recv(void *buf, int count, MPI_Datatype datatype, int src, int tag,
 999              MPI_Comm comm, MPI_Status * status)
1000 {
1001   int retval;
1002
1003   smpi_bench_end();
1004
1005   if (comm == MPI_COMM_NULL) {
1006     retval = MPI_ERR_COMM;
1007   } else if (src == MPI_PROC_NULL) {
1008     smpi_empty_status(status);
1009     status->MPI_SOURCE = MPI_PROC_NULL;
1010     retval = MPI_SUCCESS;
1011   } else if (src!=MPI_ANY_SOURCE && (src >= smpi_group_size(smpi_comm_group(comm)) || src <0)){
1012     retval = MPI_ERR_COMM;
1013   } else if (count < 0) {
1014     retval = MPI_ERR_COUNT;
1015   } else if (buf==NULL && count > 0) {
1016     retval = MPI_ERR_COUNT;
1017   } else if (datatype == MPI_DATATYPE_NULL){
1018     retval = MPI_ERR_TYPE;
1019   } else if(tag<0 && tag !=  MPI_ANY_TAG){
1020     retval = MPI_ERR_TAG;
1021   } else {
1022 #ifdef HAVE_TRACING
1023   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1024   int src_traced = smpi_group_index(smpi_comm_group(comm), src);
1025   TRACE_smpi_computing_out(rank);
1026
1027   TRACE_smpi_ptp_in(rank, src_traced, rank, __FUNCTION__);
1028 #endif
1029
1030     smpi_mpi_recv(buf, count, datatype, src, tag, comm, status);
1031     retval = MPI_SUCCESS;
1032
1033 #ifdef HAVE_TRACING
1034   //the src may not have been known at the beginning of the recv (MPI_ANY_SOURCE)
1035   if(status!=MPI_STATUS_IGNORE)src_traced = smpi_group_index(smpi_comm_group(comm), status->MPI_SOURCE);
1036   TRACE_smpi_ptp_out(rank, src_traced, rank, __FUNCTION__);
1037   TRACE_smpi_recv(rank, src_traced, rank);
1038   TRACE_smpi_computing_in(rank);
1039 #endif
1040   }
1041
1042   smpi_bench_begin();
1043   return retval;
1044 }
1045
1046 int PMPI_Send(void *buf, int count, MPI_Datatype datatype, int dst, int tag,
1047              MPI_Comm comm)
1048 {
1049   int retval;
1050
1051   smpi_bench_end();
1052
1053   if (comm == MPI_COMM_NULL) {
1054     retval = MPI_ERR_COMM;
1055   } else if (dst == MPI_PROC_NULL) {
1056     retval = MPI_SUCCESS;
1057   } else if (dst >= smpi_group_size(smpi_comm_group(comm)) || dst <0){
1058     retval = MPI_ERR_COMM;
1059   } else if (count < 0) {
1060     retval = MPI_ERR_COUNT;
1061   } else if (buf==NULL && count > 0) {
1062     retval = MPI_ERR_COUNT;
1063   } else if (datatype == MPI_DATATYPE_NULL){
1064     retval = MPI_ERR_TYPE;
1065   } else if(tag<0 && tag !=  MPI_ANY_TAG){
1066     retval = MPI_ERR_TAG;
1067   } else {
1068
1069 #ifdef HAVE_TRACING
1070   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1071   TRACE_smpi_computing_out(rank);
1072   int dst_traced = smpi_group_index(smpi_comm_group(comm), dst);
1073   TRACE_smpi_ptp_in(rank, rank, dst_traced, __FUNCTION__);
1074   TRACE_smpi_send(rank, rank, dst_traced);
1075 #endif
1076
1077     smpi_mpi_send(buf, count, datatype, dst, tag, comm);
1078     retval = MPI_SUCCESS;
1079
1080 #ifdef HAVE_TRACING
1081   TRACE_smpi_ptp_out(rank, rank, dst_traced, __FUNCTION__);
1082   TRACE_smpi_computing_in(rank);
1083 #endif
1084   }
1085
1086   smpi_bench_begin();
1087   return retval;
1088 }
1089
1090 int PMPI_Sendrecv(void *sendbuf, int sendcount, MPI_Datatype sendtype,
1091                  int dst, int sendtag, void *recvbuf, int recvcount,
1092                  MPI_Datatype recvtype, int src, int recvtag,
1093                  MPI_Comm comm, MPI_Status * status)
1094 {
1095   int retval;
1096
1097   smpi_bench_end();
1098
1099   if (comm == MPI_COMM_NULL) {
1100     retval = MPI_ERR_COMM;
1101   } else if (sendtype == MPI_DATATYPE_NULL
1102              || recvtype == MPI_DATATYPE_NULL) {
1103     retval = MPI_ERR_TYPE;
1104   } else if (src == MPI_PROC_NULL || dst == MPI_PROC_NULL) {
1105       smpi_empty_status(status);
1106       status->MPI_SOURCE = MPI_PROC_NULL;
1107       retval = MPI_SUCCESS;
1108   }else if (dst >= smpi_group_size(smpi_comm_group(comm)) || dst <0 ||
1109       (src!=MPI_ANY_SOURCE && (src >= smpi_group_size(smpi_comm_group(comm)) || src <0))){
1110     retval = MPI_ERR_COMM;
1111   } else if (sendcount < 0 || recvcount<0) {
1112       retval = MPI_ERR_COUNT;
1113   } else if ((sendbuf==NULL && sendcount > 0)||(recvbuf==NULL && recvcount>0)) {
1114     retval = MPI_ERR_COUNT;
1115   } else if((sendtag<0 && sendtag !=  MPI_ANY_TAG)||(recvtag<0 && recvtag != MPI_ANY_TAG)){
1116     retval = MPI_ERR_TAG;
1117   } else {
1118
1119 #ifdef HAVE_TRACING
1120   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1121   TRACE_smpi_computing_out(rank);
1122   int dst_traced = smpi_group_index(smpi_comm_group(comm), dst);
1123   int src_traced = smpi_group_index(smpi_comm_group(comm), src);
1124   TRACE_smpi_ptp_in(rank, src_traced, dst_traced, __FUNCTION__);
1125   TRACE_smpi_send(rank, rank, dst_traced);
1126   TRACE_smpi_send(rank, src_traced, rank);
1127 #endif
1128
1129
1130     smpi_mpi_sendrecv(sendbuf, sendcount, sendtype, dst, sendtag, recvbuf,
1131                       recvcount, recvtype, src, recvtag, comm, status);
1132     retval = MPI_SUCCESS;
1133
1134 #ifdef HAVE_TRACING
1135   TRACE_smpi_ptp_out(rank, src_traced, dst_traced, __FUNCTION__);
1136   TRACE_smpi_recv(rank, rank, dst_traced);
1137   TRACE_smpi_recv(rank, src_traced, rank);
1138   TRACE_smpi_computing_in(rank);
1139 #endif
1140
1141   }
1142
1143   smpi_bench_begin();
1144   return retval;
1145 }
1146
1147 int PMPI_Sendrecv_replace(void *buf, int count, MPI_Datatype datatype,
1148                          int dst, int sendtag, int src, int recvtag,
1149                          MPI_Comm comm, MPI_Status * status)
1150 {
1151   //TODO: suboptimal implementation
1152   void *recvbuf;
1153   int retval, size;
1154
1155   size = smpi_datatype_size(datatype) * count;
1156   recvbuf = xbt_new(char, size);
1157   retval =
1158       MPI_Sendrecv(buf, count, datatype, dst, sendtag, recvbuf, count,
1159                    datatype, src, recvtag, comm, status);
1160   memcpy(buf, recvbuf, size * sizeof(char));
1161   xbt_free(recvbuf);
1162   return retval;
1163 }
1164
1165 int PMPI_Test(MPI_Request * request, int *flag, MPI_Status * status)
1166 {
1167   int retval;
1168
1169   smpi_bench_end();
1170   if (request == MPI_REQUEST_NULL || flag == NULL) {
1171     retval = MPI_ERR_ARG;
1172   } else if (*request == MPI_REQUEST_NULL) {
1173     *flag= TRUE;
1174     retval = MPI_ERR_REQUEST;
1175   } else {
1176     *flag = smpi_mpi_test(request, status);
1177     retval = MPI_SUCCESS;
1178   }
1179   smpi_bench_begin();
1180   return retval;
1181 }
1182
1183 int PMPI_Testany(int count, MPI_Request requests[], int *index, int *flag,
1184                 MPI_Status * status)
1185 {
1186   int retval;
1187
1188   smpi_bench_end();
1189   if (index == NULL || flag == NULL) {
1190     retval = MPI_ERR_ARG;
1191   } else {
1192     *flag = smpi_mpi_testany(count, requests, index, status);
1193     retval = MPI_SUCCESS;
1194   }
1195   smpi_bench_begin();
1196   return retval;
1197 }
1198
1199 int PMPI_Testall(int count, MPI_Request* requests, int* flag, MPI_Status* statuses)
1200 {
1201   int retval;
1202
1203   smpi_bench_end();
1204   if (flag == NULL) {
1205     retval = MPI_ERR_ARG;
1206   } else {
1207     *flag = smpi_mpi_testall(count, requests, statuses);
1208     retval = MPI_SUCCESS;
1209   }
1210   smpi_bench_begin();
1211   return retval;
1212 }
1213
1214 int PMPI_Probe(int source, int tag, MPI_Comm comm, MPI_Status* status) {
1215   int retval;
1216   smpi_bench_end();
1217
1218   if (status == NULL) {
1219     retval = MPI_ERR_ARG;
1220   } else if (comm == MPI_COMM_NULL) {
1221     retval = MPI_ERR_COMM;
1222   } else if (source == MPI_PROC_NULL) {
1223     smpi_empty_status(status);
1224     status->MPI_SOURCE = MPI_PROC_NULL;
1225     retval = MPI_SUCCESS;
1226   } else {
1227     smpi_mpi_probe(source, tag, comm, status);
1228     retval = MPI_SUCCESS;
1229   }
1230   smpi_bench_begin();
1231   return retval;
1232 }
1233
1234
1235 int PMPI_Iprobe(int source, int tag, MPI_Comm comm, int* flag, MPI_Status* status) {
1236   int retval;
1237   smpi_bench_end();
1238
1239   if (flag == NULL) {
1240     retval = MPI_ERR_ARG;
1241   } else if (status == NULL) {
1242     retval = MPI_ERR_ARG;
1243   } else if (comm == MPI_COMM_NULL) {
1244     retval = MPI_ERR_COMM;
1245   } else if (source == MPI_PROC_NULL) {
1246     smpi_empty_status(status);
1247     status->MPI_SOURCE = MPI_PROC_NULL;
1248     retval = MPI_SUCCESS;
1249   } else {
1250     smpi_mpi_iprobe(source, tag, comm, flag, status);
1251     retval = MPI_SUCCESS;
1252   }
1253   smpi_bench_begin();
1254   return retval;
1255 }
1256
1257 int PMPI_Wait(MPI_Request * request, MPI_Status * status)
1258 {
1259   int retval;
1260
1261   smpi_bench_end();
1262
1263   if (request == NULL) {
1264     retval = MPI_ERR_ARG;
1265   } else if (*request == MPI_REQUEST_NULL) {
1266     retval = MPI_ERR_REQUEST;
1267   } else {
1268
1269 #ifdef HAVE_TRACING
1270   int rank = request && (*request)->comm != MPI_COMM_NULL
1271       ? smpi_process_index()
1272       : -1;
1273   TRACE_smpi_computing_out(rank);
1274
1275   MPI_Group group = smpi_comm_group((*request)->comm);
1276   int src_traced = smpi_group_index(group, (*request)->src);
1277   int dst_traced = smpi_group_index(group, (*request)->dst);
1278   int is_wait_for_receive = (*request)->recv;
1279   TRACE_smpi_ptp_in(rank, src_traced, dst_traced, __FUNCTION__);
1280 #endif
1281
1282     smpi_mpi_wait(request, status);
1283     retval = MPI_SUCCESS;
1284
1285 #ifdef HAVE_TRACING
1286   TRACE_smpi_ptp_out(rank, src_traced, dst_traced, __FUNCTION__);
1287   if (is_wait_for_receive) {
1288     TRACE_smpi_recv(rank, src_traced, dst_traced);
1289   }
1290   TRACE_smpi_computing_in(rank);
1291 #endif
1292
1293   }
1294
1295   smpi_bench_begin();
1296   return retval;
1297 }
1298
1299 int PMPI_Waitany(int count, MPI_Request requests[], int *index, MPI_Status * status)
1300 {
1301   int retval;
1302
1303   smpi_bench_end();
1304 #ifdef HAVE_TRACING
1305   //save requests information for tracing
1306   int i;
1307   xbt_dynar_t srcs = xbt_dynar_new(sizeof(int), NULL);
1308   xbt_dynar_t dsts = xbt_dynar_new(sizeof(int), NULL);
1309   xbt_dynar_t recvs = xbt_dynar_new(sizeof(int), NULL);
1310   for (i = 0; i < count; i++) {
1311     MPI_Request req = requests[i];      //already received requests are no longer valid
1312     if (req) {
1313       int *asrc = xbt_new(int, 1);
1314       int *adst = xbt_new(int, 1);
1315       int *arecv = xbt_new(int, 1);
1316       *asrc = req->src;
1317       *adst = req->dst;
1318       *arecv = req->recv;
1319       xbt_dynar_insert_at(srcs, i, asrc);
1320       xbt_dynar_insert_at(dsts, i, adst);
1321       xbt_dynar_insert_at(recvs, i, arecv);
1322       xbt_free(asrc);
1323       xbt_free(adst);
1324       xbt_free(arecv);
1325     } else {
1326       int *t = xbt_new(int, 1);
1327       xbt_dynar_insert_at(srcs, i, t);
1328       xbt_dynar_insert_at(dsts, i, t);
1329       xbt_dynar_insert_at(recvs, i, t);
1330       xbt_free(t);
1331     }
1332   }
1333   int rank_traced = smpi_process_index();
1334   TRACE_smpi_computing_out(rank_traced);
1335
1336   TRACE_smpi_ptp_in(rank_traced, -1, -1, __FUNCTION__);
1337
1338 #endif
1339   if (index == NULL) {
1340     retval = MPI_ERR_ARG;
1341   } else {
1342     *index = smpi_mpi_waitany(count, requests, status);
1343     retval = MPI_SUCCESS;
1344   }
1345 #ifdef HAVE_TRACING
1346   if(*index!=MPI_UNDEFINED){
1347     int src_traced, dst_traced, is_wait_for_receive;
1348     xbt_dynar_get_cpy(srcs, *index, &src_traced);
1349     xbt_dynar_get_cpy(dsts, *index, &dst_traced);
1350     xbt_dynar_get_cpy(recvs, *index, &is_wait_for_receive);
1351     if (is_wait_for_receive) {
1352       TRACE_smpi_recv(rank_traced, src_traced, dst_traced);
1353     }
1354     TRACE_smpi_ptp_out(rank_traced, src_traced, dst_traced, __FUNCTION__);
1355     //clean-up of dynars
1356     xbt_dynar_free(&srcs);
1357     xbt_dynar_free(&dsts);
1358     xbt_dynar_free(&recvs);
1359   }
1360   TRACE_smpi_computing_in(rank_traced);
1361
1362
1363 #endif
1364   smpi_bench_begin();
1365   return retval;
1366 }
1367
1368 int PMPI_Waitall(int count, MPI_Request requests[], MPI_Status status[])
1369 {
1370
1371   smpi_bench_end();
1372 #ifdef HAVE_TRACING
1373   //save information from requests
1374   int i;
1375   xbt_dynar_t srcs = xbt_dynar_new(sizeof(int), NULL);
1376   xbt_dynar_t dsts = xbt_dynar_new(sizeof(int), NULL);
1377   xbt_dynar_t recvs = xbt_dynar_new(sizeof(int), NULL);
1378   for (i = 0; i < count; i++) {
1379     MPI_Request req = requests[i];
1380     if(req){
1381       int *asrc = xbt_new(int, 1);
1382       int *adst = xbt_new(int, 1);
1383       int *arecv = xbt_new(int, 1);
1384       *asrc = req->src;
1385       *adst = req->dst;
1386       *arecv = req->recv;
1387       xbt_dynar_insert_at(srcs, i, asrc);
1388       xbt_dynar_insert_at(dsts, i, adst);
1389       xbt_dynar_insert_at(recvs, i, arecv);
1390       xbt_free(asrc);
1391       xbt_free(adst);
1392       xbt_free(arecv);
1393     }else {
1394       int *t = xbt_new(int, 1);
1395       xbt_dynar_insert_at(srcs, i, t);
1396       xbt_dynar_insert_at(dsts, i, t);
1397       xbt_dynar_insert_at(recvs, i, t);
1398       xbt_free(t);
1399     }
1400   }
1401   int rank_traced = smpi_process_index();
1402   TRACE_smpi_computing_out(rank_traced);
1403
1404   TRACE_smpi_ptp_in(rank_traced, -1, -1, __FUNCTION__);
1405 #endif
1406   smpi_mpi_waitall(count, requests, status);
1407 #ifdef HAVE_TRACING
1408   for (i = 0; i < count; i++) {
1409     int src_traced, dst_traced, is_wait_for_receive;
1410     xbt_dynar_get_cpy(srcs, i, &src_traced);
1411     xbt_dynar_get_cpy(dsts, i, &dst_traced);
1412     xbt_dynar_get_cpy(recvs, i, &is_wait_for_receive);
1413     if (is_wait_for_receive) {
1414       TRACE_smpi_recv(rank_traced, src_traced, dst_traced);
1415     }
1416   }
1417   TRACE_smpi_ptp_out(rank_traced, -1, -1, __FUNCTION__);
1418   //clean-up of dynars
1419   xbt_dynar_free(&srcs);
1420   xbt_dynar_free(&dsts);
1421   xbt_dynar_free(&recvs);
1422   TRACE_smpi_computing_in(rank_traced);
1423 #endif
1424   smpi_bench_begin();
1425   return MPI_SUCCESS;
1426 }
1427
1428 int PMPI_Waitsome(int incount, MPI_Request requests[], int *outcount,
1429                  int *indices, MPI_Status status[])
1430 {
1431   int retval;
1432
1433   smpi_bench_end();
1434   if (outcount == NULL || indices == NULL) {
1435     retval = MPI_ERR_ARG;
1436   } else {
1437     *outcount = smpi_mpi_waitsome(incount, requests, indices, status);
1438     retval = MPI_SUCCESS;
1439   }
1440   smpi_bench_begin();
1441   return retval;
1442 }
1443
1444 int PMPI_Testsome(int incount, MPI_Request requests[], int* outcount,
1445                  int* indices, MPI_Status status[])
1446 {
1447   int retval;
1448
1449    smpi_bench_end();
1450    if (outcount == NULL || indices == NULL) {
1451      retval = MPI_ERR_ARG;
1452    } else {
1453      *outcount = smpi_mpi_testsome(incount, requests, indices, status);
1454      retval = MPI_SUCCESS;
1455    }
1456    smpi_bench_begin();
1457    return retval;
1458 }
1459
1460
1461 int PMPI_Bcast(void *buf, int count, MPI_Datatype datatype, int root, MPI_Comm comm)
1462 {
1463   int retval;
1464
1465   smpi_bench_end();
1466 #ifdef HAVE_TRACING
1467   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1468   TRACE_smpi_computing_out(rank);
1469   int root_traced = smpi_group_index(smpi_comm_group(comm), root);
1470   TRACE_smpi_collective_in(rank, root_traced, __FUNCTION__);
1471 #endif
1472   if (comm == MPI_COMM_NULL) {
1473     retval = MPI_ERR_COMM;
1474   } else {
1475     smpi_mpi_bcast(buf, count, datatype, root, comm);
1476     retval = MPI_SUCCESS;
1477   }
1478 #ifdef HAVE_TRACING
1479   TRACE_smpi_collective_out(rank, root_traced, __FUNCTION__);
1480   TRACE_smpi_computing_in(rank);
1481 #endif
1482   smpi_bench_begin();
1483   return retval;
1484 }
1485
1486 int PMPI_Barrier(MPI_Comm comm)
1487 {
1488   int retval;
1489
1490   smpi_bench_end();
1491 #ifdef HAVE_TRACING
1492   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1493   TRACE_smpi_computing_out(rank);
1494   TRACE_smpi_collective_in(rank, -1, __FUNCTION__);
1495 #endif
1496   if (comm == MPI_COMM_NULL) {
1497     retval = MPI_ERR_COMM;
1498   } else {
1499     smpi_mpi_barrier(comm);
1500     retval = MPI_SUCCESS;
1501   }
1502 #ifdef HAVE_TRACING
1503   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
1504   TRACE_smpi_computing_in(rank);
1505 #endif
1506   smpi_bench_begin();
1507   return retval;
1508 }
1509
1510 int PMPI_Gather(void *sendbuf, int sendcount, MPI_Datatype sendtype,
1511                void *recvbuf, int recvcount, MPI_Datatype recvtype,
1512                int root, MPI_Comm comm)
1513 {
1514   int retval;
1515
1516   smpi_bench_end();
1517 #ifdef HAVE_TRACING
1518   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1519   TRACE_smpi_computing_out(rank);
1520   int root_traced = smpi_group_index(smpi_comm_group(comm), root);
1521   TRACE_smpi_collective_in(rank, root_traced, __FUNCTION__);
1522 #endif
1523   if (comm == MPI_COMM_NULL) {
1524     retval = MPI_ERR_COMM;
1525   } else if (sendtype == MPI_DATATYPE_NULL
1526              || recvtype == MPI_DATATYPE_NULL) {
1527     retval = MPI_ERR_TYPE;
1528   } else {
1529     smpi_mpi_gather(sendbuf, sendcount, sendtype, recvbuf, recvcount,
1530                     recvtype, root, comm);
1531     retval = MPI_SUCCESS;
1532   }
1533 #ifdef HAVE_TRACING
1534   TRACE_smpi_collective_out(rank, root_traced, __FUNCTION__);
1535   TRACE_smpi_computing_in(rank);
1536 #endif
1537   smpi_bench_begin();
1538   return retval;
1539 }
1540
1541 int PMPI_Gatherv(void *sendbuf, int sendcount, MPI_Datatype sendtype,
1542                 void *recvbuf, int *recvcounts, int *displs,
1543                 MPI_Datatype recvtype, int root, MPI_Comm comm)
1544 {
1545   int retval;
1546
1547   smpi_bench_end();
1548 #ifdef HAVE_TRACING
1549   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1550   TRACE_smpi_computing_out(rank);
1551   int root_traced = smpi_group_index(smpi_comm_group(comm), root);
1552   TRACE_smpi_collective_in(rank, root_traced, __FUNCTION__);
1553 #endif
1554   if (comm == MPI_COMM_NULL) {
1555     retval = MPI_ERR_COMM;
1556   } else if (sendtype == MPI_DATATYPE_NULL
1557              || recvtype == MPI_DATATYPE_NULL) {
1558     retval = MPI_ERR_TYPE;
1559   } else if (recvcounts == NULL || displs == NULL) {
1560     retval = MPI_ERR_ARG;
1561   } else {
1562     smpi_mpi_gatherv(sendbuf, sendcount, sendtype, recvbuf, recvcounts,
1563                      displs, recvtype, root, comm);
1564     retval = MPI_SUCCESS;
1565   }
1566 #ifdef HAVE_TRACING
1567   TRACE_smpi_collective_out(rank, root_traced, __FUNCTION__);
1568   TRACE_smpi_computing_in(rank);
1569 #endif
1570   smpi_bench_begin();
1571   return retval;
1572 }
1573
1574 int PMPI_Allgather(void *sendbuf, int sendcount, MPI_Datatype sendtype,
1575                   void *recvbuf, int recvcount, MPI_Datatype recvtype,
1576                   MPI_Comm comm)
1577 {
1578   int retval;
1579
1580   smpi_bench_end();
1581 #ifdef HAVE_TRACING
1582   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1583   TRACE_smpi_computing_out(rank);
1584   TRACE_smpi_collective_in(rank, -1, __FUNCTION__);
1585 #endif
1586   if (comm == MPI_COMM_NULL) {
1587     retval = MPI_ERR_COMM;
1588   } else if (sendtype == MPI_DATATYPE_NULL
1589              || recvtype == MPI_DATATYPE_NULL) {
1590     retval = MPI_ERR_TYPE;
1591   } else {
1592     smpi_mpi_allgather(sendbuf, sendcount, sendtype, recvbuf, recvcount,
1593                        recvtype, comm);
1594     retval = MPI_SUCCESS;
1595   }
1596 #ifdef HAVE_TRACING
1597   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
1598 #endif
1599   smpi_bench_begin();
1600   return retval;
1601 }
1602
1603 int PMPI_Allgatherv(void *sendbuf, int sendcount, MPI_Datatype sendtype,
1604                    void *recvbuf, int *recvcounts, int *displs,
1605                    MPI_Datatype recvtype, MPI_Comm comm)
1606 {
1607   int retval;
1608
1609   smpi_bench_end();
1610 #ifdef HAVE_TRACING
1611   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1612   TRACE_smpi_computing_out(rank);
1613   TRACE_smpi_collective_in(rank, -1, __FUNCTION__);
1614 #endif
1615   if (comm == MPI_COMM_NULL) {
1616     retval = MPI_ERR_COMM;
1617   } else if (sendtype == MPI_DATATYPE_NULL
1618              || recvtype == MPI_DATATYPE_NULL) {
1619     retval = MPI_ERR_TYPE;
1620   } else if (recvcounts == NULL || displs == NULL) {
1621     retval = MPI_ERR_ARG;
1622   } else {
1623     smpi_mpi_allgatherv(sendbuf, sendcount, sendtype, recvbuf, recvcounts,
1624                         displs, recvtype, comm);
1625     retval = MPI_SUCCESS;
1626   }
1627 #ifdef HAVE_TRACING
1628   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
1629   TRACE_smpi_computing_in(rank);
1630 #endif
1631   smpi_bench_begin();
1632   return retval;
1633 }
1634
1635 int PMPI_Scatter(void *sendbuf, int sendcount, MPI_Datatype sendtype,
1636                 void *recvbuf, int recvcount, MPI_Datatype recvtype,
1637                 int root, MPI_Comm comm)
1638 {
1639   int retval;
1640
1641   smpi_bench_end();
1642 #ifdef HAVE_TRACING
1643   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1644   TRACE_smpi_computing_out(rank);
1645   int root_traced = smpi_group_index(smpi_comm_group(comm), root);
1646
1647   TRACE_smpi_collective_in(rank, root_traced, __FUNCTION__);
1648 #endif
1649   if (comm == MPI_COMM_NULL) {
1650     retval = MPI_ERR_COMM;
1651   } else if (sendtype == MPI_DATATYPE_NULL
1652              || recvtype == MPI_DATATYPE_NULL) {
1653     retval = MPI_ERR_TYPE;
1654   } else {
1655     smpi_mpi_scatter(sendbuf, sendcount, sendtype, recvbuf, recvcount,
1656                      recvtype, root, comm);
1657     retval = MPI_SUCCESS;
1658   }
1659 #ifdef HAVE_TRACING
1660   TRACE_smpi_collective_out(rank, root_traced, __FUNCTION__);
1661   TRACE_smpi_computing_in(rank);
1662 #endif
1663   smpi_bench_begin();
1664   return retval;
1665 }
1666
1667 int PMPI_Scatterv(void *sendbuf, int *sendcounts, int *displs,
1668                  MPI_Datatype sendtype, void *recvbuf, int recvcount,
1669                  MPI_Datatype recvtype, int root, MPI_Comm comm)
1670 {
1671   int retval;
1672
1673   smpi_bench_end();
1674 #ifdef HAVE_TRACING
1675   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1676   TRACE_smpi_computing_out(rank);
1677   int root_traced = smpi_group_index(smpi_comm_group(comm), root);
1678   TRACE_smpi_collective_in(rank, root_traced, __FUNCTION__);
1679 #endif
1680   if (comm == MPI_COMM_NULL) {
1681     retval = MPI_ERR_COMM;
1682   } else if (sendtype == MPI_DATATYPE_NULL
1683              || recvtype == MPI_DATATYPE_NULL) {
1684     retval = MPI_ERR_TYPE;
1685   } else if (sendcounts == NULL || displs == NULL) {
1686     retval = MPI_ERR_ARG;
1687   } else {
1688     smpi_mpi_scatterv(sendbuf, sendcounts, displs, sendtype, recvbuf,
1689                       recvcount, recvtype, root, comm);
1690     retval = MPI_SUCCESS;
1691   }
1692 #ifdef HAVE_TRACING
1693   TRACE_smpi_collective_out(rank, root_traced, __FUNCTION__);
1694   TRACE_smpi_computing_in(rank);
1695 #endif
1696   smpi_bench_begin();
1697   return retval;
1698 }
1699
1700 int PMPI_Reduce(void *sendbuf, void *recvbuf, int count,
1701                MPI_Datatype datatype, MPI_Op op, int root, MPI_Comm comm)
1702 {
1703   int retval;
1704
1705   smpi_bench_end();
1706 #ifdef HAVE_TRACING
1707   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1708   TRACE_smpi_computing_out(rank);
1709   int root_traced = smpi_group_index(smpi_comm_group(comm), root);
1710   TRACE_smpi_collective_in(rank, root_traced, __FUNCTION__);
1711 #endif
1712   if (comm == MPI_COMM_NULL) {
1713     retval = MPI_ERR_COMM;
1714   } else if (datatype == MPI_DATATYPE_NULL || op == MPI_OP_NULL) {
1715     retval = MPI_ERR_ARG;
1716   } else {
1717     smpi_mpi_reduce(sendbuf, recvbuf, count, datatype, op, root, comm);
1718     retval = MPI_SUCCESS;
1719   }
1720 #ifdef HAVE_TRACING
1721   TRACE_smpi_collective_out(rank, root_traced, __FUNCTION__);
1722   TRACE_smpi_computing_in(rank);
1723 #endif
1724   smpi_bench_begin();
1725   return retval;
1726 }
1727
1728 int PMPI_Allreduce(void *sendbuf, void *recvbuf, int count,
1729                   MPI_Datatype datatype, MPI_Op op, MPI_Comm comm)
1730 {
1731   int retval;
1732
1733   smpi_bench_end();
1734 #ifdef HAVE_TRACING
1735   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1736   TRACE_smpi_computing_out(rank);
1737   TRACE_smpi_collective_in(rank, -1, __FUNCTION__);
1738 #endif
1739   if (comm == MPI_COMM_NULL) {
1740     retval = MPI_ERR_COMM;
1741   } else if (datatype == MPI_DATATYPE_NULL) {
1742     retval = MPI_ERR_TYPE;
1743   } else if (op == MPI_OP_NULL) {
1744     retval = MPI_ERR_OP;
1745   } else {
1746     smpi_mpi_allreduce(sendbuf, recvbuf, count, datatype, op, comm);
1747     retval = MPI_SUCCESS;
1748   }
1749 #ifdef HAVE_TRACING
1750   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
1751   TRACE_smpi_computing_in(rank);
1752 #endif
1753   smpi_bench_begin();
1754   return retval;
1755 }
1756
1757 int PMPI_Scan(void *sendbuf, void *recvbuf, int count,
1758              MPI_Datatype datatype, MPI_Op op, MPI_Comm comm)
1759 {
1760   int retval;
1761
1762   smpi_bench_end();
1763 #ifdef HAVE_TRACING
1764   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1765   TRACE_smpi_computing_out(rank);
1766   TRACE_smpi_collective_in(rank, -1, __FUNCTION__);
1767 #endif
1768   if (comm == MPI_COMM_NULL) {
1769     retval = MPI_ERR_COMM;
1770   } else if (datatype == MPI_DATATYPE_NULL) {
1771     retval = MPI_ERR_TYPE;
1772   } else if (op == MPI_OP_NULL) {
1773     retval = MPI_ERR_OP;
1774   } else {
1775     smpi_mpi_scan(sendbuf, recvbuf, count, datatype, op, comm);
1776     retval = MPI_SUCCESS;
1777   }
1778 #ifdef HAVE_TRACING
1779   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
1780   TRACE_smpi_computing_in(rank);
1781 #endif
1782   smpi_bench_begin();
1783   return retval;
1784 }
1785
1786 int PMPI_Reduce_scatter(void *sendbuf, void *recvbuf, int *recvcounts,
1787                        MPI_Datatype datatype, MPI_Op op, MPI_Comm comm)
1788 {
1789   int retval, i, size, count;
1790   int *displs;
1791   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1792
1793   smpi_bench_end();
1794 #ifdef HAVE_TRACING
1795   TRACE_smpi_computing_out(rank);
1796   TRACE_smpi_collective_in(rank, -1, __FUNCTION__);
1797 #endif
1798   if (comm == MPI_COMM_NULL) {
1799     retval = MPI_ERR_COMM;
1800   } else if (datatype == MPI_DATATYPE_NULL) {
1801     retval = MPI_ERR_TYPE;
1802   } else if (op == MPI_OP_NULL) {
1803     retval = MPI_ERR_OP;
1804   } else if (recvcounts == NULL) {
1805     retval = MPI_ERR_ARG;
1806   } else {
1807     /* arbitrarily choose root as rank 0 */
1808     /* TODO: faster direct implementation ? */
1809     size = smpi_comm_size(comm);
1810     count = 0;
1811     displs = xbt_new(int, size);
1812     for (i = 0; i < size; i++) {
1813       count += recvcounts[i];
1814       displs[i] = 0;
1815     }
1816     smpi_mpi_reduce(sendbuf, recvbuf, count, datatype, op, 0, comm);
1817     smpi_mpi_scatterv(recvbuf, recvcounts, displs, datatype, recvbuf,
1818                       recvcounts[rank], datatype, 0, comm);
1819     xbt_free(displs);
1820     retval = MPI_SUCCESS;
1821   }
1822 #ifdef HAVE_TRACING
1823   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
1824   TRACE_smpi_computing_in(rank);
1825 #endif
1826   smpi_bench_begin();
1827   return retval;
1828 }
1829
1830 int PMPI_Alltoall(void *sendbuf, int sendcount, MPI_Datatype sendtype,
1831                  void *recvbuf, int recvcount, MPI_Datatype recvtype,
1832                  MPI_Comm comm)
1833 {
1834   int retval, size, sendsize;
1835
1836   smpi_bench_end();
1837 #ifdef HAVE_TRACING
1838   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1839   TRACE_smpi_computing_out(rank);
1840   TRACE_smpi_collective_in(rank, -1, __FUNCTION__);
1841 #endif
1842   if (comm == MPI_COMM_NULL) {
1843     retval = MPI_ERR_COMM;
1844   } else if (sendtype == MPI_DATATYPE_NULL
1845              || recvtype == MPI_DATATYPE_NULL) {
1846     retval = MPI_ERR_TYPE;
1847   } else {
1848     size = smpi_comm_size(comm);
1849     sendsize = smpi_datatype_size(sendtype) * sendcount;
1850     if (sendsize < 200 && size > 12) {
1851       retval =
1852           smpi_coll_tuned_alltoall_bruck(sendbuf, sendcount, sendtype,
1853                                          recvbuf, recvcount, recvtype,
1854                                          comm);
1855     } else if (sendsize < 3000) {
1856       retval =
1857           smpi_coll_tuned_alltoall_basic_linear(sendbuf, sendcount,
1858                                                 sendtype, recvbuf,
1859                                                 recvcount, recvtype, comm);
1860     } else {
1861       retval =
1862           smpi_coll_tuned_alltoall_pairwise(sendbuf, sendcount, sendtype,
1863                                             recvbuf, recvcount, recvtype,
1864                                             comm);
1865     }
1866   }
1867 #ifdef HAVE_TRACING
1868   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
1869   TRACE_smpi_computing_in(rank);
1870 #endif
1871   smpi_bench_begin();
1872   return retval;
1873 }
1874
1875 int PMPI_Alltoallv(void *sendbuf, int *sendcounts, int *senddisps,
1876                   MPI_Datatype sendtype, void *recvbuf, int *recvcounts,
1877                   int *recvdisps, MPI_Datatype recvtype, MPI_Comm comm)
1878 {
1879   int retval;
1880
1881   smpi_bench_end();
1882 #ifdef HAVE_TRACING
1883   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1884   TRACE_smpi_computing_out(rank);
1885   TRACE_smpi_collective_in(rank, -1, __FUNCTION__);
1886 #endif
1887   if (comm == MPI_COMM_NULL) {
1888     retval = MPI_ERR_COMM;
1889   } else if (sendtype == MPI_DATATYPE_NULL
1890              || recvtype == MPI_DATATYPE_NULL) {
1891     retval = MPI_ERR_TYPE;
1892   } else if (sendcounts == NULL || senddisps == NULL || recvcounts == NULL
1893              || recvdisps == NULL) {
1894     retval = MPI_ERR_ARG;
1895   } else {
1896     retval =
1897         smpi_coll_basic_alltoallv(sendbuf, sendcounts, senddisps, sendtype,
1898                                   recvbuf, recvcounts, recvdisps, recvtype,
1899                                   comm);
1900   }
1901 #ifdef HAVE_TRACING
1902   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
1903   TRACE_smpi_computing_in(rank);
1904 #endif
1905   smpi_bench_begin();
1906   return retval;
1907 }
1908
1909
1910 int PMPI_Get_processor_name(char *name, int *resultlen)
1911 {
1912   int retval = MPI_SUCCESS;
1913
1914   smpi_bench_end();
1915   strncpy(name, SIMIX_host_get_name(SIMIX_host_self()),
1916           MPI_MAX_PROCESSOR_NAME - 1);
1917   *resultlen =
1918       strlen(name) >
1919       MPI_MAX_PROCESSOR_NAME ? MPI_MAX_PROCESSOR_NAME : strlen(name);
1920
1921   smpi_bench_begin();
1922   return retval;
1923 }
1924
1925 int PMPI_Get_count(MPI_Status * status, MPI_Datatype datatype, int *count)
1926 {
1927   int retval = MPI_SUCCESS;
1928   size_t size;
1929
1930   smpi_bench_end();
1931   if (status == NULL || count == NULL) {
1932     retval = MPI_ERR_ARG;
1933   } else if (datatype == MPI_DATATYPE_NULL) {
1934     retval = MPI_ERR_TYPE;
1935   } else {
1936     size = smpi_datatype_size(datatype);
1937     if (size == 0) {
1938       *count = 0;
1939     } else if (status->count % size != 0) {
1940       retval = MPI_UNDEFINED;
1941     } else {
1942       *count = smpi_mpi_get_count(status, datatype);
1943     }
1944   }
1945   smpi_bench_begin();
1946   return retval;
1947 }
1948
1949 int PMPI_Type_contiguous(int count, MPI_Datatype old_type, MPI_Datatype* new_type) {
1950   int retval;
1951
1952   smpi_bench_end();
1953   if (old_type == MPI_DATATYPE_NULL) {
1954     retval = MPI_ERR_TYPE;
1955   } else if (count<=0){
1956     retval = MPI_ERR_COUNT;
1957   } else {
1958     retval = smpi_datatype_contiguous(count, old_type, new_type);
1959   }
1960   smpi_bench_begin();
1961   return retval;
1962 }
1963
1964 int PMPI_Type_commit(MPI_Datatype* datatype) {
1965   int retval;
1966
1967   smpi_bench_end();
1968   if (datatype == MPI_DATATYPE_NULL) {
1969     retval = MPI_ERR_TYPE;
1970   } else {
1971     smpi_datatype_commit(datatype);
1972     retval = MPI_SUCCESS;
1973   }
1974   smpi_bench_begin();
1975   return retval;
1976 }
1977
1978
1979 int PMPI_Type_vector(int count, int blocklen, int stride, MPI_Datatype old_type, MPI_Datatype* new_type) {
1980   int retval;
1981
1982   smpi_bench_end();
1983   if (old_type == MPI_DATATYPE_NULL) {
1984     retval = MPI_ERR_TYPE;
1985   } else if (count<=0 || blocklen<=0){
1986     retval = MPI_ERR_COUNT;
1987   } else {
1988     retval = smpi_datatype_vector(count, blocklen, stride, old_type, new_type);
1989   }
1990   smpi_bench_begin();
1991   return retval;
1992 }
1993
1994 int PMPI_Type_hvector(int count, int blocklen, MPI_Aint stride, MPI_Datatype old_type, MPI_Datatype* new_type) {
1995   int retval;
1996
1997   smpi_bench_end();
1998   if (old_type == MPI_DATATYPE_NULL) {
1999     retval = MPI_ERR_TYPE;
2000   } else if (count<=0 || blocklen<=0){
2001     retval = MPI_ERR_COUNT;
2002   } else {
2003     retval = smpi_datatype_hvector(count, blocklen, stride, old_type, new_type);
2004   }
2005   smpi_bench_begin();
2006   return retval;
2007 }
2008
2009
2010 int PMPI_Type_indexed(int count, int* blocklens, int* indices, MPI_Datatype old_type, MPI_Datatype* new_type) {
2011   int retval;
2012
2013   smpi_bench_end();
2014   if (old_type == MPI_DATATYPE_NULL) {
2015     retval = MPI_ERR_TYPE;
2016   } else if (count<=0){
2017     retval = MPI_ERR_COUNT;
2018   } else {
2019     retval = smpi_datatype_indexed(count, blocklens, indices, old_type, new_type);
2020   }
2021   smpi_bench_begin();
2022   return retval;
2023 }
2024
2025 int PMPI_Type_hindexed(int count, int* blocklens, MPI_Aint* indices, MPI_Datatype old_type, MPI_Datatype* new_type) {
2026   int retval;
2027
2028   smpi_bench_end();
2029   if (old_type == MPI_DATATYPE_NULL) {
2030     retval = MPI_ERR_TYPE;
2031   } else if (count<=0){
2032     retval = MPI_ERR_COUNT;
2033   } else {
2034     retval = smpi_datatype_hindexed(count, blocklens, indices, old_type, new_type);
2035   }
2036   smpi_bench_begin();
2037   return retval;
2038 }
2039
2040
2041 int PMPI_Type_struct(int count, int* blocklens, MPI_Aint* indices, MPI_Datatype* old_types, MPI_Datatype* new_type) {
2042   int retval;
2043
2044   smpi_bench_end();
2045   if (count<=0){
2046     retval = MPI_ERR_COUNT;
2047   } else {
2048     retval = smpi_datatype_struct(count, blocklens, indices, old_types, new_type);
2049   }
2050   smpi_bench_begin();
2051   return retval;}
2052
2053
2054 /* The following calls are not yet implemented and will fail at runtime. */
2055 /* Once implemented, please move them above this notice. */
2056
2057 static int not_yet_implemented(void) {
2058           XBT_WARN("Not yet implemented");
2059    return MPI_SUCCESS;
2060 }
2061
2062 int PMPI_Pack_size(int incount, MPI_Datatype datatype, MPI_Comm comm, int* size) {
2063    return not_yet_implemented();
2064 }
2065
2066 int PMPI_Cart_coords(MPI_Comm comm, int rank, int maxdims, int* coords) {
2067    return not_yet_implemented();
2068 }
2069
2070 int PMPI_Cart_create(MPI_Comm comm_old, int ndims, int* dims, int* periods, int reorder, MPI_Comm* comm_cart) {
2071    return not_yet_implemented();
2072 }
2073
2074 int PMPI_Cart_get(MPI_Comm comm, int maxdims, int* dims, int* periods, int* coords) {
2075    return not_yet_implemented();
2076 }
2077
2078 int PMPI_Cart_map(MPI_Comm comm_old, int ndims, int* dims, int* periods, int* newrank) {
2079    return not_yet_implemented();
2080 }
2081
2082 int PMPI_Cart_rank(MPI_Comm comm, int* coords, int* rank) {
2083    return not_yet_implemented();
2084 }
2085
2086 int PMPI_Cart_shift(MPI_Comm comm, int direction, int displ, int* source, int* dest) {
2087    return not_yet_implemented();
2088 }
2089
2090 int PMPI_Cart_sub(MPI_Comm comm, int* remain_dims, MPI_Comm* comm_new) {
2091    return not_yet_implemented();
2092 }
2093
2094 int PMPI_Cartdim_get(MPI_Comm comm, int* ndims) {
2095    return not_yet_implemented();
2096 }
2097
2098 int PMPI_Graph_create(MPI_Comm comm_old, int nnodes, int* index, int* edges, int reorder, MPI_Comm* comm_graph) {
2099    return not_yet_implemented();
2100 }
2101
2102 int PMPI_Graph_get(MPI_Comm comm, int maxindex, int maxedges, int* index, int* edges) {
2103    return not_yet_implemented();
2104 }
2105
2106 int PMPI_Graph_map(MPI_Comm comm_old, int nnodes, int* index, int* edges, int* newrank) {
2107    return not_yet_implemented();
2108 }
2109
2110 int PMPI_Graph_neighbors(MPI_Comm comm, int rank, int maxneighbors, int* neighbors) {
2111    return not_yet_implemented();
2112 }
2113
2114 int PMPI_Graph_neighbors_count(MPI_Comm comm, int rank, int* nneighbors) {
2115    return not_yet_implemented();
2116 }
2117
2118 int PMPI_Graphdims_get(MPI_Comm comm, int* nnodes, int* nedges) {
2119    return not_yet_implemented();
2120 }
2121
2122 int PMPI_Topo_test(MPI_Comm comm, int* top_type) {
2123    return not_yet_implemented();
2124 }
2125
2126 int PMPI_Error_class(int errorcode, int* errorclass) {
2127    return not_yet_implemented();
2128 }
2129
2130 int PMPI_Errhandler_create(MPI_Handler_function* function, MPI_Errhandler* errhandler) {
2131    return not_yet_implemented();
2132 }
2133
2134 int PMPI_Errhandler_free(MPI_Errhandler* errhandler) {
2135    return not_yet_implemented();
2136 }
2137
2138 int PMPI_Errhandler_get(MPI_Comm comm, MPI_Errhandler* errhandler) {
2139    return not_yet_implemented();
2140 }
2141
2142 int PMPI_Error_string(int errorcode, char* string, int* resultlen) {
2143    return not_yet_implemented();
2144 }
2145
2146 int PMPI_Errhandler_set(MPI_Comm comm, MPI_Errhandler errhandler) {
2147    return not_yet_implemented();
2148 }
2149
2150
2151 int PMPI_Cancel(MPI_Request* request) {
2152    return not_yet_implemented();
2153 }
2154
2155 int PMPI_Buffer_attach(void* buffer, int size) {
2156    return not_yet_implemented();
2157 }
2158
2159 int PMPI_Buffer_detach(void* buffer, int* size) {
2160    return not_yet_implemented();
2161 }
2162
2163 int PMPI_Comm_test_inter(MPI_Comm comm, int* flag) {
2164    return not_yet_implemented();
2165 }
2166
2167 int PMPI_Comm_get_attr (MPI_Comm comm, int comm_keyval, void *attribute_val, int *flag)
2168 {
2169    return not_yet_implemented();
2170 }
2171
2172 int PMPI_Pcontrol(const int level )
2173 {
2174    return not_yet_implemented();
2175 }
2176
2177 int PMPI_Unpack(void* inbuf, int insize, int* position, void* outbuf, int outcount, MPI_Datatype type, MPI_Comm comm) {
2178    return not_yet_implemented();
2179 }
2180
2181 int PMPI_Ssend(void* buf, int count, MPI_Datatype datatype, int dest, int tag, MPI_Comm comm) {
2182    return not_yet_implemented();
2183 }
2184
2185 int PMPI_Ssend_init(void* buf, int count, MPI_Datatype datatype, int dest, int tag, MPI_Comm comm, MPI_Request* request) {
2186    return not_yet_implemented();
2187 }
2188
2189 int PMPI_Intercomm_create(MPI_Comm local_comm, int local_leader, MPI_Comm peer_comm, int remote_leader, int tag, MPI_Comm* comm_out) {
2190    return not_yet_implemented();
2191 }
2192
2193 int PMPI_Intercomm_merge(MPI_Comm comm, int high, MPI_Comm* comm_out) {
2194    return not_yet_implemented();
2195 }
2196
2197 int PMPI_Bsend(void* buf, int count, MPI_Datatype datatype, int dest, int tag, MPI_Comm comm) {
2198    return not_yet_implemented();
2199 }
2200
2201 int PMPI_Bsend_init(void* buf, int count, MPI_Datatype datatype, int dest, int tag, MPI_Comm comm, MPI_Request* request) {
2202    return not_yet_implemented();
2203 }
2204
2205 int PMPI_Ibsend(void* buf, int count, MPI_Datatype datatype, int dest, int tag, MPI_Comm comm, MPI_Request* request) {
2206    return not_yet_implemented();
2207 }
2208
2209 int PMPI_Comm_remote_group(MPI_Comm comm, MPI_Group* group) {
2210    return not_yet_implemented();
2211 }
2212
2213 int PMPI_Comm_remote_size(MPI_Comm comm, int* size) {
2214    return not_yet_implemented();
2215 }
2216
2217 int PMPI_Issend(void* buf, int count, MPI_Datatype datatype, int dest, int tag, MPI_Comm comm, MPI_Request* request) {
2218    return not_yet_implemented();
2219 }
2220
2221
2222 int PMPI_Attr_delete(MPI_Comm comm, int keyval) {
2223    return not_yet_implemented();
2224 }
2225
2226 int PMPI_Attr_get(MPI_Comm comm, int keyval, void* attr_value, int* flag) {
2227    return not_yet_implemented();
2228 }
2229
2230 int PMPI_Attr_put(MPI_Comm comm, int keyval, void* attr_value) {
2231    return not_yet_implemented();
2232 }
2233
2234 int PMPI_Rsend(void* buf, int count, MPI_Datatype datatype, int dest, int tag, MPI_Comm comm) {
2235    return not_yet_implemented();
2236 }
2237
2238 int PMPI_Rsend_init(void* buf, int count, MPI_Datatype datatype, int dest, int tag, MPI_Comm comm, MPI_Request* request) {
2239    return not_yet_implemented();
2240 }
2241
2242 int PMPI_Irsend(void* buf, int count, MPI_Datatype datatype, int dest, int tag, MPI_Comm comm, MPI_Request* request) {
2243    return not_yet_implemented();
2244 }
2245
2246 int PMPI_Keyval_create(MPI_Copy_function* copy_fn, MPI_Delete_function* delete_fn, int* keyval, void* extra_state) {
2247    return not_yet_implemented();
2248 }
2249
2250 int PMPI_Keyval_free(int* keyval) {
2251    return not_yet_implemented();
2252 }
2253
2254 int PMPI_Test_cancelled(MPI_Status* status, int* flag) {
2255    return not_yet_implemented();
2256 }
2257
2258 int PMPI_Pack(void* inbuf, int incount, MPI_Datatype type, void* outbuf, int outcount, int* position, MPI_Comm comm) {
2259    return not_yet_implemented();
2260 }
2261
2262 int PMPI_Get_elements(MPI_Status* status, MPI_Datatype datatype, int* elements) {
2263    return not_yet_implemented();
2264 }
2265
2266 int PMPI_Dims_create(int nnodes, int ndims, int* dims) {
2267    return not_yet_implemented();
2268 }
2269
2270 int PMPI_Initialized(int* flag) {
2271    return not_yet_implemented();
2272 }