Logo AND Algorithmique Numérique Distribuée

Public GIT Repository
update collectives teshsuite from mpich git (only minor changes)
[simgrid.git] / src / smpi / smpi_pmpi.c
1
2 /* Copyright (c) 2007-2014. The SimGrid Team.
3  * All rights reserved.                                                     */
4
5 /* This program is free software; you can redistribute it and/or modify it
6  * under the terms of the license (GNU LGPL) which comes with this package. */
7
8 #include "private.h"
9 #include "smpi_mpi_dt_private.h"
10
11 XBT_LOG_NEW_DEFAULT_SUBCATEGORY(smpi_pmpi, smpi,
12                                 "Logging specific to SMPI (pmpi)");
13
14 #ifdef HAVE_TRACING
15 //this function need to be here because of the calls to smpi_bench
16 void TRACE_smpi_set_category(const char *category)
17 {
18   //need to end bench otherwise categories for execution tasks are wrong
19   smpi_bench_end();
20   TRACE_internal_smpi_set_category (category);
21   //begin bench after changing process's category
22   smpi_bench_begin();
23 }
24 #endif
25
26 /* PMPI User level calls */
27
28 int PMPI_Init(int *argc, char ***argv)
29 {
30   smpi_process_init(argc, argv);
31   smpi_process_mark_as_initialized();
32 #ifdef HAVE_TRACING
33   int rank = smpi_process_index();
34   TRACE_smpi_init(rank);
35   TRACE_smpi_computing_init(rank);
36   instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
37   extra->type = TRACING_INIT;
38   TRACE_smpi_collective_in(rank, -1, __FUNCTION__, extra);
39   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
40 #endif
41   smpi_bench_begin();
42   return MPI_SUCCESS;
43 }
44
45 int PMPI_Finalize(void)
46 {
47   smpi_bench_end();
48 #ifdef HAVE_TRACING
49   int rank = smpi_process_index();
50   instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
51   extra->type = TRACING_FINALIZE;
52   TRACE_smpi_collective_in(rank, -1, __FUNCTION__, extra);
53 #endif
54   smpi_process_finalize();
55 #ifdef HAVE_TRACING
56   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
57   TRACE_smpi_finalize(smpi_process_index());
58 #endif
59   smpi_process_destroy();
60   return MPI_SUCCESS;
61 }
62
63 int PMPI_Finalized(int* flag)
64 {
65   *flag=smpi_process_finalized();
66   return MPI_SUCCESS;
67 }
68
69 int PMPI_Get_version (int *version,int *subversion){
70   *version = MPI_VERSION;
71   *subversion= MPI_SUBVERSION;
72   return MPI_SUCCESS;
73 }
74
75 int PMPI_Get_library_version (char *version,int *len){
76   int retval = MPI_SUCCESS;
77   smpi_bench_end();
78   snprintf(version,MPI_MAX_LIBRARY_VERSION_STRING,"SMPI Version %d.%d. Copyright The Simgrid Team 2007-2014",SIMGRID_VERSION_MAJOR,
79           SIMGRID_VERSION_MINOR);
80   *len = strlen(version) > MPI_MAX_LIBRARY_VERSION_STRING ? MPI_MAX_LIBRARY_VERSION_STRING : strlen(version);
81   smpi_bench_begin();
82   return retval;
83 }
84
85 int PMPI_Init_thread(int *argc, char ***argv, int required, int *provided)
86 {
87   if (provided != NULL) {
88     *provided = MPI_THREAD_MULTIPLE;
89   }
90   return MPI_Init(argc, argv);
91 }
92
93 int PMPI_Query_thread(int *provided)
94 {
95   int retval = 0;
96
97   if (provided == NULL) {
98     retval = MPI_ERR_ARG;
99   } else {
100     *provided = MPI_THREAD_MULTIPLE;
101     retval = MPI_SUCCESS;
102   }
103   return retval;
104 }
105
106 int PMPI_Is_thread_main(int *flag)
107 {
108   int retval = 0;
109
110   if (flag == NULL) {
111     retval = MPI_ERR_ARG;
112   } else {
113     *flag = smpi_process_index() == 0;
114     retval = MPI_SUCCESS;
115   }
116   return retval;
117 }
118
119 int PMPI_Abort(MPI_Comm comm, int errorcode)
120 {
121   smpi_bench_end();
122   smpi_process_destroy();
123   // FIXME: should kill all processes in comm instead
124   simcall_process_kill(SIMIX_process_self());
125   return MPI_SUCCESS;
126 }
127
128 double PMPI_Wtime(void)
129 {
130   return smpi_mpi_wtime();
131 }
132
133 extern double sg_maxmin_precision;
134 double PMPI_Wtick(void)
135 {
136   return sg_maxmin_precision;
137 }
138
139 int PMPI_Address(void *location, MPI_Aint * address)
140 {
141   int retval = 0;
142
143   if (!address) {
144     retval = MPI_ERR_ARG;
145   } else {
146     *address = (MPI_Aint) location;
147     retval = MPI_SUCCESS;
148   }
149   return retval;
150 }
151
152 int PMPI_Get_address(void *location, MPI_Aint * address)
153 {
154   return PMPI_Address(location, address);
155 }
156
157 int PMPI_Type_free(MPI_Datatype * datatype)
158 {
159   int retval = 0;
160   /* Free a predefined datatype is an error according to the standard, and
161      should be checked for */
162   if (*datatype == MPI_DATATYPE_NULL) {
163     retval = MPI_ERR_ARG;
164   } else {
165     smpi_datatype_free(datatype);
166     retval = MPI_SUCCESS;
167   }
168   return retval;
169 }
170
171 int PMPI_Type_size(MPI_Datatype datatype, int *size)
172 {
173   int retval = 0;
174
175   if (datatype == MPI_DATATYPE_NULL) {
176     retval = MPI_ERR_TYPE;
177   } else if (size == NULL) {
178     retval = MPI_ERR_ARG;
179   } else {
180     *size = (int) smpi_datatype_size(datatype);
181     retval = MPI_SUCCESS;
182   }
183   return retval;
184 }
185
186 int PMPI_Type_get_extent(MPI_Datatype datatype, MPI_Aint * lb, MPI_Aint * extent)
187 {
188   int retval = 0;
189
190   if (datatype == MPI_DATATYPE_NULL) {
191     retval = MPI_ERR_TYPE;
192   } else if (lb == NULL || extent == NULL) {
193     retval = MPI_ERR_ARG;
194   } else {
195     retval = smpi_datatype_extent(datatype, lb, extent);
196   }
197   return retval;
198 }
199
200 int PMPI_Type_get_true_extent(MPI_Datatype datatype, MPI_Aint * lb, MPI_Aint * extent)
201 {
202   return PMPI_Type_get_extent(datatype, lb, extent);
203 }
204
205 int PMPI_Type_extent(MPI_Datatype datatype, MPI_Aint * extent)
206 {
207   int retval = 0;
208
209   if (datatype == MPI_DATATYPE_NULL) {
210     retval = MPI_ERR_TYPE;
211   } else if (extent == NULL) {
212     retval = MPI_ERR_ARG;
213   } else {
214     *extent = smpi_datatype_get_extent(datatype);
215     retval = MPI_SUCCESS;
216   }
217   return retval;
218 }
219
220 int PMPI_Type_lb(MPI_Datatype datatype, MPI_Aint * disp)
221 {
222   int retval = 0;
223
224   if (datatype == MPI_DATATYPE_NULL) {
225     retval = MPI_ERR_TYPE;
226   } else if (disp == NULL) {
227     retval = MPI_ERR_ARG;
228   } else {
229     *disp = smpi_datatype_lb(datatype);
230     retval = MPI_SUCCESS;
231   }
232   return retval;
233 }
234
235 int PMPI_Type_ub(MPI_Datatype datatype, MPI_Aint * disp)
236 {
237   int retval = 0;
238
239   if (datatype == MPI_DATATYPE_NULL) {
240     retval = MPI_ERR_TYPE;
241   } else if (disp == NULL) {
242     retval = MPI_ERR_ARG;
243   } else {
244     *disp = smpi_datatype_ub(datatype);
245     retval = MPI_SUCCESS;
246   }
247   return retval;
248 }
249
250 int PMPI_Type_dup(MPI_Datatype datatype, MPI_Datatype *newtype){
251   int retval = 0;
252
253   if (datatype == MPI_DATATYPE_NULL) {
254     retval = MPI_ERR_TYPE;
255   } else {
256     *newtype = smpi_datatype_dup(datatype);
257     retval = MPI_SUCCESS;
258   }
259   return retval;
260 }
261
262 int PMPI_Op_create(MPI_User_function * function, int commute, MPI_Op * op)
263 {
264   int retval = 0;
265
266   if (function == NULL || op == NULL) {
267     retval = MPI_ERR_ARG;
268   } else {
269     *op = smpi_op_new(function, commute);
270     retval = MPI_SUCCESS;
271   }
272   return retval;
273 }
274
275 int PMPI_Op_free(MPI_Op * op)
276 {
277   int retval = 0;
278
279   if (op == NULL) {
280     retval = MPI_ERR_ARG;
281   } else if (*op == MPI_OP_NULL) {
282     retval = MPI_ERR_OP;
283   } else {
284     smpi_op_destroy(*op);
285     *op = MPI_OP_NULL;
286     retval = MPI_SUCCESS;
287   }
288   return retval;
289 }
290
291 int PMPI_Group_free(MPI_Group * group)
292 {
293   int retval = 0;
294
295   if (group == NULL) {
296     retval = MPI_ERR_ARG;
297   } else {
298     smpi_group_destroy(*group);
299     *group = MPI_GROUP_NULL;
300     retval = MPI_SUCCESS;
301   }
302   return retval;
303 }
304
305 int PMPI_Group_size(MPI_Group group, int *size)
306 {
307   int retval = 0;
308
309   if (group == MPI_GROUP_NULL) {
310     retval = MPI_ERR_GROUP;
311   } else if (size == NULL) {
312     retval = MPI_ERR_ARG;
313   } else {
314     *size = smpi_group_size(group);
315     retval = MPI_SUCCESS;
316   }
317   return retval;
318 }
319
320 int PMPI_Group_rank(MPI_Group group, int *rank)
321 {
322   int retval = 0;
323
324   if (group == MPI_GROUP_NULL) {
325     retval = MPI_ERR_GROUP;
326   } else if (rank == NULL) {
327     retval = MPI_ERR_ARG;
328   } else {
329     *rank = smpi_group_rank(group, smpi_process_index());
330     retval = MPI_SUCCESS;
331   }
332   return retval;
333 }
334
335 int PMPI_Group_translate_ranks(MPI_Group group1, int n, int *ranks1,
336                               MPI_Group group2, int *ranks2)
337 {
338   int retval, i, index;
339   if (group1 == MPI_GROUP_NULL || group2 == MPI_GROUP_NULL) {
340     retval = MPI_ERR_GROUP;
341   } else {
342     for (i = 0; i < n; i++) {
343       if(ranks1[i]==MPI_PROC_NULL){
344         ranks2[i]=MPI_PROC_NULL;
345       }else{
346         index = smpi_group_index(group1, ranks1[i]);
347         ranks2[i] = smpi_group_rank(group2, index);
348       }
349     }
350     retval = MPI_SUCCESS;
351   }
352   return retval;
353 }
354
355 int PMPI_Group_compare(MPI_Group group1, MPI_Group group2, int *result)
356 {
357   int retval = 0;
358
359   if (group1 == MPI_GROUP_NULL || group2 == MPI_GROUP_NULL) {
360     retval = MPI_ERR_GROUP;
361   } else if (result == NULL) {
362     retval = MPI_ERR_ARG;
363   } else {
364     *result = smpi_group_compare(group1, group2);
365     retval = MPI_SUCCESS;
366   }
367   return retval;
368 }
369
370 int PMPI_Group_union(MPI_Group group1, MPI_Group group2,
371                     MPI_Group * newgroup)
372 {
373   int retval, i, proc1, proc2, size, size2;
374
375   if (group1 == MPI_GROUP_NULL || group2 == MPI_GROUP_NULL) {
376     retval = MPI_ERR_GROUP;
377   } else if (newgroup == NULL) {
378     retval = MPI_ERR_ARG;
379   } else {
380     size = smpi_group_size(group1);
381     size2 = smpi_group_size(group2);
382     for (i = 0; i < size2; i++) {
383       proc2 = smpi_group_index(group2, i);
384       proc1 = smpi_group_rank(group1, proc2);
385       if (proc1 == MPI_UNDEFINED) {
386         size++;
387       }
388     }
389     if (size == 0) {
390       *newgroup = MPI_GROUP_EMPTY;
391     } else {
392       *newgroup = smpi_group_new(size);
393       size2 = smpi_group_size(group1);
394       for (i = 0; i < size2; i++) {
395         proc1 = smpi_group_index(group1, i);
396         smpi_group_set_mapping(*newgroup, proc1, i);
397       }
398       for (i = size2; i < size; i++) {
399         proc2 = smpi_group_index(group2, i - size2);
400         smpi_group_set_mapping(*newgroup, proc2, i);
401       }
402     }
403     retval = MPI_SUCCESS;
404   }
405   return retval;
406 }
407
408 int PMPI_Group_intersection(MPI_Group group1, MPI_Group group2,
409                            MPI_Group * newgroup)
410 {
411   int retval, i, proc1, proc2, size;
412
413   if (group1 == MPI_GROUP_NULL || group2 == MPI_GROUP_NULL) {
414     retval = MPI_ERR_GROUP;
415   } else if (newgroup == NULL) {
416     retval = MPI_ERR_ARG;
417   } else {
418     size = smpi_group_size(group2);
419     for (i = 0; i < size; i++) {
420       proc2 = smpi_group_index(group2, i);
421       proc1 = smpi_group_rank(group1, proc2);
422       if (proc1 == MPI_UNDEFINED) {
423         size--;
424       }
425     }
426     if (size == 0) {
427       *newgroup = MPI_GROUP_EMPTY;
428     } else {
429       *newgroup = smpi_group_new(size);
430       int j=0;
431       for (i = 0; i < smpi_group_size(group2); i++) {
432         proc2 = smpi_group_index(group2, i);
433         proc1 = smpi_group_rank(group1, proc2);
434         if (proc1 != MPI_UNDEFINED) {
435           smpi_group_set_mapping(*newgroup, proc2, j);
436           j++;
437         }
438       }
439     }
440     retval = MPI_SUCCESS;
441   }
442   return retval;
443 }
444
445 int PMPI_Group_difference(MPI_Group group1, MPI_Group group2, MPI_Group * newgroup)
446 {
447   int retval, i, proc1, proc2, size, size2;
448
449   if (group1 == MPI_GROUP_NULL || group2 == MPI_GROUP_NULL) {
450     retval = MPI_ERR_GROUP;
451   } else if (newgroup == NULL) {
452     retval = MPI_ERR_ARG;
453   } else {
454     size = size2 = smpi_group_size(group1);
455     for (i = 0; i < size2; i++) {
456       proc1 = smpi_group_index(group1, i);
457       proc2 = smpi_group_rank(group2, proc1);
458       if (proc2 != MPI_UNDEFINED) {
459         size--;
460       }
461     }
462     if (size == 0) {
463       *newgroup = MPI_GROUP_EMPTY;
464     } else {
465       *newgroup = smpi_group_new(size);
466       for (i = 0; i < size2; i++) {
467         proc1 = smpi_group_index(group1, i);
468         proc2 = smpi_group_rank(group2, proc1);
469         if (proc2 == MPI_UNDEFINED) {
470           smpi_group_set_mapping(*newgroup, proc1, i);
471         }
472       }
473     }
474     retval = MPI_SUCCESS;
475   }
476   return retval;
477 }
478
479 int PMPI_Group_incl(MPI_Group group, int n, int *ranks, MPI_Group * newgroup)
480 {
481   int retval, i, index;
482
483   if (group == MPI_GROUP_NULL) {
484     retval = MPI_ERR_GROUP;
485   } else if (newgroup == NULL) {
486     retval = MPI_ERR_ARG;
487   } else {
488     if (n == 0) {
489       *newgroup = MPI_GROUP_EMPTY;
490     } else if (n == smpi_group_size(group)) {
491       *newgroup = group;
492       if(group!= smpi_comm_group(MPI_COMM_WORLD)
493                 && group != MPI_GROUP_NULL
494                 && group != smpi_comm_group(MPI_COMM_SELF)
495                 && group != MPI_GROUP_EMPTY)
496       smpi_group_use(group);
497     } else {
498       *newgroup = smpi_group_new(n);
499       for (i = 0; i < n; i++) {
500         index = smpi_group_index(group, ranks[i]);
501         smpi_group_set_mapping(*newgroup, index, i);
502       }
503     }
504     retval = MPI_SUCCESS;
505   }
506   return retval;
507 }
508
509 int PMPI_Group_excl(MPI_Group group, int n, int *ranks, MPI_Group * newgroup)
510 {
511   int retval, i, j, newsize, oldsize, index;
512
513   if (group == MPI_GROUP_NULL) {
514     retval = MPI_ERR_GROUP;
515   } else if (newgroup == NULL) {
516     retval = MPI_ERR_ARG;
517   } else {
518     if (n == 0) {
519       *newgroup = group;
520       if(group!= smpi_comm_group(MPI_COMM_WORLD)
521                 && group != MPI_GROUP_NULL
522                 && group != smpi_comm_group(MPI_COMM_SELF)
523                 && group != MPI_GROUP_EMPTY)
524       smpi_group_use(group);
525     } else if (n == smpi_group_size(group)) {
526       *newgroup = MPI_GROUP_EMPTY;
527     } else {
528       oldsize=smpi_group_size(group);
529       newsize = oldsize - n;
530       *newgroup = smpi_group_new(newsize);
531
532       int* to_exclude=xbt_new0(int, smpi_group_size(group));
533       for(i=0; i<oldsize; i++)
534         to_exclude[i]=0;
535       for(i=0; i<n; i++)
536         to_exclude[ranks[i]]=1;
537
538       j=0;
539       for(i=0; i<oldsize; i++){
540         if(to_exclude[i]==0){
541           index = smpi_group_index(group, i);
542           smpi_group_set_mapping(*newgroup, index, j);
543           j++;
544         }
545       }
546
547       xbt_free(to_exclude);
548     }
549     retval = MPI_SUCCESS;
550   }
551   return retval;
552 }
553
554 int PMPI_Group_range_incl(MPI_Group group, int n, int ranges[][3],
555                          MPI_Group * newgroup)
556 {
557   int retval, i, j, rank, size, index;
558
559   if (group == MPI_GROUP_NULL) {
560     retval = MPI_ERR_GROUP;
561   } else if (newgroup == NULL) {
562     retval = MPI_ERR_ARG;
563   } else {
564     if (n == 0) {
565       *newgroup = MPI_GROUP_EMPTY;
566     } else {
567       size = 0;
568       for (i = 0; i < n; i++) {
569         for (rank = ranges[i][0];       /* First */
570              rank >= 0; /* Last */
571               ) {
572           size++;
573
574           rank += ranges[i][2]; /* Stride */
575           if (ranges[i][0]<ranges[i][1]){
576               if(rank > ranges[i][1])
577                 break;
578           }else{
579               if(rank < ranges[i][1])
580                 break;
581           }
582         }
583       }
584
585       *newgroup = smpi_group_new(size);
586       j = 0;
587       for (i = 0; i < n; i++) {
588         for (rank = ranges[i][0];     /* First */
589              rank >= 0; /* Last */
590              ) {
591           index = smpi_group_index(group, rank);
592           smpi_group_set_mapping(*newgroup, index, j);
593           j++;
594           rank += ranges[i][2]; /* Stride */
595           if (ranges[i][0]<ranges[i][1]){
596             if(rank > ranges[i][1])
597               break;
598           }else{
599             if(rank < ranges[i][1])
600               break;
601           }
602         }
603       }
604     }
605     retval = MPI_SUCCESS;
606   }
607   return retval;
608 }
609
610 int PMPI_Group_range_excl(MPI_Group group, int n, int ranges[][3],
611                          MPI_Group * newgroup)
612 {
613   int retval, i, rank, newrank,oldrank, size, index, add;
614
615   if (group == MPI_GROUP_NULL) {
616     retval = MPI_ERR_GROUP;
617   } else if (newgroup == NULL) {
618     retval = MPI_ERR_ARG;
619   } else {
620     if (n == 0) {
621       *newgroup = group;
622       if(group!= smpi_comm_group(MPI_COMM_WORLD)
623                 && group != MPI_GROUP_NULL
624                 && group != smpi_comm_group(MPI_COMM_SELF)
625                 && group != MPI_GROUP_EMPTY)
626       smpi_group_use(group);
627     } else {
628       size = smpi_group_size(group);
629       for (i = 0; i < n; i++) {
630         for (rank = ranges[i][0];       /* First */
631              rank >= 0; /* Last */
632               ) {
633           size--;
634
635           rank += ranges[i][2]; /* Stride */
636           if (ranges[i][0]<ranges[i][1]){
637               if(rank > ranges[i][1])
638                 break;
639           }else{
640               if(rank < ranges[i][1])
641                 break;
642           }
643         }
644       }
645       if (size == 0) {
646         *newgroup = MPI_GROUP_EMPTY;
647       } else {
648         *newgroup = smpi_group_new(size);
649         newrank=0;
650         oldrank=0;
651         while (newrank < size) {
652           add=1;
653           for (i = 0; i < n; i++) {
654             for (rank = ranges[i][0];rank >= 0;){
655               if(rank==oldrank){
656                   add=0;
657                   break;
658               }
659
660               rank += ranges[i][2]; /* Stride */
661
662               if (ranges[i][0]<ranges[i][1]){
663                   if(rank > ranges[i][1])
664                     break;
665               }else{
666                   if(rank < ranges[i][1])
667                     break;
668               }
669             }
670           }
671           if(add==1){
672             index = smpi_group_index(group, oldrank);
673             smpi_group_set_mapping(*newgroup, index, newrank);
674             newrank++;
675           }
676           oldrank++;
677         }
678       }
679     }
680
681     retval = MPI_SUCCESS;
682   }
683   return retval;
684 }
685
686 int PMPI_Comm_rank(MPI_Comm comm, int *rank)
687 {
688   int retval = 0;
689   if (comm == MPI_COMM_NULL) {
690     retval = MPI_ERR_COMM;
691   } else if (rank == NULL) {
692     retval = MPI_ERR_ARG;
693   } else {
694     *rank = smpi_comm_rank(comm);
695     retval = MPI_SUCCESS;
696   }
697   return retval;
698 }
699
700 int PMPI_Comm_size(MPI_Comm comm, int *size)
701 {
702   int retval = 0;
703   if (comm == MPI_COMM_NULL) {
704     retval = MPI_ERR_COMM;
705   } else if (size == NULL) {
706     retval = MPI_ERR_ARG;
707   } else {
708     *size = smpi_comm_size(comm);
709     retval = MPI_SUCCESS;
710   }
711   return retval;
712 }
713
714 int PMPI_Comm_get_name (MPI_Comm comm, char* name, int* len)
715 {
716   int retval = 0;
717
718   if (comm == MPI_COMM_NULL)  {
719     retval = MPI_ERR_COMM;
720   } else if (name == NULL || len == NULL)  {
721     retval = MPI_ERR_ARG;
722   } else {
723     smpi_comm_get_name(comm, name, len);
724     retval = MPI_SUCCESS;
725   }
726   return retval;
727 }
728
729 int PMPI_Comm_group(MPI_Comm comm, MPI_Group * group)
730 {
731   int retval = 0;
732
733   if (comm == MPI_COMM_NULL) {
734     retval = MPI_ERR_COMM;
735   } else if (group == NULL) {
736     retval = MPI_ERR_ARG;
737   } else {
738     *group = smpi_comm_group(comm);
739     if(*group!= smpi_comm_group(MPI_COMM_WORLD)
740               && *group != MPI_GROUP_NULL
741               && *group != smpi_comm_group(MPI_COMM_SELF)
742               && *group != MPI_GROUP_EMPTY)
743     smpi_group_use(*group);
744     retval = MPI_SUCCESS;
745   }
746   return retval;
747 }
748
749 int PMPI_Comm_compare(MPI_Comm comm1, MPI_Comm comm2, int *result)
750 {
751   int retval = 0;
752
753   if (comm1 == MPI_COMM_NULL || comm2 == MPI_COMM_NULL) {
754     retval = MPI_ERR_COMM;
755   } else if (result == NULL) {
756     retval = MPI_ERR_ARG;
757   } else {
758     if (comm1 == comm2) {       /* Same communicators means same groups */
759       *result = MPI_IDENT;
760     } else {
761       *result =
762           smpi_group_compare(smpi_comm_group(comm1),
763                              smpi_comm_group(comm2));
764       if (*result == MPI_IDENT) {
765         *result = MPI_CONGRUENT;
766       }
767     }
768     retval = MPI_SUCCESS;
769   }
770   return retval;
771 }
772
773 int PMPI_Comm_dup(MPI_Comm comm, MPI_Comm * newcomm)
774 {
775   int retval = 0;
776
777   if (comm == MPI_COMM_NULL) {
778     retval = MPI_ERR_COMM;
779   } else if (newcomm == NULL) {
780     retval = MPI_ERR_ARG;
781   } else {
782     *newcomm = smpi_comm_new(smpi_comm_group(comm), smpi_comm_topo(comm));
783     retval = MPI_SUCCESS;
784   }
785   return retval;
786 }
787
788 int PMPI_Comm_create(MPI_Comm comm, MPI_Group group, MPI_Comm * newcomm)
789 {
790   int retval = 0;
791
792   if (comm == MPI_COMM_NULL) {
793     retval = MPI_ERR_COMM;
794   } else if (group == MPI_GROUP_NULL) {
795     retval = MPI_ERR_GROUP;
796   } else if (newcomm == NULL) {
797     retval = MPI_ERR_ARG;
798   } else if(smpi_group_rank(group,smpi_process_index())==MPI_UNDEFINED){
799     *newcomm= MPI_COMM_NULL;
800     retval = MPI_SUCCESS;
801   }else{
802
803     *newcomm = smpi_comm_new(group, NULL);
804     retval = MPI_SUCCESS;
805   }
806   return retval;
807 }
808
809 int PMPI_Comm_free(MPI_Comm * comm)
810 {
811   int retval = 0;
812
813   if (comm == NULL) {
814     retval = MPI_ERR_ARG;
815   } else if (*comm == MPI_COMM_NULL) {
816     retval = MPI_ERR_COMM;
817   } else {
818     smpi_comm_destroy(*comm);
819     *comm = MPI_COMM_NULL;
820     retval = MPI_SUCCESS;
821   }
822   return retval;
823 }
824
825 int PMPI_Comm_disconnect(MPI_Comm * comm)
826 {
827   /* TODO: wait until all communication in comm are done */
828   int retval = 0;
829
830   if (comm == NULL) {
831     retval = MPI_ERR_ARG;
832   } else if (*comm == MPI_COMM_NULL) {
833     retval = MPI_ERR_COMM;
834   } else {
835     smpi_comm_destroy(*comm);
836     *comm = MPI_COMM_NULL;
837     retval = MPI_SUCCESS;
838   }
839   return retval;
840 }
841
842 int PMPI_Comm_split(MPI_Comm comm, int color, int key, MPI_Comm* comm_out)
843 {
844   int retval = 0;
845   smpi_bench_end();
846
847   if (comm_out == NULL) {
848     retval = MPI_ERR_ARG;
849   } else if (comm == MPI_COMM_NULL) {
850     retval = MPI_ERR_COMM;
851   } else {
852     *comm_out = smpi_comm_split(comm, color, key);
853     retval = MPI_SUCCESS;
854   }
855   smpi_bench_begin();
856
857   return retval;
858 }
859
860 int PMPI_Send_init(void *buf, int count, MPI_Datatype datatype, int dst,
861                    int tag, MPI_Comm comm, MPI_Request * request)
862 {
863   int retval = 0;
864
865   smpi_bench_end();
866   if (request == NULL) {
867       retval = MPI_ERR_ARG;
868   } else if (comm == MPI_COMM_NULL) {
869       retval = MPI_ERR_COMM;
870   } else if (!is_datatype_valid(datatype)) {
871       retval = MPI_ERR_TYPE;
872   } else if (dst == MPI_PROC_NULL) {
873       retval = MPI_SUCCESS;
874   } else {
875       *request = smpi_mpi_send_init(buf, count, datatype, dst, tag, comm);
876       retval = MPI_SUCCESS;
877   }
878   smpi_bench_begin();
879   if (retval != MPI_SUCCESS && request)
880     *request = MPI_REQUEST_NULL;
881   return retval;
882 }
883
884 int PMPI_Recv_init(void *buf, int count, MPI_Datatype datatype, int src,
885                    int tag, MPI_Comm comm, MPI_Request * request)
886 {
887   int retval = 0;
888
889   smpi_bench_end();
890   if (request == NULL) {
891     retval = MPI_ERR_ARG;
892   } else if (comm == MPI_COMM_NULL) {
893     retval = MPI_ERR_COMM;
894   } else if (!is_datatype_valid(datatype)) {
895       retval = MPI_ERR_TYPE;
896   } else if (src == MPI_PROC_NULL) {
897     retval = MPI_SUCCESS;
898   } else {
899     *request = smpi_mpi_recv_init(buf, count, datatype, src, tag, comm);
900     retval = MPI_SUCCESS;
901   }
902   smpi_bench_begin();
903   if (retval != MPI_SUCCESS && request)
904     *request = MPI_REQUEST_NULL;
905   return retval;
906 }
907
908 int PMPI_Ssend_init(void* buf, int count, MPI_Datatype datatype,
909                     int dst, int tag, MPI_Comm comm, MPI_Request* request)
910 {
911   int retval = 0;
912
913   smpi_bench_end();
914   if (request == NULL) {
915     retval = MPI_ERR_ARG;
916   } else if (comm == MPI_COMM_NULL) {
917     retval = MPI_ERR_COMM;
918   } else if (!is_datatype_valid(datatype)) {
919       retval = MPI_ERR_TYPE;
920   } else if (dst == MPI_PROC_NULL) {
921     retval = MPI_SUCCESS;
922   } else {
923     *request = smpi_mpi_ssend_init(buf, count, datatype, dst, tag, comm);
924     retval = MPI_SUCCESS;
925   }
926   smpi_bench_begin();
927   if (retval != MPI_SUCCESS && request)
928     *request = MPI_REQUEST_NULL;
929   return retval;
930 }
931
932 int PMPI_Start(MPI_Request * request)
933 {
934   int retval = 0;
935
936   smpi_bench_end();
937   if (request == NULL || *request == MPI_REQUEST_NULL) {
938     retval = MPI_ERR_REQUEST;
939   } else {
940     smpi_mpi_start(*request);
941     retval = MPI_SUCCESS;
942   }
943   smpi_bench_begin();
944   return retval;
945 }
946
947 int PMPI_Startall(int count, MPI_Request * requests)
948 {
949   int retval;
950   int i = 0;
951   smpi_bench_end();
952   if (requests == NULL) {
953     retval = MPI_ERR_ARG;
954   } else {
955     retval = MPI_SUCCESS;
956     for (i = 0 ;  i < count ; i++) {
957       if(requests[i] == MPI_REQUEST_NULL) {
958         retval = MPI_ERR_REQUEST;
959       }
960     }
961     if(retval != MPI_ERR_REQUEST) {
962       smpi_mpi_startall(count, requests);
963     }
964   }
965   smpi_bench_begin();
966   return retval;
967 }
968
969 int PMPI_Request_free(MPI_Request * request)
970 {
971   int retval = 0;
972
973   smpi_bench_end();
974   if (*request == MPI_REQUEST_NULL) {
975     retval = MPI_ERR_ARG;
976   } else {
977     smpi_mpi_request_free(request);
978     retval = MPI_SUCCESS;
979   }
980   smpi_bench_begin();
981   return retval;
982 }
983
984 int PMPI_Irecv(void *buf, int count, MPI_Datatype datatype, int src,
985                int tag, MPI_Comm comm, MPI_Request * request)
986 {
987   int retval = 0;
988
989   smpi_bench_end();
990
991   if (request == NULL) {
992     retval = MPI_ERR_ARG;
993   } else if (comm == MPI_COMM_NULL) {
994     retval = MPI_ERR_COMM;
995   } else if (src == MPI_PROC_NULL) {
996     *request = MPI_REQUEST_NULL;
997     retval = MPI_SUCCESS;
998   } else if (src!=MPI_ANY_SOURCE && (src >= smpi_group_size(smpi_comm_group(comm)) || src <0)){
999     retval = MPI_ERR_RANK;
1000   } else if (count < 0) {
1001     retval = MPI_ERR_COUNT;
1002   } else if (buf==NULL && count > 0) {
1003     retval = MPI_ERR_COUNT;
1004   } else if (!is_datatype_valid(datatype)) {
1005       retval = MPI_ERR_TYPE;
1006   } else if(tag<0 && tag !=  MPI_ANY_TAG){
1007     retval = MPI_ERR_TAG;
1008   } else {
1009
1010 #ifdef HAVE_TRACING
1011     int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1012     int src_traced = smpi_group_index(smpi_comm_group(comm), src);
1013
1014     instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
1015     extra->type = TRACING_IRECV;
1016     extra->send_size = count;
1017     extra->src = src_traced;
1018     extra->dst = rank;
1019     extra->datatype1 = encode_datatype(datatype);
1020     TRACE_smpi_ptp_in(rank, src_traced, rank, __FUNCTION__, extra);
1021 #endif
1022
1023     *request = smpi_mpi_irecv(buf, count, datatype, src, tag, comm);
1024     retval = MPI_SUCCESS;
1025
1026 #ifdef HAVE_TRACING
1027     TRACE_smpi_ptp_out(rank, src_traced, rank, __FUNCTION__);
1028     (*request)->recv = 1;
1029 #endif
1030   }
1031
1032   smpi_bench_begin();
1033   if (retval != MPI_SUCCESS && request)
1034     *request = MPI_REQUEST_NULL;
1035   return retval;
1036 }
1037
1038
1039 int PMPI_Isend(void *buf, int count, MPI_Datatype datatype, int dst,
1040                int tag, MPI_Comm comm, MPI_Request * request)
1041 {
1042   int retval = 0;
1043
1044   smpi_bench_end();
1045   if (request == NULL) {
1046     retval = MPI_ERR_ARG;
1047   } else if (comm == MPI_COMM_NULL) {
1048     retval = MPI_ERR_COMM;
1049   } else if (dst == MPI_PROC_NULL) {
1050     *request = MPI_REQUEST_NULL;
1051     retval = MPI_SUCCESS;
1052   } else if (dst >= smpi_group_size(smpi_comm_group(comm)) || dst <0){
1053     retval = MPI_ERR_RANK;
1054   } else if (count < 0) {
1055     retval = MPI_ERR_COUNT;
1056   } else if (buf==NULL && count > 0) {
1057     retval = MPI_ERR_COUNT;
1058   } else if (!is_datatype_valid(datatype)) {
1059       retval = MPI_ERR_TYPE;
1060   } else if(tag<0 && tag !=  MPI_ANY_TAG){
1061     retval = MPI_ERR_TAG;
1062   } else {
1063
1064 #ifdef HAVE_TRACING
1065     int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1066     int dst_traced = smpi_group_index(smpi_comm_group(comm), dst);
1067
1068     instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
1069     extra->type = TRACING_ISEND;
1070     extra->send_size = count;
1071     extra->src = rank;
1072     extra->dst = dst_traced;
1073     extra->datatype1 = encode_datatype(datatype);
1074     TRACE_smpi_ptp_in(rank, rank, dst_traced, __FUNCTION__, extra);
1075     TRACE_smpi_send(rank, rank, dst_traced, count*smpi_datatype_size(datatype));
1076 #endif
1077
1078     *request = smpi_mpi_isend(buf, count, datatype, dst, tag, comm);
1079     retval = MPI_SUCCESS;
1080
1081 #ifdef HAVE_TRACING
1082     TRACE_smpi_ptp_out(rank, rank, dst_traced, __FUNCTION__);
1083     (*request)->send = 1;
1084 #endif
1085   }
1086
1087   smpi_bench_begin();
1088   if (retval != MPI_SUCCESS && request)
1089     *request = MPI_REQUEST_NULL;
1090   return retval;
1091 }
1092
1093 int PMPI_Issend(void* buf, int count, MPI_Datatype datatype,
1094                 int dst, int tag, MPI_Comm comm, MPI_Request* request)
1095 {
1096   int retval = 0;
1097
1098   smpi_bench_end();
1099   if (request == NULL) {
1100     retval = MPI_ERR_ARG;
1101   } else if (comm == MPI_COMM_NULL) {
1102     retval = MPI_ERR_COMM;
1103   } else if (dst == MPI_PROC_NULL) {
1104     *request = MPI_REQUEST_NULL;
1105     retval = MPI_SUCCESS;
1106   } else if (dst >= smpi_group_size(smpi_comm_group(comm)) || dst <0){
1107     retval = MPI_ERR_RANK;
1108   } else if (count < 0) {
1109     retval = MPI_ERR_COUNT;
1110   } else if (buf==NULL && count > 0) {
1111     retval = MPI_ERR_COUNT;
1112   } else if (!is_datatype_valid(datatype)) {
1113       retval = MPI_ERR_TYPE;
1114   } else if(tag<0 && tag !=  MPI_ANY_TAG){
1115     retval = MPI_ERR_TAG;
1116   } else {
1117
1118 #ifdef HAVE_TRACING
1119     int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1120     int dst_traced = smpi_group_index(smpi_comm_group(comm), dst);
1121     instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
1122     extra->type = TRACING_ISSEND;
1123     extra->send_size = count;
1124     extra->src = rank;
1125     extra->dst = dst_traced;
1126     extra->datatype1 = encode_datatype(datatype);
1127     TRACE_smpi_ptp_in(rank, rank, dst_traced, __FUNCTION__, extra);
1128     TRACE_smpi_send(rank, rank, dst_traced, count*smpi_datatype_size(datatype));
1129 #endif
1130
1131     *request = smpi_mpi_issend(buf, count, datatype, dst, tag, comm);
1132     retval = MPI_SUCCESS;
1133
1134 #ifdef HAVE_TRACING
1135     TRACE_smpi_ptp_out(rank, rank, dst_traced, __FUNCTION__);
1136     (*request)->send = 1;
1137 #endif
1138   }
1139
1140   smpi_bench_begin();
1141   if (retval != MPI_SUCCESS && request)
1142     *request = MPI_REQUEST_NULL;
1143   return retval;
1144 }
1145
1146 int PMPI_Recv(void *buf, int count, MPI_Datatype datatype, int src, int tag,
1147              MPI_Comm comm, MPI_Status * status)
1148 {
1149   int retval = 0;
1150
1151   smpi_bench_end();
1152   if (comm == MPI_COMM_NULL) {
1153     retval = MPI_ERR_COMM;
1154   } else if (src == MPI_PROC_NULL) {
1155     smpi_empty_status(status);
1156     status->MPI_SOURCE = MPI_PROC_NULL;
1157     retval = MPI_SUCCESS;
1158   } else if (src!=MPI_ANY_SOURCE && (src >= smpi_group_size(smpi_comm_group(comm)) || src <0)){
1159     retval = MPI_ERR_RANK;
1160   } else if (count < 0) {
1161     retval = MPI_ERR_COUNT;
1162   } else if (buf==NULL && count > 0) {
1163     retval = MPI_ERR_COUNT;
1164   } else if (!is_datatype_valid(datatype)) {
1165       retval = MPI_ERR_TYPE;
1166   } else if(tag<0 && tag !=  MPI_ANY_TAG){
1167     retval = MPI_ERR_TAG;
1168   } else {
1169 #ifdef HAVE_TRACING
1170   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1171   int src_traced = smpi_group_index(smpi_comm_group(comm), src);
1172   instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
1173   extra->type = TRACING_RECV;
1174   extra->send_size = count;
1175   extra->src = src_traced;
1176   extra->dst = rank;
1177   extra->datatype1 = encode_datatype(datatype);
1178   TRACE_smpi_ptp_in(rank, src_traced, rank, __FUNCTION__, extra);
1179 #endif
1180
1181     smpi_mpi_recv(buf, count, datatype, src, tag, comm, status);
1182     retval = MPI_SUCCESS;
1183
1184 #ifdef HAVE_TRACING
1185   //the src may not have been known at the beginning of the recv (MPI_ANY_SOURCE)
1186   if(status!=MPI_STATUS_IGNORE){
1187     src_traced = smpi_group_index(smpi_comm_group(comm), status->MPI_SOURCE);
1188     TRACE_smpi_recv(rank, src_traced, rank);
1189   }
1190   TRACE_smpi_ptp_out(rank, src_traced, rank, __FUNCTION__);
1191 #endif
1192   }
1193
1194   smpi_bench_begin();
1195   return retval;
1196 }
1197
1198 int PMPI_Send(void *buf, int count, MPI_Datatype datatype, int dst, int tag,
1199              MPI_Comm comm)
1200 {
1201   int retval = 0;
1202
1203   smpi_bench_end();
1204
1205   if (comm == MPI_COMM_NULL) {
1206     retval = MPI_ERR_COMM;
1207   } else if (dst == MPI_PROC_NULL) {
1208     retval = MPI_SUCCESS;
1209   } else if (dst >= smpi_group_size(smpi_comm_group(comm)) || dst <0){
1210     retval = MPI_ERR_RANK;
1211   } else if (count < 0) {
1212     retval = MPI_ERR_COUNT;
1213   } else if (buf==NULL && count > 0) {
1214     retval = MPI_ERR_COUNT;
1215   } else if (!is_datatype_valid(datatype)) {
1216       retval = MPI_ERR_TYPE;
1217   } else if(tag<0 && tag !=  MPI_ANY_TAG){
1218     retval = MPI_ERR_TAG;
1219   } else {
1220
1221 #ifdef HAVE_TRACING
1222   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1223   int dst_traced = smpi_group_index(smpi_comm_group(comm), dst);
1224   instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
1225   extra->type = TRACING_SEND;
1226   extra->send_size = count;
1227   extra->src = rank;
1228   extra->dst = dst_traced;
1229   extra->datatype1 = encode_datatype(datatype);
1230   TRACE_smpi_ptp_in(rank, rank, dst_traced, __FUNCTION__, extra);
1231   TRACE_smpi_send(rank, rank, dst_traced,count*smpi_datatype_size(datatype));
1232 #endif
1233
1234     smpi_mpi_send(buf, count, datatype, dst, tag, comm);
1235     retval = MPI_SUCCESS;
1236
1237 #ifdef HAVE_TRACING
1238   TRACE_smpi_ptp_out(rank, rank, dst_traced, __FUNCTION__);
1239 #endif
1240   }
1241
1242   smpi_bench_begin();
1243   return retval;
1244 }
1245
1246
1247
1248 int PMPI_Ssend(void* buf, int count, MPI_Datatype datatype, int dst, int tag, MPI_Comm comm) {
1249   int retval = 0;
1250
1251    smpi_bench_end();
1252
1253    if (comm == MPI_COMM_NULL) {
1254      retval = MPI_ERR_COMM;
1255    } else if (dst == MPI_PROC_NULL) {
1256      retval = MPI_SUCCESS;
1257    } else if (dst >= smpi_group_size(smpi_comm_group(comm)) || dst <0){
1258      retval = MPI_ERR_RANK;
1259    } else if (count < 0) {
1260      retval = MPI_ERR_COUNT;
1261    } else if (buf==NULL && count > 0) {
1262      retval = MPI_ERR_COUNT;
1263    } else if (!is_datatype_valid(datatype)){
1264      retval = MPI_ERR_TYPE;
1265    } else if(tag<0 && tag !=  MPI_ANY_TAG){
1266      retval = MPI_ERR_TAG;
1267    } else {
1268
1269  #ifdef HAVE_TRACING
1270    int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1271    int dst_traced = smpi_group_index(smpi_comm_group(comm), dst);
1272    instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
1273    extra->type = TRACING_SSEND;
1274    extra->send_size = count;
1275    extra->src = rank;
1276    extra->dst = dst_traced;
1277    extra->datatype1 = encode_datatype(datatype);
1278    TRACE_smpi_ptp_in(rank, rank, dst_traced, __FUNCTION__, extra);   TRACE_smpi_send(rank, rank, dst_traced,count*smpi_datatype_size(datatype));
1279  #endif
1280
1281      smpi_mpi_ssend(buf, count, datatype, dst, tag, comm);
1282      retval = MPI_SUCCESS;
1283
1284  #ifdef HAVE_TRACING
1285    TRACE_smpi_ptp_out(rank, rank, dst_traced, __FUNCTION__);
1286  #endif
1287    }
1288
1289    smpi_bench_begin();
1290    return retval;}
1291
1292
1293 int PMPI_Sendrecv(void *sendbuf, int sendcount, MPI_Datatype sendtype,
1294                  int dst, int sendtag, void *recvbuf, int recvcount,
1295                  MPI_Datatype recvtype, int src, int recvtag,
1296                  MPI_Comm comm, MPI_Status * status)
1297 {
1298   int retval = 0;
1299
1300   smpi_bench_end();
1301
1302   if (comm == MPI_COMM_NULL) {
1303     retval = MPI_ERR_COMM;
1304   } else if (!is_datatype_valid(sendtype)
1305              || !is_datatype_valid(recvtype)) {
1306     retval = MPI_ERR_TYPE;
1307   } else if (src == MPI_PROC_NULL || dst == MPI_PROC_NULL) {
1308       smpi_empty_status(status);
1309       status->MPI_SOURCE = MPI_PROC_NULL;
1310       retval = MPI_SUCCESS;
1311   }else if (dst >= smpi_group_size(smpi_comm_group(comm)) || dst <0 ||
1312       (src!=MPI_ANY_SOURCE && (src >= smpi_group_size(smpi_comm_group(comm)) || src <0))){
1313     retval = MPI_ERR_RANK;
1314   } else if (sendcount < 0 || recvcount<0) {
1315       retval = MPI_ERR_COUNT;
1316   } else if ((sendbuf==NULL && sendcount > 0)||(recvbuf==NULL && recvcount>0)) {
1317     retval = MPI_ERR_COUNT;
1318   } else if((sendtag<0 && sendtag !=  MPI_ANY_TAG)||(recvtag<0 && recvtag != MPI_ANY_TAG)){
1319     retval = MPI_ERR_TAG;
1320   } else {
1321
1322 #ifdef HAVE_TRACING
1323   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1324   int dst_traced = smpi_group_index(smpi_comm_group(comm), dst);
1325   int src_traced = smpi_group_index(smpi_comm_group(comm), src);
1326   instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
1327   extra->type = TRACING_SENDRECV;
1328   extra->send_size = sendcount;
1329   extra->recv_size = recvcount;
1330   extra->src = src_traced;
1331   extra->dst = dst_traced;
1332   extra->datatype1 = encode_datatype(sendtype);
1333   extra->datatype2 = encode_datatype(recvtype);
1334
1335   TRACE_smpi_ptp_in(rank, src_traced, dst_traced, __FUNCTION__, extra);
1336   TRACE_smpi_send(rank, rank, dst_traced,sendcount*smpi_datatype_size(sendtype));
1337 #endif
1338
1339
1340     smpi_mpi_sendrecv(sendbuf, sendcount, sendtype, dst, sendtag, recvbuf,
1341                       recvcount, recvtype, src, recvtag, comm, status);
1342     retval = MPI_SUCCESS;
1343
1344 #ifdef HAVE_TRACING
1345   TRACE_smpi_ptp_out(rank, src_traced, dst_traced, __FUNCTION__);
1346   TRACE_smpi_recv(rank, src_traced, rank);
1347 #endif
1348
1349   }
1350
1351   smpi_bench_begin();
1352   return retval;
1353 }
1354
1355 int PMPI_Sendrecv_replace(void *buf, int count, MPI_Datatype datatype,
1356                          int dst, int sendtag, int src, int recvtag,
1357                          MPI_Comm comm, MPI_Status * status)
1358 {
1359   //TODO: suboptimal implementation
1360   void *recvbuf;
1361   int retval = 0;
1362   if (!is_datatype_valid(datatype)) {
1363       retval = MPI_ERR_TYPE;
1364   } else if (count < 0) {
1365       retval = MPI_ERR_COUNT;
1366   } else {
1367     int size = smpi_datatype_get_extent(datatype) * count;
1368     recvbuf = xbt_new0(char, size);
1369     retval =
1370         MPI_Sendrecv(buf, count, datatype, dst, sendtag, recvbuf, count,
1371                      datatype, src, recvtag, comm, status);
1372     if(retval==MPI_SUCCESS){
1373         smpi_datatype_copy(recvbuf, count, datatype, buf, count, datatype);
1374     }
1375     xbt_free(recvbuf);
1376
1377   }
1378   return retval;
1379 }
1380
1381 int PMPI_Test(MPI_Request * request, int *flag, MPI_Status * status)
1382 {
1383   int retval = 0;
1384   smpi_bench_end();
1385   if (request == NULL || flag == NULL) {
1386     retval = MPI_ERR_ARG;
1387   } else if (*request == MPI_REQUEST_NULL) {
1388     *flag= TRUE;
1389     smpi_empty_status(status);
1390     retval = MPI_ERR_REQUEST;
1391   } else {
1392 #ifdef HAVE_TRACING
1393     int rank = request && (*request)->comm != MPI_COMM_NULL
1394       ? smpi_process_index()
1395       : -1;
1396
1397     instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
1398     extra->type = TRACING_TEST;
1399     TRACE_smpi_testing_in(rank, extra);
1400 #endif
1401     *flag = smpi_mpi_test(request, status);
1402 #ifdef HAVE_TRACING
1403     TRACE_smpi_testing_out(rank);
1404 #endif
1405     retval = MPI_SUCCESS;
1406   }
1407   smpi_bench_begin();
1408   return retval;
1409 }
1410
1411 int PMPI_Testany(int count, MPI_Request requests[], int *index, int *flag,
1412                 MPI_Status * status)
1413 {
1414   int retval = 0;
1415
1416   smpi_bench_end();
1417   if (index == NULL || flag == NULL) {
1418     retval = MPI_ERR_ARG;
1419   } else {
1420     *flag = smpi_mpi_testany(count, requests, index, status);
1421     retval = MPI_SUCCESS;
1422   }
1423   smpi_bench_begin();
1424   return retval;
1425 }
1426
1427 int PMPI_Testall(int count, MPI_Request* requests, int* flag, MPI_Status* statuses)
1428 {
1429   int retval = 0;
1430
1431   smpi_bench_end();
1432   if (flag == NULL) {
1433     retval = MPI_ERR_ARG;
1434   } else {
1435     *flag = smpi_mpi_testall(count, requests, statuses);
1436     retval = MPI_SUCCESS;
1437   }
1438   smpi_bench_begin();
1439   return retval;
1440 }
1441
1442 int PMPI_Probe(int source, int tag, MPI_Comm comm, MPI_Status* status) {
1443   int retval = 0;
1444   smpi_bench_end();
1445
1446   if (status == NULL) {
1447     retval = MPI_ERR_ARG;
1448   } else if (comm == MPI_COMM_NULL) {
1449     retval = MPI_ERR_COMM;
1450   } else if (source == MPI_PROC_NULL) {
1451     smpi_empty_status(status);
1452     status->MPI_SOURCE = MPI_PROC_NULL;
1453     retval = MPI_SUCCESS;
1454   } else {
1455     smpi_mpi_probe(source, tag, comm, status);
1456     retval = MPI_SUCCESS;
1457   }
1458   smpi_bench_begin();
1459   return retval;
1460 }
1461
1462
1463 int PMPI_Iprobe(int source, int tag, MPI_Comm comm, int* flag, MPI_Status* status) {
1464   int retval = 0;
1465   smpi_bench_end();
1466
1467   if (flag == NULL) {
1468     retval = MPI_ERR_ARG;
1469   } else if (status == NULL) {
1470     retval = MPI_ERR_ARG;
1471   } else if (comm == MPI_COMM_NULL) {
1472     retval = MPI_ERR_COMM;
1473   } else if (source == MPI_PROC_NULL) {
1474     *flag=TRUE;
1475     smpi_empty_status(status);
1476     status->MPI_SOURCE = MPI_PROC_NULL;
1477     retval = MPI_SUCCESS;
1478   } else {
1479     smpi_mpi_iprobe(source, tag, comm, flag, status);
1480     retval = MPI_SUCCESS;
1481   }
1482   smpi_bench_begin();
1483   return retval;
1484 }
1485
1486 int PMPI_Wait(MPI_Request * request, MPI_Status * status)
1487 {
1488   int retval = 0;
1489
1490   smpi_bench_end();
1491
1492   smpi_empty_status(status);
1493
1494   if (request == NULL) {
1495     retval = MPI_ERR_ARG;
1496   } else if (*request == MPI_REQUEST_NULL) {
1497     retval = MPI_ERR_REQUEST;
1498   } else {
1499
1500 #ifdef HAVE_TRACING
1501     int rank = request && (*request)->comm != MPI_COMM_NULL
1502       ? smpi_process_index()
1503       : -1;
1504
1505     int src_traced = (*request)->src;
1506     int dst_traced = (*request)->dst;
1507     MPI_Comm comm = (*request)->comm;
1508     int is_wait_for_receive = (*request)->recv;
1509     instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
1510     extra->type = TRACING_WAIT;
1511     TRACE_smpi_ptp_in(rank, src_traced, dst_traced, __FUNCTION__, extra);
1512 #endif
1513
1514     smpi_mpi_wait(request, status);
1515     retval = MPI_SUCCESS;
1516
1517 #ifdef HAVE_TRACING
1518     //the src may not have been known at the beginning of the recv (MPI_ANY_SOURCE)
1519     TRACE_smpi_ptp_out(rank, src_traced, dst_traced, __FUNCTION__);
1520     if (is_wait_for_receive) {
1521       if(src_traced==MPI_ANY_SOURCE)
1522         src_traced = (status!=MPI_STATUS_IGNORE) ?
1523           smpi_group_rank(smpi_comm_group(comm), status->MPI_SOURCE) :
1524           src_traced;
1525       TRACE_smpi_recv(rank, src_traced, dst_traced);
1526     }
1527 #endif
1528
1529   }
1530
1531   smpi_bench_begin();
1532   return retval;
1533 }
1534
1535 int PMPI_Waitany(int count, MPI_Request requests[], int *index, MPI_Status * status)
1536 {
1537   if (index == NULL)
1538     return MPI_ERR_ARG;
1539
1540   smpi_bench_end();
1541 #ifdef HAVE_TRACING
1542   //save requests information for tracing
1543   int i;
1544   int *srcs = xbt_new0(int, count);
1545   int *dsts = xbt_new0(int, count);
1546   int *recvs = xbt_new0(int, count);
1547   MPI_Comm *comms = xbt_new0(MPI_Comm, count);
1548
1549   for (i = 0; i < count; i++) {
1550     MPI_Request req = requests[i];      //already received requests are no longer valid
1551     if (req) {
1552       srcs[i] = req->src;
1553       dsts[i] = req->dst;
1554       recvs[i] = req->recv;
1555       comms[i] = req->comm;
1556     }
1557   }
1558   int rank_traced = smpi_process_index();
1559   instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
1560   extra->type = TRACING_WAITANY;
1561   extra->send_size=count;
1562   TRACE_smpi_ptp_in(rank_traced, -1, -1, __FUNCTION__,extra);
1563
1564 #endif
1565   *index = smpi_mpi_waitany(count, requests, status);
1566 #ifdef HAVE_TRACING
1567   if(*index!=MPI_UNDEFINED){
1568     int src_traced = srcs[*index];
1569     //the src may not have been known at the beginning of the recv (MPI_ANY_SOURCE)
1570     int dst_traced = dsts[*index];
1571     int is_wait_for_receive = recvs[*index];
1572     if (is_wait_for_receive) {
1573       if(srcs[*index]==MPI_ANY_SOURCE)
1574         src_traced = (status!=MPI_STATUSES_IGNORE) ?
1575                       smpi_group_rank(smpi_comm_group(comms[*index]), status->MPI_SOURCE) :
1576                       srcs[*index];
1577       TRACE_smpi_recv(rank_traced, src_traced, dst_traced);
1578     }
1579     TRACE_smpi_ptp_out(rank_traced, src_traced, dst_traced, __FUNCTION__);
1580     xbt_free(srcs);
1581     xbt_free(dsts);
1582     xbt_free(recvs);
1583     xbt_free(comms);
1584
1585   }
1586 #endif
1587   smpi_bench_begin();
1588   return MPI_SUCCESS;
1589 }
1590
1591 int PMPI_Waitall(int count, MPI_Request requests[], MPI_Status status[])
1592 {
1593
1594   smpi_bench_end();
1595 #ifdef HAVE_TRACING
1596   //save information from requests
1597   int i;
1598   int *srcs = xbt_new0(int, count);
1599   int *dsts = xbt_new0(int, count);
1600   int *recvs = xbt_new0(int, count);
1601   int *valid = xbt_new0(int, count);
1602   MPI_Comm *comms = xbt_new0(MPI_Comm, count);
1603
1604   //int valid_count = 0;
1605   for (i = 0; i < count; i++) {
1606     MPI_Request req = requests[i];
1607     if(req!=MPI_REQUEST_NULL){
1608       srcs[i] = req->src;
1609       dsts[i] = req->dst;
1610       recvs[i] = req->recv;
1611       comms[i] = req->comm;
1612       valid[i]=1;;
1613     }else{
1614       valid[i]=0;
1615     }
1616   }
1617   int rank_traced = smpi_process_index();
1618   instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
1619   extra->type = TRACING_WAITALL;
1620   extra->send_size=count;
1621   TRACE_smpi_ptp_in(rank_traced, -1, -1, __FUNCTION__,extra);
1622 #endif
1623   int retval = smpi_mpi_waitall(count, requests, status);
1624 #ifdef HAVE_TRACING
1625   for (i = 0; i < count; i++) {
1626     if(valid[i]){
1627     //int src_traced = srcs[*index];
1628     //the src may not have been known at the beginning of the recv (MPI_ANY_SOURCE)
1629       int src_traced = srcs[i];
1630       int dst_traced = dsts[i];
1631       int is_wait_for_receive = recvs[i];
1632       if (is_wait_for_receive) {
1633         if(src_traced==MPI_ANY_SOURCE)
1634         src_traced = (status!=MPI_STATUSES_IGNORE) ?
1635                           smpi_group_rank(smpi_comm_group(comms[i]), status[i].MPI_SOURCE) :
1636                           srcs[i];
1637         TRACE_smpi_recv(rank_traced, src_traced, dst_traced);
1638       }
1639     }
1640   }
1641   TRACE_smpi_ptp_out(rank_traced, -1, -1, __FUNCTION__);
1642   xbt_free(srcs);
1643   xbt_free(dsts);
1644   xbt_free(recvs);
1645   xbt_free(valid);
1646   xbt_free(comms);
1647
1648 #endif
1649   smpi_bench_begin();
1650   return retval;
1651 }
1652
1653 int PMPI_Waitsome(int incount, MPI_Request requests[], int *outcount,
1654                  int *indices, MPI_Status status[])
1655 {
1656   int retval = 0;
1657
1658   smpi_bench_end();
1659   if (outcount == NULL) {
1660     retval = MPI_ERR_ARG;
1661   } else {
1662     *outcount = smpi_mpi_waitsome(incount, requests, indices, status);
1663     retval = MPI_SUCCESS;
1664   }
1665   smpi_bench_begin();
1666   return retval;
1667 }
1668
1669 int PMPI_Testsome(int incount, MPI_Request requests[], int* outcount,
1670                  int* indices, MPI_Status status[])
1671 {
1672   int retval = 0;
1673
1674    smpi_bench_end();
1675    if (outcount == NULL) {
1676      retval = MPI_ERR_ARG;
1677    } else {
1678      *outcount = smpi_mpi_testsome(incount, requests, indices, status);
1679      retval = MPI_SUCCESS;
1680    }
1681    smpi_bench_begin();
1682    return retval;
1683 }
1684
1685
1686 int PMPI_Bcast(void *buf, int count, MPI_Datatype datatype, int root, MPI_Comm comm)
1687 {
1688   int retval = 0;
1689
1690   smpi_bench_end();
1691
1692   if (comm == MPI_COMM_NULL) {
1693     retval = MPI_ERR_COMM;
1694   } else {
1695 #ifdef HAVE_TRACING
1696   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1697   int root_traced = smpi_group_index(smpi_comm_group(comm), root);
1698
1699   instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
1700   extra->type = TRACING_BCAST;
1701   extra->send_size = count;
1702   extra->root = root_traced;
1703   extra->datatype1 = encode_datatype(datatype);
1704   TRACE_smpi_collective_in(rank, root_traced, __FUNCTION__, extra);
1705
1706 #endif
1707     mpi_coll_bcast_fun(buf, count, datatype, root, comm);
1708     retval = MPI_SUCCESS;
1709 #ifdef HAVE_TRACING
1710   TRACE_smpi_collective_out(rank, root_traced, __FUNCTION__);
1711 #endif
1712   }
1713
1714   smpi_bench_begin();
1715   return retval;
1716 }
1717
1718 int PMPI_Barrier(MPI_Comm comm)
1719 {
1720   int retval = 0;
1721
1722   smpi_bench_end();
1723
1724   if (comm == MPI_COMM_NULL) {
1725     retval = MPI_ERR_COMM;
1726   } else {
1727 #ifdef HAVE_TRACING
1728   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1729   instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
1730   extra->type = TRACING_BARRIER;
1731   TRACE_smpi_collective_in(rank, -1, __FUNCTION__, extra);
1732 #endif
1733     mpi_coll_barrier_fun(comm);
1734     retval = MPI_SUCCESS;
1735 #ifdef HAVE_TRACING
1736   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
1737 #endif
1738   }
1739
1740   smpi_bench_begin();
1741   return retval;
1742 }
1743
1744 int PMPI_Gather(void *sendbuf, int sendcount, MPI_Datatype sendtype,
1745                void *recvbuf, int recvcount, MPI_Datatype recvtype,
1746                int root, MPI_Comm comm)
1747 {
1748   int retval = 0;
1749
1750   smpi_bench_end();
1751
1752   if (comm == MPI_COMM_NULL) {
1753     retval = MPI_ERR_COMM;
1754   } else if ((( sendbuf != MPI_IN_PLACE) && (sendtype == MPI_DATATYPE_NULL)) ||
1755             ((smpi_comm_rank(comm) == root) && (recvtype == MPI_DATATYPE_NULL))){
1756     retval = MPI_ERR_TYPE;
1757   } else if ((( sendbuf != MPI_IN_PLACE) && (sendcount <0)) ||
1758             ((smpi_comm_rank(comm) == root) && (recvcount <0))){
1759     retval = MPI_ERR_COUNT;
1760   } else {
1761
1762     char* sendtmpbuf = (char*) sendbuf;
1763     int sendtmpcount = sendcount;
1764     MPI_Datatype sendtmptype = sendtype;
1765     if( (smpi_comm_rank(comm) == root) && (sendbuf == MPI_IN_PLACE )) {
1766       sendtmpcount=0;
1767       sendtmptype=recvtype;
1768     }
1769 #ifdef HAVE_TRACING
1770   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1771   int root_traced = smpi_group_index(smpi_comm_group(comm), root);
1772   instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
1773   extra->type = TRACING_GATHER;
1774   extra->send_size = sendtmpcount;
1775   extra->recv_size = recvcount;
1776   extra->root = root_traced;
1777   extra->datatype1 = encode_datatype(sendtmptype);
1778   extra->datatype2 = encode_datatype(recvtype);
1779
1780   TRACE_smpi_collective_in(rank, root_traced, __FUNCTION__, extra);
1781 #endif
1782     mpi_coll_gather_fun(sendtmpbuf, sendtmpcount, sendtmptype, recvbuf, recvcount,
1783                     recvtype, root, comm);
1784
1785
1786     retval = MPI_SUCCESS;
1787 #ifdef HAVE_TRACING
1788   TRACE_smpi_collective_out(rank, root_traced, __FUNCTION__);
1789 #endif
1790   }
1791
1792   smpi_bench_begin();
1793   return retval;
1794 }
1795
1796 int PMPI_Gatherv(void *sendbuf, int sendcount, MPI_Datatype sendtype,
1797                 void *recvbuf, int *recvcounts, int *displs,
1798                 MPI_Datatype recvtype, int root, MPI_Comm comm)
1799 {
1800   int retval = 0;
1801
1802   smpi_bench_end();
1803
1804   if (comm == MPI_COMM_NULL) {
1805     retval = MPI_ERR_COMM;
1806   } else if ((( sendbuf != MPI_IN_PLACE) && (sendtype == MPI_DATATYPE_NULL)) ||
1807             ((smpi_comm_rank(comm) == root) && (recvtype == MPI_DATATYPE_NULL))){
1808     retval = MPI_ERR_TYPE;
1809   } else if (( sendbuf != MPI_IN_PLACE) && (sendcount <0)){
1810     retval = MPI_ERR_COUNT;
1811   } else if (recvcounts == NULL || displs == NULL) {
1812     retval = MPI_ERR_ARG;
1813   } else {
1814     char* sendtmpbuf = (char*) sendbuf;
1815     int sendtmpcount = sendcount;
1816     MPI_Datatype sendtmptype = sendtype;
1817     if( (smpi_comm_rank(comm) == root) && (sendbuf == MPI_IN_PLACE )) {
1818       sendtmpcount=0;
1819       sendtmptype=recvtype;
1820     }
1821
1822 #ifdef HAVE_TRACING
1823   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1824   int root_traced = smpi_group_index(smpi_comm_group(comm), root);
1825   int i=0;
1826   int size = smpi_comm_size(comm);
1827   instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
1828   extra->type = TRACING_GATHERV;
1829   extra->send_size = sendtmpcount;
1830   extra->recvcounts= xbt_malloc(size*sizeof(int));
1831   for(i=0; i< size; i++)//copy data to avoid bad free
1832     extra->recvcounts[i] = recvcounts[i];
1833   extra->num_processes = size;
1834   extra->root = root_traced;
1835   extra->datatype1 = encode_datatype(sendtmptype);
1836   extra->datatype2 = encode_datatype(recvtype);
1837
1838   TRACE_smpi_collective_in(rank, root_traced, __FUNCTION__,extra);
1839 #endif
1840     smpi_mpi_gatherv(sendtmpbuf, sendtmpcount, sendtmptype, recvbuf, recvcounts,
1841                      displs, recvtype, root, comm);
1842     retval = MPI_SUCCESS;
1843 #ifdef HAVE_TRACING
1844   TRACE_smpi_collective_out(rank, root_traced, __FUNCTION__);
1845 #endif
1846   }
1847
1848   smpi_bench_begin();
1849   return retval;
1850 }
1851
1852 int PMPI_Allgather(void *sendbuf, int sendcount, MPI_Datatype sendtype,
1853                   void *recvbuf, int recvcount, MPI_Datatype recvtype,
1854                   MPI_Comm comm)
1855 {
1856   int retval = 0;
1857
1858   smpi_bench_end();
1859
1860   if (comm == MPI_COMM_NULL) {
1861     retval = MPI_ERR_COMM;
1862   } else if ((( sendbuf != MPI_IN_PLACE) && (sendtype == MPI_DATATYPE_NULL)) ||
1863             (recvtype == MPI_DATATYPE_NULL)){
1864     retval = MPI_ERR_TYPE;
1865   } else if ((( sendbuf != MPI_IN_PLACE) && (sendcount <0)) ||
1866             (recvcount <0)){
1867     retval = MPI_ERR_COUNT;
1868   } else {
1869     if(sendbuf == MPI_IN_PLACE) {
1870       sendbuf=((char*)recvbuf)+smpi_datatype_get_extent(recvtype)*recvcount*smpi_comm_rank(comm);
1871       sendcount=recvcount;
1872       sendtype=recvtype;
1873     }
1874 #ifdef HAVE_TRACING
1875   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1876   instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
1877   extra->type = TRACING_ALLGATHER;
1878   extra->send_size = sendcount;
1879   extra->recv_size = recvcount;
1880   extra->datatype1 = encode_datatype(sendtype);
1881   extra->datatype2 = encode_datatype(recvtype);
1882
1883   TRACE_smpi_collective_in(rank, -1, __FUNCTION__, extra);
1884 #endif
1885     mpi_coll_allgather_fun(sendbuf, sendcount, sendtype, recvbuf, recvcount,
1886                            recvtype, comm);
1887     retval = MPI_SUCCESS;
1888
1889 #ifdef HAVE_TRACING
1890   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
1891 #endif
1892   }
1893   smpi_bench_begin();
1894   return retval;
1895 }
1896
1897 int PMPI_Allgatherv(void *sendbuf, int sendcount, MPI_Datatype sendtype,
1898                    void *recvbuf, int *recvcounts, int *displs,
1899                    MPI_Datatype recvtype, MPI_Comm comm)
1900 {
1901   int retval = 0;
1902
1903   smpi_bench_end();
1904
1905   if (comm == MPI_COMM_NULL) {
1906     retval = MPI_ERR_COMM;
1907   } else if ((( sendbuf != MPI_IN_PLACE) && (sendtype == MPI_DATATYPE_NULL)) ||
1908             (recvtype == MPI_DATATYPE_NULL)){
1909     retval = MPI_ERR_TYPE;
1910   } else if (( sendbuf != MPI_IN_PLACE) && (sendcount <0)){
1911     retval = MPI_ERR_COUNT;
1912   } else if (recvcounts == NULL || displs == NULL) {
1913     retval = MPI_ERR_ARG;
1914   } else {
1915
1916     if(sendbuf == MPI_IN_PLACE) {
1917       sendbuf=((char*)recvbuf)+smpi_datatype_get_extent(recvtype)*displs[smpi_comm_rank(comm)];
1918       sendcount=recvcounts[smpi_comm_rank(comm)];
1919       sendtype=recvtype;
1920     }
1921 #ifdef HAVE_TRACING
1922   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1923   int i=0;
1924   int size = smpi_comm_size(comm);
1925   instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
1926   extra->type = TRACING_ALLGATHERV;
1927   extra->send_size = sendcount;
1928   extra->recvcounts= xbt_malloc(size*sizeof(int));
1929   for(i=0; i< size; i++)//copy data to avoid bad free
1930     extra->recvcounts[i] = recvcounts[i];
1931   extra->num_processes = size;
1932   extra->datatype1 = encode_datatype(sendtype);
1933   extra->datatype2 = encode_datatype(recvtype);
1934
1935   TRACE_smpi_collective_in(rank, -1, __FUNCTION__,extra);
1936 #endif
1937     mpi_coll_allgatherv_fun(sendbuf, sendcount, sendtype, recvbuf, recvcounts,
1938                         displs, recvtype, comm);
1939     retval = MPI_SUCCESS;
1940 #ifdef HAVE_TRACING
1941   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
1942 #endif
1943   }
1944
1945   smpi_bench_begin();
1946   return retval;
1947 }
1948
1949 int PMPI_Scatter(void *sendbuf, int sendcount, MPI_Datatype sendtype,
1950                 void *recvbuf, int recvcount, MPI_Datatype recvtype,
1951                 int root, MPI_Comm comm)
1952 {
1953   int retval = 0;
1954
1955   smpi_bench_end();
1956
1957   if (comm == MPI_COMM_NULL) {
1958     retval = MPI_ERR_COMM;
1959   } else if (((smpi_comm_rank(comm)==root) && (sendtype == MPI_DATATYPE_NULL))
1960              || ((recvbuf !=MPI_IN_PLACE) && (recvtype == MPI_DATATYPE_NULL))) {
1961     retval = MPI_ERR_TYPE;
1962   } else {
1963
1964     if (recvbuf == MPI_IN_PLACE) {
1965         recvtype=sendtype;
1966         recvcount=sendcount;
1967     }
1968 #ifdef HAVE_TRACING
1969   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1970   int root_traced = smpi_group_index(smpi_comm_group(comm), root);
1971   instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
1972   extra->type = TRACING_SCATTER;
1973   extra->send_size = sendcount;
1974   extra->recv_size= recvcount;
1975   extra->root = root_traced;
1976   extra->datatype1 = encode_datatype(sendtype);
1977   extra->datatype2 = encode_datatype(recvtype);
1978
1979   TRACE_smpi_collective_in(rank, root_traced, __FUNCTION__,extra);
1980 #endif
1981     mpi_coll_scatter_fun(sendbuf, sendcount, sendtype, recvbuf, recvcount,
1982                      recvtype, root, comm);
1983     retval = MPI_SUCCESS;
1984 #ifdef HAVE_TRACING
1985   TRACE_smpi_collective_out(rank, root_traced, __FUNCTION__);
1986 #endif
1987   }
1988
1989   smpi_bench_begin();
1990   return retval;
1991 }
1992
1993 int PMPI_Scatterv(void *sendbuf, int *sendcounts, int *displs,
1994                  MPI_Datatype sendtype, void *recvbuf, int recvcount,
1995                  MPI_Datatype recvtype, int root, MPI_Comm comm)
1996 {
1997   int retval = 0;
1998
1999   smpi_bench_end();
2000
2001   if (comm == MPI_COMM_NULL) {
2002     retval = MPI_ERR_COMM;
2003   } else if (sendcounts == NULL || displs == NULL) {
2004     retval = MPI_ERR_ARG;
2005   } else if (((smpi_comm_rank(comm)==root) && (sendtype == MPI_DATATYPE_NULL))
2006              || ((recvbuf !=MPI_IN_PLACE) && (recvtype == MPI_DATATYPE_NULL))) {
2007     retval = MPI_ERR_TYPE;
2008   } else {
2009     if (recvbuf == MPI_IN_PLACE) {
2010         recvtype=sendtype;
2011         recvcount=sendcounts[smpi_comm_rank(comm)];
2012     }
2013 #ifdef HAVE_TRACING
2014   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
2015   int root_traced = smpi_group_index(smpi_comm_group(comm), root);
2016   int i=0;
2017   int size = smpi_comm_size(comm);
2018   instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
2019   extra->type = TRACING_SCATTERV;
2020   extra->recv_size = recvcount;
2021   extra->sendcounts= xbt_malloc(size*sizeof(int));
2022   for(i=0; i< size; i++)//copy data to avoid bad free
2023     extra->sendcounts[i] = sendcounts[i];
2024   extra->num_processes = size;
2025   extra->root = root_traced;
2026   extra->datatype1 = encode_datatype(sendtype);
2027   extra->datatype2 = encode_datatype(recvtype);
2028
2029   TRACE_smpi_collective_in(rank, root_traced, __FUNCTION__,extra);
2030
2031 #endif
2032     smpi_mpi_scatterv(sendbuf, sendcounts, displs, sendtype, recvbuf,
2033                       recvcount, recvtype, root, comm);
2034     retval = MPI_SUCCESS;
2035 #ifdef HAVE_TRACING
2036   TRACE_smpi_collective_out(rank, root_traced, __FUNCTION__);
2037 #endif
2038   }
2039
2040   smpi_bench_begin();
2041   return retval;
2042 }
2043
2044 int PMPI_Reduce(void *sendbuf, void *recvbuf, int count,
2045                MPI_Datatype datatype, MPI_Op op, int root, MPI_Comm comm)
2046 {
2047   int retval = 0;
2048
2049   smpi_bench_end();
2050
2051   if (comm == MPI_COMM_NULL) {
2052     retval = MPI_ERR_COMM;
2053   } else if (!is_datatype_valid(datatype) || op == MPI_OP_NULL) {
2054     retval = MPI_ERR_ARG;
2055   } else {
2056 #ifdef HAVE_TRACING
2057   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
2058   int root_traced = smpi_group_index(smpi_comm_group(comm), root);
2059   instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
2060   extra->type = TRACING_REDUCE;
2061   extra->send_size = count;
2062   extra->datatype1 = encode_datatype(datatype);
2063   extra->root = root_traced;
2064
2065   TRACE_smpi_collective_in(rank, root_traced, __FUNCTION__,extra);
2066 #endif
2067     mpi_coll_reduce_fun(sendbuf, recvbuf, count, datatype, op, root, comm);
2068
2069     retval = MPI_SUCCESS;
2070 #ifdef HAVE_TRACING
2071   TRACE_smpi_collective_out(rank, root_traced, __FUNCTION__);
2072 #endif
2073   }
2074
2075   smpi_bench_begin();
2076   return retval;
2077 }
2078
2079 int PMPI_Reduce_local(void *inbuf, void *inoutbuf, int count,
2080     MPI_Datatype datatype, MPI_Op op){
2081   int retval = 0;
2082
2083     smpi_bench_end();
2084     if (!is_datatype_valid(datatype) || op == MPI_OP_NULL) {
2085       retval = MPI_ERR_ARG;
2086     } else {
2087       smpi_op_apply(op, inbuf, inoutbuf, &count, &datatype);
2088       retval=MPI_SUCCESS;
2089     }
2090     smpi_bench_begin();
2091     return retval;
2092 }
2093
2094 int PMPI_Allreduce(void *sendbuf, void *recvbuf, int count,
2095                   MPI_Datatype datatype, MPI_Op op, MPI_Comm comm)
2096 {
2097   int retval = 0;
2098
2099   smpi_bench_end();
2100
2101   if (comm == MPI_COMM_NULL) {
2102     retval = MPI_ERR_COMM;
2103   } else if (!is_datatype_valid(datatype)) {
2104     retval = MPI_ERR_TYPE;
2105   } else if (op == MPI_OP_NULL) {
2106     retval = MPI_ERR_OP;
2107   } else {
2108
2109     char* sendtmpbuf = (char*) sendbuf;
2110     if( sendbuf == MPI_IN_PLACE ) {
2111       sendtmpbuf = (char *)xbt_malloc(count*smpi_datatype_get_extent(datatype));
2112       smpi_datatype_copy(recvbuf, count, datatype,sendtmpbuf, count, datatype);
2113     }
2114 #ifdef HAVE_TRACING
2115   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
2116   instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
2117   extra->type = TRACING_ALLREDUCE;
2118   extra->send_size = count;
2119   extra->datatype1 = encode_datatype(datatype);
2120
2121   TRACE_smpi_collective_in(rank, -1, __FUNCTION__,extra);
2122 #endif
2123     mpi_coll_allreduce_fun(sendtmpbuf, recvbuf, count, datatype, op, comm);
2124
2125     if( sendbuf == MPI_IN_PLACE ) {
2126       xbt_free(sendtmpbuf);
2127     }
2128
2129     retval = MPI_SUCCESS;
2130 #ifdef HAVE_TRACING
2131   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
2132 #endif
2133   }
2134
2135   smpi_bench_begin();
2136   return retval;
2137 }
2138
2139 int PMPI_Scan(void *sendbuf, void *recvbuf, int count,
2140              MPI_Datatype datatype, MPI_Op op, MPI_Comm comm)
2141 {
2142   int retval = 0;
2143
2144   smpi_bench_end();
2145
2146   if (comm == MPI_COMM_NULL) {
2147     retval = MPI_ERR_COMM;
2148   } else if (!is_datatype_valid(datatype)) {
2149     retval = MPI_ERR_TYPE;
2150   } else if (op == MPI_OP_NULL) {
2151     retval = MPI_ERR_OP;
2152   } else {
2153 #ifdef HAVE_TRACING
2154   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
2155   instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
2156   extra->type = TRACING_SCAN;
2157   extra->send_size = count;
2158   extra->datatype1 = encode_datatype(datatype);
2159
2160   TRACE_smpi_collective_in(rank, -1, __FUNCTION__,extra);
2161 #endif
2162     smpi_mpi_scan(sendbuf, recvbuf, count, datatype, op, comm);
2163     retval = MPI_SUCCESS;
2164 #ifdef HAVE_TRACING
2165   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
2166 #endif
2167   }
2168
2169   smpi_bench_begin();
2170   return retval;
2171 }
2172
2173 int PMPI_Exscan(void *sendbuf, void *recvbuf, int count, MPI_Datatype datatype,
2174                 MPI_Op op, MPI_Comm comm){
2175   int retval = 0;
2176
2177   smpi_bench_end();
2178
2179   if (comm == MPI_COMM_NULL) {
2180     retval = MPI_ERR_COMM;
2181   } else if (!is_datatype_valid(datatype)) {
2182     retval = MPI_ERR_TYPE;
2183   } else if (op == MPI_OP_NULL) {
2184     retval = MPI_ERR_OP;
2185   } else {
2186 #ifdef HAVE_TRACING
2187   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
2188   instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
2189   extra->type = TRACING_EXSCAN;
2190   extra->send_size = count;
2191   extra->datatype1 = encode_datatype(datatype);
2192
2193   TRACE_smpi_collective_in(rank, -1, __FUNCTION__,extra);
2194 #endif
2195     smpi_mpi_exscan(sendbuf, recvbuf, count, datatype, op, comm);
2196     retval = MPI_SUCCESS;
2197 #ifdef HAVE_TRACING
2198   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
2199 #endif
2200   }
2201
2202   smpi_bench_begin();
2203   return retval;
2204 }
2205
2206 int PMPI_Reduce_scatter(void *sendbuf, void *recvbuf, int *recvcounts,
2207                        MPI_Datatype datatype, MPI_Op op, MPI_Comm comm)
2208 {
2209   int retval = 0;
2210   smpi_bench_end();
2211
2212   if (comm == MPI_COMM_NULL) {
2213     retval = MPI_ERR_COMM;
2214   } else if (!is_datatype_valid(datatype)) {
2215     retval = MPI_ERR_TYPE;
2216   } else if (op == MPI_OP_NULL) {
2217     retval = MPI_ERR_OP;
2218   } else if (recvcounts == NULL) {
2219     retval = MPI_ERR_ARG;
2220   } else {
2221 #ifdef HAVE_TRACING
2222   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
2223   int i=0;
2224   int size = smpi_comm_size(comm);
2225   instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
2226   extra->type = TRACING_REDUCE_SCATTER;
2227   extra->send_size = 0;
2228   extra->recvcounts= xbt_malloc(size*sizeof(int));
2229   for(i=0; i< size; i++)//copy data to avoid bad free
2230     extra->recvcounts[i] = recvcounts[i];
2231   extra->num_processes = size;
2232   extra->datatype1 = encode_datatype(datatype);
2233
2234   TRACE_smpi_collective_in(rank, -1, __FUNCTION__,extra);
2235 #endif
2236     void* sendtmpbuf=sendbuf;
2237     if(sendbuf==MPI_IN_PLACE){
2238       sendtmpbuf=recvbuf;
2239     }
2240
2241     mpi_coll_reduce_scatter_fun(sendtmpbuf, recvbuf, recvcounts,
2242                        datatype,  op, comm);
2243     retval = MPI_SUCCESS;
2244 #ifdef HAVE_TRACING
2245   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
2246 #endif
2247   }
2248
2249   smpi_bench_begin();
2250   return retval;
2251 }
2252
2253 int PMPI_Reduce_scatter_block(void *sendbuf, void *recvbuf, int recvcount,
2254                        MPI_Datatype datatype, MPI_Op op, MPI_Comm comm)
2255 {
2256   int retval,i;
2257   smpi_bench_end();
2258
2259   if (comm == MPI_COMM_NULL) {
2260     retval = MPI_ERR_COMM;
2261   } else if (!is_datatype_valid(datatype)) {
2262     retval = MPI_ERR_TYPE;
2263   } else if (op == MPI_OP_NULL) {
2264     retval = MPI_ERR_OP;
2265   } else if (recvcount < 0) {
2266     retval = MPI_ERR_ARG;
2267   } else {
2268     int count=smpi_comm_size(comm);
2269
2270 #ifdef HAVE_TRACING
2271   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
2272   instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
2273   extra->type = TRACING_REDUCE_SCATTER;
2274   extra->send_size = 0;
2275   extra->recvcounts= xbt_malloc(count*sizeof(int));
2276   for(i=0; i< count; i++)//copy data to avoid bad free
2277     extra->recvcounts[i] = recvcount;
2278   extra->num_processes = count;
2279   extra->datatype1 = encode_datatype(datatype);
2280
2281   TRACE_smpi_collective_in(rank, -1, __FUNCTION__,extra);
2282 #endif
2283     int* recvcounts=(int*)xbt_malloc(count);
2284     for (i=0; i<count;i++)recvcounts[i]=recvcount;
2285     mpi_coll_reduce_scatter_fun(sendbuf, recvbuf, recvcounts,
2286                        datatype,  op, comm);
2287     xbt_free(recvcounts);
2288     retval = MPI_SUCCESS;
2289 #ifdef HAVE_TRACING
2290   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
2291 #endif
2292   }
2293
2294   smpi_bench_begin();
2295   return retval;
2296 }
2297
2298 int PMPI_Alltoall(void *sendbuf, int sendcount, MPI_Datatype sendtype,
2299                  void *recvbuf, int recvcount, MPI_Datatype recvtype,
2300                  MPI_Comm comm)
2301 {
2302   int retval = 0;
2303
2304   smpi_bench_end();
2305
2306   if (comm == MPI_COMM_NULL) {
2307     retval = MPI_ERR_COMM;
2308   } else if (sendtype == MPI_DATATYPE_NULL
2309              || recvtype == MPI_DATATYPE_NULL) {
2310     retval = MPI_ERR_TYPE;
2311   } else {
2312 #ifdef HAVE_TRACING
2313   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
2314   instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
2315   extra->type = TRACING_ALLTOALL;
2316   extra->send_size = sendcount;
2317   extra->recv_size = recvcount;
2318   extra->datatype1 = encode_datatype(sendtype);
2319   extra->datatype2 = encode_datatype(recvtype);
2320
2321   TRACE_smpi_collective_in(rank, -1, __FUNCTION__,extra);
2322 #endif
2323     retval = mpi_coll_alltoall_fun(sendbuf, sendcount, sendtype, recvbuf, recvcount, recvtype, comm);
2324 #ifdef HAVE_TRACING
2325   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
2326 #endif
2327   }
2328
2329   smpi_bench_begin();
2330   return retval;
2331 }
2332
2333 int PMPI_Alltoallv(void *sendbuf, int *sendcounts, int *senddisps,
2334                   MPI_Datatype sendtype, void *recvbuf, int *recvcounts,
2335                   int *recvdisps, MPI_Datatype recvtype, MPI_Comm comm)
2336 {
2337   int retval = 0;
2338
2339   smpi_bench_end();
2340
2341   if (comm == MPI_COMM_NULL) {
2342     retval = MPI_ERR_COMM;
2343   } else if (sendtype == MPI_DATATYPE_NULL
2344              || recvtype == MPI_DATATYPE_NULL) {
2345     retval = MPI_ERR_TYPE;
2346   } else if (sendcounts == NULL || senddisps == NULL || recvcounts == NULL
2347              || recvdisps == NULL) {
2348     retval = MPI_ERR_ARG;
2349   } else {
2350 #ifdef HAVE_TRACING
2351   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
2352   int i=0;
2353   int size = smpi_comm_size(comm);
2354   instr_extra_data extra = xbt_new0(s_instr_extra_data_t,1);
2355   extra->type = TRACING_ALLTOALLV;
2356   extra->send_size = 0;
2357   extra->recv_size = 0;
2358   extra->recvcounts= xbt_malloc(size*sizeof(int));
2359   extra->sendcounts= xbt_malloc(size*sizeof(int));
2360
2361   for(i=0; i< size; i++){//copy data to avoid bad free
2362     extra->send_size += sendcounts[i];
2363     extra->recv_size += recvcounts[i];
2364
2365     extra->sendcounts[i] = sendcounts[i];
2366     extra->recvcounts[i] = recvcounts[i];
2367   }
2368   extra->num_processes = size;
2369
2370   extra->datatype1 = encode_datatype(sendtype);
2371   extra->datatype2 = encode_datatype(recvtype);
2372
2373   TRACE_smpi_collective_in(rank, -1, __FUNCTION__,extra);
2374 #endif
2375     retval =
2376         mpi_coll_alltoallv_fun(sendbuf, sendcounts, senddisps, sendtype,
2377                                   recvbuf, recvcounts, recvdisps, recvtype,
2378                                   comm);
2379 #ifdef HAVE_TRACING
2380   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
2381 #endif
2382   }
2383
2384   smpi_bench_begin();
2385   return retval;
2386 }
2387
2388
2389 int PMPI_Get_processor_name(char *name, int *resultlen)
2390 {
2391   int retval = MPI_SUCCESS;
2392
2393   strncpy(name, SIMIX_host_get_name(SIMIX_host_self()),
2394           strlen(SIMIX_host_get_name(SIMIX_host_self())) < MPI_MAX_PROCESSOR_NAME - 1 ?
2395           strlen(SIMIX_host_get_name(SIMIX_host_self())) +1 :
2396           MPI_MAX_PROCESSOR_NAME - 1 );
2397   *resultlen =
2398       strlen(name) >
2399       MPI_MAX_PROCESSOR_NAME ? MPI_MAX_PROCESSOR_NAME : strlen(name);
2400
2401   return retval;
2402 }
2403
2404 int PMPI_Get_count(MPI_Status * status, MPI_Datatype datatype, int *count)
2405 {
2406   int retval = MPI_SUCCESS;
2407   size_t size;
2408
2409   if (status == NULL || count == NULL) {
2410     retval = MPI_ERR_ARG;
2411   } else if (!is_datatype_valid(datatype)) {
2412     retval = MPI_ERR_TYPE;
2413   } else {
2414     size = smpi_datatype_size(datatype);
2415     if (size == 0) {
2416       *count = 0;
2417     } else if (status->count % size != 0) {
2418       retval = MPI_UNDEFINED;
2419     } else {
2420       *count = smpi_mpi_get_count(status, datatype);
2421     }
2422   }
2423   return retval;
2424 }
2425
2426 int PMPI_Type_contiguous(int count, MPI_Datatype old_type, MPI_Datatype* new_type) {
2427   int retval = 0;
2428
2429   if (old_type == MPI_DATATYPE_NULL) {
2430     retval = MPI_ERR_TYPE;
2431   } else if (count<0){
2432     retval = MPI_ERR_COUNT;
2433   } else {
2434     retval = smpi_datatype_contiguous(count, old_type, new_type, 0);
2435   }
2436   return retval;
2437 }
2438
2439 int PMPI_Type_commit(MPI_Datatype* datatype) {
2440   int retval = 0;
2441
2442   if (datatype == NULL || *datatype == MPI_DATATYPE_NULL) {
2443     retval = MPI_ERR_TYPE;
2444   } else {
2445     smpi_datatype_commit(datatype);
2446     retval = MPI_SUCCESS;
2447   }
2448   return retval;
2449 }
2450
2451
2452 int PMPI_Type_vector(int count, int blocklen, int stride, MPI_Datatype old_type, MPI_Datatype* new_type) {
2453   int retval = 0;
2454
2455   if (old_type == MPI_DATATYPE_NULL) {
2456     retval = MPI_ERR_TYPE;
2457   } else if (count<0 || blocklen<0){
2458     retval = MPI_ERR_COUNT;
2459   } else {
2460     retval = smpi_datatype_vector(count, blocklen, stride, old_type, new_type);
2461   }
2462   return retval;
2463 }
2464
2465 int PMPI_Type_hvector(int count, int blocklen, MPI_Aint stride, MPI_Datatype old_type, MPI_Datatype* new_type) {
2466   int retval = 0;
2467
2468   if (old_type == MPI_DATATYPE_NULL) {
2469     retval = MPI_ERR_TYPE;
2470   } else if (count<0 || blocklen<0){
2471     retval = MPI_ERR_COUNT;
2472   } else {
2473     retval = smpi_datatype_hvector(count, blocklen, stride, old_type, new_type);
2474   }
2475   return retval;
2476 }
2477
2478 int PMPI_Type_create_hvector(int count, int blocklen, MPI_Aint stride, MPI_Datatype old_type, MPI_Datatype* new_type) {
2479   return MPI_Type_hvector(count, blocklen, stride, old_type, new_type);
2480 }
2481
2482 int PMPI_Type_indexed(int count, int* blocklens, int* indices, MPI_Datatype old_type, MPI_Datatype* new_type) {
2483   int retval = 0;
2484
2485   if (old_type == MPI_DATATYPE_NULL) {
2486     retval = MPI_ERR_TYPE;
2487   } else if (count<0){
2488     retval = MPI_ERR_COUNT;
2489   } else {
2490     retval = smpi_datatype_indexed(count, blocklens, indices, old_type, new_type);
2491   }
2492   return retval;
2493 }
2494
2495 int PMPI_Type_create_indexed(int count, int* blocklens, int* indices, MPI_Datatype old_type, MPI_Datatype* new_type) {
2496   int retval = 0;
2497
2498   if (old_type == MPI_DATATYPE_NULL) {
2499     retval = MPI_ERR_TYPE;
2500   } else if (count<0){
2501     retval = MPI_ERR_COUNT;
2502   } else {
2503     retval = smpi_datatype_indexed(count, blocklens, indices, old_type, new_type);
2504   }
2505   return retval;
2506 }
2507
2508 int PMPI_Type_create_indexed_block(int count, int blocklength, int* indices, MPI_Datatype old_type, MPI_Datatype* new_type) {
2509   int retval,i;
2510
2511   if (old_type == MPI_DATATYPE_NULL) {
2512     retval = MPI_ERR_TYPE;
2513   } else if (count<0){
2514     retval = MPI_ERR_COUNT;
2515   } else {
2516     int* blocklens=(int*)xbt_malloc(blocklength*count);
2517     for (i=0; i<count;i++)blocklens[i]=blocklength;
2518     retval = smpi_datatype_indexed(count, blocklens, indices, old_type, new_type);
2519     xbt_free(blocklens);
2520   }
2521   return retval;
2522 }
2523
2524
2525 int PMPI_Type_hindexed(int count, int* blocklens, MPI_Aint* indices, MPI_Datatype old_type, MPI_Datatype* new_type) {
2526   int retval = 0;
2527
2528   if (old_type == MPI_DATATYPE_NULL) {
2529     retval = MPI_ERR_TYPE;
2530   } else if (count<0){
2531     retval = MPI_ERR_COUNT;
2532   } else {
2533     retval = smpi_datatype_hindexed(count, blocklens, indices, old_type, new_type);
2534   }
2535   return retval;
2536 }
2537
2538 int PMPI_Type_create_hindexed(int count, int* blocklens, MPI_Aint* indices, MPI_Datatype old_type, MPI_Datatype* new_type) {
2539   return PMPI_Type_hindexed(count, blocklens,indices,old_type,new_type);
2540 }
2541
2542 int PMPI_Type_create_hindexed_block(int count, int blocklength, MPI_Aint* indices, MPI_Datatype old_type, MPI_Datatype* new_type) {
2543   int retval,i;
2544
2545   if (old_type == MPI_DATATYPE_NULL) {
2546     retval = MPI_ERR_TYPE;
2547   } else if (count<0){
2548     retval = MPI_ERR_COUNT;
2549   } else {
2550     int* blocklens=(int*)xbt_malloc(blocklength*count);
2551     for (i=0; i<count;i++)blocklens[i]=blocklength;
2552     retval = smpi_datatype_hindexed(count, blocklens, indices, old_type, new_type);
2553     xbt_free(blocklens);
2554   }
2555   return retval;
2556 }
2557
2558
2559 int PMPI_Type_struct(int count, int* blocklens, MPI_Aint* indices, MPI_Datatype* old_types, MPI_Datatype* new_type) {
2560   int retval = 0;
2561
2562   if (count<0){
2563     retval = MPI_ERR_COUNT;
2564   } else {
2565     retval = smpi_datatype_struct(count, blocklens, indices, old_types, new_type);
2566   }
2567   return retval;
2568 }
2569
2570 int PMPI_Type_create_struct(int count, int* blocklens, MPI_Aint* indices, MPI_Datatype* old_types, MPI_Datatype* new_type) {
2571   return PMPI_Type_struct(count, blocklens, indices, old_types, new_type);
2572 }
2573
2574
2575 int PMPI_Error_class(int errorcode, int* errorclass) {
2576   // assume smpi uses only standard mpi error codes
2577   *errorclass=errorcode;
2578   return MPI_SUCCESS;
2579 }
2580
2581
2582 int PMPI_Initialized(int* flag) {
2583    *flag=smpi_process_initialized();
2584    return MPI_SUCCESS;
2585 }
2586
2587 /* The topo part of MPI_COMM_WORLD should always be NULL. When other topologies
2588  * will be implemented, not only should we check if the topology is NULL, but
2589  * we should check if it is the good topology type (so we have to add a
2590  *  MPIR_Topo_Type field, and replace the MPI_Topology field by an union)*/
2591
2592 int PMPI_Cart_create(MPI_Comm comm_old, int ndims, int* dims, int* periodic, int reorder, MPI_Comm* comm_cart) {
2593   int retval = 0;
2594   if (comm_old == MPI_COMM_NULL){
2595     retval =  MPI_ERR_COMM;
2596   } else if (ndims < 0 ||
2597            (ndims > 0 && (dims == NULL || 
2598                           periodic == NULL)) ||
2599            comm_cart == NULL) {
2600     retval = MPI_ERR_ARG;
2601   } else{
2602     retval = smpi_mpi_cart_create(comm_old, ndims, dims, periodic, reorder, comm_cart);
2603   }
2604   return retval;
2605 }
2606
2607 int PMPI_Cart_rank(MPI_Comm comm, int* coords, int* rank) {
2608   if(comm == MPI_COMM_NULL || smpi_comm_topo(comm) == NULL) {
2609     return MPI_ERR_TOPOLOGY;
2610   }
2611   if (coords == NULL) {
2612     return MPI_ERR_ARG;
2613   }
2614   return smpi_mpi_cart_rank(comm, coords, rank);
2615 }
2616
2617 int PMPI_Cart_shift(MPI_Comm comm, int direction, int displ, int* source, int* dest) {
2618   if(comm == MPI_COMM_NULL || smpi_comm_topo(comm) == NULL) {
2619     return MPI_ERR_TOPOLOGY;
2620   }
2621   if (source == NULL || dest == NULL || direction < 0 ) {
2622     return MPI_ERR_ARG;
2623   }
2624   return smpi_mpi_cart_shift(comm, direction, displ, source, dest);
2625 }
2626
2627 int PMPI_Cart_coords(MPI_Comm comm, int rank, int maxdims, int* coords) {
2628   if(comm == MPI_COMM_NULL || smpi_comm_topo(comm) == NULL) {
2629     return MPI_ERR_TOPOLOGY;
2630   }
2631   if (rank < 0 || rank >= smpi_comm_size(comm)) {
2632     return MPI_ERR_RANK;
2633   }
2634   if (maxdims <= 0) {
2635     return MPI_ERR_ARG;
2636   }
2637   if(coords == NULL) {
2638     return MPI_ERR_ARG;
2639   }
2640   return smpi_mpi_cart_coords(comm, rank, maxdims, coords);
2641 }
2642
2643 int PMPI_Cart_get(MPI_Comm comm, int maxdims, int* dims, int* periods, int* coords) {
2644   if(comm == NULL || smpi_comm_topo(comm) == NULL) {
2645     return MPI_ERR_TOPOLOGY;
2646   }
2647   if(maxdims <= 0 || dims == NULL || periods == NULL || coords == NULL) {
2648     return MPI_ERR_ARG;
2649   }
2650   return smpi_mpi_cart_get(comm, maxdims, dims, periods, coords);
2651 }
2652
2653 int PMPI_Cartdim_get(MPI_Comm comm, int* ndims) {
2654   if (comm == MPI_COMM_NULL || smpi_comm_topo(comm) == NULL) {
2655     return MPI_ERR_TOPOLOGY;
2656   }
2657   if (ndims == NULL) {
2658     return MPI_ERR_ARG;
2659   }
2660   return smpi_mpi_cartdim_get(comm, ndims);
2661 }
2662
2663 int PMPI_Dims_create(int nnodes, int ndims, int* dims) {
2664   if(dims == NULL) {
2665     return MPI_ERR_ARG;
2666   }
2667   if (ndims < 1 || nnodes < 1) {
2668     return MPI_ERR_DIMS;
2669   }
2670
2671   return smpi_mpi_dims_create(nnodes, ndims, dims);
2672 }
2673
2674 int PMPI_Cart_sub(MPI_Comm comm, int* remain_dims, MPI_Comm* comm_new) {
2675   if(comm == MPI_COMM_NULL || smpi_comm_topo(comm) == NULL) {
2676     return MPI_ERR_TOPOLOGY;
2677   }
2678   if (comm_new == NULL) {
2679     return MPI_ERR_ARG;
2680   }
2681   return smpi_mpi_cart_sub(comm, remain_dims, comm_new);
2682 }
2683
2684 int PMPI_Type_create_resized(MPI_Datatype oldtype,MPI_Aint lb, MPI_Aint extent, MPI_Datatype *newtype){
2685     if(oldtype == MPI_DATATYPE_NULL) {
2686         return MPI_ERR_TYPE;
2687     }
2688     int blocks[3] = { 1, 1, 1 };
2689     MPI_Aint disps[3] = { lb, 0, lb+extent };
2690     MPI_Datatype types[3] = { MPI_LB, oldtype, MPI_UB };
2691         
2692     s_smpi_mpi_struct_t* subtype = smpi_datatype_struct_create( blocks,
2693                                                                 disps,
2694                                                                 3,
2695                                                                 types
2696                                                                 );
2697     smpi_datatype_create(newtype,oldtype->size, lb, lb + extent, 1 , subtype, DT_FLAG_VECTOR);
2698
2699     (*newtype)->flags &= ~DT_FLAG_COMMITED;
2700     return MPI_SUCCESS;
2701 }
2702
2703
2704
2705 int PMPI_Win_create( void *base, MPI_Aint size, int disp_unit, MPI_Info info, MPI_Comm comm, MPI_Win *win){
2706   int retval = 0;
2707   smpi_bench_end();
2708   if (comm == MPI_COMM_NULL) {
2709     retval= MPI_ERR_COMM;
2710   }else if ((base == NULL && size != 0)
2711             || disp_unit <= 0 || size < 0 ){
2712     retval= MPI_ERR_OTHER;
2713   }else{
2714     *win = smpi_mpi_win_create( base, size, disp_unit, info, comm);
2715     retval = MPI_SUCCESS;
2716   }
2717   smpi_bench_begin();
2718   return retval;
2719 }
2720
2721 int PMPI_Win_free( MPI_Win* win){
2722   int retval = 0;
2723   smpi_bench_end();
2724   if (win == NULL || *win == MPI_WIN_NULL) {
2725     retval = MPI_ERR_WIN;
2726   }else{
2727     retval=smpi_mpi_win_free(win);
2728   }
2729   smpi_bench_begin();
2730   return retval;
2731 }
2732
2733
2734 int PMPI_Win_fence( int assert,  MPI_Win win){
2735   int retval = 0;
2736   smpi_bench_end();
2737   if (win == MPI_WIN_NULL) {
2738     retval = MPI_ERR_WIN;
2739   } else {
2740     retval = smpi_mpi_win_fence(assert, win);
2741   }
2742   smpi_bench_begin();
2743   return retval;
2744 }
2745
2746 int PMPI_Get( void *origin_addr, int origin_count, MPI_Datatype origin_datatype, int target_rank,
2747               MPI_Aint target_disp, int target_count, MPI_Datatype target_datatype, MPI_Win win){
2748   int retval = 0;
2749   smpi_bench_end();
2750   if (win == MPI_WIN_NULL) {
2751     retval = MPI_ERR_WIN;
2752   } else if (target_rank == MPI_PROC_NULL) {
2753     retval = MPI_SUCCESS;
2754   } else if (target_rank <0){
2755     retval = MPI_ERR_RANK;
2756   } else if (target_disp <0){
2757       retval = MPI_ERR_ARG;
2758   } else if (origin_count < 0 || target_count < 0) {
2759     retval = MPI_ERR_COUNT;
2760   } else if (origin_addr==NULL && origin_count > 0){
2761     retval = MPI_ERR_COUNT;
2762   } else if ((!is_datatype_valid(origin_datatype)) ||
2763             (!is_datatype_valid(target_datatype))) {
2764     retval = MPI_ERR_TYPE;
2765   } else {
2766     retval = smpi_mpi_get( origin_addr, origin_count, origin_datatype, target_rank, target_disp, target_count, target_datatype, win);
2767   }
2768   smpi_bench_begin();
2769   return retval;
2770 }
2771
2772 int PMPI_Put( void *origin_addr, int origin_count, MPI_Datatype origin_datatype, int target_rank,
2773               MPI_Aint target_disp, int target_count, MPI_Datatype target_datatype, MPI_Win win){
2774   int retval = 0;
2775   smpi_bench_end();
2776   if (win == MPI_WIN_NULL) {
2777     retval = MPI_ERR_WIN;
2778   } else if (target_rank == MPI_PROC_NULL) {
2779     retval = MPI_SUCCESS;
2780   } else if (target_rank <0){
2781     retval = MPI_ERR_RANK;
2782   } else if (target_disp <0){
2783     retval = MPI_ERR_ARG;
2784   } else if (origin_count < 0 || target_count < 0) {
2785     retval = MPI_ERR_COUNT;
2786   } else if (origin_addr==NULL && origin_count > 0){
2787     retval = MPI_ERR_COUNT;
2788   } else if ((!is_datatype_valid(origin_datatype)) ||
2789             (!is_datatype_valid(target_datatype))) {
2790     retval = MPI_ERR_TYPE;
2791   } else {
2792     retval = smpi_mpi_put( origin_addr, origin_count, origin_datatype, target_rank, target_disp, target_count, target_datatype, win);
2793   }
2794   smpi_bench_begin();
2795   return retval;
2796 }
2797
2798
2799 int PMPI_Accumulate( void *origin_addr, int origin_count, MPI_Datatype origin_datatype, int target_rank,
2800               MPI_Aint target_disp, int target_count, MPI_Datatype target_datatype, MPI_Op op, MPI_Win win){
2801   int retval = 0;
2802   smpi_bench_end();
2803   if (win == MPI_WIN_NULL) {
2804     retval = MPI_ERR_WIN;
2805   } else if (target_rank == MPI_PROC_NULL) {
2806     retval = MPI_SUCCESS;
2807   } else if (target_rank <0){
2808     retval = MPI_ERR_RANK;
2809   } else if (target_disp <0){
2810     retval = MPI_ERR_ARG;
2811   } else if (origin_count < 0 || target_count < 0) {
2812     retval = MPI_ERR_COUNT;
2813   } else if (origin_addr==NULL && origin_count > 0){
2814     retval = MPI_ERR_COUNT;
2815   } else if ((!is_datatype_valid(origin_datatype)) ||
2816             (!is_datatype_valid(target_datatype))) {
2817     retval = MPI_ERR_TYPE;
2818   } else if (op == MPI_OP_NULL) {
2819     retval = MPI_ERR_OP;
2820   } else {
2821     retval = smpi_mpi_accumulate( origin_addr, origin_count, origin_datatype, target_rank, target_disp, target_count, target_datatype, op, win);
2822   }
2823   smpi_bench_begin();
2824   return retval;
2825 }
2826
2827
2828 int PMPI_Alloc_mem(MPI_Aint size, MPI_Info info, void *baseptr){
2829   void *ptr = xbt_malloc(size);
2830   if(!ptr)
2831     return MPI_ERR_NO_MEM;
2832   else {
2833     *(void **)baseptr = ptr;
2834     return MPI_SUCCESS;
2835   }
2836 }
2837
2838 int PMPI_Free_mem(void *baseptr){
2839   xbt_free(baseptr);
2840   return MPI_SUCCESS;
2841 }
2842
2843 int PMPI_Type_set_name(MPI_Datatype  datatype, char * name)
2844 {
2845   int retval = 0;
2846   if (datatype == MPI_DATATYPE_NULL)  {
2847     retval = MPI_ERR_TYPE;
2848   } else if (name == NULL)  {
2849     retval = MPI_ERR_ARG;
2850   } else {
2851     smpi_datatype_set_name(datatype, name);
2852     retval = MPI_SUCCESS;
2853   }
2854   return retval;
2855 }
2856
2857 int PMPI_Type_get_name(MPI_Datatype  datatype, char * name, int* len)
2858 {
2859   int retval = 0;
2860
2861   if (datatype == MPI_DATATYPE_NULL)  {
2862     retval = MPI_ERR_TYPE;
2863   } else if (name == NULL)  {
2864     retval = MPI_ERR_ARG;
2865   } else {
2866     smpi_datatype_get_name(datatype, name, len);
2867     retval = MPI_SUCCESS;
2868   }
2869   return retval;
2870 }
2871
2872 /* The following calls are not yet implemented and will fail at runtime. */
2873 /* Once implemented, please move them above this notice. */
2874
2875 #define NOT_YET_IMPLEMENTED {                                           \
2876     XBT_WARN("Not yet implemented : %s. Please contact the Simgrid team if support is needed", __FUNCTION__); \
2877     return MPI_SUCCESS;                                                 \
2878   }
2879
2880
2881
2882 int PMPI_Pack_size(int incount, MPI_Datatype datatype, MPI_Comm comm, int* size) {
2883   NOT_YET_IMPLEMENTED
2884 }
2885
2886
2887 int PMPI_Cart_map(MPI_Comm comm_old, int ndims, int* dims, int* periods, int* newrank) {
2888   NOT_YET_IMPLEMENTED
2889 }
2890
2891
2892 int PMPI_Graph_create(MPI_Comm comm_old, int nnodes, int* index, int* edges, int reorder, MPI_Comm* comm_graph) {
2893   NOT_YET_IMPLEMENTED
2894 }
2895
2896 int PMPI_Graph_get(MPI_Comm comm, int maxindex, int maxedges, int* index, int* edges) {
2897   NOT_YET_IMPLEMENTED
2898 }
2899
2900 int PMPI_Graph_map(MPI_Comm comm_old, int nnodes, int* index, int* edges, int* newrank) {
2901   NOT_YET_IMPLEMENTED
2902 }
2903
2904 int PMPI_Graph_neighbors(MPI_Comm comm, int rank, int maxneighbors, int* neighbors) {
2905   NOT_YET_IMPLEMENTED
2906 }
2907
2908 int PMPI_Graph_neighbors_count(MPI_Comm comm, int rank, int* nneighbors) {
2909   NOT_YET_IMPLEMENTED
2910 }
2911
2912 int PMPI_Graphdims_get(MPI_Comm comm, int* nnodes, int* nedges) {
2913   NOT_YET_IMPLEMENTED
2914 }
2915
2916 int PMPI_Topo_test(MPI_Comm comm, int* top_type) {
2917   NOT_YET_IMPLEMENTED
2918 }
2919
2920 int PMPI_Errhandler_create(MPI_Handler_function* function, MPI_Errhandler* errhandler) {
2921   NOT_YET_IMPLEMENTED
2922 }
2923
2924 int PMPI_Errhandler_free(MPI_Errhandler* errhandler) {
2925   NOT_YET_IMPLEMENTED
2926 }
2927
2928 int PMPI_Errhandler_get(MPI_Comm comm, MPI_Errhandler* errhandler) {
2929   NOT_YET_IMPLEMENTED
2930 }
2931
2932 int PMPI_Error_string(int errorcode, char* string, int* resultlen) {
2933   NOT_YET_IMPLEMENTED
2934 }
2935
2936 int PMPI_Errhandler_set(MPI_Comm comm, MPI_Errhandler errhandler) {
2937   NOT_YET_IMPLEMENTED
2938 }
2939
2940 int PMPI_Comm_set_errhandler(MPI_Comm comm, MPI_Errhandler errhandler) {
2941   NOT_YET_IMPLEMENTED
2942 }
2943
2944 int PMPI_Win_set_errhandler(MPI_Win win, MPI_Errhandler errhandler) {
2945   NOT_YET_IMPLEMENTED
2946 }
2947
2948 int PMPI_Comm_get_errhandler(MPI_Comm comm, MPI_Errhandler* errhandler) {
2949   NOT_YET_IMPLEMENTED
2950 }
2951
2952 int PMPI_Cancel(MPI_Request* request) {
2953   NOT_YET_IMPLEMENTED
2954 }
2955
2956 int PMPI_Buffer_attach(void* buffer, int size) {
2957   NOT_YET_IMPLEMENTED
2958 }
2959
2960 int PMPI_Buffer_detach(void* buffer, int* size) {
2961   NOT_YET_IMPLEMENTED
2962 }
2963
2964 int PMPI_Comm_test_inter(MPI_Comm comm, int* flag) {
2965   NOT_YET_IMPLEMENTED
2966 }
2967
2968 int PMPI_Comm_get_attr (MPI_Comm comm, int comm_keyval, void *attribute_val, int *flag)
2969 {
2970   NOT_YET_IMPLEMENTED
2971 }
2972
2973 int PMPI_Comm_set_attr (MPI_Comm comm, int comm_keyval, void *attribute_val)
2974 {
2975   NOT_YET_IMPLEMENTED
2976 }
2977
2978 int PMPI_Comm_delete_attr (MPI_Comm comm, int comm_keyval)
2979 {
2980   NOT_YET_IMPLEMENTED
2981 }
2982
2983 int PMPI_Comm_create_keyval(MPI_Comm_copy_attr_function* copy_fn, MPI_Comm_delete_attr_function* delete_fn, int* keyval, void* extra_state)
2984 {
2985   NOT_YET_IMPLEMENTED
2986 }
2987
2988 int PMPI_Comm_free_keyval(int* keyval) {
2989   NOT_YET_IMPLEMENTED
2990 }
2991
2992 int PMPI_Pcontrol(const int level )
2993 {
2994   NOT_YET_IMPLEMENTED
2995 }
2996
2997 int PMPI_Unpack(void* inbuf, int insize, int* position, void* outbuf, int outcount, MPI_Datatype type, MPI_Comm comm) {
2998   NOT_YET_IMPLEMENTED
2999 }
3000
3001 int PMPI_Type_get_attr (MPI_Datatype type, int type_keyval, void *attribute_val, int* flag)
3002 {
3003   NOT_YET_IMPLEMENTED
3004 }
3005
3006 int PMPI_Type_set_attr (MPI_Datatype type, int type_keyval, void *attribute_val)
3007 {
3008   NOT_YET_IMPLEMENTED
3009 }
3010
3011 int PMPI_Type_delete_attr (MPI_Datatype type, int comm_keyval)
3012 {
3013   NOT_YET_IMPLEMENTED
3014 }
3015
3016 int PMPI_Type_create_keyval(MPI_Type_copy_attr_function* copy_fn, MPI_Type_delete_attr_function* delete_fn, int* keyval, void* extra_state)
3017 {
3018   NOT_YET_IMPLEMENTED
3019 }
3020
3021 int PMPI_Type_free_keyval(int* keyval) {
3022   NOT_YET_IMPLEMENTED
3023 }
3024
3025 int PMPI_Intercomm_create(MPI_Comm local_comm, int local_leader, MPI_Comm peer_comm, int remote_leader, int tag, MPI_Comm* comm_out) {
3026   NOT_YET_IMPLEMENTED
3027 }
3028
3029 int PMPI_Intercomm_merge(MPI_Comm comm, int high, MPI_Comm* comm_out) {
3030   NOT_YET_IMPLEMENTED
3031 }
3032
3033 int PMPI_Bsend(void* buf, int count, MPI_Datatype datatype, int dest, int tag, MPI_Comm comm) {
3034   NOT_YET_IMPLEMENTED
3035 }
3036
3037 int PMPI_Bsend_init(void* buf, int count, MPI_Datatype datatype, int dest, int tag, MPI_Comm comm, MPI_Request* request) {
3038   NOT_YET_IMPLEMENTED
3039 }
3040
3041 int PMPI_Ibsend(void* buf, int count, MPI_Datatype datatype, int dest, int tag, MPI_Comm comm, MPI_Request* request) {
3042   NOT_YET_IMPLEMENTED
3043 }
3044
3045 int PMPI_Comm_remote_group(MPI_Comm comm, MPI_Group* group) {
3046   NOT_YET_IMPLEMENTED
3047 }
3048
3049 int PMPI_Comm_remote_size(MPI_Comm comm, int* size) {
3050   NOT_YET_IMPLEMENTED
3051 }
3052
3053 int PMPI_Attr_delete(MPI_Comm comm, int keyval) {
3054   NOT_YET_IMPLEMENTED
3055 }
3056
3057 int PMPI_Attr_get(MPI_Comm comm, int keyval, void* attr_value, int* flag) {
3058   NOT_YET_IMPLEMENTED
3059 }
3060
3061 int PMPI_Attr_put(MPI_Comm comm, int keyval, void* attr_value) {
3062   NOT_YET_IMPLEMENTED
3063 }
3064
3065 int PMPI_Rsend(void* buf, int count, MPI_Datatype datatype, int dest, int tag, MPI_Comm comm) {
3066   NOT_YET_IMPLEMENTED
3067 }
3068
3069 int PMPI_Rsend_init(void* buf, int count, MPI_Datatype datatype, int dest, int tag, MPI_Comm comm, MPI_Request* request) {
3070   NOT_YET_IMPLEMENTED
3071 }
3072
3073 int PMPI_Irsend(void* buf, int count, MPI_Datatype datatype, int dest, int tag, MPI_Comm comm, MPI_Request* request) {
3074   NOT_YET_IMPLEMENTED
3075 }
3076
3077 int PMPI_Keyval_create(MPI_Copy_function* copy_fn, MPI_Delete_function* delete_fn, int* keyval, void* extra_state) {
3078   NOT_YET_IMPLEMENTED
3079 }
3080
3081 int PMPI_Keyval_free(int* keyval) {
3082   NOT_YET_IMPLEMENTED
3083 }
3084
3085 int PMPI_Test_cancelled(MPI_Status* status, int* flag) {
3086   NOT_YET_IMPLEMENTED
3087 }
3088
3089 int PMPI_Pack(void* inbuf, int incount, MPI_Datatype type, void* outbuf, int outcount, int* position, MPI_Comm comm) {
3090   NOT_YET_IMPLEMENTED
3091 }
3092
3093 int PMPI_Pack_external_size(char *datarep, int incount, MPI_Datatype datatype, MPI_Aint *size){
3094   NOT_YET_IMPLEMENTED
3095 }
3096
3097 int PMPI_Pack_external(char *datarep, void *inbuf, int incount, MPI_Datatype datatype, void *outbuf, MPI_Aint outcount, MPI_Aint *position){
3098   NOT_YET_IMPLEMENTED
3099 }
3100
3101 int PMPI_Unpack_external( char *datarep, void *inbuf, MPI_Aint insize, MPI_Aint *position, void *outbuf, int outcount, MPI_Datatype datatype){
3102   NOT_YET_IMPLEMENTED
3103 }
3104
3105 int PMPI_Get_elements(MPI_Status* status, MPI_Datatype datatype, int* elements) {
3106   NOT_YET_IMPLEMENTED
3107 }
3108
3109 int PMPI_Info_create( MPI_Info *info){
3110   NOT_YET_IMPLEMENTED
3111 }
3112
3113 int PMPI_Info_set( MPI_Info info, char *key, char *value){
3114   NOT_YET_IMPLEMENTED
3115 }
3116
3117 int PMPI_Info_free( MPI_Info *info){
3118   NOT_YET_IMPLEMENTED
3119 }
3120
3121 int PMPI_Type_get_envelope( MPI_Datatype datatype, int *num_integers,
3122                             int *num_addresses, int *num_datatypes, int *combiner){
3123   NOT_YET_IMPLEMENTED
3124 }
3125
3126 int PMPI_Type_get_contents(MPI_Datatype datatype, int max_integers, int max_addresses,
3127                            int max_datatypes, int* array_of_integers, MPI_Aint* array_of_addresses,
3128                            MPI_Datatype* array_of_datatypes){
3129   NOT_YET_IMPLEMENTED
3130 }
3131
3132 int PMPI_Type_create_darray(int size, int rank, int ndims, int* array_of_gsizes,
3133                             int* array_of_distribs, int* array_of_dargs, int* array_of_psizes,
3134                             int order, MPI_Datatype oldtype, MPI_Datatype *newtype) {
3135   NOT_YET_IMPLEMENTED
3136 }
3137
3138 int PMPI_Type_create_subarray(int ndims,int *array_of_sizes, int *array_of_subsizes, int *array_of_starts, int order, MPI_Datatype oldtype, MPI_Datatype *newtype){
3139   NOT_YET_IMPLEMENTED
3140 }
3141
3142 int PMPI_Type_match_size(int typeclass,int size,MPI_Datatype *datatype){
3143   NOT_YET_IMPLEMENTED
3144 }
3145
3146 int PMPI_Alltoallw( void *sendbuf, int *sendcnts, int *sdispls, MPI_Datatype *sendtypes,
3147                     void *recvbuf, int *recvcnts, int *rdispls, MPI_Datatype *recvtypes,
3148                     MPI_Comm comm){
3149   NOT_YET_IMPLEMENTED
3150 }
3151
3152 int PMPI_Comm_set_name(MPI_Comm comm, char* name){
3153   NOT_YET_IMPLEMENTED
3154 }
3155
3156 int PMPI_Comm_dup_with_info(MPI_Comm comm, MPI_Info info, MPI_Comm * newcomm){
3157   NOT_YET_IMPLEMENTED
3158 }
3159
3160 int PMPI_Comm_split_type(MPI_Comm comm, int split_type, int key, MPI_Info info, MPI_Comm *newcomm){
3161   NOT_YET_IMPLEMENTED
3162 }
3163
3164 int PMPI_Comm_set_info (MPI_Comm comm, MPI_Info info){
3165   NOT_YET_IMPLEMENTED
3166 }
3167
3168 int PMPI_Comm_get_info (MPI_Comm comm, MPI_Info* info){
3169   NOT_YET_IMPLEMENTED
3170 }
3171
3172 int PMPI_Info_get(MPI_Info info,char *key,int valuelen, char *value, int *flag){
3173   NOT_YET_IMPLEMENTED
3174 }
3175
3176 int PMPI_Comm_create_errhandler( MPI_Comm_errhandler_fn *function, MPI_Errhandler *errhandler){
3177   NOT_YET_IMPLEMENTED
3178 }
3179
3180 int PMPI_Add_error_class( int *errorclass){
3181   NOT_YET_IMPLEMENTED
3182 }
3183
3184 int PMPI_Add_error_code(  int errorclass, int *errorcode){
3185   NOT_YET_IMPLEMENTED
3186 }
3187
3188 int PMPI_Add_error_string( int errorcode, char *string){
3189   NOT_YET_IMPLEMENTED
3190 }
3191
3192 int PMPI_Comm_call_errhandler(MPI_Comm comm,int errorcode){
3193   NOT_YET_IMPLEMENTED
3194 }
3195
3196 int PMPI_Info_dup(MPI_Info info, MPI_Info *newinfo){
3197   NOT_YET_IMPLEMENTED
3198 }
3199
3200 int PMPI_Info_delete(MPI_Info info, char *key){
3201   NOT_YET_IMPLEMENTED
3202 }
3203
3204 int PMPI_Info_get_nkeys( MPI_Info info, int *nkeys){
3205   NOT_YET_IMPLEMENTED
3206 }
3207
3208 int PMPI_Info_get_nthkey( MPI_Info info, int n, char *key){
3209   NOT_YET_IMPLEMENTED
3210 }
3211
3212 int PMPI_Info_get_valuelen( MPI_Info info, char *key, int *valuelen, int *flag){
3213   NOT_YET_IMPLEMENTED
3214 }
3215
3216 int PMPI_Request_get_status( MPI_Request request, int *flag, MPI_Status *status){
3217   NOT_YET_IMPLEMENTED
3218 }
3219
3220 int PMPI_Grequest_start( MPI_Grequest_query_function *query_fn, MPI_Grequest_free_function *free_fn, MPI_Grequest_cancel_function *cancel_fn, void *extra_state, MPI_Request *request){
3221   NOT_YET_IMPLEMENTED
3222 }
3223
3224 int PMPI_Grequest_complete( MPI_Request request){
3225   NOT_YET_IMPLEMENTED
3226 }
3227
3228 int PMPI_Status_set_cancelled(MPI_Status *status,int flag){
3229   NOT_YET_IMPLEMENTED
3230 }
3231
3232 int PMPI_Status_set_elements( MPI_Status *status, MPI_Datatype datatype, int count){
3233   NOT_YET_IMPLEMENTED
3234 }
3235
3236 int PMPI_Comm_connect( char *port_name, MPI_Info info, int root, MPI_Comm comm, MPI_Comm *newcomm){
3237   NOT_YET_IMPLEMENTED
3238 }
3239
3240 int PMPI_Publish_name( char *service_name, MPI_Info info, char *port_name){
3241   NOT_YET_IMPLEMENTED
3242 }
3243
3244 int PMPI_Unpublish_name( char *service_name, MPI_Info info, char *port_name){
3245   NOT_YET_IMPLEMENTED
3246 }
3247
3248 int PMPI_Lookup_name( char *service_name, MPI_Info info, char *port_name){
3249   NOT_YET_IMPLEMENTED
3250 }
3251
3252 int PMPI_Comm_join( int fd, MPI_Comm *intercomm){
3253   NOT_YET_IMPLEMENTED
3254 }
3255
3256 int PMPI_Open_port( MPI_Info info, char *port_name){
3257   NOT_YET_IMPLEMENTED
3258 }
3259
3260 int PMPI_Close_port(char *port_name){
3261   NOT_YET_IMPLEMENTED
3262 }
3263
3264 int PMPI_Comm_accept( char *port_name, MPI_Info info, int root, MPI_Comm comm, MPI_Comm *newcomm){
3265   NOT_YET_IMPLEMENTED
3266 }
3267
3268 int PMPI_Comm_spawn( char *command, char **argv, int maxprocs, MPI_Info info, int root, MPI_Comm comm, MPI_Comm *intercomm, int* array_of_errcodes){
3269   NOT_YET_IMPLEMENTED
3270 }
3271
3272 int PMPI_Comm_spawn_multiple( int count, char **array_of_commands, char*** array_of_argv,
3273                               int* array_of_maxprocs, MPI_Info* array_of_info, int root,
3274                               MPI_Comm comm, MPI_Comm *intercomm, int* array_of_errcodes){
3275   NOT_YET_IMPLEMENTED
3276 }
3277
3278 int PMPI_Comm_get_parent( MPI_Comm *parent){
3279   NOT_YET_IMPLEMENTED
3280 }