Logo AND Algorithmique Numérique Distribuée

Public GIT Repository
fix behavior of waitany
[simgrid.git] / src / smpi / smpi_pmpi.c
1 /* Copyright (c) 2007, 2008, 2009, 2010. The SimGrid Team.
2  * All rights reserved.                                                     */
3
4 /* This program is free software; you can redistribute it and/or modify it
5   * under the terms of the license (GNU LGPL) which comes with this package. */
6
7 #include "private.h"
8 #include "smpi_mpi_dt_private.h"
9
10 XBT_LOG_NEW_DEFAULT_SUBCATEGORY(smpi_pmpi, smpi,
11                                 "Logging specific to SMPI (pmpi)");
12
13 #ifdef HAVE_TRACING
14 //this function need to be here because of the calls to smpi_bench
15 void TRACE_smpi_set_category(const char *category)
16 {
17   //need to end bench otherwise categories for execution tasks are wrong
18   smpi_bench_end();
19   TRACE_internal_smpi_set_category (category);
20   //begin bench after changing process's category
21   smpi_bench_begin();
22 }
23 #endif
24
25 /* PMPI User level calls */
26
27 int PMPI_Init(int *argc, char ***argv)
28 {
29   smpi_process_init(argc, argv);
30   smpi_process_mark_as_initialized();
31 #ifdef HAVE_TRACING
32   int rank = smpi_process_index();
33   TRACE_smpi_init(rank);
34
35   TRACE_smpi_computing_init(rank);
36 #endif
37   smpi_bench_begin();
38   return MPI_SUCCESS;
39 }
40
41 int PMPI_Finalize(void)
42 {
43   smpi_process_finalize();
44   smpi_bench_end();
45 #ifdef HAVE_TRACING
46   int rank = smpi_process_index();
47   TRACE_smpi_computing_out(rank);
48   TRACE_smpi_finalize(smpi_process_index());
49 #endif
50   smpi_process_destroy();
51   return MPI_SUCCESS;
52 }
53
54 int PMPI_Finalized(int* flag)
55 {
56   *flag=smpi_process_finalized();
57   return MPI_SUCCESS;
58 }
59
60 int PMPI_Get_version (int *version,int *subversion){
61   *version = MPI_VERSION;
62   *subversion= MPI_SUBVERSION;
63   return MPI_SUCCESS;
64 }
65
66 int PMPI_Get_library_version (char *version,int *len){
67   int retval = MPI_SUCCESS;
68   smpi_bench_end();
69   snprintf(version,MPI_MAX_LIBRARY_VERSION_STRING,"SMPI Version %d.%d. Copyright The Simgrid Team 2007-2013",SIMGRID_VERSION_MAJOR,
70           SIMGRID_VERSION_MINOR);
71   *len = strlen(version) > MPI_MAX_LIBRARY_VERSION_STRING ? MPI_MAX_LIBRARY_VERSION_STRING : strlen(version);
72   smpi_bench_begin();
73   return retval;
74 }
75
76 int PMPI_Init_thread(int *argc, char ***argv, int required, int *provided)
77 {
78   if (provided != NULL) {
79     *provided = MPI_THREAD_MULTIPLE;
80   }
81   return MPI_Init(argc, argv);
82 }
83
84 int PMPI_Query_thread(int *provided)
85 {
86   int retval;
87
88   smpi_bench_end();
89   if (provided == NULL) {
90     retval = MPI_ERR_ARG;
91   } else {
92     *provided = MPI_THREAD_MULTIPLE;
93     retval = MPI_SUCCESS;
94   }
95   smpi_bench_begin();
96   return retval;
97 }
98
99 int PMPI_Is_thread_main(int *flag)
100 {
101   int retval;
102
103   smpi_bench_end();
104   if (flag == NULL) {
105     retval = MPI_ERR_ARG;
106   } else {
107     *flag = smpi_process_index() == 0;
108     retval = MPI_SUCCESS;
109   }
110   smpi_bench_begin();
111   return retval;
112 }
113
114 int PMPI_Abort(MPI_Comm comm, int errorcode)
115 {
116   smpi_bench_end();
117   smpi_process_destroy();
118 #ifdef HAVE_TRACING
119   int rank = smpi_process_index();
120   TRACE_smpi_computing_out(rank);
121 #endif
122   // FIXME: should kill all processes in comm instead
123   simcall_process_kill(SIMIX_process_self());
124   return MPI_SUCCESS;
125 }
126
127 double PMPI_Wtime(void)
128 {
129   double time;
130
131   smpi_bench_end();
132   time = SIMIX_get_clock();
133   smpi_bench_begin();
134   return time;
135 }
136 extern double sg_maxmin_precision;
137 double PMPI_Wtick(void)
138 {
139   return sg_maxmin_precision;
140 }
141
142 int PMPI_Address(void *location, MPI_Aint * address)
143 {
144   int retval;
145
146   smpi_bench_end();
147   if (!address) {
148     retval = MPI_ERR_ARG;
149   } else {
150     *address = (MPI_Aint) location;
151     retval = MPI_SUCCESS;
152   }
153   smpi_bench_begin();
154   return retval;
155 }
156
157 int PMPI_Get_address(void *location, MPI_Aint * address)
158 {
159   return PMPI_Address(location, address);
160 }
161
162 int PMPI_Type_free(MPI_Datatype * datatype)
163 {
164   int retval;
165
166   smpi_bench_end();
167   if (!datatype) {
168     retval = MPI_ERR_ARG;
169   } else {
170     smpi_datatype_free(datatype);
171     retval = MPI_SUCCESS;
172   }
173   smpi_bench_begin();
174   return retval;
175 }
176
177 int PMPI_Type_size(MPI_Datatype datatype, int *size)
178 {
179   int retval;
180
181   smpi_bench_end();
182   if (datatype == MPI_DATATYPE_NULL) {
183     retval = MPI_ERR_TYPE;
184   } else if (size == NULL) {
185     retval = MPI_ERR_ARG;
186   } else {
187     *size = (int) smpi_datatype_size(datatype);
188     retval = MPI_SUCCESS;
189   }
190   smpi_bench_begin();
191   return retval;
192 }
193
194 int PMPI_Type_get_extent(MPI_Datatype datatype, MPI_Aint * lb, MPI_Aint * extent)
195 {
196   int retval;
197
198   smpi_bench_end();
199   if (datatype == MPI_DATATYPE_NULL) {
200     retval = MPI_ERR_TYPE;
201   } else if (lb == NULL || extent == NULL) {
202     retval = MPI_ERR_ARG;
203   } else {
204     retval = smpi_datatype_extent(datatype, lb, extent);
205   }
206   smpi_bench_begin();
207   return retval;
208 }
209
210 int PMPI_Type_get_true_extent(MPI_Datatype datatype, MPI_Aint * lb, MPI_Aint * extent)
211 {
212   return PMPI_Type_get_extent(datatype, lb, extent);
213 }
214
215 int PMPI_Type_extent(MPI_Datatype datatype, MPI_Aint * extent)
216 {
217   int retval;
218
219   smpi_bench_end();
220   if (datatype == MPI_DATATYPE_NULL) {
221     retval = MPI_ERR_TYPE;
222   } else if (extent == NULL) {
223     retval = MPI_ERR_ARG;
224   } else {
225     *extent = smpi_datatype_get_extent(datatype);
226     retval = MPI_SUCCESS;
227   }
228   smpi_bench_begin();
229   return retval;
230 }
231
232 int PMPI_Type_lb(MPI_Datatype datatype, MPI_Aint * disp)
233 {
234   int retval;
235
236   smpi_bench_end();
237   if (datatype == MPI_DATATYPE_NULL) {
238     retval = MPI_ERR_TYPE;
239   } else if (disp == NULL) {
240     retval = MPI_ERR_ARG;
241   } else {
242     *disp = smpi_datatype_lb(datatype);
243     retval = MPI_SUCCESS;
244   }
245   smpi_bench_begin();
246   return retval;
247 }
248
249 int PMPI_Type_ub(MPI_Datatype datatype, MPI_Aint * disp)
250 {
251   int retval;
252
253   smpi_bench_end();
254   if (datatype == MPI_DATATYPE_NULL) {
255     retval = MPI_ERR_TYPE;
256   } else if (disp == NULL) {
257     retval = MPI_ERR_ARG;
258   } else {
259     *disp = smpi_datatype_ub(datatype);
260     retval = MPI_SUCCESS;
261   }
262   smpi_bench_begin();
263   return retval;
264 }
265
266 int PMPI_Op_create(MPI_User_function * function, int commute, MPI_Op * op)
267 {
268   int retval;
269
270   smpi_bench_end();
271   if (function == NULL || op == NULL) {
272     retval = MPI_ERR_ARG;
273   } else {
274     *op = smpi_op_new(function, commute);
275     retval = MPI_SUCCESS;
276   }
277   smpi_bench_begin();
278   return retval;
279 }
280
281 int PMPI_Op_free(MPI_Op * op)
282 {
283   int retval;
284
285   smpi_bench_end();
286   if (op == NULL) {
287     retval = MPI_ERR_ARG;
288   } else if (*op == MPI_OP_NULL) {
289     retval = MPI_ERR_OP;
290   } else {
291     smpi_op_destroy(*op);
292     *op = MPI_OP_NULL;
293     retval = MPI_SUCCESS;
294   }
295   smpi_bench_begin();
296   return retval;
297 }
298
299 int PMPI_Group_free(MPI_Group * group)
300 {
301   int retval;
302
303   smpi_bench_end();
304   if (group == NULL) {
305     retval = MPI_ERR_ARG;
306   } else {
307     smpi_group_destroy(*group);
308     *group = MPI_GROUP_NULL;
309     retval = MPI_SUCCESS;
310   }
311   smpi_bench_begin();
312   return retval;
313 }
314
315 int PMPI_Group_size(MPI_Group group, int *size)
316 {
317   int retval;
318
319   smpi_bench_end();
320   if (group == MPI_GROUP_NULL) {
321     retval = MPI_ERR_GROUP;
322   } else if (size == NULL) {
323     retval = MPI_ERR_ARG;
324   } else {
325     *size = smpi_group_size(group);
326     retval = MPI_SUCCESS;
327   }
328   smpi_bench_begin();
329   return retval;
330 }
331
332 int PMPI_Group_rank(MPI_Group group, int *rank)
333 {
334   int retval;
335
336   smpi_bench_end();
337   if (group == MPI_GROUP_NULL) {
338     retval = MPI_ERR_GROUP;
339   } else if (rank == NULL) {
340     retval = MPI_ERR_ARG;
341   } else {
342     *rank = smpi_group_rank(group, smpi_process_index());
343     retval = MPI_SUCCESS;
344   }
345   smpi_bench_begin();
346   return retval;
347 }
348
349 int PMPI_Group_translate_ranks(MPI_Group group1, int n, int *ranks1,
350                               MPI_Group group2, int *ranks2)
351 {
352   int retval, i, index;
353   smpi_bench_end();
354   if (group1 == MPI_GROUP_NULL || group2 == MPI_GROUP_NULL) {
355     retval = MPI_ERR_GROUP;
356   } else {
357     for (i = 0; i < n; i++) {
358       if(ranks1[i]==MPI_PROC_NULL){
359         ranks2[i]=MPI_PROC_NULL;
360       }else{
361         index = smpi_group_index(group1, ranks1[i]);
362         ranks2[i] = smpi_group_rank(group2, index);
363       }
364     }
365     retval = MPI_SUCCESS;
366   }
367   smpi_bench_begin();
368   return retval;
369 }
370
371 int PMPI_Group_compare(MPI_Group group1, MPI_Group group2, int *result)
372 {
373   int retval;
374
375   smpi_bench_end();
376   if (group1 == MPI_GROUP_NULL || group2 == MPI_GROUP_NULL) {
377     retval = MPI_ERR_GROUP;
378   } else if (result == NULL) {
379     retval = MPI_ERR_ARG;
380   } else {
381     *result = smpi_group_compare(group1, group2);
382     retval = MPI_SUCCESS;
383   }
384   smpi_bench_begin();
385   return retval;
386 }
387
388 int PMPI_Group_union(MPI_Group group1, MPI_Group group2,
389                     MPI_Group * newgroup)
390 {
391   int retval, i, proc1, proc2, size, size2;
392
393   smpi_bench_end();
394   if (group1 == MPI_GROUP_NULL || group2 == MPI_GROUP_NULL) {
395     retval = MPI_ERR_GROUP;
396   } else if (newgroup == NULL) {
397     retval = MPI_ERR_ARG;
398   } else {
399     size = smpi_group_size(group1);
400     size2 = smpi_group_size(group2);
401     for (i = 0; i < size2; i++) {
402       proc2 = smpi_group_index(group2, i);
403       proc1 = smpi_group_rank(group1, proc2);
404       if (proc1 == MPI_UNDEFINED) {
405         size++;
406       }
407     }
408     if (size == 0) {
409       *newgroup = MPI_GROUP_EMPTY;
410     } else {
411       *newgroup = smpi_group_new(size);
412       size2 = smpi_group_size(group1);
413       for (i = 0; i < size2; i++) {
414         proc1 = smpi_group_index(group1, i);
415         smpi_group_set_mapping(*newgroup, proc1, i);
416       }
417       for (i = size2; i < size; i++) {
418         proc2 = smpi_group_index(group2, i - size2);
419         smpi_group_set_mapping(*newgroup, proc2, i);
420       }
421     }
422     retval = MPI_SUCCESS;
423   }
424   smpi_bench_begin();
425   return retval;
426 }
427
428 int PMPI_Group_intersection(MPI_Group group1, MPI_Group group2,
429                            MPI_Group * newgroup)
430 {
431   int retval, i, proc1, proc2, size;
432
433   smpi_bench_end();
434   if (group1 == MPI_GROUP_NULL || group2 == MPI_GROUP_NULL) {
435     retval = MPI_ERR_GROUP;
436   } else if (newgroup == NULL) {
437     retval = MPI_ERR_ARG;
438   } else {
439     size = smpi_group_size(group2);
440     for (i = 0; i < size; i++) {
441       proc2 = smpi_group_index(group2, i);
442       proc1 = smpi_group_rank(group1, proc2);
443       if (proc1 == MPI_UNDEFINED) {
444         size--;
445       }
446     }
447     if (size == 0) {
448       *newgroup = MPI_GROUP_EMPTY;
449     } else {
450       *newgroup = smpi_group_new(size);
451       int j=0;
452       for (i = 0; i < smpi_group_size(group2); i++) {
453         proc2 = smpi_group_index(group2, i);
454         proc1 = smpi_group_rank(group1, proc2);
455         if (proc1 != MPI_UNDEFINED) {
456           smpi_group_set_mapping(*newgroup, proc2, j);
457           j++;
458         }
459       }
460     }
461     retval = MPI_SUCCESS;
462   }
463   smpi_bench_begin();
464   return retval;
465 }
466
467 int PMPI_Group_difference(MPI_Group group1, MPI_Group group2, MPI_Group * newgroup)
468 {
469   int retval, i, proc1, proc2, size, size2;
470
471   smpi_bench_end();
472   if (group1 == MPI_GROUP_NULL || group2 == MPI_GROUP_NULL) {
473     retval = MPI_ERR_GROUP;
474   } else if (newgroup == NULL) {
475     retval = MPI_ERR_ARG;
476   } else {
477     size = size2 = smpi_group_size(group1);
478     for (i = 0; i < size2; i++) {
479       proc1 = smpi_group_index(group1, i);
480       proc2 = smpi_group_rank(group2, proc1);
481       if (proc2 != MPI_UNDEFINED) {
482         size--;
483       }
484     }
485     if (size == 0) {
486       *newgroup = MPI_GROUP_EMPTY;
487     } else {
488       *newgroup = smpi_group_new(size);
489       for (i = 0; i < size2; i++) {
490         proc1 = smpi_group_index(group1, i);
491         proc2 = smpi_group_rank(group2, proc1);
492         if (proc2 == MPI_UNDEFINED) {
493           smpi_group_set_mapping(*newgroup, proc1, i);
494         }
495       }
496     }
497     retval = MPI_SUCCESS;
498   }
499   smpi_bench_begin();
500   return retval;
501 }
502
503 int PMPI_Group_incl(MPI_Group group, int n, int *ranks, MPI_Group * newgroup)
504 {
505   int retval, i, index;
506
507   smpi_bench_end();
508   if (group == MPI_GROUP_NULL) {
509     retval = MPI_ERR_GROUP;
510   } else if (newgroup == NULL) {
511     retval = MPI_ERR_ARG;
512   } else {
513     if (n == 0) {
514       *newgroup = MPI_GROUP_EMPTY;
515     } else if (n == smpi_group_size(group)) {
516       *newgroup = group;
517       if(group!= smpi_comm_group(MPI_COMM_WORLD)
518                 && group != MPI_GROUP_NULL
519                 && group != smpi_comm_group(MPI_COMM_SELF)
520                 && group != MPI_GROUP_EMPTY)
521       smpi_group_use(group);
522     } else {
523       *newgroup = smpi_group_new(n);
524       for (i = 0; i < n; i++) {
525         index = smpi_group_index(group, ranks[i]);
526         smpi_group_set_mapping(*newgroup, index, i);
527       }
528     }
529     retval = MPI_SUCCESS;
530   }
531   smpi_bench_begin();
532   return retval;
533 }
534
535 int PMPI_Group_excl(MPI_Group group, int n, int *ranks, MPI_Group * newgroup)
536 {
537   int retval, i, j, newsize, oldsize, index;
538
539   smpi_bench_end();
540   if (group == MPI_GROUP_NULL) {
541     retval = MPI_ERR_GROUP;
542   } else if (newgroup == NULL) {
543     retval = MPI_ERR_ARG;
544   } else {
545     if (n == 0) {
546       *newgroup = group;
547       if(group!= smpi_comm_group(MPI_COMM_WORLD)
548                 && group != MPI_GROUP_NULL
549                 && group != smpi_comm_group(MPI_COMM_SELF)
550                 && group != MPI_GROUP_EMPTY)
551       smpi_group_use(group);
552     } else if (n == smpi_group_size(group)) {
553       *newgroup = MPI_GROUP_EMPTY;
554     } else {
555       oldsize=smpi_group_size(group);
556       newsize = oldsize - n;
557       *newgroup = smpi_group_new(newsize);
558
559       int* to_exclude=xbt_new(int, smpi_group_size(group));
560       for(i=0; i<oldsize; i++)
561         to_exclude[i]=0;
562       for(i=0; i<n; i++)
563         to_exclude[ranks[i]]=1;
564
565       j=0;
566       for(i=0; i<oldsize; i++){
567         if(to_exclude[i]==0){
568           index = smpi_group_index(group, i);
569           smpi_group_set_mapping(*newgroup, index, j);
570           j++;
571         }
572       }
573
574       xbt_free(to_exclude);
575     }
576     retval = MPI_SUCCESS;
577   }
578   smpi_bench_begin();
579   return retval;
580 }
581
582 int PMPI_Group_range_incl(MPI_Group group, int n, int ranges[][3],
583                          MPI_Group * newgroup)
584 {
585   int retval, i, j, rank, size, index;
586
587   smpi_bench_end();
588   if (group == MPI_GROUP_NULL) {
589     retval = MPI_ERR_GROUP;
590   } else if (newgroup == NULL) {
591     retval = MPI_ERR_ARG;
592   } else {
593     if (n == 0) {
594       *newgroup = MPI_GROUP_EMPTY;
595     } else {
596       size = 0;
597       for (i = 0; i < n; i++) {
598         for (rank = ranges[i][0];       /* First */
599              rank >= 0; /* Last */
600               ) {
601           size++;
602
603           rank += ranges[i][2]; /* Stride */
604           if (ranges[i][0]<ranges[i][1]){
605               if(rank > ranges[i][1])
606                 break;
607           }else{
608               if(rank < ranges[i][1])
609                 break;
610           }
611         }
612       }
613
614       *newgroup = smpi_group_new(size);
615       j = 0;
616       for (i = 0; i < n; i++) {
617         for (rank = ranges[i][0];     /* First */
618              rank >= 0; /* Last */
619              ) {
620           index = smpi_group_index(group, rank);
621           smpi_group_set_mapping(*newgroup, index, j);
622           j++;
623           rank += ranges[i][2]; /* Stride */
624           if (ranges[i][0]<ranges[i][1]){
625             if(rank > ranges[i][1])
626               break;
627           }else{
628             if(rank < ranges[i][1])
629               break;
630           }
631         }
632       }
633     }
634     retval = MPI_SUCCESS;
635   }
636   smpi_bench_begin();
637   return retval;
638 }
639
640 int PMPI_Group_range_excl(MPI_Group group, int n, int ranges[][3],
641                          MPI_Group * newgroup)
642 {
643   int retval, i, rank, newrank,oldrank, size, index, add;
644
645   smpi_bench_end();
646   if (group == MPI_GROUP_NULL) {
647     retval = MPI_ERR_GROUP;
648   } else if (newgroup == NULL) {
649     retval = MPI_ERR_ARG;
650   } else {
651     if (n == 0) {
652       *newgroup = group;
653       if(group!= smpi_comm_group(MPI_COMM_WORLD)
654                 && group != MPI_GROUP_NULL
655                 && group != smpi_comm_group(MPI_COMM_SELF)
656                 && group != MPI_GROUP_EMPTY)
657       smpi_group_use(group);
658     } else {
659       size = smpi_group_size(group);
660       for (i = 0; i < n; i++) {
661         for (rank = ranges[i][0];       /* First */
662              rank >= 0; /* Last */
663               ) {
664           size--;
665
666           rank += ranges[i][2]; /* Stride */
667           if (ranges[i][0]<ranges[i][1]){
668               if(rank > ranges[i][1])
669                 break;
670           }else{
671               if(rank < ranges[i][1])
672                 break;
673           }
674         }
675       }
676       if (size == 0) {
677         *newgroup = MPI_GROUP_EMPTY;
678       } else {
679         *newgroup = smpi_group_new(size);
680         newrank=0;
681         oldrank=0;
682         while (newrank < size) {
683           add=1;
684           for (i = 0; i < n; i++) {
685             for (rank = ranges[i][0];rank >= 0;){
686               if(rank==oldrank){
687                   add=0;
688                   break;
689               }
690
691               rank += ranges[i][2]; /* Stride */
692
693               if (ranges[i][0]<ranges[i][1]){
694                   if(rank > ranges[i][1])
695                     break;
696               }else{
697                   if(rank < ranges[i][1])
698                     break;
699               }
700             }
701           }
702           if(add==1){
703             index = smpi_group_index(group, oldrank);
704             smpi_group_set_mapping(*newgroup, index, newrank);
705             newrank++;
706           }
707           oldrank++;
708         }
709       }
710     }
711
712     retval = MPI_SUCCESS;
713   }
714   smpi_bench_begin();
715   return retval;
716 }
717
718 int PMPI_Comm_rank(MPI_Comm comm, int *rank)
719 {
720   int retval;
721
722   smpi_bench_end();
723   if (comm == MPI_COMM_NULL) {
724     retval = MPI_ERR_COMM;
725   } else if (rank == NULL) {
726     retval = MPI_ERR_ARG;
727   } else {
728     *rank = smpi_comm_rank(comm);
729     retval = MPI_SUCCESS;
730   }
731   smpi_bench_begin();
732   return retval;
733 }
734
735 int PMPI_Comm_size(MPI_Comm comm, int *size)
736 {
737   int retval;
738
739   smpi_bench_end();
740   if (comm == MPI_COMM_NULL) {
741     retval = MPI_ERR_COMM;
742   } else if (size == NULL) {
743     retval = MPI_ERR_ARG;
744   } else {
745     *size = smpi_comm_size(comm);
746     retval = MPI_SUCCESS;
747   }
748   smpi_bench_begin();
749   return retval;
750 }
751
752 int PMPI_Comm_get_name (MPI_Comm comm, char* name, int* len)
753 {
754   int retval;
755
756   smpi_bench_end();
757   if (comm == MPI_COMM_NULL)  {
758     retval = MPI_ERR_COMM;
759   } else if (name == NULL || len == NULL)  {
760     retval = MPI_ERR_ARG;
761   } else {
762     smpi_comm_get_name(comm, name, len);
763     retval = MPI_SUCCESS;
764   }
765   smpi_bench_begin();
766   return retval;
767 }
768
769 int PMPI_Comm_group(MPI_Comm comm, MPI_Group * group)
770 {
771   int retval;
772
773   smpi_bench_end();
774   if (comm == MPI_COMM_NULL) {
775     retval = MPI_ERR_COMM;
776   } else if (group == NULL) {
777     retval = MPI_ERR_ARG;
778   } else {
779     *group = smpi_comm_group(comm);
780     if(*group!= smpi_comm_group(MPI_COMM_WORLD)
781               && *group != MPI_GROUP_NULL
782               && *group != smpi_comm_group(MPI_COMM_SELF)
783               && *group != MPI_GROUP_EMPTY)
784     smpi_group_use(*group);
785     retval = MPI_SUCCESS;
786   }
787   smpi_bench_begin();
788   return retval;
789 }
790
791 int PMPI_Comm_compare(MPI_Comm comm1, MPI_Comm comm2, int *result)
792 {
793   int retval;
794
795   smpi_bench_end();
796   if (comm1 == MPI_COMM_NULL || comm2 == MPI_COMM_NULL) {
797     retval = MPI_ERR_COMM;
798   } else if (result == NULL) {
799     retval = MPI_ERR_ARG;
800   } else {
801     if (comm1 == comm2) {       /* Same communicators means same groups */
802       *result = MPI_IDENT;
803     } else {
804       *result =
805           smpi_group_compare(smpi_comm_group(comm1),
806                              smpi_comm_group(comm2));
807       if (*result == MPI_IDENT) {
808         *result = MPI_CONGRUENT;
809       }
810     }
811     retval = MPI_SUCCESS;
812   }
813   smpi_bench_begin();
814   return retval;
815 }
816
817 int PMPI_Comm_dup(MPI_Comm comm, MPI_Comm * newcomm)
818 {
819   int retval;
820
821   smpi_bench_end();
822   if (comm == MPI_COMM_NULL) {
823     retval = MPI_ERR_COMM;
824   } else if (newcomm == NULL) {
825     retval = MPI_ERR_ARG;
826   } else {
827     *newcomm = smpi_comm_new(smpi_comm_group(comm));
828     retval = MPI_SUCCESS;
829   }
830   smpi_bench_begin();
831   return retval;
832 }
833
834 int PMPI_Comm_create(MPI_Comm comm, MPI_Group group, MPI_Comm * newcomm)
835 {
836   int retval;
837
838   smpi_bench_end();
839   if (comm == MPI_COMM_NULL) {
840     retval = MPI_ERR_COMM;
841   } else if (group == MPI_GROUP_NULL) {
842     retval = MPI_ERR_GROUP;
843   } else if (newcomm == NULL) {
844     retval = MPI_ERR_ARG;
845   } else if(smpi_group_rank(group,smpi_process_index())==MPI_UNDEFINED){
846     *newcomm= MPI_COMM_NULL;
847     retval = MPI_SUCCESS;
848   }else{
849
850     *newcomm = smpi_comm_new(group);
851     retval = MPI_SUCCESS;
852   }
853   smpi_bench_begin();
854   return retval;
855 }
856
857 int PMPI_Comm_free(MPI_Comm * comm)
858 {
859   int retval;
860
861   smpi_bench_end();
862   if (comm == NULL) {
863     retval = MPI_ERR_ARG;
864   } else if (*comm == MPI_COMM_NULL) {
865     retval = MPI_ERR_COMM;
866   } else {
867     smpi_comm_destroy(*comm);
868     *comm = MPI_COMM_NULL;
869     retval = MPI_SUCCESS;
870   }
871   smpi_bench_begin();
872   return retval;
873 }
874
875 int PMPI_Comm_disconnect(MPI_Comm * comm)
876 {
877   /* TODO: wait until all communication in comm are done */
878   int retval;
879
880   smpi_bench_end();
881   if (comm == NULL) {
882     retval = MPI_ERR_ARG;
883   } else if (*comm == MPI_COMM_NULL) {
884     retval = MPI_ERR_COMM;
885   } else {
886     smpi_comm_destroy(*comm);
887     *comm = MPI_COMM_NULL;
888     retval = MPI_SUCCESS;
889   }
890   smpi_bench_begin();
891   return retval;
892 }
893
894 int PMPI_Comm_split(MPI_Comm comm, int color, int key, MPI_Comm* comm_out)
895 {
896   int retval;
897
898   smpi_bench_end();
899   if (comm_out == NULL) {
900     retval = MPI_ERR_ARG;
901   } else if (comm == MPI_COMM_NULL) {
902     retval = MPI_ERR_COMM;
903   } else {
904     *comm_out = smpi_comm_split(comm, color, key);
905     retval = MPI_SUCCESS;
906   }
907   smpi_bench_begin();
908   return retval;
909 }
910
911 int PMPI_Send_init(void *buf, int count, MPI_Datatype datatype, int dst,
912                   int tag, MPI_Comm comm, MPI_Request * request)
913 {
914   int retval;
915
916   smpi_bench_end();
917   if (request == NULL) {
918     retval = MPI_ERR_ARG;
919   } else if (comm == MPI_COMM_NULL) {
920     retval = MPI_ERR_COMM;
921   } else if (dst == MPI_PROC_NULL) {
922     retval = MPI_SUCCESS;
923   } else {
924     *request = smpi_mpi_send_init(buf, count, datatype, dst, tag, comm);
925     retval = MPI_SUCCESS;
926   }
927   smpi_bench_begin();
928   return retval;
929 }
930
931 int PMPI_Recv_init(void *buf, int count, MPI_Datatype datatype, int src,
932                   int tag, MPI_Comm comm, MPI_Request * request)
933 {
934   int retval;
935
936   smpi_bench_end();
937   if (request == NULL) {
938     retval = MPI_ERR_ARG;
939   } else if (comm == MPI_COMM_NULL) {
940     retval = MPI_ERR_COMM;
941   } else if (src == MPI_PROC_NULL) {
942       retval = MPI_SUCCESS;
943   } else {
944     *request = smpi_mpi_recv_init(buf, count, datatype, src, tag, comm);
945     retval = MPI_SUCCESS;
946   }
947   smpi_bench_begin();
948   return retval;
949 }
950
951 int PMPI_Ssend_init(void* buf, int count, MPI_Datatype datatype, int dst, int tag, MPI_Comm comm, MPI_Request* request) {
952   int retval;
953
954     smpi_bench_end();
955     if (request == NULL) {
956       retval = MPI_ERR_ARG;
957     } else if (comm == MPI_COMM_NULL) {
958       retval = MPI_ERR_COMM;
959     } else if (dst == MPI_PROC_NULL) {
960       retval = MPI_SUCCESS;
961     } else {
962       *request = smpi_mpi_ssend_init(buf, count, datatype, dst, tag, comm);
963       retval = MPI_SUCCESS;
964     }
965     smpi_bench_begin();
966     return retval;
967 }
968
969 int PMPI_Start(MPI_Request * request)
970 {
971   int retval;
972
973   smpi_bench_end();
974   if (request == NULL || *request == MPI_REQUEST_NULL) {
975     retval = MPI_ERR_ARG;
976   } else {
977     smpi_mpi_start(*request);
978     retval = MPI_SUCCESS;
979   }
980   smpi_bench_begin();
981   return retval;
982 }
983
984 int PMPI_Startall(int count, MPI_Request * requests)
985 {
986   int retval;
987
988   smpi_bench_end();
989   if (requests == NULL) {
990     retval = MPI_ERR_ARG;
991   } else {
992     smpi_mpi_startall(count, requests);
993     retval = MPI_SUCCESS;
994   }
995   smpi_bench_begin();
996   return retval;
997 }
998
999 int PMPI_Request_free(MPI_Request * request)
1000 {
1001   int retval;
1002
1003   smpi_bench_end();
1004   if (*request == MPI_REQUEST_NULL) {
1005     retval = MPI_ERR_ARG;
1006   } else {
1007     if((*request)->flags & PERSISTENT)(*request)->refcount--;
1008     smpi_mpi_request_free(request);
1009     retval = MPI_SUCCESS;
1010   }
1011   smpi_bench_begin();
1012   return retval;
1013 }
1014
1015 int PMPI_Irecv(void *buf, int count, MPI_Datatype datatype, int src,
1016               int tag, MPI_Comm comm, MPI_Request * request)
1017 {
1018   int retval;
1019
1020   smpi_bench_end();
1021
1022   if (request == NULL) {
1023     retval = MPI_ERR_ARG;
1024   } else if (comm == MPI_COMM_NULL) {
1025     retval = MPI_ERR_COMM;
1026   } else if (src == MPI_PROC_NULL) {
1027     *request = MPI_REQUEST_NULL;
1028     retval = MPI_SUCCESS;
1029   } else if (src!=MPI_ANY_SOURCE && (src >= smpi_group_size(smpi_comm_group(comm)) || src <0)){
1030     retval = MPI_ERR_COMM;
1031   } else if (count < 0) {
1032     retval = MPI_ERR_COUNT;
1033   } else if (buf==NULL && count > 0) {
1034     retval = MPI_ERR_COUNT;
1035   } else if (datatype == MPI_DATATYPE_NULL){
1036     retval = MPI_ERR_TYPE;
1037   } else if(tag<0 && tag !=  MPI_ANY_TAG){
1038     retval = MPI_ERR_TAG;
1039   } else {
1040
1041 #ifdef HAVE_TRACING
1042   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1043   int src_traced = smpi_group_index(smpi_comm_group(comm), src);
1044   TRACE_smpi_ptp_in(rank, src_traced, rank, __FUNCTION__);
1045 #endif
1046
1047     *request = smpi_mpi_irecv(buf, count, datatype, src, tag, comm);
1048     retval = MPI_SUCCESS;
1049
1050 #ifdef HAVE_TRACING
1051   TRACE_smpi_ptp_out(rank, src_traced, rank, __FUNCTION__);
1052   (*request)->recv = 1;
1053 #endif
1054   }
1055
1056   smpi_bench_begin();
1057   return retval;
1058 }
1059
1060
1061 int PMPI_Isend(void *buf, int count, MPI_Datatype datatype, int dst,
1062               int tag, MPI_Comm comm, MPI_Request * request)
1063 {
1064   int retval;
1065
1066   smpi_bench_end();
1067   if (request == NULL) {
1068     retval = MPI_ERR_ARG;
1069   } else if (comm == MPI_COMM_NULL) {
1070     retval = MPI_ERR_COMM;
1071   } else if (dst == MPI_PROC_NULL) {
1072     *request = MPI_REQUEST_NULL;
1073     retval = MPI_SUCCESS;
1074   } else if (dst >= smpi_group_size(smpi_comm_group(comm)) || dst <0){
1075     retval = MPI_ERR_RANK;
1076   } else if (count < 0) {
1077     retval = MPI_ERR_COUNT;
1078   } else if (buf==NULL && count > 0) {
1079     retval = MPI_ERR_COUNT;
1080   } else if (datatype == MPI_DATATYPE_NULL){
1081     retval = MPI_ERR_TYPE;
1082   } else if(tag<0 && tag !=  MPI_ANY_TAG){
1083     retval = MPI_ERR_TAG;
1084   } else {
1085
1086 #ifdef HAVE_TRACING
1087   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1088   TRACE_smpi_computing_out(rank);
1089   int dst_traced = smpi_group_index(smpi_comm_group(comm), dst);
1090   TRACE_smpi_ptp_in(rank, rank, dst_traced, __FUNCTION__);
1091   TRACE_smpi_send(rank, rank, dst_traced);
1092 #endif
1093
1094     *request = smpi_mpi_isend(buf, count, datatype, dst, tag, comm);
1095     retval = MPI_SUCCESS;
1096
1097 #ifdef HAVE_TRACING
1098   TRACE_smpi_ptp_out(rank, rank, dst_traced, __FUNCTION__);
1099   (*request)->send = 1;
1100   TRACE_smpi_computing_in(rank);
1101 #endif
1102   }
1103
1104   smpi_bench_begin();
1105   return retval;
1106 }
1107
1108 int PMPI_Issend(void* buf, int count, MPI_Datatype datatype, int dst, int tag, MPI_Comm comm, MPI_Request* request) {
1109   int retval;
1110
1111   smpi_bench_end();
1112   if (request == NULL) {
1113     retval = MPI_ERR_ARG;
1114   } else if (comm == MPI_COMM_NULL) {
1115     retval = MPI_ERR_COMM;
1116   } else if (dst == MPI_PROC_NULL) {
1117     *request = MPI_REQUEST_NULL;
1118     retval = MPI_SUCCESS;
1119   } else if (dst >= smpi_group_size(smpi_comm_group(comm)) || dst <0){
1120     retval = MPI_ERR_RANK;
1121   } else if (count < 0) {
1122     retval = MPI_ERR_COUNT;
1123   } else if (buf==NULL && count > 0) {
1124     retval = MPI_ERR_COUNT;
1125   } else if (datatype == MPI_DATATYPE_NULL){
1126     retval = MPI_ERR_TYPE;
1127   } else if(tag<0 && tag !=  MPI_ANY_TAG){
1128     retval = MPI_ERR_TAG;
1129   } else {
1130
1131 #ifdef HAVE_TRACING
1132   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1133   TRACE_smpi_computing_out(rank);
1134   int dst_traced = smpi_group_index(smpi_comm_group(comm), dst);
1135   TRACE_smpi_ptp_in(rank, rank, dst_traced, __FUNCTION__);
1136   TRACE_smpi_send(rank, rank, dst_traced);
1137 #endif
1138
1139     *request = smpi_mpi_issend(buf, count, datatype, dst, tag, comm);
1140     retval = MPI_SUCCESS;
1141
1142 #ifdef HAVE_TRACING
1143   TRACE_smpi_ptp_out(rank, rank, dst_traced, __FUNCTION__);
1144   (*request)->send = 1;
1145   TRACE_smpi_computing_in(rank);
1146 #endif
1147   }
1148
1149   smpi_bench_begin();
1150   return retval;
1151 }
1152
1153 int PMPI_Recv(void *buf, int count, MPI_Datatype datatype, int src, int tag,
1154              MPI_Comm comm, MPI_Status * status)
1155 {
1156   int retval;
1157
1158   smpi_bench_end();
1159   if (comm == MPI_COMM_NULL) {
1160     retval = MPI_ERR_COMM;
1161   } else if (src == MPI_PROC_NULL) {
1162     smpi_empty_status(status);
1163     status->MPI_SOURCE = MPI_PROC_NULL;
1164     retval = MPI_SUCCESS;
1165   } else if (src!=MPI_ANY_SOURCE && (src >= smpi_group_size(smpi_comm_group(comm)) || src <0)){
1166     retval = MPI_ERR_RANK;
1167   } else if (count < 0) {
1168     retval = MPI_ERR_COUNT;
1169   } else if (buf==NULL && count > 0) {
1170     retval = MPI_ERR_COUNT;
1171   } else if (datatype == MPI_DATATYPE_NULL){
1172     retval = MPI_ERR_TYPE;
1173   } else if(tag<0 && tag !=  MPI_ANY_TAG){
1174     retval = MPI_ERR_TAG;
1175   } else {
1176 #ifdef HAVE_TRACING
1177   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1178   int src_traced = smpi_group_index(smpi_comm_group(comm), src);
1179   TRACE_smpi_computing_out(rank);
1180
1181   TRACE_smpi_ptp_in(rank, src_traced, rank, __FUNCTION__);
1182 #endif
1183
1184     smpi_mpi_recv(buf, count, datatype, src, tag, comm, status);
1185     retval = MPI_SUCCESS;
1186
1187 #ifdef HAVE_TRACING
1188   //the src may not have been known at the beginning of the recv (MPI_ANY_SOURCE)
1189   if(status!=MPI_STATUS_IGNORE)src_traced = smpi_group_index(smpi_comm_group(comm), status->MPI_SOURCE);
1190   TRACE_smpi_ptp_out(rank, src_traced, rank, __FUNCTION__);
1191   TRACE_smpi_recv(rank, src_traced, rank);
1192   TRACE_smpi_computing_in(rank);
1193 #endif
1194   }
1195
1196   smpi_bench_begin();
1197   return retval;
1198 }
1199
1200 int PMPI_Send(void *buf, int count, MPI_Datatype datatype, int dst, int tag,
1201              MPI_Comm comm)
1202 {
1203   int retval;
1204
1205   smpi_bench_end();
1206
1207   if (comm == MPI_COMM_NULL) {
1208     retval = MPI_ERR_COMM;
1209   } else if (dst == MPI_PROC_NULL) {
1210     retval = MPI_SUCCESS;
1211   } else if (dst >= smpi_group_size(smpi_comm_group(comm)) || dst <0){
1212     retval = MPI_ERR_RANK;
1213   } else if (count < 0) {
1214     retval = MPI_ERR_COUNT;
1215   } else if (buf==NULL && count > 0) {
1216     retval = MPI_ERR_COUNT;
1217   } else if (datatype == MPI_DATATYPE_NULL){
1218     retval = MPI_ERR_TYPE;
1219   } else if(tag<0 && tag !=  MPI_ANY_TAG){
1220     retval = MPI_ERR_TAG;
1221   } else {
1222
1223 #ifdef HAVE_TRACING
1224   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1225   TRACE_smpi_computing_out(rank);
1226   int dst_traced = smpi_group_index(smpi_comm_group(comm), dst);
1227   TRACE_smpi_ptp_in(rank, rank, dst_traced, __FUNCTION__);
1228   TRACE_smpi_send(rank, rank, dst_traced);
1229 #endif
1230
1231     smpi_mpi_send(buf, count, datatype, dst, tag, comm);
1232     retval = MPI_SUCCESS;
1233
1234 #ifdef HAVE_TRACING
1235   TRACE_smpi_ptp_out(rank, rank, dst_traced, __FUNCTION__);
1236   TRACE_smpi_computing_in(rank);
1237 #endif
1238   }
1239
1240   smpi_bench_begin();
1241   return retval;
1242 }
1243
1244
1245
1246 int PMPI_Ssend(void* buf, int count, MPI_Datatype datatype, int dst, int tag, MPI_Comm comm) {
1247   int retval;
1248
1249    smpi_bench_end();
1250
1251    if (comm == MPI_COMM_NULL) {
1252      retval = MPI_ERR_COMM;
1253    } else if (dst == MPI_PROC_NULL) {
1254      retval = MPI_SUCCESS;
1255    } else if (dst >= smpi_group_size(smpi_comm_group(comm)) || dst <0){
1256      retval = MPI_ERR_RANK;
1257    } else if (count < 0) {
1258      retval = MPI_ERR_COUNT;
1259    } else if (buf==NULL && count > 0) {
1260      retval = MPI_ERR_COUNT;
1261    } else if (datatype == MPI_DATATYPE_NULL){
1262      retval = MPI_ERR_TYPE;
1263    } else if(tag<0 && tag !=  MPI_ANY_TAG){
1264      retval = MPI_ERR_TAG;
1265    } else {
1266
1267  #ifdef HAVE_TRACING
1268    int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1269    TRACE_smpi_computing_out(rank);
1270    int dst_traced = smpi_group_index(smpi_comm_group(comm), dst);
1271    TRACE_smpi_ptp_in(rank, rank, dst_traced, __FUNCTION__);
1272    TRACE_smpi_send(rank, rank, dst_traced);
1273  #endif
1274
1275      smpi_mpi_ssend(buf, count, datatype, dst, tag, comm);
1276      retval = MPI_SUCCESS;
1277
1278  #ifdef HAVE_TRACING
1279    TRACE_smpi_ptp_out(rank, rank, dst_traced, __FUNCTION__);
1280    TRACE_smpi_computing_in(rank);
1281  #endif
1282    }
1283
1284    smpi_bench_begin();
1285    return retval;}
1286
1287
1288 int PMPI_Sendrecv(void *sendbuf, int sendcount, MPI_Datatype sendtype,
1289                  int dst, int sendtag, void *recvbuf, int recvcount,
1290                  MPI_Datatype recvtype, int src, int recvtag,
1291                  MPI_Comm comm, MPI_Status * status)
1292 {
1293   int retval;
1294
1295   smpi_bench_end();
1296
1297   if (comm == MPI_COMM_NULL) {
1298     retval = MPI_ERR_COMM;
1299   } else if (sendtype == MPI_DATATYPE_NULL
1300              || recvtype == MPI_DATATYPE_NULL) {
1301     retval = MPI_ERR_TYPE;
1302   } else if (src == MPI_PROC_NULL || dst == MPI_PROC_NULL) {
1303       smpi_empty_status(status);
1304       status->MPI_SOURCE = MPI_PROC_NULL;
1305       retval = MPI_SUCCESS;
1306   }else if (dst >= smpi_group_size(smpi_comm_group(comm)) || dst <0 ||
1307       (src!=MPI_ANY_SOURCE && (src >= smpi_group_size(smpi_comm_group(comm)) || src <0))){
1308     retval = MPI_ERR_RANK;
1309   } else if (sendcount < 0 || recvcount<0) {
1310       retval = MPI_ERR_COUNT;
1311   } else if ((sendbuf==NULL && sendcount > 0)||(recvbuf==NULL && recvcount>0)) {
1312     retval = MPI_ERR_COUNT;
1313   } else if((sendtag<0 && sendtag !=  MPI_ANY_TAG)||(recvtag<0 && recvtag != MPI_ANY_TAG)){
1314     retval = MPI_ERR_TAG;
1315   } else {
1316
1317 #ifdef HAVE_TRACING
1318   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1319   TRACE_smpi_computing_out(rank);
1320   int dst_traced = smpi_group_index(smpi_comm_group(comm), dst);
1321   int src_traced = smpi_group_index(smpi_comm_group(comm), src);
1322   TRACE_smpi_ptp_in(rank, src_traced, dst_traced, __FUNCTION__);
1323   TRACE_smpi_send(rank, rank, dst_traced);
1324 #endif
1325
1326
1327     smpi_mpi_sendrecv(sendbuf, sendcount, sendtype, dst, sendtag, recvbuf,
1328                       recvcount, recvtype, src, recvtag, comm, status);
1329     retval = MPI_SUCCESS;
1330
1331 #ifdef HAVE_TRACING
1332   TRACE_smpi_ptp_out(rank, src_traced, dst_traced, __FUNCTION__);
1333   TRACE_smpi_recv(rank, src_traced, rank);
1334   TRACE_smpi_computing_in(rank);
1335 #endif
1336
1337   }
1338
1339   smpi_bench_begin();
1340   return retval;
1341 }
1342
1343 int PMPI_Sendrecv_replace(void *buf, int count, MPI_Datatype datatype,
1344                          int dst, int sendtag, int src, int recvtag,
1345                          MPI_Comm comm, MPI_Status * status)
1346 {
1347   //TODO: suboptimal implementation
1348   void *recvbuf;
1349   int retval;
1350   if (datatype == MPI_DATATYPE_NULL) {
1351       retval = MPI_ERR_TYPE;
1352   } else if (count < 0) {
1353       retval = MPI_ERR_COUNT;
1354   } else {
1355     int size = smpi_datatype_get_extent(datatype) * count;
1356     recvbuf = xbt_new(char, size);
1357     retval =
1358         MPI_Sendrecv(buf, count, datatype, dst, sendtag, recvbuf, count,
1359                      datatype, src, recvtag, comm, status);
1360     if(retval==MPI_SUCCESS){
1361         smpi_datatype_copy(recvbuf, count, datatype, buf, count, datatype);
1362     }
1363     xbt_free(recvbuf);
1364
1365   }
1366   return retval;
1367 }
1368
1369 int PMPI_Test(MPI_Request * request, int *flag, MPI_Status * status)
1370 {
1371   int retval;
1372
1373   smpi_bench_end();
1374   if (request == MPI_REQUEST_NULL || flag == NULL) {
1375     retval = MPI_ERR_ARG;
1376   } else if (*request == MPI_REQUEST_NULL) {
1377     *flag= TRUE;
1378     retval = MPI_ERR_REQUEST;
1379   } else {
1380     *flag = smpi_mpi_test(request, status);
1381     retval = MPI_SUCCESS;
1382   }
1383   smpi_bench_begin();
1384   return retval;
1385 }
1386
1387 int PMPI_Testany(int count, MPI_Request requests[], int *index, int *flag,
1388                 MPI_Status * status)
1389 {
1390   int retval;
1391
1392   smpi_bench_end();
1393   if (index == NULL || flag == NULL) {
1394     retval = MPI_ERR_ARG;
1395   } else {
1396     *flag = smpi_mpi_testany(count, requests, index, status);
1397     retval = MPI_SUCCESS;
1398   }
1399   smpi_bench_begin();
1400   return retval;
1401 }
1402
1403 int PMPI_Testall(int count, MPI_Request* requests, int* flag, MPI_Status* statuses)
1404 {
1405   int retval;
1406
1407   smpi_bench_end();
1408   if (flag == NULL) {
1409     retval = MPI_ERR_ARG;
1410   } else {
1411     *flag = smpi_mpi_testall(count, requests, statuses);
1412     retval = MPI_SUCCESS;
1413   }
1414   smpi_bench_begin();
1415   return retval;
1416 }
1417
1418 int PMPI_Probe(int source, int tag, MPI_Comm comm, MPI_Status* status) {
1419   int retval;
1420   smpi_bench_end();
1421
1422   if (status == NULL) {
1423     retval = MPI_ERR_ARG;
1424   } else if (comm == MPI_COMM_NULL) {
1425     retval = MPI_ERR_COMM;
1426   } else if (source == MPI_PROC_NULL) {
1427     smpi_empty_status(status);
1428     status->MPI_SOURCE = MPI_PROC_NULL;
1429     retval = MPI_SUCCESS;
1430   } else {
1431     smpi_mpi_probe(source, tag, comm, status);
1432     retval = MPI_SUCCESS;
1433   }
1434   smpi_bench_begin();
1435   return retval;
1436 }
1437
1438
1439 int PMPI_Iprobe(int source, int tag, MPI_Comm comm, int* flag, MPI_Status* status) {
1440   int retval;
1441   smpi_bench_end();
1442
1443   if (flag == NULL) {
1444     retval = MPI_ERR_ARG;
1445   } else if (status == NULL) {
1446     retval = MPI_ERR_ARG;
1447   } else if (comm == MPI_COMM_NULL) {
1448     retval = MPI_ERR_COMM;
1449   } else if (source == MPI_PROC_NULL) {
1450     *flag=TRUE;
1451     smpi_empty_status(status);
1452     status->MPI_SOURCE = MPI_PROC_NULL;
1453     retval = MPI_SUCCESS;
1454   } else {
1455     smpi_mpi_iprobe(source, tag, comm, flag, status);
1456     retval = MPI_SUCCESS;
1457   }
1458   smpi_bench_begin();
1459   return retval;
1460 }
1461
1462 int PMPI_Wait(MPI_Request * request, MPI_Status * status)
1463 {
1464   int retval;
1465
1466   smpi_bench_end();
1467
1468   if (request == NULL) {
1469     retval = MPI_ERR_ARG;
1470   } else if (*request == MPI_REQUEST_NULL) {
1471     retval = MPI_ERR_REQUEST;
1472   } else {
1473
1474 #ifdef HAVE_TRACING
1475   int rank = request && (*request)->comm != MPI_COMM_NULL
1476       ? smpi_process_index()
1477       : -1;
1478   TRACE_smpi_computing_out(rank);
1479
1480   int src_traced = (*request)->src;
1481   int dst_traced = (*request)->dst;
1482   MPI_Comm comm = (*request)->comm;
1483   int is_wait_for_receive = (*request)->recv;
1484   TRACE_smpi_ptp_in(rank, src_traced, dst_traced, __FUNCTION__);
1485 #endif
1486
1487     smpi_mpi_wait(request, status);
1488     retval = MPI_SUCCESS;
1489
1490 #ifdef HAVE_TRACING
1491   //the src may not have been known at the beginning of the recv (MPI_ANY_SOURCE)
1492   TRACE_smpi_ptp_out(rank, src_traced, dst_traced, __FUNCTION__);
1493   if (is_wait_for_receive) {
1494     if(src_traced==MPI_ANY_SOURCE)
1495     src_traced = (status!=MPI_STATUS_IGNORE) ?
1496                                 smpi_group_rank(smpi_comm_group(comm), status->MPI_SOURCE) :
1497                                 src_traced;
1498     TRACE_smpi_recv(rank, src_traced, dst_traced);
1499   }
1500   TRACE_smpi_computing_in(rank);
1501 #endif
1502
1503   }
1504
1505   smpi_bench_begin();
1506   return retval;
1507 }
1508
1509 int PMPI_Waitany(int count, MPI_Request requests[], int *index, MPI_Status * status)
1510 {
1511   int retval;
1512
1513   smpi_bench_end();
1514 #ifdef HAVE_TRACING
1515   //save requests information for tracing
1516   int i;
1517   int *srcs = xbt_new(int, count);
1518   int *dsts = xbt_new(int, count);
1519   int *recvs = xbt_new(int, count);
1520   MPI_Comm *comms = xbt_new(MPI_Comm, count);
1521
1522   for (i = 0; i < count; i++) {
1523     MPI_Request req = requests[i];      //already received requests are no longer valid
1524     if (req) {
1525       srcs[i] = req->src;
1526       dsts[i] = req->dst;
1527       recvs[i] = req->recv;
1528       comms[i] = req->comm;
1529     }
1530   }
1531   int rank_traced = smpi_process_index();
1532   TRACE_smpi_computing_out(rank_traced);
1533
1534   TRACE_smpi_ptp_in(rank_traced, -1, -1, __FUNCTION__);
1535
1536 #endif
1537   if (index == NULL) {
1538     retval = MPI_ERR_ARG;
1539   } else {
1540     *index = smpi_mpi_waitany(count, requests, status);
1541     retval = MPI_SUCCESS;
1542   }
1543 #ifdef HAVE_TRACING
1544   if(*index!=MPI_UNDEFINED){
1545     int src_traced = srcs[*index];
1546     //the src may not have been known at the beginning of the recv (MPI_ANY_SOURCE)
1547     int dst_traced = dsts[*index];
1548     int is_wait_for_receive = recvs[*index];
1549     if (is_wait_for_receive) {
1550       if(srcs[*index]==MPI_ANY_SOURCE)
1551         src_traced = (status!=MPI_STATUSES_IGNORE) ?
1552                       smpi_group_rank(smpi_comm_group(comms[*index]), status->MPI_SOURCE) :
1553                       srcs[*index];
1554       TRACE_smpi_recv(rank_traced, src_traced, dst_traced);
1555     }
1556     TRACE_smpi_ptp_out(rank_traced, src_traced, dst_traced, __FUNCTION__);
1557     xbt_free(srcs);
1558     xbt_free(dsts);
1559     xbt_free(recvs);
1560     xbt_free(comms);
1561
1562   }
1563   TRACE_smpi_computing_in(rank_traced);
1564 #endif
1565   smpi_bench_begin();
1566   return retval;
1567 }
1568
1569 int PMPI_Waitall(int count, MPI_Request requests[], MPI_Status status[])
1570 {
1571
1572   smpi_bench_end();
1573 #ifdef HAVE_TRACING
1574   //save information from requests
1575   int i;
1576   int *srcs = xbt_new(int, count);
1577   int *dsts = xbt_new(int, count);
1578   int *recvs = xbt_new(int, count);
1579   int *valid = xbt_new(int, count);
1580   MPI_Comm *comms = xbt_new(MPI_Comm, count);
1581
1582   //int valid_count = 0;
1583   for (i = 0; i < count; i++) {
1584     MPI_Request req = requests[i];
1585     if(req!=MPI_REQUEST_NULL){
1586       srcs[i] = req->src;
1587       dsts[i] = req->dst;
1588       recvs[i] = req->recv;
1589       comms[i] = req->comm;
1590       valid[i]=1;;
1591     }else{
1592       valid[i]=0;
1593     }
1594   }
1595   int rank_traced = smpi_process_index();
1596   TRACE_smpi_computing_out(rank_traced);
1597
1598   TRACE_smpi_ptp_in(rank_traced, -1, -1, __FUNCTION__);
1599 #endif
1600   int retval = smpi_mpi_waitall(count, requests, status);
1601 #ifdef HAVE_TRACING
1602   for (i = 0; i < count; i++) {
1603     if(valid[i]){
1604     //int src_traced = srcs[*index];
1605     //the src may not have been known at the beginning of the recv (MPI_ANY_SOURCE)
1606       int src_traced = srcs[i];
1607       int dst_traced = dsts[i];
1608       int is_wait_for_receive = recvs[i];
1609       if (is_wait_for_receive) {
1610         if(src_traced==MPI_ANY_SOURCE)
1611         src_traced = (status!=MPI_STATUSES_IGNORE) ?
1612                           smpi_group_rank(smpi_comm_group(comms[i]), status[i].MPI_SOURCE) :
1613                           srcs[i];
1614         TRACE_smpi_recv(rank_traced, src_traced, dst_traced);
1615       }
1616     }
1617   }
1618   TRACE_smpi_ptp_out(rank_traced, -1, -1, __FUNCTION__);
1619   xbt_free(srcs);
1620   xbt_free(dsts);
1621   xbt_free(recvs);
1622   xbt_free(valid);
1623   xbt_free(comms);
1624
1625   TRACE_smpi_computing_in(rank_traced);
1626 #endif
1627   smpi_bench_begin();
1628   return retval;
1629 }
1630
1631 int PMPI_Waitsome(int incount, MPI_Request requests[], int *outcount,
1632                  int *indices, MPI_Status status[])
1633 {
1634   int retval;
1635
1636   smpi_bench_end();
1637   if (outcount == NULL) {
1638     retval = MPI_ERR_ARG;
1639   } else {
1640     *outcount = smpi_mpi_waitsome(incount, requests, indices, status);
1641     retval = MPI_SUCCESS;
1642   }
1643   smpi_bench_begin();
1644   return retval;
1645 }
1646
1647 int PMPI_Testsome(int incount, MPI_Request requests[], int* outcount,
1648                  int* indices, MPI_Status status[])
1649 {
1650   int retval;
1651
1652    smpi_bench_end();
1653    if (outcount == NULL) {
1654      retval = MPI_ERR_ARG;
1655    } else {
1656      *outcount = smpi_mpi_testsome(incount, requests, indices, status);
1657      retval = MPI_SUCCESS;
1658    }
1659    smpi_bench_begin();
1660    return retval;
1661 }
1662
1663
1664 int PMPI_Bcast(void *buf, int count, MPI_Datatype datatype, int root, MPI_Comm comm)
1665 {
1666   int retval;
1667
1668   smpi_bench_end();
1669 #ifdef HAVE_TRACING
1670   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1671   TRACE_smpi_computing_out(rank);
1672   int root_traced = smpi_group_index(smpi_comm_group(comm), root);
1673   TRACE_smpi_collective_in(rank, root_traced, __FUNCTION__);
1674 #endif
1675   if (comm == MPI_COMM_NULL) {
1676     retval = MPI_ERR_COMM;
1677   } else {
1678     mpi_coll_bcast_fun(buf, count, datatype, root, comm);
1679     retval = MPI_SUCCESS;
1680   }
1681 #ifdef HAVE_TRACING
1682   TRACE_smpi_collective_out(rank, root_traced, __FUNCTION__);
1683   TRACE_smpi_computing_in(rank);
1684 #endif
1685   smpi_bench_begin();
1686   return retval;
1687 }
1688
1689 int PMPI_Barrier(MPI_Comm comm)
1690 {
1691   int retval;
1692
1693   smpi_bench_end();
1694 #ifdef HAVE_TRACING
1695   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1696   TRACE_smpi_computing_out(rank);
1697   TRACE_smpi_collective_in(rank, -1, __FUNCTION__);
1698 #endif
1699   if (comm == MPI_COMM_NULL) {
1700     retval = MPI_ERR_COMM;
1701   } else {
1702     mpi_coll_barrier_fun(comm);
1703     retval = MPI_SUCCESS;
1704   }
1705 #ifdef HAVE_TRACING
1706   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
1707   TRACE_smpi_computing_in(rank);
1708 #endif
1709   smpi_bench_begin();
1710   return retval;
1711 }
1712
1713 int PMPI_Gather(void *sendbuf, int sendcount, MPI_Datatype sendtype,
1714                void *recvbuf, int recvcount, MPI_Datatype recvtype,
1715                int root, MPI_Comm comm)
1716 {
1717   int retval;
1718
1719   smpi_bench_end();
1720 #ifdef HAVE_TRACING
1721   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1722   TRACE_smpi_computing_out(rank);
1723   int root_traced = smpi_group_index(smpi_comm_group(comm), root);
1724   TRACE_smpi_collective_in(rank, root_traced, __FUNCTION__);
1725 #endif
1726   if (comm == MPI_COMM_NULL) {
1727     retval = MPI_ERR_COMM;
1728   } else if ((( sendbuf != MPI_IN_PLACE) && (sendtype == MPI_DATATYPE_NULL)) ||
1729             ((smpi_comm_rank(comm) == root) && (recvtype == MPI_DATATYPE_NULL))){
1730     retval = MPI_ERR_TYPE;
1731   } else if ((( sendbuf != MPI_IN_PLACE) && (sendcount <0)) ||
1732             ((smpi_comm_rank(comm) == root) && (recvcount <0))){
1733     retval = MPI_ERR_COUNT;
1734   } else {
1735
1736     char* sendtmpbuf = (char*) sendbuf;
1737     int sendtmpcount = sendcount;
1738     MPI_Datatype sendtmptype = sendtype;
1739     if( (smpi_comm_rank(comm) == root) && (sendbuf == MPI_IN_PLACE )) {
1740       sendtmpcount=0;
1741       sendtmptype=recvtype;
1742     }
1743
1744     mpi_coll_gather_fun(sendtmpbuf, sendtmpcount, sendtmptype, recvbuf, recvcount,
1745                     recvtype, root, comm);
1746
1747
1748     retval = MPI_SUCCESS;
1749   }
1750 #ifdef HAVE_TRACING
1751   TRACE_smpi_collective_out(rank, root_traced, __FUNCTION__);
1752   TRACE_smpi_computing_in(rank);
1753 #endif
1754   smpi_bench_begin();
1755   return retval;
1756 }
1757
1758 int PMPI_Gatherv(void *sendbuf, int sendcount, MPI_Datatype sendtype,
1759                 void *recvbuf, int *recvcounts, int *displs,
1760                 MPI_Datatype recvtype, int root, MPI_Comm comm)
1761 {
1762   int retval;
1763
1764   smpi_bench_end();
1765 #ifdef HAVE_TRACING
1766   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1767   TRACE_smpi_computing_out(rank);
1768   int root_traced = smpi_group_index(smpi_comm_group(comm), root);
1769   TRACE_smpi_collective_in(rank, root_traced, __FUNCTION__);
1770 #endif
1771   if (comm == MPI_COMM_NULL) {
1772     retval = MPI_ERR_COMM;
1773   } else if ((( sendbuf != MPI_IN_PLACE) && (sendtype == MPI_DATATYPE_NULL)) ||
1774             ((smpi_comm_rank(comm) == root) && (recvtype == MPI_DATATYPE_NULL))){
1775     retval = MPI_ERR_TYPE;
1776   } else if (( sendbuf != MPI_IN_PLACE) && (sendcount <0)){
1777     retval = MPI_ERR_COUNT;
1778   } else if (recvcounts == NULL || displs == NULL) {
1779     retval = MPI_ERR_ARG;
1780   } else {
1781
1782     char* sendtmpbuf = (char*) sendbuf;
1783     int sendtmpcount = sendcount;
1784     MPI_Datatype sendtmptype = sendtype;
1785     if( (smpi_comm_rank(comm) == root) && (sendbuf == MPI_IN_PLACE )) {
1786       sendtmpcount=0;
1787       sendtmptype=recvtype;
1788     }
1789
1790     smpi_mpi_gatherv(sendtmpbuf, sendtmpcount, sendtmptype, recvbuf, recvcounts,
1791                      displs, recvtype, root, comm);
1792     retval = MPI_SUCCESS;
1793   }
1794 #ifdef HAVE_TRACING
1795   TRACE_smpi_collective_out(rank, root_traced, __FUNCTION__);
1796   TRACE_smpi_computing_in(rank);
1797 #endif
1798   smpi_bench_begin();
1799   return retval;
1800 }
1801
1802 int PMPI_Allgather(void *sendbuf, int sendcount, MPI_Datatype sendtype,
1803                   void *recvbuf, int recvcount, MPI_Datatype recvtype,
1804                   MPI_Comm comm)
1805 {
1806   int retval;
1807
1808   smpi_bench_end();
1809 #ifdef HAVE_TRACING
1810   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1811   TRACE_smpi_computing_out(rank);
1812   TRACE_smpi_collective_in(rank, -1, __FUNCTION__);
1813 #endif
1814   if (comm == MPI_COMM_NULL) {
1815     retval = MPI_ERR_COMM;
1816   } else if ((( sendbuf != MPI_IN_PLACE) && (sendtype == MPI_DATATYPE_NULL)) ||
1817             (recvtype == MPI_DATATYPE_NULL)){
1818     retval = MPI_ERR_TYPE;
1819   } else if ((( sendbuf != MPI_IN_PLACE) && (sendcount <0)) ||
1820             (recvcount <0)){
1821     retval = MPI_ERR_COUNT;
1822   } else {
1823
1824     if(sendbuf == MPI_IN_PLACE) {
1825       sendbuf=((char*)recvbuf)+smpi_datatype_get_extent(recvtype)*recvcount*smpi_comm_rank(comm);
1826       sendcount=recvcount;
1827       sendtype=recvtype;
1828     }
1829
1830     mpi_coll_allgather_fun(sendbuf, sendcount, sendtype, recvbuf, recvcount,
1831                            recvtype, comm);
1832     retval = MPI_SUCCESS;
1833   }
1834 #ifdef HAVE_TRACING
1835   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
1836 #endif
1837   smpi_bench_begin();
1838   return retval;
1839 }
1840
1841 int PMPI_Allgatherv(void *sendbuf, int sendcount, MPI_Datatype sendtype,
1842                    void *recvbuf, int *recvcounts, int *displs,
1843                    MPI_Datatype recvtype, MPI_Comm comm)
1844 {
1845   int retval;
1846
1847   smpi_bench_end();
1848 #ifdef HAVE_TRACING
1849   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1850   TRACE_smpi_computing_out(rank);
1851   TRACE_smpi_collective_in(rank, -1, __FUNCTION__);
1852 #endif
1853   if (comm == MPI_COMM_NULL) {
1854     retval = MPI_ERR_COMM;
1855   } else if ((( sendbuf != MPI_IN_PLACE) && (sendtype == MPI_DATATYPE_NULL)) ||
1856             (recvtype == MPI_DATATYPE_NULL)){
1857     retval = MPI_ERR_TYPE;
1858   } else if (( sendbuf != MPI_IN_PLACE) && (sendcount <0)){
1859     retval = MPI_ERR_COUNT;
1860   } else if (recvcounts == NULL || displs == NULL) {
1861     retval = MPI_ERR_ARG;
1862   } else {
1863
1864     if(sendbuf == MPI_IN_PLACE) {
1865       sendbuf=((char*)recvbuf)+smpi_datatype_get_extent(recvtype)*displs[smpi_comm_rank(comm)];
1866       sendcount=recvcounts[smpi_comm_rank(comm)];
1867       sendtype=recvtype;
1868     }
1869
1870     mpi_coll_allgatherv_fun(sendbuf, sendcount, sendtype, recvbuf, recvcounts,
1871                         displs, recvtype, comm);
1872     retval = MPI_SUCCESS;
1873   }
1874 #ifdef HAVE_TRACING
1875   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
1876   TRACE_smpi_computing_in(rank);
1877 #endif
1878   smpi_bench_begin();
1879   return retval;
1880 }
1881
1882 int PMPI_Scatter(void *sendbuf, int sendcount, MPI_Datatype sendtype,
1883                 void *recvbuf, int recvcount, MPI_Datatype recvtype,
1884                 int root, MPI_Comm comm)
1885 {
1886   int retval;
1887
1888   smpi_bench_end();
1889 #ifdef HAVE_TRACING
1890   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1891   TRACE_smpi_computing_out(rank);
1892   int root_traced = smpi_group_index(smpi_comm_group(comm), root);
1893
1894   TRACE_smpi_collective_in(rank, root_traced, __FUNCTION__);
1895 #endif
1896   if (comm == MPI_COMM_NULL) {
1897     retval = MPI_ERR_COMM;
1898   } else if (((smpi_comm_rank(comm)==root) && (sendtype == MPI_DATATYPE_NULL))
1899              || ((recvbuf !=MPI_IN_PLACE) && (recvtype == MPI_DATATYPE_NULL))) {
1900     retval = MPI_ERR_TYPE;
1901   } else {
1902     if (recvbuf == MPI_IN_PLACE) {
1903         recvtype=sendtype;
1904         recvcount=sendcount;
1905     }
1906     mpi_coll_scatter_fun(sendbuf, sendcount, sendtype, recvbuf, recvcount,
1907                      recvtype, root, comm);
1908     retval = MPI_SUCCESS;
1909   }
1910 #ifdef HAVE_TRACING
1911   TRACE_smpi_collective_out(rank, root_traced, __FUNCTION__);
1912   TRACE_smpi_computing_in(rank);
1913 #endif
1914   smpi_bench_begin();
1915   return retval;
1916 }
1917
1918 int PMPI_Scatterv(void *sendbuf, int *sendcounts, int *displs,
1919                  MPI_Datatype sendtype, void *recvbuf, int recvcount,
1920                  MPI_Datatype recvtype, int root, MPI_Comm comm)
1921 {
1922   int retval;
1923
1924   smpi_bench_end();
1925 #ifdef HAVE_TRACING
1926   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1927   TRACE_smpi_computing_out(rank);
1928   int root_traced = smpi_group_index(smpi_comm_group(comm), root);
1929   TRACE_smpi_collective_in(rank, root_traced, __FUNCTION__);
1930 #endif
1931   if (comm == MPI_COMM_NULL) {
1932     retval = MPI_ERR_COMM;
1933   } else if (sendcounts == NULL || displs == NULL) {
1934     retval = MPI_ERR_ARG;
1935   } else if (((smpi_comm_rank(comm)==root) && (sendtype == MPI_DATATYPE_NULL))
1936              || ((recvbuf !=MPI_IN_PLACE) && (recvtype == MPI_DATATYPE_NULL))) {
1937     retval = MPI_ERR_TYPE;
1938   } else {
1939     if (recvbuf == MPI_IN_PLACE) {
1940         recvtype=sendtype;
1941         recvcount=sendcounts[smpi_comm_rank(comm)];
1942     }
1943     smpi_mpi_scatterv(sendbuf, sendcounts, displs, sendtype, recvbuf,
1944                       recvcount, recvtype, root, comm);
1945     retval = MPI_SUCCESS;
1946   }
1947 #ifdef HAVE_TRACING
1948   TRACE_smpi_collective_out(rank, root_traced, __FUNCTION__);
1949   TRACE_smpi_computing_in(rank);
1950 #endif
1951   smpi_bench_begin();
1952   return retval;
1953 }
1954
1955 int PMPI_Reduce(void *sendbuf, void *recvbuf, int count,
1956                MPI_Datatype datatype, MPI_Op op, int root, MPI_Comm comm)
1957 {
1958   int retval;
1959
1960   smpi_bench_end();
1961 #ifdef HAVE_TRACING
1962   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
1963   TRACE_smpi_computing_out(rank);
1964   int root_traced = smpi_group_index(smpi_comm_group(comm), root);
1965   TRACE_smpi_collective_in(rank, root_traced, __FUNCTION__);
1966 #endif
1967   if (comm == MPI_COMM_NULL) {
1968     retval = MPI_ERR_COMM;
1969   } else if (datatype == MPI_DATATYPE_NULL || op == MPI_OP_NULL) {
1970     retval = MPI_ERR_ARG;
1971   } else {
1972
1973     mpi_coll_reduce_fun(sendbuf, recvbuf, count, datatype, op, root, comm);
1974
1975     retval = MPI_SUCCESS;
1976   }
1977 #ifdef HAVE_TRACING
1978   TRACE_smpi_collective_out(rank, root_traced, __FUNCTION__);
1979   TRACE_smpi_computing_in(rank);
1980 #endif
1981   smpi_bench_begin();
1982   return retval;
1983 }
1984
1985 int PMPI_Reduce_local(void *inbuf, void *inoutbuf, int count,
1986     MPI_Datatype datatype, MPI_Op op){
1987   int retval;
1988
1989     smpi_bench_end();
1990     if (datatype == MPI_DATATYPE_NULL || op == MPI_OP_NULL) {
1991       retval = MPI_ERR_ARG;
1992     } else {
1993       smpi_op_apply(op, inbuf, inoutbuf, &count, &datatype);
1994       retval=MPI_SUCCESS;
1995     }
1996     smpi_bench_begin();
1997     return retval;
1998 }
1999
2000 int PMPI_Allreduce(void *sendbuf, void *recvbuf, int count,
2001                   MPI_Datatype datatype, MPI_Op op, MPI_Comm comm)
2002 {
2003   int retval;
2004
2005   smpi_bench_end();
2006 #ifdef HAVE_TRACING
2007   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
2008   TRACE_smpi_computing_out(rank);
2009   TRACE_smpi_collective_in(rank, -1, __FUNCTION__);
2010 #endif
2011   if (comm == MPI_COMM_NULL) {
2012     retval = MPI_ERR_COMM;
2013   } else if (datatype == MPI_DATATYPE_NULL) {
2014     retval = MPI_ERR_TYPE;
2015   } else if (op == MPI_OP_NULL) {
2016     retval = MPI_ERR_OP;
2017   } else {
2018
2019     char* sendtmpbuf = (char*) sendbuf;
2020     if( sendbuf == MPI_IN_PLACE ) {
2021       sendtmpbuf = (char *)xbt_malloc(count*smpi_datatype_get_extent(datatype));
2022       smpi_datatype_copy(recvbuf, count, datatype,sendtmpbuf, count, datatype);
2023     }
2024
2025     mpi_coll_allreduce_fun(sendtmpbuf, recvbuf, count, datatype, op, comm);
2026
2027     if( sendbuf == MPI_IN_PLACE ) {
2028       xbt_free(sendtmpbuf);
2029     }
2030
2031     retval = MPI_SUCCESS;
2032
2033   }
2034 #ifdef HAVE_TRACING
2035   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
2036   TRACE_smpi_computing_in(rank);
2037 #endif
2038   smpi_bench_begin();
2039   return retval;
2040 }
2041
2042 int PMPI_Scan(void *sendbuf, void *recvbuf, int count,
2043              MPI_Datatype datatype, MPI_Op op, MPI_Comm comm)
2044 {
2045   int retval;
2046
2047   smpi_bench_end();
2048 #ifdef HAVE_TRACING
2049   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
2050   TRACE_smpi_computing_out(rank);
2051   TRACE_smpi_collective_in(rank, -1, __FUNCTION__);
2052 #endif
2053   if (comm == MPI_COMM_NULL) {
2054     retval = MPI_ERR_COMM;
2055   } else if (datatype == MPI_DATATYPE_NULL) {
2056     retval = MPI_ERR_TYPE;
2057   } else if (op == MPI_OP_NULL) {
2058     retval = MPI_ERR_OP;
2059   } else {
2060     smpi_mpi_scan(sendbuf, recvbuf, count, datatype, op, comm);
2061     retval = MPI_SUCCESS;
2062   }
2063 #ifdef HAVE_TRACING
2064   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
2065   TRACE_smpi_computing_in(rank);
2066 #endif
2067   smpi_bench_begin();
2068   return retval;
2069 }
2070
2071 int PMPI_Exscan(void *sendbuf, void *recvbuf, int count, MPI_Datatype datatype,
2072                 MPI_Op op, MPI_Comm comm){
2073   int retval;
2074
2075   smpi_bench_end();
2076 #ifdef HAVE_TRACING
2077   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
2078   TRACE_smpi_computing_out(rank);
2079   TRACE_smpi_collective_in(rank, -1, __FUNCTION__);
2080 #endif
2081   if (comm == MPI_COMM_NULL) {
2082     retval = MPI_ERR_COMM;
2083   } else if (datatype == MPI_DATATYPE_NULL) {
2084     retval = MPI_ERR_TYPE;
2085   } else if (op == MPI_OP_NULL) {
2086     retval = MPI_ERR_OP;
2087   } else {
2088     smpi_mpi_exscan(sendbuf, recvbuf, count, datatype, op, comm);
2089     retval = MPI_SUCCESS;
2090   }
2091 #ifdef HAVE_TRACING
2092   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
2093   TRACE_smpi_computing_in(rank);
2094 #endif
2095   smpi_bench_begin();
2096   return retval;
2097 }
2098
2099 int PMPI_Reduce_scatter(void *sendbuf, void *recvbuf, int *recvcounts,
2100                        MPI_Datatype datatype, MPI_Op op, MPI_Comm comm)
2101 {
2102   int retval;
2103   smpi_bench_end();
2104 #ifdef HAVE_TRACING
2105   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
2106   TRACE_smpi_computing_out(rank);
2107   TRACE_smpi_collective_in(rank, -1, __FUNCTION__);
2108 #endif
2109   if (comm == MPI_COMM_NULL) {
2110     retval = MPI_ERR_COMM;
2111   } else if (datatype == MPI_DATATYPE_NULL) {
2112     retval = MPI_ERR_TYPE;
2113   } else if (op == MPI_OP_NULL) {
2114     retval = MPI_ERR_OP;
2115   } else if (recvcounts == NULL) {
2116     retval = MPI_ERR_ARG;
2117   } else {
2118     void* sendtmpbuf=sendbuf;
2119     if(sendbuf==MPI_IN_PLACE){
2120       sendtmpbuf=recvbuf;
2121     }
2122
2123     mpi_coll_reduce_scatter_fun(sendtmpbuf, recvbuf, recvcounts,
2124                        datatype,  op, comm);
2125     retval = MPI_SUCCESS;
2126   }
2127 #ifdef HAVE_TRACING
2128   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
2129   TRACE_smpi_computing_in(rank);
2130 #endif
2131   smpi_bench_begin();
2132   return retval;
2133 }
2134
2135 int PMPI_Reduce_scatter_block(void *sendbuf, void *recvbuf, int recvcount,
2136                        MPI_Datatype datatype, MPI_Op op, MPI_Comm comm)
2137 {
2138   int retval,i;
2139   smpi_bench_end();
2140 #ifdef HAVE_TRACING
2141   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
2142   TRACE_smpi_computing_out(rank);
2143   TRACE_smpi_collective_in(rank, -1, __FUNCTION__);
2144 #endif
2145   if (comm == MPI_COMM_NULL) {
2146     retval = MPI_ERR_COMM;
2147   } else if (datatype == MPI_DATATYPE_NULL) {
2148     retval = MPI_ERR_TYPE;
2149   } else if (op == MPI_OP_NULL) {
2150     retval = MPI_ERR_OP;
2151   } else if (recvcount < 0) {
2152     retval = MPI_ERR_ARG;
2153   } else {
2154     int count=smpi_comm_size(comm);
2155     int* recvcounts=(int*)xbt_malloc(count);
2156     for (i=0; i<count;i++)recvcounts[i]=recvcount;
2157     mpi_coll_reduce_scatter_fun(sendbuf, recvbuf, recvcounts,
2158                        datatype,  op, comm);
2159     xbt_free(recvcounts);
2160     retval = MPI_SUCCESS;
2161   }
2162 #ifdef HAVE_TRACING
2163   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
2164   TRACE_smpi_computing_in(rank);
2165 #endif
2166   smpi_bench_begin();
2167   return retval;
2168 }
2169
2170 int PMPI_Alltoall(void *sendbuf, int sendcount, MPI_Datatype sendtype,
2171                  void *recvbuf, int recvcount, MPI_Datatype recvtype,
2172                  MPI_Comm comm)
2173 {
2174   int retval;
2175
2176   smpi_bench_end();
2177 #ifdef HAVE_TRACING
2178   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
2179   TRACE_smpi_computing_out(rank);
2180   TRACE_smpi_collective_in(rank, -1, __FUNCTION__);
2181 #endif
2182   if (comm == MPI_COMM_NULL) {
2183     retval = MPI_ERR_COMM;
2184   } else if (sendtype == MPI_DATATYPE_NULL
2185              || recvtype == MPI_DATATYPE_NULL) {
2186     retval = MPI_ERR_TYPE;
2187   } else {
2188     retval = mpi_coll_alltoall_fun(sendbuf, sendcount, sendtype, recvbuf, recvcount, recvtype, comm);
2189   }
2190 #ifdef HAVE_TRACING
2191   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
2192   TRACE_smpi_computing_in(rank);
2193 #endif
2194   smpi_bench_begin();
2195   return retval;
2196 }
2197
2198 int PMPI_Alltoallv(void *sendbuf, int *sendcounts, int *senddisps,
2199                   MPI_Datatype sendtype, void *recvbuf, int *recvcounts,
2200                   int *recvdisps, MPI_Datatype recvtype, MPI_Comm comm)
2201 {
2202   int retval;
2203
2204   smpi_bench_end();
2205 #ifdef HAVE_TRACING
2206   int rank = comm != MPI_COMM_NULL ? smpi_process_index() : -1;
2207   TRACE_smpi_computing_out(rank);
2208   TRACE_smpi_collective_in(rank, -1, __FUNCTION__);
2209 #endif
2210   if (comm == MPI_COMM_NULL) {
2211     retval = MPI_ERR_COMM;
2212   } else if (sendtype == MPI_DATATYPE_NULL
2213              || recvtype == MPI_DATATYPE_NULL) {
2214     retval = MPI_ERR_TYPE;
2215   } else if (sendcounts == NULL || senddisps == NULL || recvcounts == NULL
2216              || recvdisps == NULL) {
2217     retval = MPI_ERR_ARG;
2218   } else {
2219     retval =
2220         mpi_coll_alltoallv_fun(sendbuf, sendcounts, senddisps, sendtype,
2221                                   recvbuf, recvcounts, recvdisps, recvtype,
2222                                   comm);
2223   }
2224 #ifdef HAVE_TRACING
2225   TRACE_smpi_collective_out(rank, -1, __FUNCTION__);
2226   TRACE_smpi_computing_in(rank);
2227 #endif
2228   smpi_bench_begin();
2229   return retval;
2230 }
2231
2232
2233 int PMPI_Get_processor_name(char *name, int *resultlen)
2234 {
2235   int retval = MPI_SUCCESS;
2236
2237   smpi_bench_end();
2238   strncpy(name, SIMIX_host_get_name(SIMIX_host_self()),
2239           strlen(SIMIX_host_get_name(SIMIX_host_self())) < MPI_MAX_PROCESSOR_NAME - 1 ?
2240           strlen(SIMIX_host_get_name(SIMIX_host_self())) +1 :
2241           MPI_MAX_PROCESSOR_NAME - 1 );
2242   *resultlen =
2243       strlen(name) >
2244       MPI_MAX_PROCESSOR_NAME ? MPI_MAX_PROCESSOR_NAME : strlen(name);
2245
2246   smpi_bench_begin();
2247   return retval;
2248 }
2249
2250 int PMPI_Get_count(MPI_Status * status, MPI_Datatype datatype, int *count)
2251 {
2252   int retval = MPI_SUCCESS;
2253   size_t size;
2254
2255   smpi_bench_end();
2256   if (status == NULL || count == NULL) {
2257     retval = MPI_ERR_ARG;
2258   } else if (datatype == MPI_DATATYPE_NULL) {
2259     retval = MPI_ERR_TYPE;
2260   } else {
2261     size = smpi_datatype_size(datatype);
2262     if (size == 0) {
2263       *count = 0;
2264     } else if (status->count % size != 0) {
2265       retval = MPI_UNDEFINED;
2266     } else {
2267       *count = smpi_mpi_get_count(status, datatype);
2268     }
2269   }
2270   smpi_bench_begin();
2271   return retval;
2272 }
2273
2274 int PMPI_Type_contiguous(int count, MPI_Datatype old_type, MPI_Datatype* new_type) {
2275   int retval;
2276
2277   smpi_bench_end();
2278   if (old_type == MPI_DATATYPE_NULL) {
2279     retval = MPI_ERR_TYPE;
2280   } else if (count<0){
2281     retval = MPI_ERR_COUNT;
2282   } else {
2283     retval = smpi_datatype_contiguous(count, old_type, new_type, 0);
2284   }
2285   smpi_bench_begin();
2286   return retval;
2287 }
2288
2289 int PMPI_Type_commit(MPI_Datatype* datatype) {
2290   int retval;
2291
2292   smpi_bench_end();
2293   if (datatype == MPI_DATATYPE_NULL) {
2294     retval = MPI_ERR_TYPE;
2295   } else {
2296     smpi_datatype_commit(datatype);
2297     retval = MPI_SUCCESS;
2298   }
2299   smpi_bench_begin();
2300   return retval;
2301 }
2302
2303
2304 int PMPI_Type_vector(int count, int blocklen, int stride, MPI_Datatype old_type, MPI_Datatype* new_type) {
2305   int retval;
2306
2307   smpi_bench_end();
2308   if (old_type == MPI_DATATYPE_NULL) {
2309     retval = MPI_ERR_TYPE;
2310   } else if (count<0 || blocklen<0){
2311     retval = MPI_ERR_COUNT;
2312   } else {
2313     retval = smpi_datatype_vector(count, blocklen, stride, old_type, new_type);
2314   }
2315   smpi_bench_begin();
2316   return retval;
2317 }
2318
2319 int PMPI_Type_hvector(int count, int blocklen, MPI_Aint stride, MPI_Datatype old_type, MPI_Datatype* new_type) {
2320   int retval;
2321
2322   smpi_bench_end();
2323   if (old_type == MPI_DATATYPE_NULL) {
2324     retval = MPI_ERR_TYPE;
2325   } else if (count<0 || blocklen<0){
2326     retval = MPI_ERR_COUNT;
2327   } else {
2328     retval = smpi_datatype_hvector(count, blocklen, stride, old_type, new_type);
2329   }
2330   smpi_bench_begin();
2331   return retval;
2332 }
2333
2334 int PMPI_Type_create_hvector(int count, int blocklen, MPI_Aint stride, MPI_Datatype old_type, MPI_Datatype* new_type) {
2335   return MPI_Type_hvector(count, blocklen, stride, old_type, new_type);
2336 }
2337
2338 int PMPI_Type_indexed(int count, int* blocklens, int* indices, MPI_Datatype old_type, MPI_Datatype* new_type) {
2339   int retval;
2340
2341   smpi_bench_end();
2342   if (old_type == MPI_DATATYPE_NULL) {
2343     retval = MPI_ERR_TYPE;
2344   } else if (count<0){
2345     retval = MPI_ERR_COUNT;
2346   } else {
2347     retval = smpi_datatype_indexed(count, blocklens, indices, old_type, new_type);
2348   }
2349   smpi_bench_begin();
2350   return retval;
2351 }
2352
2353 int PMPI_Type_create_indexed(int count, int* blocklens, int* indices, MPI_Datatype old_type, MPI_Datatype* new_type) {
2354   int retval;
2355
2356   smpi_bench_end();
2357   if (old_type == MPI_DATATYPE_NULL) {
2358     retval = MPI_ERR_TYPE;
2359   } else if (count<0){
2360     retval = MPI_ERR_COUNT;
2361   } else {
2362     retval = smpi_datatype_indexed(count, blocklens, indices, old_type, new_type);
2363   }
2364   smpi_bench_begin();
2365   return retval;
2366 }
2367
2368 int PMPI_Type_create_indexed_block(int count, int blocklength, int* indices, MPI_Datatype old_type, MPI_Datatype* new_type) {
2369   int retval,i;
2370
2371   smpi_bench_end();
2372   if (old_type == MPI_DATATYPE_NULL) {
2373     retval = MPI_ERR_TYPE;
2374   } else if (count<0){
2375     retval = MPI_ERR_COUNT;
2376   } else {
2377     int* blocklens=(int*)xbt_malloc(blocklength*count);
2378     for (i=0; i<count;i++)blocklens[i]=blocklength;
2379     retval = smpi_datatype_indexed(count, blocklens, indices, old_type, new_type);
2380     xbt_free(blocklens);
2381   }
2382   smpi_bench_begin();
2383   return retval;
2384 }
2385
2386
2387 int PMPI_Type_hindexed(int count, int* blocklens, MPI_Aint* indices, MPI_Datatype old_type, MPI_Datatype* new_type) {
2388   int retval;
2389
2390   smpi_bench_end();
2391   if (old_type == MPI_DATATYPE_NULL) {
2392     retval = MPI_ERR_TYPE;
2393   } else if (count<0){
2394     retval = MPI_ERR_COUNT;
2395   } else {
2396     retval = smpi_datatype_hindexed(count, blocklens, indices, old_type, new_type);
2397   }
2398   smpi_bench_begin();
2399   return retval;
2400 }
2401
2402 int PMPI_Type_create_hindexed(int count, int* blocklens, MPI_Aint* indices, MPI_Datatype old_type, MPI_Datatype* new_type) {
2403   return PMPI_Type_hindexed(count, blocklens,indices,old_type,new_type);
2404 }
2405
2406 int PMPI_Type_create_hindexed_block(int count, int blocklength, MPI_Aint* indices, MPI_Datatype old_type, MPI_Datatype* new_type) {
2407   int retval,i;
2408
2409   smpi_bench_end();
2410   if (old_type == MPI_DATATYPE_NULL) {
2411     retval = MPI_ERR_TYPE;
2412   } else if (count<0){
2413     retval = MPI_ERR_COUNT;
2414   } else {
2415     int* blocklens=(int*)xbt_malloc(blocklength*count);
2416     for (i=0; i<count;i++)blocklens[i]=blocklength;
2417     retval = smpi_datatype_hindexed(count, blocklens, indices, old_type, new_type);
2418     xbt_free(blocklens);
2419   }
2420   smpi_bench_begin();
2421   return retval;
2422 }
2423
2424
2425 int PMPI_Type_struct(int count, int* blocklens, MPI_Aint* indices, MPI_Datatype* old_types, MPI_Datatype* new_type) {
2426   int retval;
2427
2428   smpi_bench_end();
2429   if (count<0){
2430     retval = MPI_ERR_COUNT;
2431   } else {
2432     retval = smpi_datatype_struct(count, blocklens, indices, old_types, new_type);
2433   }
2434   smpi_bench_begin();
2435   return retval;
2436 }
2437
2438 int PMPI_Type_create_struct(int count, int* blocklens, MPI_Aint* indices, MPI_Datatype* old_types, MPI_Datatype* new_type) {
2439   return PMPI_Type_struct(count, blocklens, indices, old_types, new_type);
2440 }
2441
2442
2443 int PMPI_Error_class(int errorcode, int* errorclass) {
2444   // assume smpi uses only standard mpi error codes
2445   *errorclass=errorcode;
2446   return MPI_SUCCESS;
2447 }
2448
2449
2450 int PMPI_Initialized(int* flag) {
2451    *flag=smpi_process_initialized();
2452    return MPI_SUCCESS;
2453 }
2454
2455 /* The following calls are not yet implemented and will fail at runtime. */
2456 /* Once implemented, please move them above this notice. */
2457
2458 #define NOT_YET_IMPLEMENTED {\
2459         XBT_WARN("Not yet implemented : %s. Please contact the Simgrid team if support is needed", __FUNCTION__);\
2460         return MPI_SUCCESS;\
2461         }
2462
2463
2464 int PMPI_Type_dup(MPI_Datatype datatype, MPI_Datatype *newtype){
2465   NOT_YET_IMPLEMENTED
2466 }
2467
2468 int PMPI_Type_set_name(MPI_Datatype  datatype, char * name)
2469 {
2470   NOT_YET_IMPLEMENTED
2471 }
2472
2473 int PMPI_Type_get_name(MPI_Datatype  datatype, char * name, int* len)
2474 {
2475   NOT_YET_IMPLEMENTED
2476 }
2477
2478 int PMPI_Pack_size(int incount, MPI_Datatype datatype, MPI_Comm comm, int* size) {
2479    NOT_YET_IMPLEMENTED
2480 }
2481
2482 int PMPI_Cart_coords(MPI_Comm comm, int rank, int maxdims, int* coords) {
2483    NOT_YET_IMPLEMENTED
2484 }
2485
2486 int PMPI_Cart_create(MPI_Comm comm_old, int ndims, int* dims, int* periods, int reorder, MPI_Comm* comm_cart) {
2487    NOT_YET_IMPLEMENTED
2488 }
2489
2490 int PMPI_Cart_get(MPI_Comm comm, int maxdims, int* dims, int* periods, int* coords) {
2491    NOT_YET_IMPLEMENTED
2492 }
2493
2494 int PMPI_Cart_map(MPI_Comm comm_old, int ndims, int* dims, int* periods, int* newrank) {
2495    NOT_YET_IMPLEMENTED
2496 }
2497
2498 int PMPI_Cart_rank(MPI_Comm comm, int* coords, int* rank) {
2499    NOT_YET_IMPLEMENTED
2500 }
2501
2502 int PMPI_Cart_shift(MPI_Comm comm, int direction, int displ, int* source, int* dest) {
2503    NOT_YET_IMPLEMENTED
2504 }
2505
2506 int PMPI_Cart_sub(MPI_Comm comm, int* remain_dims, MPI_Comm* comm_new) {
2507    NOT_YET_IMPLEMENTED
2508 }
2509
2510 int PMPI_Cartdim_get(MPI_Comm comm, int* ndims) {
2511    NOT_YET_IMPLEMENTED
2512 }
2513
2514 int PMPI_Graph_create(MPI_Comm comm_old, int nnodes, int* index, int* edges, int reorder, MPI_Comm* comm_graph) {
2515    NOT_YET_IMPLEMENTED
2516 }
2517
2518 int PMPI_Graph_get(MPI_Comm comm, int maxindex, int maxedges, int* index, int* edges) {
2519    NOT_YET_IMPLEMENTED
2520 }
2521
2522 int PMPI_Graph_map(MPI_Comm comm_old, int nnodes, int* index, int* edges, int* newrank) {
2523    NOT_YET_IMPLEMENTED
2524 }
2525
2526 int PMPI_Graph_neighbors(MPI_Comm comm, int rank, int maxneighbors, int* neighbors) {
2527    NOT_YET_IMPLEMENTED
2528 }
2529
2530 int PMPI_Graph_neighbors_count(MPI_Comm comm, int rank, int* nneighbors) {
2531    NOT_YET_IMPLEMENTED
2532 }
2533
2534 int PMPI_Graphdims_get(MPI_Comm comm, int* nnodes, int* nedges) {
2535    NOT_YET_IMPLEMENTED
2536 }
2537
2538 int PMPI_Topo_test(MPI_Comm comm, int* top_type) {
2539    NOT_YET_IMPLEMENTED
2540 }
2541
2542 int PMPI_Errhandler_create(MPI_Handler_function* function, MPI_Errhandler* errhandler) {
2543    NOT_YET_IMPLEMENTED
2544 }
2545
2546 int PMPI_Errhandler_free(MPI_Errhandler* errhandler) {
2547    NOT_YET_IMPLEMENTED
2548 }
2549
2550 int PMPI_Errhandler_get(MPI_Comm comm, MPI_Errhandler* errhandler) {
2551    NOT_YET_IMPLEMENTED
2552 }
2553
2554 int PMPI_Error_string(int errorcode, char* string, int* resultlen) {
2555    NOT_YET_IMPLEMENTED
2556 }
2557
2558 int PMPI_Errhandler_set(MPI_Comm comm, MPI_Errhandler errhandler) {
2559    NOT_YET_IMPLEMENTED
2560 }
2561
2562 int PMPI_Comm_set_errhandler(MPI_Comm comm, MPI_Errhandler errhandler) {
2563    NOT_YET_IMPLEMENTED
2564 }
2565
2566 int PMPI_Cancel(MPI_Request* request) {
2567    NOT_YET_IMPLEMENTED
2568 }
2569
2570 int PMPI_Buffer_attach(void* buffer, int size) {
2571    NOT_YET_IMPLEMENTED
2572 }
2573
2574 int PMPI_Buffer_detach(void* buffer, int* size) {
2575    NOT_YET_IMPLEMENTED
2576 }
2577
2578 int PMPI_Comm_test_inter(MPI_Comm comm, int* flag) {
2579    NOT_YET_IMPLEMENTED
2580 }
2581
2582 int PMPI_Comm_get_attr (MPI_Comm comm, int comm_keyval, void *attribute_val, int *flag)
2583 {
2584    NOT_YET_IMPLEMENTED
2585 }
2586
2587 int PMPI_Comm_set_attr (MPI_Comm comm, int comm_keyval, void *attribute_val)
2588 {
2589    NOT_YET_IMPLEMENTED
2590 }
2591
2592 int PMPI_Comm_delete_attr (MPI_Comm comm, int comm_keyval)
2593 {
2594    NOT_YET_IMPLEMENTED
2595 }
2596
2597 int PMPI_Comm_create_keyval(MPI_Comm_copy_attr_function* copy_fn, MPI_Comm_delete_attr_function* delete_fn, int* keyval, void* extra_state)
2598 {
2599    NOT_YET_IMPLEMENTED
2600 }
2601
2602 int PMPI_Comm_free_keyval(int* keyval) {
2603    NOT_YET_IMPLEMENTED
2604 }
2605
2606 int PMPI_Pcontrol(const int level )
2607 {
2608    NOT_YET_IMPLEMENTED
2609 }
2610
2611 int PMPI_Unpack(void* inbuf, int insize, int* position, void* outbuf, int outcount, MPI_Datatype type, MPI_Comm comm) {
2612    NOT_YET_IMPLEMENTED
2613 }
2614
2615 int PMPI_Type_get_attr (MPI_Datatype type, int type_keyval, void *attribute_val, int* flag)
2616 {
2617   NOT_YET_IMPLEMENTED
2618 }
2619
2620 int PMPI_Type_set_attr (MPI_Datatype type, int type_keyval, void *attribute_val)
2621 {
2622   NOT_YET_IMPLEMENTED
2623 }
2624
2625 int PMPI_Type_delete_attr (MPI_Datatype type, int comm_keyval)
2626 {
2627   NOT_YET_IMPLEMENTED
2628 }
2629
2630 int PMPI_Type_create_keyval(MPI_Type_copy_attr_function* copy_fn, MPI_Type_delete_attr_function* delete_fn, int* keyval, void* extra_state)
2631 {
2632   NOT_YET_IMPLEMENTED
2633 }
2634
2635 int PMPI_Type_free_keyval(int* keyval) {
2636   NOT_YET_IMPLEMENTED
2637 }
2638
2639 int PMPI_Intercomm_create(MPI_Comm local_comm, int local_leader, MPI_Comm peer_comm, int remote_leader, int tag, MPI_Comm* comm_out) {
2640    NOT_YET_IMPLEMENTED
2641 }
2642
2643 int PMPI_Intercomm_merge(MPI_Comm comm, int high, MPI_Comm* comm_out) {
2644    NOT_YET_IMPLEMENTED
2645 }
2646
2647 int PMPI_Bsend(void* buf, int count, MPI_Datatype datatype, int dest, int tag, MPI_Comm comm) {
2648    NOT_YET_IMPLEMENTED
2649 }
2650
2651 int PMPI_Bsend_init(void* buf, int count, MPI_Datatype datatype, int dest, int tag, MPI_Comm comm, MPI_Request* request) {
2652    NOT_YET_IMPLEMENTED
2653 }
2654
2655 int PMPI_Ibsend(void* buf, int count, MPI_Datatype datatype, int dest, int tag, MPI_Comm comm, MPI_Request* request) {
2656    NOT_YET_IMPLEMENTED
2657 }
2658
2659 int PMPI_Comm_remote_group(MPI_Comm comm, MPI_Group* group) {
2660    NOT_YET_IMPLEMENTED
2661 }
2662
2663 int PMPI_Comm_remote_size(MPI_Comm comm, int* size) {
2664    NOT_YET_IMPLEMENTED
2665 }
2666
2667 int PMPI_Attr_delete(MPI_Comm comm, int keyval) {
2668    NOT_YET_IMPLEMENTED
2669 }
2670
2671 int PMPI_Attr_get(MPI_Comm comm, int keyval, void* attr_value, int* flag) {
2672    NOT_YET_IMPLEMENTED
2673 }
2674
2675 int PMPI_Attr_put(MPI_Comm comm, int keyval, void* attr_value) {
2676    NOT_YET_IMPLEMENTED
2677 }
2678
2679 int PMPI_Rsend(void* buf, int count, MPI_Datatype datatype, int dest, int tag, MPI_Comm comm) {
2680    NOT_YET_IMPLEMENTED
2681 }
2682
2683 int PMPI_Rsend_init(void* buf, int count, MPI_Datatype datatype, int dest, int tag, MPI_Comm comm, MPI_Request* request) {
2684    NOT_YET_IMPLEMENTED
2685 }
2686
2687 int PMPI_Irsend(void* buf, int count, MPI_Datatype datatype, int dest, int tag, MPI_Comm comm, MPI_Request* request) {
2688    NOT_YET_IMPLEMENTED
2689 }
2690
2691 int PMPI_Keyval_create(MPI_Copy_function* copy_fn, MPI_Delete_function* delete_fn, int* keyval, void* extra_state) {
2692    NOT_YET_IMPLEMENTED
2693 }
2694
2695 int PMPI_Keyval_free(int* keyval) {
2696    NOT_YET_IMPLEMENTED
2697 }
2698
2699 int PMPI_Test_cancelled(MPI_Status* status, int* flag) {
2700    NOT_YET_IMPLEMENTED
2701 }
2702
2703 int PMPI_Pack(void* inbuf, int incount, MPI_Datatype type, void* outbuf, int outcount, int* position, MPI_Comm comm) {
2704    NOT_YET_IMPLEMENTED
2705 }
2706
2707 int PMPI_Pack_external_size(char *datarep, int incount, MPI_Datatype datatype, MPI_Aint *size){
2708   NOT_YET_IMPLEMENTED
2709 }
2710
2711 int PMPI_Pack_external(char *datarep, void *inbuf, int incount, MPI_Datatype datatype, void *outbuf, MPI_Aint outcount, MPI_Aint *position){
2712   NOT_YET_IMPLEMENTED
2713 }
2714
2715 int PMPI_Unpack_external( char *datarep, void *inbuf, MPI_Aint insize, MPI_Aint *position, void *outbuf, int outcount, MPI_Datatype datatype){
2716   NOT_YET_IMPLEMENTED
2717 }
2718
2719 int PMPI_Get_elements(MPI_Status* status, MPI_Datatype datatype, int* elements) {
2720    NOT_YET_IMPLEMENTED
2721 }
2722
2723 int PMPI_Dims_create(int nnodes, int ndims, int* dims) {
2724    NOT_YET_IMPLEMENTED
2725 }
2726
2727 int PMPI_Win_fence( int assert,  MPI_Win win){
2728    NOT_YET_IMPLEMENTED
2729 }
2730
2731 int PMPI_Win_free( MPI_Win* win){
2732    NOT_YET_IMPLEMENTED
2733 }
2734
2735 int PMPI_Win_create( void *base, MPI_Aint size, int disp_unit, MPI_Info info, MPI_Comm comm, MPI_Win *win){
2736   NOT_YET_IMPLEMENTED
2737 }
2738
2739 int PMPI_Info_create( MPI_Info *info){
2740   NOT_YET_IMPLEMENTED
2741 }
2742
2743 int PMPI_Info_set( MPI_Info info, char *key, char *value){
2744   NOT_YET_IMPLEMENTED
2745 }
2746
2747 int PMPI_Info_free( MPI_Info *info){
2748   NOT_YET_IMPLEMENTED
2749 }
2750
2751 int PMPI_Get( void *origin_addr, int origin_count, MPI_Datatype origin_datatype, int target_rank,
2752     MPI_Aint target_disp, int target_count, MPI_Datatype target_datatype, MPI_Win win){
2753   NOT_YET_IMPLEMENTED
2754 }
2755
2756 int PMPI_Type_get_envelope( MPI_Datatype datatype, int *num_integers,
2757                           int *num_addresses, int *num_datatypes, int *combiner){
2758   NOT_YET_IMPLEMENTED
2759 }
2760
2761 int PMPI_Type_get_contents(MPI_Datatype datatype, int max_integers, int max_addresses,
2762                           int max_datatypes, int* array_of_integers, MPI_Aint* array_of_addresses,
2763                           MPI_Datatype* array_of_datatypes){
2764   NOT_YET_IMPLEMENTED
2765 }
2766
2767 int PMPI_Type_create_darray(int size, int rank, int ndims, int* array_of_gsizes,
2768                             int* array_of_distribs, int* array_of_dargs, int* array_of_psizes,
2769                             int order, MPI_Datatype oldtype, MPI_Datatype *newtype) {
2770   NOT_YET_IMPLEMENTED
2771 }
2772
2773 int PMPI_Type_create_resized(MPI_Datatype oldtype,MPI_Aint lb, MPI_Aint extent, MPI_Datatype *newtype){
2774   NOT_YET_IMPLEMENTED
2775 }
2776
2777 int PMPI_Type_create_subarray(int ndims,int *array_of_sizes, int *array_of_subsizes, int *array_of_starts, int order, MPI_Datatype oldtype, MPI_Datatype *newtype){
2778   NOT_YET_IMPLEMENTED
2779 }
2780
2781 int PMPI_Type_match_size(int typeclass,int size,MPI_Datatype *datatype){
2782   NOT_YET_IMPLEMENTED
2783 }
2784
2785 int PMPI_Alltoallw( void *sendbuf, int *sendcnts, int *sdispls, MPI_Datatype *sendtypes,
2786                    void *recvbuf, int *recvcnts, int *rdispls, MPI_Datatype *recvtypes,
2787                    MPI_Comm comm){
2788   NOT_YET_IMPLEMENTED
2789 }
2790
2791 int PMPI_Comm_set_name(MPI_Comm comm, char* name){
2792   NOT_YET_IMPLEMENTED
2793 }
2794
2795 int PMPI_Comm_dup_with_info(MPI_Comm comm, MPI_Info info, MPI_Comm * newcomm){
2796   NOT_YET_IMPLEMENTED
2797 }
2798
2799 int PMPI_Comm_split_type(MPI_Comm comm, int split_type, int key, MPI_Info info, MPI_Comm *newcomm){
2800   NOT_YET_IMPLEMENTED
2801 }
2802
2803 int PMPI_Comm_set_info (MPI_Comm comm, MPI_Info info){
2804   NOT_YET_IMPLEMENTED
2805 }
2806
2807 int PMPI_Comm_get_info (MPI_Comm comm, MPI_Info* info){
2808   NOT_YET_IMPLEMENTED
2809 }
2810
2811 int PMPI_Info_get(MPI_Info info,char *key,int valuelen, char *value, int *flag){
2812   NOT_YET_IMPLEMENTED
2813 }
2814
2815 int PMPI_Comm_create_errhandler( MPI_Comm_errhandler_fn *function, MPI_Errhandler *errhandler){
2816   NOT_YET_IMPLEMENTED
2817 }
2818
2819 int PMPI_Add_error_class( int *errorclass){
2820   NOT_YET_IMPLEMENTED
2821 }
2822
2823 int PMPI_Add_error_code(  int errorclass, int *errorcode){
2824   NOT_YET_IMPLEMENTED
2825 }
2826
2827 int PMPI_Add_error_string( int errorcode, char *string){
2828   NOT_YET_IMPLEMENTED
2829 }
2830
2831 int PMPI_Comm_call_errhandler(MPI_Comm comm,int errorcode){
2832   NOT_YET_IMPLEMENTED
2833 }
2834
2835 int PMPI_Info_dup(MPI_Info info, MPI_Info *newinfo){
2836   NOT_YET_IMPLEMENTED
2837 }
2838
2839 int PMPI_Info_delete(MPI_Info info, char *key){
2840   NOT_YET_IMPLEMENTED
2841 }
2842
2843 int PMPI_Info_get_nkeys( MPI_Info info, int *nkeys){
2844   NOT_YET_IMPLEMENTED
2845 }
2846
2847 int PMPI_Info_get_nthkey( MPI_Info info, int n, char *key){
2848   NOT_YET_IMPLEMENTED
2849 }
2850
2851 int PMPI_Info_get_valuelen( MPI_Info info, char *key, int *valuelen, int *flag){
2852   NOT_YET_IMPLEMENTED
2853 }
2854
2855 int PMPI_Request_get_status( MPI_Request request, int *flag, MPI_Status *status){
2856   NOT_YET_IMPLEMENTED
2857 }
2858
2859 int MPI_Request_get_status( MPI_Request request, int *flag, MPI_Status *status){
2860   NOT_YET_IMPLEMENTED
2861 }
2862
2863 int PMPI_Grequest_start( MPI_Grequest_query_function *query_fn, MPI_Grequest_free_function *free_fn, MPI_Grequest_cancel_function *cancel_fn, void *extra_state, MPI_Request *request){
2864   NOT_YET_IMPLEMENTED
2865 }
2866
2867 int PMPI_Grequest_complete( MPI_Request request){
2868   NOT_YET_IMPLEMENTED
2869 }
2870
2871 int PMPI_Status_set_cancelled(MPI_Status *status,int flag){
2872   NOT_YET_IMPLEMENTED
2873 }
2874
2875 int PMPI_Status_set_elements( MPI_Status *status, MPI_Datatype datatype, int count){
2876   NOT_YET_IMPLEMENTED
2877 }
2878
2879 int PMPI_Comm_connect( char *port_name, MPI_Info info, int root, MPI_Comm comm, MPI_Comm *newcomm){
2880   NOT_YET_IMPLEMENTED
2881 }
2882
2883 int PMPI_Publish_name( char *service_name, MPI_Info info, char *port_name){
2884   NOT_YET_IMPLEMENTED
2885 }
2886
2887 int PMPI_Unpublish_name( char *service_name, MPI_Info info, char *port_name){
2888   NOT_YET_IMPLEMENTED
2889 }
2890
2891 int PMPI_Lookup_name( char *service_name, MPI_Info info, char *port_name){
2892   NOT_YET_IMPLEMENTED
2893 }
2894
2895 int PMPI_Comm_join( int fd, MPI_Comm *intercomm){
2896   NOT_YET_IMPLEMENTED
2897 }
2898
2899 int PMPI_Open_port( MPI_Info info, char *port_name){
2900   NOT_YET_IMPLEMENTED
2901 }
2902
2903 int PMPI_Close_port(char *port_name){
2904   NOT_YET_IMPLEMENTED
2905 }
2906
2907 int PMPI_Comm_accept( char *port_name, MPI_Info info, int root, MPI_Comm comm, MPI_Comm *newcomm){
2908   NOT_YET_IMPLEMENTED
2909 }
2910
2911 int PMPI_Comm_spawn( char *command, char **argv, int maxprocs, MPI_Info info, int root, MPI_Comm comm, MPI_Comm *intercomm, int* array_of_errcodes){
2912   NOT_YET_IMPLEMENTED
2913 }
2914
2915 int PMPI_Comm_spawn_multiple( int count, char **array_of_commands, char*** array_of_argv,
2916                              int* array_of_maxprocs, MPI_Info* array_of_info, int root,
2917                              MPI_Comm comm, MPI_Comm *intercomm, int* array_of_errcodes){
2918   NOT_YET_IMPLEMENTED
2919 }
2920
2921 int PMPI_Comm_get_parent( MPI_Comm *parent){
2922   NOT_YET_IMPLEMENTED
2923 }