teshsuite/smpi/coll-alltoallv/coll-alltoallv.c

   1 /* Copyright (c) 2013-2018. The SimGrid Team.
   2  * All rights reserved.                                                     */
   3
   4 /* This program is free software; you can redistribute it and/or modify it
   5  * under the terms of the license (GNU LGPL) which comes with this package. */
   6
   7 /*
   8  *  (C) 2001 by Argonne National Laboratory.
   9  *      See COPYRIGHT in top-level directory.
  10  */
  11 #include <string.h>
  12 #include <stdlib.h>
  13 #include <stdio.h>
  14 #include "mpi.h"
  15
  16 /* This program tests MPI_Alltoallv by having processor i send different amounts of data to each processor.
  17
  18    TODO As there are separate send and receive types to alltoallv, there need to be tests to rearrange data on the fly.
  19    The first test sends i items to processor i from all processors.
  20    Currently, the test uses only MPI_INT; this is adequate for testing systems that use point-to-point operations
  21
  22    Example values for 3 processes:
  23  * <0> sbuf: (#9):   [0][1][2][3][4][5][6][7][8]
  24    <0> scount: (#3): [0][1][2]
  25    <0> rcount: (#3): [0][0][0]
  26    <0> sdisp: (#3):  [0][1][3]
  27    <0> rdisp: (#3):  [0][0][0]
  28
  29    <1> sbuf: (#9):   [100][101][102][103][104][105][106][107][108]
  30    <1> scount: (#3): [0][1][2]
  31    <1> rcount: (#3): [1][1][1]
  32    <1> sdisp: (#3):  [0][1][3]
  33    <1> rdisp: (#3):  [0][1][2]
  34
  35    <2> sbuf: (#9):   [200][201][202][203][204][205][206][207][208]
  36    <2> scount: (#3): [0][1][2]
  37    <2> rcount: (#3): [2][2][2]
  38    <2> sdisp: (#3):  [0][1][3]
  39    <2> rdisp: (#3):  [0][2][4]
  40
  41    after MPI_Alltoallv :
  42    <0> rbuf: (#9):   [-1][-1][-1][-1][-1][-1][-1][-1][-1]
  43    <1> rbuf: (#9):   [1][101][201][-1][-1][-1][-1][-1][-1]
  44    <2> rbuf: (#9):   [3][4][103][104][203][204][-1][-1][-1]
  45 */
  46
  47 static void print_buffer_int(void *buf, int len, const char *msg, int rank)
  48 {
  49   printf("[%d] %s (#%d): ", rank, msg, len);
  50   for (int tmp = 0; tmp < len; tmp++) {
  51     int* v = buf;
  52     printf("[%d]", v[tmp]);
  53   }
  54   printf("\n");
  55 }
  56
  57 int main(int argc, char **argv)
  58 {
  59   MPI_Comm comm;
  60   int i;
  61   int rank;
  62   int size;
  63
  64   MPI_Init(&argc, &argv);
  65
  66   comm = MPI_COMM_WORLD;
  67
  68   /* Create the buffer */
  69   MPI_Comm_size(comm, &size);
  70   if(size<=0){
  71     printf("error : comm size <= 0, run with mpirun\n");
  72     return -1;
  73   }
  74   MPI_Comm_rank(comm, &rank);
  75   int size2 = size * size;
  76   int* sbuf = (int*)xbt_malloc(size2 * sizeof(int));
  77   int* rbuf = (int*)xbt_malloc(size2 * sizeof(int));
  78
  79   /* Load up the buffers */
  80   for (i = 0; i < size2; i++) {
  81     sbuf[i] = i + 100 * rank;
  82     rbuf[i] = -1;
  83   }
  84
  85   /* Create and load the arguments to alltoallv */
  86   int* sendcounts = (int*)xbt_malloc(size * sizeof(int));
  87   int* recvcounts = (int*)xbt_malloc(size * sizeof(int));
  88   int* rdispls    = (int*)xbt_malloc(size * sizeof(int));
  89   int* sdispls    = (int*)xbt_malloc(size * sizeof(int));
  90   for (i = 0; i < size; i++) {
  91     sendcounts[i] = i;
  92     recvcounts[i] = rank;
  93     rdispls[i] = i * rank;
  94     sdispls[i] = (i * (i + 1)) / 2;
  95   }
  96
  97   print_buffer_int(sbuf, size2, "sbuf:", rank);
  98   print_buffer_int(sendcounts, size, "scount:", rank);
  99   print_buffer_int(recvcounts, size, "rcount:", rank);
 100   print_buffer_int(sdispls, size, "sdisp:", rank);
 101   print_buffer_int(rdispls, size, "rdisp:", rank);
 102
 103   MPI_Alltoallv(sbuf, sendcounts, sdispls, MPI_INT, rbuf, recvcounts, rdispls, MPI_INT, comm);
 104
 105   print_buffer_int(rbuf, size2, "rbuf:", rank);
 106
 107   MPI_Barrier(MPI_COMM_WORLD);
 108   if (0 == rank) {
 109     printf("Alltoallv TEST COMPLETE.\n");
 110   }
 111   free(sdispls);
 112   free(rdispls);
 113   free(recvcounts);
 114   free(sendcounts);
 115   free(rbuf);
 116   free(sbuf);
 117
 118   MPI_Finalize();
 119   return 0;
 120 }