examples/smpi/smpi_msg_masterslave/masterslave_mailbox_smpi.c

   1 /* Copyright (c) 2010-2020. The SimGrid Team. All rights reserved.          */
   2
   3 /* This program is free software; you can redistribute it and/or modify it
   4  * under the terms of the license (GNU LGPL) which comes with this package. */
   5
   6 #include "simgrid/msg.h"
   7 #include "mpi.h"
   8
   9 #include <stdio.h> /* snprintf */
  10
  11 XBT_LOG_NEW_DEFAULT_CATEGORY(msg_test, "Messages specific for this msg example");
  12
  13 static int master(int argc, char *argv[])
  14 {
  15   xbt_assert(argc == 5);
  16   long number_of_tasks = xbt_str_parse_int(argv[1], "Invalid amount of tasks: %s");
  17   double task_comp_size = xbt_str_parse_double(argv[2], "Invalid computational size: %s");
  18   double task_comm_size = xbt_str_parse_double(argv[3], "Invalid communication size: %s");
  19   long slaves_count = xbt_str_parse_int(argv[4], "Invalid amount of slaves: %s");
  20
  21   XBT_INFO("Got %ld slaves and %ld tasks to process", slaves_count, number_of_tasks);
  22
  23   for (int i = 0; i < number_of_tasks; i++) {
  24     char mailbox[256];
  25     char sprintf_buffer[256];
  26
  27     snprintf(mailbox,256, "slave-%ld", i % slaves_count);
  28     snprintf(sprintf_buffer,256, "Task_%d", i);
  29     msg_task_t task = MSG_task_create(sprintf_buffer, task_comp_size, task_comm_size, NULL);
  30     if (number_of_tasks < 10000 || i % 10000 == 0)
  31       XBT_INFO("Sending \"%s\" (of %ld) to mailbox \"%s\"", MSG_task_get_name(task), number_of_tasks, mailbox);
  32
  33     MSG_task_send(task, mailbox);
  34   }
  35
  36   XBT_INFO("All tasks have been dispatched. Let's tell everybody the computation is over.");
  37   for (int i = 0; i < slaves_count; i++) {
  38     char mailbox[80];
  39
  40     snprintf(mailbox,80, "slave-%ld", i % slaves_count);
  41     msg_task_t finalize = MSG_task_create("finalize", 0, 0, 0);
  42     MSG_task_send(finalize, mailbox);
  43   }
  44
  45   return 0;
  46 }
  47
  48 static int master_mpi(int argc, char *argv[])
  49 {
  50   MPI_Init(&argc, &argv);
  51
  52   int rank;
  53   MPI_Comm_rank(MPI_COMM_WORLD, &rank);
  54   XBT_INFO("here for rank %d", rank);
  55   int test[1000]={rank};
  56   if(rank==0)
  57     MPI_Send(&test, 1000, MPI_INT, 1, 1, MPI_COMM_WORLD);
  58   else
  59     MPI_Recv(&test, 1000, MPI_INT, 0, 1, MPI_COMM_WORLD, MPI_STATUSES_IGNORE);
  60
  61   XBT_INFO("After comm %d", rank);
  62   MPI_Finalize();
  63
  64   XBT_INFO("After finalize %d %d", rank, test[0]);
  65   return 0;
  66 }
  67
  68 static int alltoall_mpi(int argc, char *argv[])
  69 {
  70   MPI_Init(&argc, &argv);
  71
  72   int rank;
  73   int size;
  74   MPI_Comm_rank(MPI_COMM_WORLD, &rank);
  75   MPI_Comm_size(MPI_COMM_WORLD, &size);
  76   XBT_INFO("alltoall for rank %d", rank);
  77   int* out=malloc(1000*size*sizeof(int));
  78   int* in=malloc(1000*size*sizeof(int));
  79   MPI_Alltoall(out, 1000, MPI_INT,in, 1000, MPI_INT, MPI_COMM_WORLD);
  80
  81   XBT_INFO("after alltoall %d", rank);
  82   free(out);
  83   free(in);
  84   MPI_Finalize();
  85   return 0;
  86 }
  87
  88 static int slave(int argc, char *argv[])
  89 {
  90   xbt_assert(argc == 2);
  91   msg_task_t task = NULL;
  92   XBT_ATTRIB_UNUSED int res;
  93   int id = -1;
  94   char mailbox[80];
  95   XBT_ATTRIB_UNUSED int read;
  96
  97   read = sscanf(argv[1], "%d", &id);
  98   xbt_assert(read, "Invalid argument %s\n", argv[1]);
  99
 100   snprintf(mailbox,80, "slave-%d", id);
 101
 102   while (1) {
 103     res = MSG_task_receive(&(task), mailbox);
 104     xbt_assert(res == MSG_OK, "MSG_task_get failed");
 105
 106     if (strcmp(MSG_task_get_name(task), "finalize")==0) {
 107       MSG_task_destroy(task);
 108       break;
 109     }
 110     MSG_task_execute(task);
 111     MSG_task_destroy(task);
 112     task = NULL;
 113   }
 114   XBT_INFO("I'm done. See you!");
 115
 116   return 0;
 117 }
 118
 119 int main(int argc, char *argv[])
 120 {
 121   msg_error_t res;
 122
 123   MSG_init(&argc, argv);
 124   SMPI_init();
 125
 126   xbt_assert(argc > 2,"Usage: %s platform_file deployment_file\n"
 127              "\nexample: %s msg_platform.xml msg_deployment.xml\n", argv[0], argv[0]);
 128
 129   MSG_create_environment(argv[1]);
 130
 131   MSG_function_register("master", master);
 132   MSG_function_register("slave", slave);
 133   // launch two MPI applications as well, one using master_mpi function as main on 2 nodes
 134   SMPI_app_instance_register("master_mpi", master_mpi,2);
 135   // the second performing an alltoall on 4 nodes
 136   SMPI_app_instance_register("alltoall_mpi", alltoall_mpi,4);
 137   MSG_launch_application(argv[2]);
 138
 139   res = MSG_main();
 140
 141   XBT_INFO("Simulation time %g", MSG_get_clock());
 142
 143   SMPI_finalize();
 144   return res != MSG_OK;
 145 }