examples/smpi/smpi_s4u_masterslave/masterslave_mailbox_smpi.cpp

   1 /* Copyright (c) 2010-2020. The SimGrid Team. All rights reserved.          */
   2
   3 /* This program is free software; you can redistribute it and/or modify it
   4  * under the terms of the license (GNU LGPL) which comes with this package. */
   5
   6 #include "mpi.h"
   7 #include "simgrid/s4u.hpp"
   8
   9 #include <stdio.h> /* snprintf */
  10
  11 XBT_LOG_NEW_DEFAULT_CATEGORY(msg_test, "Messages specific for this msg example");
  12
  13 static void master(std::vector<std::string> args)
  14 {
  15   xbt_assert(args.size() > 4, "The master function expects at least 3 arguments");
  16
  17   long tasks_count          = std::stol(args[1]);
  18   double compute_cost       = std::stod(args[2]);
  19   double communication_cost = std::stod(args[3]);
  20   std::vector<simgrid::s4u::Mailbox*> workers;
  21   for (unsigned int i = 4; i < args.size(); i++)
  22     workers.push_back(simgrid::s4u::Mailbox::by_name(args[i]));
  23
  24   XBT_INFO("Got %zu workers and %ld tasks to process", workers.size(), tasks_count);
  25
  26   for (int i = 0; i < tasks_count; i++) { /* For each task to be executed: */
  27     /* - Select a worker in a round-robin way */
  28     simgrid::s4u::Mailbox* mailbox = workers[i % workers.size()];
  29
  30     /* - Send the computation cost to that worker */
  31     XBT_INFO("Sending task %d of %ld to mailbox '%s'", i, tasks_count, mailbox->get_cname());
  32     mailbox->put(new double(compute_cost), communication_cost);
  33   }
  34
  35   XBT_INFO("All tasks have been dispatched. Request all workers to stop.");
  36   for (unsigned int i = 0; i < workers.size(); i++) {
  37     /* The workers stop when receiving a negative compute_cost */
  38     simgrid::s4u::Mailbox* mailbox = workers[i % workers.size()];
  39
  40     mailbox->put(new double(-1.0), 0);
  41   }
  42 }
  43
  44 static void worker(std::vector<std::string> args)
  45 {
  46   xbt_assert(args.size() == 1, "The worker expects no argument");
  47
  48   const simgrid::s4u::Host* my_host = simgrid::s4u::this_actor::get_host();
  49   simgrid::s4u::Mailbox* mailbox    = simgrid::s4u::Mailbox::by_name(my_host->get_name());
  50
  51   double compute_cost;
  52   do {
  53     const double* msg = static_cast<double*>(mailbox->get());
  54     compute_cost      = *msg;
  55     delete msg;
  56
  57     if (compute_cost > 0) /* If compute_cost is valid, execute a computation of that cost */
  58       simgrid::s4u::this_actor::execute(compute_cost);
  59
  60   } while (compute_cost > 0); /* Stop when receiving an invalid compute_cost */
  61
  62   XBT_INFO("Exiting now.");
  63 }
  64
  65 static int master_mpi(int argc, char* argv[])
  66 {
  67   MPI_Init(&argc, &argv);
  68
  69   int rank;
  70   MPI_Comm_rank(MPI_COMM_WORLD, &rank);
  71   XBT_INFO("here for rank %d", rank);
  72   int test[1000] = {rank};
  73   if (rank == 0)
  74     MPI_Send(&test, 1000, MPI_INT, 1, 1, MPI_COMM_WORLD);
  75   else
  76     MPI_Recv(&test, 1000, MPI_INT, 0, 1, MPI_COMM_WORLD, MPI_STATUSES_IGNORE);
  77
  78   XBT_INFO("After comm %d", rank);
  79   MPI_Finalize();
  80
  81   XBT_INFO("After finalize %d %d", rank, test[0]);
  82   return 0;
  83 }
  84
  85 static int alltoall_mpi(int argc, char* argv[])
  86 {
  87   MPI_Init(&argc, &argv);
  88
  89   int rank;
  90   int size;
  91   MPI_Comm_rank(MPI_COMM_WORLD, &rank);
  92   MPI_Comm_size(MPI_COMM_WORLD, &size);
  93   XBT_INFO("alltoall for rank %d", rank);
  94   int* out = new int[1000 * size];
  95   int* in  = new int[1000 * size];
  96   MPI_Alltoall(out, 1000, MPI_INT, in, 1000, MPI_INT, MPI_COMM_WORLD);
  97
  98   XBT_INFO("after alltoall %d", rank);
  99   delete[] out;
 100   delete[] in;
 101   MPI_Finalize();
 102   return 0;
 103 }
 104
 105 int main(int argc, char* argv[])
 106 {
 107   simgrid::s4u::Engine e(&argc, argv);
 108
 109   SMPI_init();
 110
 111   xbt_assert(argc > 2,
 112              "Usage: %s platform_file deployment_file\n"
 113              "\nexample: %s msg_platform.xml msg_deployment.xml\n",
 114              argv[0], argv[0]);
 115
 116   e.load_platform(argv[1]);
 117
 118   e.register_function("master", master);
 119   e.register_function("worker", worker);
 120   // launch two MPI applications as well, one using master_mpi function as main on 2 nodes
 121   SMPI_app_instance_register("master_mpi", master_mpi, 2);
 122   // the second performing an alltoall on 4 nodes
 123   SMPI_app_instance_register("alltoall_mpi", alltoall_mpi, 4);
 124   e.load_deployment(argv[2]);
 125
 126   e.run();
 127
 128   XBT_INFO("Simulation time %g", e.get_clock());
 129
 130   SMPI_finalize();
 131   return 0;
 132 }