src/smpi/plugins/ampi/ampi.cpp

   1 #include <simgrid/plugins/load_balancer.h>
   2 #include <simgrid/s4u/Actor.hpp>
   3 #include <smpi/sampi.h>
   4 #include <src/smpi/include/smpi_comm.hpp>
   5 #include <src/smpi/include/smpi_actor.hpp>
   6 #include <src/smpi/plugins/ampi/instr_ampi.hpp>
   7 #include <src/instr/instr_smpi.hpp>
   8 #include <xbt/replay.hpp>
   9
  10 XBT_LOG_NEW_DEFAULT_SUBCATEGORY(plugin_pampi, smpi, "Logging specific to the AMPI functions");
  11
  12 extern "C" void* __libc_malloc(size_t size);
  13 extern "C" void* __libc_free(void* ptr);
  14 static std::vector<size_t> memory_size(500, 0); // FIXME cheinrich This needs to be dynamic
  15 static std::map</*address*/ void*, size_t> alloc_table; // Keep track of all allocations
  16
  17 extern "C" void* _sampi_malloc(size_t size)
  18 {
  19   void* result = __libc_malloc (size); // We need the space here to prevent recursive substitution
  20   alloc_table.insert({result, size});
  21   if (not simgrid::s4u::this_actor::is_maestro()) {
  22     memory_size[simgrid::s4u::this_actor::get_pid()] += size;
  23   }
  24   return result;
  25 }
  26
  27 extern "C" void _sampi_free(void* ptr)
  28 {
  29   size_t alloc_size = alloc_table.at(ptr);
  30   int my_proc_id    = simgrid::s4u::this_actor::get_pid();
  31   memory_size[my_proc_id] -= alloc_size;
  32   __libc_free(ptr);
  33 }
  34
  35 namespace simgrid {
  36 namespace smpi {
  37 namespace plugin {
  38 namespace ampi {
  39   simgrid::xbt::signal<void(simgrid::s4u::ActorPtr)> on_iteration_in;
  40   simgrid::xbt::signal<void(simgrid::s4u::ActorPtr)> on_iteration_out;
  41 }
  42 }
  43 }
  44 }
  45
  46 /* FIXME The following contains several times "rank() + 1". This works for one
  47  * instance, but we need to find a way to deal with this for several instances and
  48  * for daemons: If we just replace this with the process id, we will get id's that
  49  * don't start at 0 if we start daemons as well.
  50  */
  51 int APMPI_Iteration_in(MPI_Comm comm)
  52 {
  53   smpi_bench_end();
  54   TRACE_Iteration_in(comm->rank() + 1, new simgrid::instr::NoOpTIData("iteration_in")); // implemented on instr_smpi.c
  55   smpi_bench_begin();
  56   return 1;
  57 }
  58
  59 int APMPI_Iteration_out(MPI_Comm comm)
  60 {
  61   smpi_bench_end();
  62   TRACE_Iteration_out(comm->rank() + 1, new simgrid::instr::NoOpTIData("iteration_out"));
  63   smpi_bench_begin();
  64   return 1;
  65 }
  66
  67 void APMPI_Migrate(MPI_Comm comm)
  68 {
  69   smpi_bench_end();
  70   int my_proc_id = simgrid::s4u::this_actor::get_pid();
  71   TRACE_migration_call(comm->rank() + 1, new simgrid::instr::AmpiMigrateTIData(memory_size[my_proc_id]));
  72   smpi_bench_begin();
  73 }
  74
  75 int AMPI_Iteration_in(MPI_Comm comm)
  76 {
  77   return APMPI_Iteration_in(comm);
  78 }
  79
  80 int AMPI_Iteration_out(MPI_Comm comm)
  81 {
  82   return APMPI_Iteration_out(comm);
  83 }
  84
  85 void AMPI_Migrate(MPI_Comm comm)
  86 {
  87   APMPI_Migrate(comm);
  88 }