src/simix/smx_global.cpp

   1 /* Copyright (c) 2007-2017. The SimGrid Team. All rights reserved.          */
   2
   3 /* This program is free software; you can redistribute it and/or modify it
   4  * under the terms of the license (GNU LGPL) which comes with this package. */
   5
   6 #include <functional>
   7 #include <memory>
   8
   9 #include <signal.h> /* Signal handling */
  10 #include <stdlib.h>
  11 #include "src/internal_config.h"
  12
  13 #include <xbt/functional.hpp>
  14
  15 #include "simgrid/s4u/Engine.hpp"
  16 #include "simgrid/s4u/Host.hpp"
  17
  18 #include "src/surf/surf_interface.hpp"
  19 #include "src/surf/storage_interface.hpp"
  20 #include "src/surf/xml/platf.hpp"
  21 #include "smx_private.h"
  22 #include "xbt/ex.h"             /* ex_backtrace_display */
  23 #include "mc/mc.h"
  24 #include "src/mc/mc_replay.h"
  25 #include "simgrid/sg_config.h"
  26
  27 #include "src/smpi/smpi_process.hpp"
  28
  29 #include "src/kernel/activity/SynchroExec.hpp"
  30 #include "src/kernel/activity/SynchroComm.hpp"
  31 #include "src/kernel/activity/SynchroSleep.hpp"
  32 #include "src/kernel/activity/SynchroIo.hpp"
  33 #include "src/kernel/activity/SynchroRaw.hpp"
  34
  35 #if SIMGRID_HAVE_MC
  36 #include "src/mc/mc_private.h"
  37 #include "src/mc/remote/Client.hpp"
  38 #include "src/mc/remote/mc_protocol.h"
  39 #include <stdlib.h>
  40 #endif
  41
  42 #include "src/mc/mc_record.h"
  43
  44 #if HAVE_SMPI
  45 #include "src/smpi/private.h"
  46 #endif
  47
  48 XBT_LOG_NEW_CATEGORY(simix, "All SIMIX categories");
  49 XBT_LOG_NEW_DEFAULT_SUBCATEGORY(simix_kernel, simix, "Logging specific to SIMIX (kernel)");
  50
  51 std::unique_ptr<simgrid::simix::Global> simix_global;
  52 static xbt_heap_t simix_timers = nullptr;
  53
  54 /** @brief Timer datatype */
  55 typedef struct s_smx_timer {
  56   double date = 0.0;
  57   simgrid::xbt::Task<void()> callback;
  58
  59   s_smx_timer()=default;
  60   s_smx_timer(double date, simgrid::xbt::Task<void()> callback) : date(date), callback(std::move(callback)) {}
  61 } s_smx_timer_t;
  62
  63 void (*SMPI_switch_data_segment)(int) = nullptr;
  64
  65 int _sg_do_verbose_exit = 1;
  66 static void inthandler(int ignored)
  67 {
  68   if ( _sg_do_verbose_exit ) {
  69      XBT_INFO("CTRL-C pressed. The current status will be displayed before exit (disable that behavior with option 'verbose-exit').");
  70      SIMIX_display_process_status();
  71   }
  72   else {
  73      XBT_INFO("CTRL-C pressed, exiting. Hiding the current process status since 'verbose-exit' is set to false.");
  74   }
  75   exit(1);
  76 }
  77
  78 #ifndef _WIN32
  79 static void segvhandler(int signum, siginfo_t *siginfo, void *context)
  80 {
  81   if (siginfo->si_signo == SIGSEGV && siginfo->si_code == SEGV_ACCERR) {
  82     fprintf(stderr, "Access violation detected.\n"
  83                     "This probably comes from a programming error in your code, or from a stack\n"
  84                     "overflow. If you are certain of your code, try increasing the stack size\n"
  85                     "   --cfg=contexts/stack-size=XXX (current size is %d KiB).\n"
  86                     "\n"
  87                     "If it does not help, this may have one of the following causes:\n"
  88                     "a bug in SimGrid, a bug in the OS or a bug in a third-party libraries.\n"
  89                     "Failing hardware can sometimes generate such errors too.\n"
  90                     "\n"
  91                     "If you think you've found a bug in SimGrid, please report it along with a\n"
  92                     "Minimal Working Example (MWE) reproducing your problem and a full backtrace\n"
  93                     "of the fault captured with gdb or valgrind.\n",
  94             smx_context_stack_size / 1024);
  95   } else  if (siginfo->si_signo == SIGSEGV) {
  96     fprintf(stderr, "Segmentation fault.\n");
  97 #if HAVE_SMPI
  98     if (smpi_enabled() && smpi_privatize_global_variables == SMPI_PRIVATIZE_NONE) {
  99 #if HAVE_PRIVATIZATION
 100       fprintf(stderr, "Try to enable SMPI variable privatization with --cfg=smpi/privatization:yes.\n");
 101 #else
 102       fprintf(stderr, "Sadly, your system does not support --cfg=smpi/privatization:yes (yet).\n");
 103 #endif /* HAVE_PRIVATIZATION */
 104     }
 105 #endif /* HAVE_SMPI */
 106   }
 107   raise(signum);
 108 }
 109
 110 char sigsegv_stack[SIGSTKSZ];   /* alternate stack for SIGSEGV handler */
 111
 112 /**
 113  * Install signal handler for SIGSEGV.  Check that nobody has already installed
 114  * its own handler.  For example, the Java VM does this.
 115  */
 116 static void install_segvhandler()
 117 {
 118   stack_t stack;
 119   stack_t old_stack;
 120   stack.ss_sp = sigsegv_stack;
 121   stack.ss_size = sizeof sigsegv_stack;
 122   stack.ss_flags = 0;
 123
 124   if (sigaltstack(&stack, &old_stack) == -1) {
 125     XBT_WARN("Failed to register alternate signal stack: %s", strerror(errno));
 126     return;
 127   }
 128   if (!(old_stack.ss_flags & SS_DISABLE)) {
 129     XBT_DEBUG("An alternate stack was already installed (sp=%p, size=%zd, flags=%x). Restore it.",
 130               old_stack.ss_sp, old_stack.ss_size, old_stack.ss_flags);
 131     sigaltstack(&old_stack, nullptr);
 132   }
 133
 134   struct sigaction action;
 135   struct sigaction old_action;
 136   action.sa_sigaction = &segvhandler;
 137   action.sa_flags = SA_ONSTACK | SA_RESETHAND | SA_SIGINFO;
 138   sigemptyset(&action.sa_mask);
 139
 140   if (sigaction(SIGSEGV, &action, &old_action) == -1) {
 141     XBT_WARN("Failed to register signal handler for SIGSEGV: %s", strerror(errno));
 142     return;
 143   }
 144   if ((old_action.sa_flags & SA_SIGINFO) || old_action.sa_handler != SIG_DFL) {
 145     XBT_DEBUG("A signal handler was already installed for SIGSEGV (%p). Restore it.",
 146              (old_action.sa_flags & SA_SIGINFO) ? (void*)old_action.sa_sigaction : (void*)old_action.sa_handler);
 147     sigaction(SIGSEGV, &old_action, nullptr);
 148   }
 149 }
 150
 151 #endif /* _WIN32 */
 152
 153 /********************************* SIMIX **************************************/
 154 double SIMIX_timer_next()
 155 {
 156   return xbt_heap_size(simix_timers) > 0 ? xbt_heap_maxkey(simix_timers) : -1.0;
 157 }
 158
 159 static void kill_process(smx_actor_t process)
 160 {
 161   SIMIX_process_kill(process, nullptr);
 162 }
 163
 164 static std::function<void()> maestro_code;
 165
 166 namespace simgrid {
 167 namespace simix {
 168
 169 simgrid::xbt::signal<void()> onDeadlock;
 170
 171 XBT_PUBLIC(void) set_maestro(std::function<void()> code)
 172 {
 173   maestro_code = std::move(code);
 174 }
 175
 176 }
 177 }
 178
 179 void SIMIX_set_maestro(void (*code)(void*), void* data)
 180 {
 181 #ifdef _WIN32
 182   XBT_INFO("WARNING, SIMIX_set_maestro is believed to not work on windows. Please help us investigating this issue if you need that feature");
 183 #endif
 184   maestro_code = std::bind(code, data);
 185 }
 186
 187 /**
 188  * \ingroup SIMIX_API
 189  * \brief Initialize SIMIX internal data.
 190  *
 191  * \param argc Argc
 192  * \param argv Argv
 193  */
 194 void SIMIX_global_init(int *argc, char **argv)
 195 {
 196 #if SIMGRID_HAVE_MC
 197   // The communication initialization is done ASAP.
 198   // We need to communicate  initialization of the different layers to the model-checker.
 199   simgrid::mc::Client::initialize();
 200 #endif
 201
 202   if (!simix_global) {
 203     simix_global = std::unique_ptr<simgrid::simix::Global>(new simgrid::simix::Global());
 204
 205     simgrid::simix::ActorImpl proc;
 206     simix_global->process_to_run = xbt_dynar_new(sizeof(smx_actor_t), nullptr);
 207     simix_global->process_that_ran = xbt_dynar_new(sizeof(smx_actor_t), nullptr);
 208     simix_global->process_to_destroy = xbt_swag_new(xbt_swag_offset(proc, destroy_hookup));
 209     simix_global->maestro_process = nullptr;
 210     simix_global->create_process_function = &SIMIX_process_create;
 211     simix_global->kill_process_function = &kill_process;
 212     simix_global->cleanup_process_function = &SIMIX_process_cleanup;
 213     simix_global->mutex = xbt_os_mutex_init();
 214
 215     surf_init(argc, argv);      /* Initialize SURF structures */
 216     SIMIX_context_mod_init();
 217
 218     // Either create a new context with maestro or create
 219     // a context object with the current context mestro):
 220     simgrid::simix::create_maestro(maestro_code);
 221
 222     /* Prepare to display some more info when dying on Ctrl-C pressing */
 223     signal(SIGINT, inthandler);
 224
 225 #ifndef _WIN32
 226     install_segvhandler();
 227 #endif
 228     /* register a function to be called by SURF after the environment creation */
 229     sg_platf_init();
 230     simgrid::s4u::onPlatformCreated.connect(SIMIX_post_create_environment);
 231     simgrid::s4u::Host::onCreation.connect([](simgrid::s4u::Host& host) {
 232       if (host.extension<simgrid::simix::Host>() == nullptr) // another callback to the same signal may have created it
 233         host.extension_set<simgrid::simix::Host>(new simgrid::simix::Host());
 234     });
 235
 236     simgrid::surf::storageCreatedCallbacks.connect([](simgrid::surf::Storage* storage) {
 237       const char* name = storage->cname();
 238       // TODO, create sg_storage_by_name
 239       sg_storage_t s = xbt_lib_get_elm_or_null(storage_lib, name);
 240       xbt_assert(s != nullptr, "Storage not found for name %s", name);
 241
 242       SIMIX_storage_create(name, s, nullptr);
 243     });
 244
 245     SIMIX_STORAGE_LEVEL = xbt_lib_add_level(storage_lib, SIMIX_storage_destroy);
 246   }
 247   if (!simix_timers)
 248     simix_timers = xbt_heap_new(8, [](void* p) {
 249       delete static_cast<smx_timer_t>(p);
 250     });
 251
 252   if (xbt_cfg_get_boolean("clean-atexit"))
 253     atexit(SIMIX_clean);
 254
 255   if (_sg_cfg_exit_asap)
 256     exit(0);
 257 }
 258
 259 int smx_cleaned = 0;
 260 /**
 261  * \ingroup SIMIX_API
 262  * \brief Clean the SIMIX simulation
 263  *
 264  * This functions remove the memory used by SIMIX
 265  */
 266 void SIMIX_clean()
 267 {
 268   if (smx_cleaned)
 269     return; // to avoid double cleaning by java and C
 270
 271 #if HAVE_SMPI
 272   if (SIMIX_process_count()>0){
 273     if(smpi_process()->initialized()){
 274       xbt_die("Process exited without calling MPI_Finalize - Killing simulation");
 275     }else{
 276       XBT_WARN("Process called exit when leaving - Skipping cleanups");
 277       return;
 278     }
 279   }
 280 #endif
 281
 282   smx_cleaned = 1;
 283   XBT_DEBUG("SIMIX_clean called. Simulation's over.");
 284   if (!xbt_dynar_is_empty(simix_global->process_to_run) && SIMIX_get_clock() <= 0.0) {
 285     XBT_CRITICAL("   ");
 286     XBT_CRITICAL("The time is still 0, and you still have processes ready to run.");
 287     XBT_CRITICAL("It seems that you forgot to run the simulation that you setup.");
 288     xbt_die("Bailing out to avoid that stop-before-start madness. Please fix your code.");
 289   }
 290   /* Kill all processes (but maestro) */
 291   SIMIX_process_killall(simix_global->maestro_process, 1);
 292
 293   /* Exit the SIMIX network module */
 294   SIMIX_mailbox_exit();
 295
 296   xbt_heap_free(simix_timers);
 297   simix_timers = nullptr;
 298   /* Free the remaining data structures */
 299   xbt_dynar_free(&simix_global->process_to_run);
 300   xbt_dynar_free(&simix_global->process_that_ran);
 301   xbt_swag_free(simix_global->process_to_destroy);
 302   simix_global->process_list.clear();
 303   simix_global->process_to_destroy = nullptr;
 304
 305   xbt_os_mutex_destroy(simix_global->mutex);
 306   simix_global->mutex = nullptr;
 307 #if SIMGRID_HAVE_MC
 308   xbt_dynar_free(&simix_global->actors_vector);
 309 #endif
 310
 311   /* Let's free maestro now */
 312   delete simix_global->maestro_process->context;
 313   simix_global->maestro_process->context = nullptr;
 314   delete simix_global->maestro_process;
 315   simix_global->maestro_process = nullptr;
 316
 317   /* Finish context module and SURF */
 318   SIMIX_context_mod_exit();
 319
 320   surf_exit();
 321
 322   simix_global = nullptr;
 323 }
 324
 325
 326 /**
 327  * \ingroup SIMIX_API
 328  * \brief A clock (in second).
 329  *
 330  * \return Return the clock.
 331  */
 332 double SIMIX_get_clock()
 333 {
 334   if(MC_is_active() || MC_record_replay_is_active()){
 335     return MC_process_clock_get(SIMIX_process_self());
 336   }else{
 337     return surf_get_clock();
 338   }
 339 }
 340
 341 static int process_syscall_color(void *p)
 342 {
 343   switch ((*(smx_actor_t *)p)->simcall.call) {
 344   case SIMCALL_NONE:
 345   case SIMCALL_PROCESS_KILL:
 346     return 2;
 347   case SIMCALL_PROCESS_RESUME:
 348     return 1;
 349   default:
 350     return 0;
 351   }
 352 }
 353
 354 /** Wake up all processes waiting for a Surf action to finish */
 355 static void SIMIX_wake_processes()
 356 {
 357   surf_action_t action;
 358
 359   for(auto model : *all_existing_models) {
 360     XBT_DEBUG("Handling the processes whose action failed (if any)");
 361     while ((action = surf_model_extract_failed_action_set(model))) {
 362       XBT_DEBUG("   Handling Action %p",action);
 363       SIMIX_simcall_exit((smx_activity_t) action->getData());
 364     }
 365     XBT_DEBUG("Handling the processes whose action terminated normally (if any)");
 366     while ((action = surf_model_extract_done_action_set(model))) {
 367       XBT_DEBUG("   Handling Action %p",action);
 368       if (action->getData() == nullptr)
 369         XBT_DEBUG("probably vcpu's action %p, skip", action);
 370       else
 371         SIMIX_simcall_exit((smx_activity_t) action->getData());
 372     }
 373   }
 374 }
 375
 376 /** Handle any pending timer */
 377 static bool SIMIX_execute_timers()
 378 {
 379   bool result = false;
 380   while (xbt_heap_size(simix_timers) > 0 && SIMIX_get_clock() >= SIMIX_timer_next()) {
 381     result = true;
 382      //FIXME: make the timers being real callbacks
 383      // (i.e. provide dispatchers that read and expand the args)
 384      smx_timer_t timer = (smx_timer_t) xbt_heap_pop(simix_timers);
 385      try {
 386        timer->callback();
 387      }
 388      catch(...) {
 389        xbt_die("Exception throwed ouf of timer callback");
 390      }
 391      delete timer;
 392   }
 393   return result;
 394 }
 395
 396 /** Execute all the tasks that are queued
 397  *
 398  *  e.g. `.then()` callbacks of futures.
 399  **/
 400 static bool SIMIX_execute_tasks()
 401 {
 402   xbt_assert(simix_global->tasksTemp.empty());
 403
 404   if (simix_global->tasks.empty())
 405     return false;
 406
 407   using std::swap;
 408   do {
 409     // We don't want the callbacks to modify the vector we are iterating over:
 410     swap(simix_global->tasks, simix_global->tasksTemp);
 411
 412     // Execute all the queued tasks:
 413     for (auto& task : simix_global->tasksTemp)
 414       task();
 415
 416     simix_global->tasksTemp.clear();
 417   } while (!simix_global->tasks.empty());
 418
 419   return true;
 420 }
 421
 422 /**
 423  * \ingroup SIMIX_API
 424  * \brief Run the main simulation loop.
 425  */
 426 void SIMIX_run()
 427 {
 428   if (MC_record_path) {
 429     simgrid::mc::replay(MC_record_path);
 430     return;
 431   }
 432
 433   double time = 0;
 434
 435   do {
 436     XBT_DEBUG("New Schedule Round; size(queue)=%lu", xbt_dynar_length(simix_global->process_to_run));
 437
 438     SIMIX_execute_tasks();
 439
 440     while (!xbt_dynar_is_empty(simix_global->process_to_run)) {
 441       XBT_DEBUG("New Sub-Schedule Round; size(queue)=%lu", xbt_dynar_length(simix_global->process_to_run));
 442
 443       /* Run all processes that are ready to run, possibly in parallel */
 444       SIMIX_process_runall();
 445
 446       /* Move all killer processes to the end of the list, because killing a process that have an ongoing simcall is a bad idea */
 447       xbt_dynar_three_way_partition(simix_global->process_that_ran, process_syscall_color);
 448
 449       /* answer sequentially and in a fixed arbitrary order all the simcalls that were issued during that sub-round */
 450
 451       /* WARNING, the order *must* be fixed or you'll jeopardize the simulation reproducibility (see RR-7653) */
 452
 453       /* Here, the order is ok because:
 454        *
 455        *   Short proof: only maestro adds stuff to the process_to_run array, so the execution order of user contexts do not impact its order.
 456        *
 457        *   Long proof: processes remain sorted through an arbitrary (implicit, complex but fixed) order in all cases.
 458        *
 459        *   - if there is no kill during the simulation, processes remain sorted according by their PID.
 460        *     rational: This can be proved inductively.
 461        *        Assume that process_to_run is sorted at a beginning of one round (it is at round 0: the deployment file is parsed linearly).
 462        *        Let's show that it is still so at the end of this round.
 463        *        - if a process is added when being created, that's from maestro. It can be either at startup
 464        *          time (and then in PID order), or in response to a process_create simcall. Since simcalls are handled
 465        *          in arbitrary order (inductive hypothesis), we are fine.
 466        *        - If a process is added because it's getting killed, its subsequent actions shouldn't matter
 467        *        - If a process gets added to process_to_run because one of their blocking action constituting the meat
 468        *          of a simcall terminates, we're still good. Proof:
 469        *          - You are added from SIMIX_simcall_answer() only. When this function is called depends on the resource
 470        *            kind (network, cpu, disk, whatever), but the same arguments hold. Let's take communications as an example.
 471        *          - For communications, this function is called from SIMIX_comm_finish().
 472        *            This function itself don't mess with the order since simcalls are handled in FIFO order.
 473        *            The function is called:
 474        *            - before the comm starts (invalid parameters, or resource already dead or whatever).
 475        *              The order then trivial holds since maestro didn't interrupt its handling of the simcall yet
 476        *            - because the communication failed or were canceled after startup. In this case, it's called from the function
 477        *              we are in, by the chunk:
 478        *                       set = model->states.failed_action_set;
 479        *                       while ((synchro = xbt_swag_extract(set)))
 480        *                          SIMIX_simcall_post((smx_synchro_t) synchro->data);
 481        *              This order is also fixed because it depends of the order in which the surf actions were
 482        *              added to the system, and only maestro can add stuff this way, through simcalls.
 483        *              We thus use the inductive hypothesis once again to conclude that the order in which synchros are
 484        *              poped out of the swag does not depend on the user code's execution order.
 485        *            - because the communication terminated. In this case, synchros are served in the order given by
 486        *                       set = model->states.done_action_set;
 487        *                       while ((synchro = xbt_swag_extract(set)))
 488        *                          SIMIX_simcall_post((smx_synchro_t) synchro->data);
 489        *              and the argument is very similar to the previous one.
 490        *            So, in any case, the orders of calls to SIMIX_comm_finish() do not depend on the order in which user processes are executed.
 491        *          So, in any cases, the orders of processes within process_to_run do not depend on the order in which user processes were executed previously.
 492        *     So, if there is no killing in the simulation, the simulation reproducibility is not jeopardized.
 493        *   - If there is some process killings, the order is changed by this decision that comes from user-land
 494        *     But this decision may not have been motivated by a situation that were different because the simulation is not reproducible.
 495        *     So, even the order change induced by the process killing is perfectly reproducible.
 496        *
 497        *   So science works, bitches [http://xkcd.com/54/].
 498        *
 499        *   We could sort the process_that_ran array completely so that we can describe the order in which simcalls are handled
 500        *   (like "according to the PID of issuer"), but it's not mandatory (order is fixed already even if unfriendly).
 501        *   That would thus be a pure waste of time.
 502        */
 503
 504       unsigned int iter;
 505       smx_actor_t process;
 506       xbt_dynar_foreach(simix_global->process_that_ran, iter, process) {
 507         if (process->simcall.call != SIMCALL_NONE) {
 508           SIMIX_simcall_handle(&process->simcall, 0);
 509         }
 510       }
 511
 512       SIMIX_execute_tasks();
 513       do {
 514         SIMIX_wake_processes();
 515       } while (SIMIX_execute_tasks());
 516
 517       /* If only daemon processes remain, cancel their actions, mark them to die and reschedule them */
 518       if (simix_global->process_list.size() == simix_global->daemons.size())
 519         for (const auto& dmon : simix_global->daemons) {
 520           XBT_DEBUG("Kill %s", dmon->cname());
 521           SIMIX_process_kill(dmon, simix_global->maestro_process);
 522         }
 523     }
 524
 525     time = SIMIX_timer_next();
 526     if (time > -1.0 || simix_global->process_list.empty() == false) {
 527       XBT_DEBUG("Calling surf_solve");
 528       time = surf_solve(time);
 529       XBT_DEBUG("Moving time ahead : %g", time);
 530     }
 531
 532     /* Notify all the hosts that have failed */
 533     /* FIXME: iterate through the list of failed host and mark each of them */
 534     /* as failed. On each host, signal all the running processes with host_fail */
 535
 536     // Execute timers and tasks until there isn't anything to be done:
 537     bool again = false;
 538     do {
 539       again = SIMIX_execute_timers();
 540       if (SIMIX_execute_tasks())
 541         again = true;
 542       SIMIX_wake_processes();
 543     } while (again);
 544
 545     /* Autorestart all process */
 546     for (auto host: host_that_restart) {
 547       XBT_INFO("Restart processes on host %s", host->cname());
 548       SIMIX_host_autorestart(host);
 549     }
 550     host_that_restart.clear();
 551
 552     /* Clean processes to destroy */
 553     SIMIX_process_empty_trash();
 554
 555     XBT_DEBUG("### time %f, #processes %zu, #to_run %lu", time, simix_global->process_list.size(),
 556               xbt_dynar_length(simix_global->process_to_run));
 557
 558
 559     if (xbt_dynar_is_empty(simix_global->process_to_run) &&
 560         !simix_global->process_list.empty())
 561     simgrid::simix::onDeadlock();
 562
 563   } while (time > -1.0 || !xbt_dynar_is_empty(simix_global->process_to_run));
 564
 565   if (simix_global->process_list.size() != 0) {
 566
 567     TRACE_end();
 568
 569     XBT_CRITICAL("Oops ! Deadlock or code not perfectly clean.");
 570     SIMIX_display_process_status();
 571     xbt_abort();
 572   }
 573   simgrid::s4u::onSimulationEnd();
 574 }
 575
 576 /**
 577  *   \brief Set the date to execute a function
 578  *
 579  * Set the date to execute the function on the surf.
 580  *   \param date Date to execute function
 581  *   \param callback Function to be executed
 582  *   \param arg Parameters of the function
 583  *
 584  */
 585 smx_timer_t SIMIX_timer_set(double date, void (*callback)(void*), void *arg)
 586 {
 587   smx_timer_t timer = new s_smx_timer_t(date, [=](){ callback(arg); });
 588   xbt_heap_push(simix_timers, timer, date);
 589   return timer;
 590 }
 591
 592 smx_timer_t SIMIX_timer_set(double date, simgrid::xbt::Task<void()> callback)
 593 {
 594   smx_timer_t timer = new s_smx_timer_t(date, std::move(callback));
 595   xbt_heap_push(simix_timers, timer, date);
 596   return timer;
 597 }
 598
 599 /** @brief cancels a timer that was added earlier */
 600 void SIMIX_timer_remove(smx_timer_t timer) {
 601   xbt_heap_rm_elm(simix_timers, timer, timer->date);
 602 }
 603
 604 /** @brief Returns the date at which the timer will trigger (or 0 if nullptr timer) */
 605 double SIMIX_timer_get_date(smx_timer_t timer) {
 606   return timer?timer->date:0;
 607 }
 608
 609 /**
 610  * \brief Registers a function to create a process.
 611  *
 612  * This function registers a function to be called
 613  * when a new process is created. The function has
 614  * to call SIMIX_process_create().
 615  * \param function create process function
 616  */
 617 void SIMIX_function_register_process_create(smx_creation_func_t function)
 618 {
 619   simix_global->create_process_function = function;
 620 }
 621
 622 /**
 623  * \brief Registers a function to kill a process.
 624  *
 625  * This function registers a function to be called when a process is killed. The function has to call the
 626  * SIMIX_process_kill().
 627  *
 628  * \param function Kill process function
 629  */
 630 void SIMIX_function_register_process_kill(void_pfn_smxprocess_t function)
 631 {
 632   simix_global->kill_process_function = function;
 633 }
 634
 635 /**
 636  * \brief Registers a function to cleanup a process.
 637  *
 638  * This function registers a user function to be called when a process ends properly.
 639  *
 640  * \param function cleanup process function
 641  */
 642 void SIMIX_function_register_process_cleanup(void_pfn_smxprocess_t function)
 643 {
 644   simix_global->cleanup_process_function = function;
 645 }
 646
 647
 648 void SIMIX_display_process_status()
 649 {
 650   int nbprocess = simix_global->process_list.size();
 651
 652   XBT_INFO("%d processes are still running, waiting for something.", nbprocess);
 653   /*  List the process and their state */
 654   XBT_INFO("Legend of the following listing: \"Process <pid> (<name>@<host>): <status>\"");
 655   for (auto kv : simix_global->process_list) {
 656     smx_actor_t process = kv.second;
 657
 658     if (process->waiting_synchro) {
 659
 660       const char* synchro_description = "unknown";
 661
 662       if (dynamic_cast<simgrid::kernel::activity::Exec*>(process->waiting_synchro) != nullptr)
 663         synchro_description = "execution";
 664
 665       if (dynamic_cast<simgrid::kernel::activity::Comm*>(process->waiting_synchro) != nullptr)
 666         synchro_description = "communication";
 667
 668       if (dynamic_cast<simgrid::kernel::activity::Sleep*>(process->waiting_synchro) != nullptr)
 669         synchro_description = "sleeping";
 670
 671       if (dynamic_cast<simgrid::kernel::activity::Raw*>(process->waiting_synchro) != nullptr)
 672         synchro_description = "synchronization";
 673
 674       if (dynamic_cast<simgrid::kernel::activity::Io*>(process->waiting_synchro) != nullptr)
 675         synchro_description = "I/O";
 676
 677
 678       /*
 679         switch (process->waiting_synchro->type) {
 680       case SIMIX_SYNC_PARALLEL_EXECUTE:
 681         synchro_description = "parallel execution";
 682         break;
 683
 684       case SIMIX_SYNC_JOIN:
 685         synchro_description = "joining";
 686         break;
 687 */
 688
 689       XBT_INFO("Process %lu (%s@%s): waiting for %s synchro %p (%s) in state %d to finish", process->pid,
 690                process->cname(), process->host->cname(), synchro_description, process->waiting_synchro,
 691                process->waiting_synchro->name.c_str(), (int)process->waiting_synchro->state);
 692     }
 693     else {
 694       XBT_INFO("Process %lu (%s@%s)", process->pid, process->cname(), process->host->cname());
 695     }
 696   }
 697 }
 698
 699 int SIMIX_is_maestro()
 700 {
 701   smx_actor_t self = SIMIX_process_self();
 702   return simix_global == nullptr /*SimDag*/ || self == nullptr || self == simix_global->maestro_process;
 703 }