src/mc/api/RemoteApp.cpp

   1 /* Copyright (c) 2015-2022. The SimGrid Team. All rights reserved.          */
   2
   3 /* This program is free software; you can redistribute it and/or modify it
   4  * under the terms of the license (GNU LGPL) which comes with this package. */
   5
   6 #include "src/mc/api/RemoteApp.hpp"
   7 #include "src/internal_config.h" // HAVE_SMPI
   8 #include "src/mc/explo/Exploration.hpp"
   9 #include "src/mc/mc_config.hpp"
  10 #if HAVE_SMPI
  11 #include "smpi/smpi.h"
  12 #include "src/smpi/include/private.hpp"
  13 #endif
  14 #include "src/mc/api/State.hpp"
  15 #include "src/mc/mc_exit.hpp"
  16 #include "src/mc/mc_private.hpp"
  17 #include "xbt/log.h"
  18 #include "xbt/system_error.hpp"
  19
  20 #include "signal.h"
  21 #include <array>
  22 #include <memory>
  23 #include <string>
  24
  25 #include <fcntl.h>
  26 #ifdef __linux__
  27 #include <sys/prctl.h>
  28 #endif
  29
  30 XBT_LOG_NEW_DEFAULT_SUBCATEGORY(mc_Session, mc, "Model-checker session");
  31 XBT_LOG_EXTERNAL_CATEGORY(mc_global);
  32
  33 namespace simgrid::mc {
  34
  35 template <class Code> void run_child_process(int socket, Code code)
  36 {
  37   /* On startup, simix_global_init() calls simgrid::mc::Client::initialize(), which checks whether the MC_ENV_SOCKET_FD
  38    * env variable is set. If so, MC mode is assumed, and the client is setup from its side
  39    */
  40
  41 #ifdef __linux__
  42   // Make sure we do not outlive our parent
  43   sigset_t mask;
  44   sigemptyset(&mask);
  45   xbt_assert(sigprocmask(SIG_SETMASK, &mask, nullptr) >= 0, "Could not unblock signals");
  46   xbt_assert(prctl(PR_SET_PDEATHSIG, SIGHUP) == 0, "Could not PR_SET_PDEATHSIG");
  47 #endif
  48
  49   // Remove CLOEXEC to pass the socket to the application
  50   int fdflags = fcntl(socket, F_GETFD, 0);
  51   xbt_assert(fdflags != -1 && fcntl(socket, F_SETFD, fdflags & ~FD_CLOEXEC) != -1,
  52              "Could not remove CLOEXEC for socket");
  53
  54   setenv(MC_ENV_SOCKET_FD, std::to_string(socket).c_str(), 1);
  55
  56   code();
  57 }
  58
  59 RemoteApp::RemoteApp(const std::function<void()>& code)
  60 {
  61 #if HAVE_SMPI
  62   smpi_init_options(); // only performed once
  63   xbt_assert(smpi_cfg_privatization() != SmpiPrivStrategies::MMAP,
  64              "Please use the dlopen privatization schema when model-checking SMPI code");
  65 #endif
  66
  67   // Create an AF_LOCAL socketpair used for exchanging messages
  68   // between the model-checker process (ourselves) and the model-checked
  69   // process:
  70   int sockets[2];
  71   xbt_assert(socketpair(AF_LOCAL, SOCK_SEQPACKET | SOCK_CLOEXEC, 0, sockets) != -1, "Could not create socketpair");
  72
  73   pid_t pid = fork();
  74   xbt_assert(pid >= 0, "Could not fork model-checked process");
  75
  76   if (pid == 0) { // Child
  77     ::close(sockets[1]);
  78     run_child_process(sockets[0], code);
  79     DIE_IMPOSSIBLE;
  80   }
  81
  82   // Parent (model-checker):
  83   ::close(sockets[0]);
  84
  85   xbt_assert(mc_model_checker == nullptr, "Did you manage to start the MC twice in this process?");
  86
  87   auto process   = std::make_unique<simgrid::mc::RemoteProcess>(pid);
  88   model_checker_ = std::make_unique<simgrid::mc::ModelChecker>(std::move(process), sockets[1]);
  89
  90   mc_model_checker = model_checker_.get();
  91   model_checker_->start();
  92
  93   /* Take the initial snapshot */
  94   model_checker_->wait_for_requests();
  95   initial_snapshot_ = std::make_shared<simgrid::mc::Snapshot>(0);
  96 }
  97
  98 RemoteApp::~RemoteApp()
  99 {
 100   this->close();
 101 }
 102
 103 void RemoteApp::restore_initial_state() const
 104 {
 105   this->initial_snapshot_->restore(&model_checker_->get_remote_process());
 106 }
 107
 108 void RemoteApp::log_state() const
 109 {
 110   model_checker_->get_exploration()->log_state();
 111
 112   if (not _sg_mc_dot_output_file.get().empty()) {
 113     fprintf(dot_output, "}\n");
 114     fclose(dot_output);
 115   }
 116   if (getenv("SIMGRID_MC_SYSTEM_STATISTICS")) {
 117     int ret = system("free");
 118     if (ret != 0)
 119       XBT_WARN("Call to system(free) did not return 0, but %d", ret);
 120   }
 121 }
 122
 123 void RemoteApp::close()
 124 {
 125   initial_snapshot_ = nullptr;
 126   if (model_checker_) {
 127     model_checker_->shutdown();
 128     model_checker_   = nullptr;
 129     mc_model_checker = nullptr;
 130   }
 131 }
 132
 133 void RemoteApp::get_actors_status(std::map<aid_t, ActorState>& whereto)
 134 {
 135   s_mc_message_t msg;
 136   memset(&msg, 0, sizeof msg);
 137   msg.type = simgrid::mc::MessageType::ACTORS_STATUS;
 138   model_checker_->channel().send(msg);
 139
 140   s_mc_message_actors_status_answer_t answer;
 141   ssize_t received = model_checker_->channel().receive(answer);
 142   xbt_assert(received != -1, "Could not receive message");
 143   xbt_assert(received == sizeof(answer) && answer.type == MessageType::ACTORS_STATUS_REPLY,
 144              "Received unexpected message %s (%i, size=%i) "
 145              "expected MessageType::ACTORS_STATUS_REPLY (%i, size=%i)",
 146              to_c_str(answer.type), (int)answer.type, (int)received, (int)MessageType::ACTORS_STATUS_REPLY,
 147              (int)sizeof(answer));
 148
 149   s_mc_message_actors_status_one_t status[answer.count];
 150   received = model_checker_->channel().receive(&status, sizeof(status));
 151   xbt_assert(static_cast<size_t>(received) == sizeof(status));
 152
 153   whereto.clear();
 154   for (auto const& actor : status)
 155     whereto.insert(std::make_pair(actor.aid, ActorState(actor.aid, actor.enabled, actor.max_considered)));
 156 }
 157
 158 void RemoteApp::check_deadlock() const
 159 {
 160   xbt_assert(model_checker_->channel().send(MessageType::DEADLOCK_CHECK) == 0, "Could not check deadlock state");
 161   s_mc_message_int_t message;
 162   ssize_t s = model_checker_->channel().receive(message);
 163   xbt_assert(s != -1, "Could not receive message");
 164   xbt_assert(s == sizeof(message) && message.type == MessageType::DEADLOCK_CHECK_REPLY,
 165              "Received unexpected message %s (%i, size=%i) "
 166              "expected MessageType::DEADLOCK_CHECK_REPLY (%i, size=%i)",
 167              to_c_str(message.type), (int)message.type, (int)s, (int)MessageType::DEADLOCK_CHECK_REPLY,
 168              (int)sizeof(message));
 169
 170   if (message.value != 0) {
 171     XBT_CINFO(mc_global, "**************************");
 172     XBT_CINFO(mc_global, "*** DEADLOCK DETECTED ***");
 173     XBT_CINFO(mc_global, "**************************");
 174     XBT_CINFO(mc_global, "Counter-example execution trace:");
 175     for (auto const& frame : model_checker_->get_exploration()->get_textual_trace())
 176       XBT_CINFO(mc_global, "  %s", frame.c_str());
 177     XBT_CINFO(mc_global, "Path = %s", model_checker_->get_exploration()->get_record_trace().to_string().c_str());
 178     log_state();
 179     throw DeadlockError();
 180   }
 181 }
 182 } // namespace simgrid::mc