src/plugins/vm/VirtualMachineImpl.cpp

   1 /* Copyright (c) 2013-2015. The SimGrid Team.
   2  * All rights reserved.                                                     */
   3
   4 /* This program is free software; you can redistribute it and/or modify it
   5  * under the terms of the license (GNU LGPL) which comes with this package. */
   6
   7 #include "src/plugins/vm/VirtualMachineImpl.hpp"
   8 #include "simgrid/s4u/VirtualMachine.hpp"
   9 #include "src/simix/ActorImpl.hpp"
  10 #include "src/simix/smx_host_private.h"
  11
  12 #include <xbt/signal.hpp>
  13
  14 #include "src/surf/cpu_cas01.hpp"
  15
  16 XBT_LOG_NEW_DEFAULT_SUBCATEGORY(surf_vm, surf, "Logging specific to the SURF VM module");
  17
  18 simgrid::vm::VMModel* surf_vm_model = nullptr;
  19
  20 void surf_vm_model_init_HL13()
  21 {
  22   if (surf_cpu_model_vm) {
  23     surf_vm_model = new simgrid::vm::VMModel();
  24     all_existing_models->push_back(surf_vm_model);
  25   }
  26 }
  27
  28 namespace simgrid {
  29 namespace vm {
  30
  31 /*************
  32  * Callbacks *
  33  *************/
  34
  35 simgrid::xbt::signal<void(simgrid::vm::VirtualMachineImpl*)> onVmCreation;
  36 simgrid::xbt::signal<void(simgrid::vm::VirtualMachineImpl*)> onVmDestruction;
  37 simgrid::xbt::signal<void(simgrid::vm::VirtualMachineImpl*)> onVmStateChange;
  38
  39 /*********
  40  * Model *
  41  *********/
  42
  43 std::deque<s4u::VirtualMachine*> VirtualMachineImpl::allVms_;
  44
  45 /* In the real world, processes on the guest operating system will be somewhat degraded due to virtualization overhead.
  46  * The total CPU share these processes get is smaller than that of the VM process gets on a host operating system. */
  47 // const double virt_overhead = 0.95;
  48 const double virt_overhead = 1;
  49
  50 double VMModel::nextOccuringEvent(double now)
  51 {
  52   /* TODO: update action's cost with the total cost of processes on the VM. */
  53
  54   /* 1. Now we know how many resource should be assigned to each virtual
  55    * machine. We update constraints of the virtual machine layer.
  56    *
  57    * If we have two virtual machine (VM1 and VM2) on a physical machine (PM1).
  58    *     X1 + X2 = C       (Equation 1)
  59    * where
  60    *    the resource share of VM1: X1
  61    *    the resource share of VM2: X2
  62    *    the capacity of PM1: C
  63    *
  64    * Then, if we have two process (P1 and P2) on VM1.
  65    *     X1_1 + X1_2 = X1  (Equation 2)
  66    * where
  67    *    the resource share of P1: X1_1
  68    *    the resource share of P2: X1_2
  69    *    the capacity of VM1: X1
  70    *
  71    * Equation 1 was solved in the physical machine layer.
  72    * Equation 2 is solved in the virtual machine layer (here).
  73    * X1 must be passed to the virtual machine laye as a constraint value.
  74    **/
  75
  76   /* iterate for all virtual machines */
  77   for (s4u::VirtualMachine* ws_vm : VirtualMachineImpl::allVms_) {
  78     surf::Cpu* cpu = ws_vm->pimpl_cpu;
  79     xbt_assert(cpu, "cpu-less host");
  80
  81     double solved_value = ws_vm->pimpl_vm_->action_->getVariable()->value;
  82     XBT_DEBUG("assign %f to vm %s @ pm %s", solved_value, ws_vm->cname(), ws_vm->pimpl_vm_->getPm()->cname());
  83
  84     // TODO: check lmm_update_constraint_bound() works fine instead of the below manual substitution.
  85     // cpu_cas01->constraint->bound = solved_value;
  86     xbt_assert(cpu->getModel() == surf_cpu_model_vm);
  87     lmm_system_t vcpu_system = cpu->getModel()->getMaxminSystem();
  88     lmm_update_constraint_bound(vcpu_system, cpu->getConstraint(), virt_overhead * solved_value);
  89   }
  90
  91   /* 2. Calculate resource share at the virtual machine layer. */
  92   adjustWeightOfDummyCpuActions();
  93
  94   /* 3. Ready. Get the next occuring event */
  95   return surf_cpu_model_vm->nextOccuringEvent(now);
  96 }
  97
  98 /************
  99  * Resource *
 100  ************/
 101
 102 VirtualMachineImpl::VirtualMachineImpl(simgrid::s4u::VirtualMachine* piface, simgrid::s4u::Host* host_PM)
 103     : HostImpl(piface, nullptr /*storage*/), hostPM_(host_PM)
 104 {
 105   /* Register this VM to the list of all VMs */
 106   allVms_.push_back(piface);
 107
 108   /* We create cpu_action corresponding to a VM process on the host operating system. */
 109   /* FIXME: TODO: we have to periodically input GUESTOS_NOISE to the system? how ? */
 110   action_ = host_PM->pimpl_cpu->execution_start(0);
 111
 112   /* Initialize the VM parameters */
 113   params_.ramsize = 0;
 114
 115   XBT_VERB("Create VM(%s)@PM(%s)", piface->cname(), hostPM_->cname());
 116 }
 117
 118 extern "C" int
 119     xbt_log_no_loc; /* ugly pimpl to ensure that the debug info in the known issue below don't break the test */
 120 /** @brief A physical host does not disappear in the current SimGrid code, but a VM may disappear during a simulation */
 121 VirtualMachineImpl::~VirtualMachineImpl()
 122 {
 123   onVmDestruction(this);
 124   allVms_.erase(find(allVms_.begin(), allVms_.end(), piface_));
 125
 126   /* dirty page tracking */
 127   unsigned int size          = xbt_dict_size(dp_objs);
 128   static bool already_warned = false;
 129   if (size > 0 && !already_warned) {
 130     xbt_dict_cursor_t cursor = nullptr;
 131     xbt_dict_cursor_first(dp_objs, &cursor);
 132     XBT_WARN("Dirty page tracking: %u pending task(s) on a destroyed VM (first one is %s).\n"
 133              "If you don't understand why your task was not properly removed, please report that bug.\n"
 134              "This is a known bug if you turned the host off during the VM execution.\n"
 135              "Please remind us of that problem at some point: our code base is not ready to fix this harmless issue in "
 136              "2016, sorry.",
 137              size, (xbt_log_no_loc ? "(name hidden)" : xbt_dict_cursor_get_key(cursor)));
 138     xbt_dict_cursor_free(&cursor);
 139     already_warned = true;
 140   }
 141   xbt_dict_free(&dp_objs);
 142
 143   /* Free the cpu_action of the VM. */
 144   XBT_ATTRIB_UNUSED int ret = action_->unref();
 145   xbt_assert(ret == 1, "Bug: some resource still remains");
 146 }
 147
 148 e_surf_vm_state_t VirtualMachineImpl::getState()
 149 {
 150   return vmState_;
 151 }
 152
 153 void VirtualMachineImpl::setState(e_surf_vm_state_t state)
 154 {
 155   vmState_ = state;
 156 }
 157 void VirtualMachineImpl::suspend()
 158 {
 159   action_->suspend();
 160   vmState_ = SURF_VM_STATE_SUSPENDED;
 161 }
 162
 163 void VirtualMachineImpl::resume()
 164 {
 165   if (getState() != SURF_VM_STATE_SUSPENDED)
 166     THROWF(vm_error, 0, "Cannot resume VM %s: it was not suspended", piface_->cname());
 167
 168   xbt_swag_t process_list = piface_->extension<simgrid::simix::Host>()->process_list;
 169   XBT_DEBUG("Resume VM %s, containing %d processes.", piface_->cname(), xbt_swag_size(process_list));
 170
 171   action_->resume();
 172
 173   smx_actor_t smx_process, smx_process_safe;
 174   xbt_swag_foreach_safe(smx_process, smx_process_safe, process_list) {
 175     XBT_DEBUG("resume %s", smx_process->cname());
 176     SIMIX_process_resume(smx_process);
 177   }
 178
 179   vmState_ = SURF_VM_STATE_RUNNING;
 180 }
 181
 182 /**
 183  * @brief Function to save a VM.
 184  * This function is the same as vm_suspend, but the state of the VM is saved to the disk, and not preserved in memory.
 185  * We can later restore it again.
 186  *
 187  * @param issuer the process requesting this operation
 188  */
 189 void VirtualMachineImpl::save(smx_actor_t issuer)
 190 {
 191   if (isMigrating)
 192     THROWF(vm_error, 0, "Cannot save VM %s: it is migrating.", piface_->cname());
 193
 194   if (getState() != SURF_VM_STATE_RUNNING)
 195     THROWF(vm_error, 0, "Cannot save VM %s: it is not running.", piface_->cname());
 196
 197   xbt_swag_t process_list = piface_->extension<simgrid::simix::Host>()->process_list;
 198
 199   XBT_DEBUG("Save VM %s, where %d processes exist", piface_->cname(), xbt_swag_size(process_list));
 200
 201   vmState_ = SURF_VM_STATE_SAVING;
 202   action_->suspend();
 203   vmState_ = SURF_VM_STATE_SAVED;
 204
 205   smx_actor_t smx_process, smx_process_safe;
 206   xbt_swag_foreach_safe(smx_process, smx_process_safe, process_list) {
 207     XBT_DEBUG("suspend %s", smx_process->cname());
 208     SIMIX_process_suspend(smx_process, issuer);
 209   }
 210 }
 211
 212 void VirtualMachineImpl::restore()
 213 {
 214   if (getState() != SURF_VM_STATE_SAVED)
 215     THROWF(vm_error, 0, "Cannot restore VM %s: it was not saved", piface_->cname());
 216
 217   xbt_swag_t process_list = piface_->extension<simgrid::simix::Host>()->process_list;
 218   XBT_DEBUG("Restore VM %s, where %d processes exist", piface_->cname(), xbt_swag_size(process_list));
 219
 220   vmState_ = SURF_VM_STATE_RESTORING;
 221   action_->resume();
 222   vmState_ = SURF_VM_STATE_RUNNING;
 223
 224   smx_actor_t smx_process, smx_process_safe;
 225   xbt_swag_foreach_safe(smx_process, smx_process_safe, process_list) {
 226     XBT_DEBUG("resume %s", smx_process->cname());
 227     SIMIX_process_resume(smx_process);
 228   }
 229 }
 230
 231 /** @brief returns the physical machine on which the VM is running **/
 232 s4u::Host* VirtualMachineImpl::getPm()
 233 {
 234   return hostPM_;
 235 }
 236
 237 /* Update the physical host of the given VM */
 238 void VirtualMachineImpl::migrate(s4u::Host* host_dest)
 239 {
 240   const char* vm_name     = piface_->cname();
 241   const char* pm_name_src = hostPM_->cname();
 242   const char* pm_name_dst = host_dest->cname();
 243
 244   /* update net_elm with that of the destination physical host */
 245   piface_->pimpl_netcard = host_dest->pimpl_netcard;
 246
 247   hostPM_ = host_dest;
 248
 249   /* Update vcpu's action for the new pm */
 250   /* create a cpu action bound to the pm model at the destination. */
 251   surf::CpuAction* new_cpu_action = static_cast<surf::CpuAction*>(host_dest->pimpl_cpu->execution_start(0));
 252
 253   surf::Action::State state = action_->getState();
 254   if (state != surf::Action::State::done)
 255     XBT_CRITICAL("FIXME: may need a proper handling, %d", static_cast<int>(state));
 256   if (action_->getRemainsNoUpdate() > 0)
 257     XBT_CRITICAL("FIXME: need copy the state(?), %f", action_->getRemainsNoUpdate());
 258
 259   /* keep the bound value of the cpu action of the VM. */
 260   double old_bound = action_->getBound();
 261   if (old_bound != 0) {
 262     XBT_DEBUG("migrate VM(%s): set bound (%f) at %s", vm_name, old_bound, pm_name_dst);
 263     new_cpu_action->setBound(old_bound);
 264   }
 265
 266   XBT_ATTRIB_UNUSED int ret = action_->unref();
 267   xbt_assert(ret == 1, "Bug: some resource still remains");
 268
 269   action_ = new_cpu_action;
 270
 271   XBT_DEBUG("migrate VM(%s): change PM (%s to %s)", vm_name, pm_name_src, pm_name_dst);
 272 }
 273
 274 sg_size_t VirtualMachineImpl::getRamsize()
 275 {
 276   return params_.ramsize;
 277 }
 278
 279 void VirtualMachineImpl::setBound(double bound)
 280 {
 281   action_->setBound(bound);
 282 }
 283
 284 void VirtualMachineImpl::getParams(vm_params_t params)
 285 {
 286   *params = params_;
 287 }
 288
 289 void VirtualMachineImpl::setParams(vm_params_t params)
 290 {
 291   /* may check something here. */
 292   params_ = *params;
 293 }
 294 }
 295 }