src/surf/HostImpl.cpp

   1 /* Copyright (c) 2013-2016. The SimGrid Team. All rights reserved.          */
   2
   3 /* This program is free software; you can redistribute it and/or modify it
   4  * under the terms of the license (GNU LGPL) which comes with this package. */
   5
   6 #include "src/plugins/vm/VirtualMachineImpl.hpp"
   7 #include <string>
   8
   9 XBT_LOG_NEW_DEFAULT_SUBCATEGORY(surf_host, surf, "Logging specific to the SURF host module");
  10
  11 simgrid::surf::HostModel *surf_host_model = nullptr;
  12
  13 /*************
  14  * Callbacks *
  15  *************/
  16
  17 namespace simgrid {
  18 namespace surf {
  19
  20 /*********
  21  * Model *
  22  *********/
  23
  24 /* Each VM has a dummy CPU action on the PM layer. This CPU action works as the
  25  * constraint (capacity) of the VM in the PM layer. If the VM does not have any
  26  * active task, the dummy CPU action must be deactivated, so that the VM does
  27  * not get any CPU share in the PM layer. */
  28 void HostModel::ignoreEmptyVmInPmLMM()
  29 {
  30   /* iterate for all virtual machines */
  31   for (s4u::VirtualMachine* ws_vm : vm::VirtualMachineImpl::allVms_) {
  32     Cpu* cpu = ws_vm->pimpl_cpu;
  33     int active_tasks = lmm_constraint_get_variable_amount(cpu->constraint());
  34
  35     /* The impact of the VM over its PM is the min between its vCPU amount and the amount of tasks it contains */
  36     int impact = std::min(active_tasks, ws_vm->pimpl_vm_->coreAmount());
  37
  38     XBT_DEBUG("set the weight of the dummy CPU action of VM%p on PM to %d (#tasks: %d)", ws_vm, impact, active_tasks);
  39     ws_vm->pimpl_vm_->action_->setPriority(impact);
  40   }
  41 }
  42
  43 /* Helper function for executeParallelTask */
  44 static inline double has_cost(double* array, int pos)
  45 {
  46   if (array)
  47     return array[pos];
  48   else
  49     return -1.0;
  50 }
  51 Action* HostModel::executeParallelTask(int host_nb, simgrid::s4u::Host** host_list, double* flops_amount,
  52     double* bytes_amount, double rate)
  53 {
  54   Action* action = nullptr;
  55   if ((host_nb == 1) && (has_cost(bytes_amount, 0) <= 0)) {
  56     action = host_list[0]->pimpl_cpu->execution_start(flops_amount[0]);
  57   } else if ((host_nb == 1) && (has_cost(flops_amount, 0) <= 0)) {
  58     action = surf_network_model->communicate(host_list[0], host_list[0], bytes_amount[0], rate);
  59   } else if ((host_nb == 2) && (has_cost(flops_amount, 0) <= 0) && (has_cost(flops_amount, 1) <= 0)) {
  60     int nb = 0;
  61     double value = 0.0;
  62
  63     for (int i = 0; i < host_nb * host_nb; i++) {
  64       if (has_cost(bytes_amount, i) > 0.0) {
  65         nb++;
  66         value = has_cost(bytes_amount, i);
  67       }
  68     }
  69     if (nb == 1) {
  70       action = surf_network_model->communicate(host_list[0], host_list[1], value, rate);
  71     } else if (nb == 0) {
  72       xbt_die("Cannot have a communication with no flop to exchange in this model. You should consider using the "
  73           "ptask model");
  74     } else {
  75       xbt_die("Cannot have a communication that is not a simple point-to-point in this model. You should consider "
  76           "using the ptask model");
  77     }
  78   } else
  79     xbt_die(
  80         "This model only accepts one of the following. You should consider using the ptask model for the other cases.\n"
  81         " - execution with one host only and no communication\n"
  82         " - Self-comms with one host only\n"
  83         " - Communications with two hosts and no computation");
  84   xbt_free(host_list);
  85   return action;
  86 }
  87
  88 /************
  89  * Resource *
  90  ************/
  91 HostImpl::HostImpl(s4u::Host* host) : piface_(host)
  92 {
  93   /* The VM wants to reinstall a new HostImpl, but we don't want to leak the previously existing one */
  94   delete piface_->pimpl_;
  95   piface_->pimpl_ = this;
  96 }
  97
  98 simgrid::surf::StorageImpl* HostImpl::findStorageOnMountList(const char* mount)
  99 {
 100   XBT_DEBUG("Search for storage name '%s' on '%s'", mount, piface_->cname());
 101   if (storage_.find(mount) == storage_.end())
 102     xbt_die("Can't find mount '%s' for '%s'", mount, piface_->cname());
 103
 104   return storage_.at(mount);
 105 }
 106
 107 xbt_dict_t HostImpl::getMountedStorageList()
 108 {
 109   xbt_dict_t storage_list = xbt_dict_new_homogeneous(nullptr);
 110   char* storage_name      = nullptr;
 111
 112   for (auto mnt : storage_) {
 113     storage_name = (char*)mnt.second->cname();
 114     xbt_dict_set(storage_list, mnt.first.c_str(), storage_name, nullptr);
 115   }
 116   return storage_list;
 117 }
 118
 119 void HostImpl::getAttachedStorageList(std::vector<const char*>* storages)
 120 {
 121   for (auto s : storage_)
 122     if (not strcmp(static_cast<const char*>(s.second->attach_), piface_->cname()))
 123       storages->push_back(s.second->piface_.name());
 124 }
 125
 126 Action* HostImpl::open(const char* fullpath)
 127 {
 128   simgrid::surf::StorageImpl* st = nullptr;
 129   size_t longest_prefix_length = 0;
 130   std::string path;
 131   std::string mount_name;
 132
 133   XBT_DEBUG("Search for storage name for '%s' on '%s'", fullpath, piface_->cname());
 134   for (auto mnt : storage_) {
 135     XBT_DEBUG("See '%s'", mnt.first.c_str());
 136     std::string file_mount_name = std::string(fullpath).substr(0, mnt.first.size());
 137
 138     if (file_mount_name == mnt.first && mnt.first.length() > longest_prefix_length) {
 139       /* The current mount name is found in the full path and is bigger than the previous*/
 140       longest_prefix_length = mnt.first.length();
 141       st                    = mnt.second;
 142     }
 143   }
 144   if (longest_prefix_length > 0) { /* Mount point found, split fullpath into mount_name and path+filename*/
 145     mount_name = std::string(fullpath).substr(0, longest_prefix_length);
 146     path       = std::string(fullpath).substr(longest_prefix_length, strlen(fullpath));
 147   } else
 148     xbt_die("Can't find mount point for '%s' on '%s'", fullpath, piface_->cname());
 149
 150   XBT_DEBUG("OPEN %s on disk '%s'", path.c_str(), st->cname());
 151   Action* action = st->open(mount_name.c_str(), path.c_str());
 152   return action;
 153 }
 154
 155 Action* HostImpl::close(surf_file_t fd)
 156 {
 157   simgrid::surf::StorageImpl* st = findStorageOnMountList(fd->mount);
 158   XBT_DEBUG("CLOSE %s on disk '%s'", fd->name, st->cname());
 159   return st->close(fd);
 160 }
 161
 162 Action* HostImpl::read(surf_file_t fd, sg_size_t size)
 163 {
 164   simgrid::surf::StorageImpl* st = findStorageOnMountList(fd->mount);
 165   XBT_DEBUG("READ %s on disk '%s'", fd->name, st->cname());
 166   return st->read(fd, size);
 167 }
 168
 169 Action* HostImpl::write(surf_file_t fd, sg_size_t size)
 170 {
 171   simgrid::surf::StorageImpl* st = findStorageOnMountList(fd->mount);
 172   XBT_DEBUG("WRITE %s on disk '%s'", fd->name, st->cname());
 173   return st->write(fd, size);
 174 }
 175
 176 int HostImpl::unlink(surf_file_t fd)
 177 {
 178   if (not fd) {
 179     XBT_WARN("No such file descriptor. Impossible to unlink");
 180     return -1;
 181   } else {
 182
 183     simgrid::surf::StorageImpl* st = findStorageOnMountList(fd->mount);
 184     /* Check if the file is on this storage */
 185     if (st->content_->find(fd->name) == st->content_->end()) {
 186       XBT_WARN("File %s is not on disk %s. Impossible to unlink", fd->name, st->cname());
 187       return -1;
 188     } else {
 189       XBT_DEBUG("UNLINK %s on disk '%s'", fd->name, st->cname());
 190       st->usedSize_ -= fd->size;
 191
 192       // Remove the file from storage
 193       sg_size_t* psize = st->content_->at(fd->name);
 194       delete psize;
 195       st->content_->erase(fd->name);
 196
 197       xbt_free(fd->name);
 198       xbt_free(fd->mount);
 199       xbt_free(fd);
 200       return 0;
 201     }
 202   }
 203 }
 204
 205 sg_size_t HostImpl::getSize(surf_file_t fd)
 206 {
 207   return fd->size;
 208 }
 209
 210 xbt_dynar_t HostImpl::getInfo(surf_file_t fd)
 211 {
 212   simgrid::surf::StorageImpl* st = findStorageOnMountList(fd->mount);
 213   sg_size_t* psize           = xbt_new(sg_size_t, 1);
 214   *psize                     = fd->size;
 215   xbt_dynar_t info           = xbt_dynar_new(sizeof(void*), nullptr);
 216   xbt_dynar_push_as(info, sg_size_t*, psize);
 217   xbt_dynar_push_as(info, void*, fd->mount);
 218   xbt_dynar_push_as(info, void*, (void*)st->cname());
 219   xbt_dynar_push_as(info, void*, st->typeId_);
 220
 221   return info;
 222 }
 223
 224 sg_size_t HostImpl::fileTell(surf_file_t fd)
 225 {
 226   return fd->current_position;
 227 }
 228
 229 int HostImpl::fileSeek(surf_file_t fd, sg_offset_t offset, int origin)
 230 {
 231   switch (origin) {
 232   case SEEK_SET:
 233     fd->current_position = offset;
 234     return 0;
 235   case SEEK_CUR:
 236     fd->current_position += offset;
 237     return 0;
 238   case SEEK_END:
 239     fd->current_position = fd->size + offset;
 240     return 0;
 241   default:
 242     return -1;
 243   }
 244 }
 245
 246 int HostImpl::fileMove(surf_file_t fd, const char* fullpath)
 247 {
 248   /* Check if the new full path is on the same mount point */
 249   if (not strncmp((const char*)fd->mount, fullpath, strlen(fd->mount))) {
 250     std::map<std::string, sg_size_t*>* content = findStorageOnMountList(fd->mount)->content_;
 251     if (content->find(fd->name) != content->end()) { // src file exists
 252       sg_size_t* psize     = content->at(std::string(fd->name));
 253       sg_size_t* new_psize = new sg_size_t;
 254       *new_psize           = *psize;
 255       delete psize;
 256       content->erase(fd->name);
 257       std::string path = std::string(fullpath).substr(strlen(fd->mount), strlen(fullpath));
 258       content->insert({path.c_str(), new_psize});
 259       XBT_DEBUG("Move file from %s to %s, size '%llu'", fd->name, fullpath, *psize);
 260       return 0;
 261     } else {
 262       XBT_WARN("File %s doesn't exist", fd->name);
 263       return -1;
 264     }
 265   } else {
 266     XBT_WARN("New full path %s is not on the same mount point: %s. Action has been canceled.", fullpath, fd->mount);
 267     return -1;
 268   }
 269 }
 270
 271 }
 272 }