src/surf/HostImpl.cpp

   1 /* Copyright (c) 2013-2016. The SimGrid Team. All rights reserved.          */
   2
   3 /* This program is free software; you can redistribute it and/or modify it
   4  * under the terms of the license (GNU LGPL) which comes with this package. */
   5
   6 #include "src/plugins/vm/VirtualMachineImpl.hpp"
   7 #include <string>
   8
   9 XBT_LOG_NEW_DEFAULT_SUBCATEGORY(surf_host, surf, "Logging specific to the SURF host module");
  10
  11 simgrid::surf::HostModel *surf_host_model = nullptr;
  12
  13 /*************
  14  * Callbacks *
  15  *************/
  16
  17 namespace simgrid {
  18 namespace surf {
  19
  20 /*********
  21  * Model *
  22  *********/
  23
  24 /* Each VM has a dummy CPU action on the PM layer. This CPU action works as the
  25  * constraint (capacity) of the VM in the PM layer. If the VM does not have any
  26  * active task, the dummy CPU action must be deactivated, so that the VM does
  27  * not get any CPU share in the PM layer. */
  28 void HostModel::ignoreEmptyVmInPmLMM()
  29 {
  30   /* iterate for all virtual machines */
  31   for (s4u::VirtualMachine* ws_vm : vm::VirtualMachineImpl::allVms_) {
  32
  33     Cpu* cpu = ws_vm->pimpl_cpu;
  34
  35     int is_active = lmm_constraint_used(cpu->model()->getMaxminSystem(), cpu->constraint());
  36
  37     if (is_active) {
  38       /* some tasks exist on this VM */
  39       XBT_DEBUG("set the weight of the dummy CPU action on PM to 1");
  40
  41       /* FIXME: If we assign 1.05 and 0.05, the system makes apparently wrong values. */
  42       ws_vm->pimpl_vm_->action_->setPriority(1);
  43
  44     } else {
  45       /* no task exist on this VM */
  46       XBT_DEBUG("set the weight of the dummy CPU action on PM to 0");
  47
  48       ws_vm->pimpl_vm_->action_->setPriority(0);
  49     }
  50   }
  51 }
  52
  53 /* Helper function for executeParallelTask */
  54 static inline double has_cost(double* array, int pos)
  55 {
  56   if (array)
  57     return array[pos];
  58   else
  59     return -1.0;
  60 }
  61 Action* HostModel::executeParallelTask(int host_nb, simgrid::s4u::Host** host_list, double* flops_amount,
  62     double* bytes_amount, double rate)
  63 {
  64   Action* action = nullptr;
  65   if ((host_nb == 1) && (has_cost(bytes_amount, 0) <= 0)) {
  66     action = host_list[0]->pimpl_cpu->execution_start(flops_amount[0]);
  67   } else if ((host_nb == 1) && (has_cost(flops_amount, 0) <= 0)) {
  68     action = surf_network_model->communicate(host_list[0], host_list[0], bytes_amount[0], rate);
  69   } else if ((host_nb == 2) && (has_cost(flops_amount, 0) <= 0) && (has_cost(flops_amount, 1) <= 0)) {
  70     int nb = 0;
  71     double value = 0.0;
  72
  73     for (int i = 0; i < host_nb * host_nb; i++) {
  74       if (has_cost(bytes_amount, i) > 0.0) {
  75         nb++;
  76         value = has_cost(bytes_amount, i);
  77       }
  78     }
  79     if (nb == 1) {
  80       action = surf_network_model->communicate(host_list[0], host_list[1], value, rate);
  81     } else if (nb == 0) {
  82       xbt_die("Cannot have a communication with no flop to exchange in this model. You should consider using the "
  83           "ptask model");
  84     } else {
  85       xbt_die("Cannot have a communication that is not a simple point-to-point in this model. You should consider "
  86           "using the ptask model");
  87     }
  88   } else
  89     xbt_die(
  90         "This model only accepts one of the following. You should consider using the ptask model for the other cases.\n"
  91         " - execution with one host only and no communication\n"
  92         " - Self-comms with one host only\n"
  93         " - Communications with two hosts and no computation");
  94   xbt_free(host_list);
  95   return action;
  96 }
  97
  98 /************
  99  * Resource *
 100  ************/
 101 HostImpl::HostImpl(s4u::Host* host) : piface_(host)
 102 {
 103   /* The VM wants to reinstall a new HostImpl, but we don't want to leak the previously existing one */
 104   delete piface_->pimpl_;
 105   piface_->pimpl_ = this;
 106 }
 107
 108 simgrid::surf::StorageImpl* HostImpl::findStorageOnMountList(const char* mount)
 109 {
 110   XBT_DEBUG("Search for storage name '%s' on '%s'", mount, piface_->cname());
 111   if (storage_.find(mount) == storage_.end())
 112     xbt_die("Can't find mount '%s' for '%s'", mount, piface_->cname());
 113
 114   return storage_.at(mount);
 115 }
 116
 117 xbt_dict_t HostImpl::getMountedStorageList()
 118 {
 119   xbt_dict_t storage_list = xbt_dict_new_homogeneous(nullptr);
 120   char* storage_name      = nullptr;
 121
 122   for (auto mnt : storage_) {
 123     storage_name = (char*)mnt.second->cname();
 124     xbt_dict_set(storage_list, mnt.first.c_str(), storage_name, nullptr);
 125   }
 126   return storage_list;
 127 }
 128
 129 void HostImpl::getAttachedStorageList(std::vector<const char*>* storages)
 130 {
 131   for (auto s : storage_)
 132     if (not strcmp(static_cast<const char*>(s.second->attach_), piface_->cname()))
 133       storages->push_back(s.second->piface_.name());
 134 }
 135
 136 Action* HostImpl::open(const char* fullpath)
 137 {
 138   simgrid::surf::StorageImpl* st = nullptr;
 139   size_t longest_prefix_length = 0;
 140   std::string path;
 141   std::string mount_name;
 142
 143   XBT_DEBUG("Search for storage name for '%s' on '%s'", fullpath, piface_->cname());
 144   for (auto mnt : storage_) {
 145     XBT_DEBUG("See '%s'", mnt.first.c_str());
 146     std::string file_mount_name = std::string(fullpath).substr(0, mnt.first.size());
 147
 148     if (file_mount_name == mnt.first && mnt.first.length() > longest_prefix_length) {
 149       /* The current mount name is found in the full path and is bigger than the previous*/
 150       longest_prefix_length = mnt.first.length();
 151       st                    = mnt.second;
 152     }
 153   }
 154   if (longest_prefix_length > 0) { /* Mount point found, split fullpath into mount_name and path+filename*/
 155     mount_name = std::string(fullpath).substr(0, longest_prefix_length);
 156     path       = std::string(fullpath).substr(longest_prefix_length, strlen(fullpath));
 157   } else
 158     xbt_die("Can't find mount point for '%s' on '%s'", fullpath, piface_->cname());
 159
 160   XBT_DEBUG("OPEN %s on disk '%s'", path.c_str(), st->cname());
 161   Action* action = st->open(mount_name.c_str(), path.c_str());
 162   return action;
 163 }
 164
 165 Action* HostImpl::close(surf_file_t fd)
 166 {
 167   simgrid::surf::StorageImpl* st = findStorageOnMountList(fd->mount);
 168   XBT_DEBUG("CLOSE %s on disk '%s'", fd->name, st->cname());
 169   return st->close(fd);
 170 }
 171
 172 Action* HostImpl::read(surf_file_t fd, sg_size_t size)
 173 {
 174   simgrid::surf::StorageImpl* st = findStorageOnMountList(fd->mount);
 175   XBT_DEBUG("READ %s on disk '%s'", fd->name, st->cname());
 176   return st->read(fd, size);
 177 }
 178
 179 Action* HostImpl::write(surf_file_t fd, sg_size_t size)
 180 {
 181   simgrid::surf::StorageImpl* st = findStorageOnMountList(fd->mount);
 182   XBT_DEBUG("WRITE %s on disk '%s'", fd->name, st->cname());
 183   return st->write(fd, size);
 184 }
 185
 186 int HostImpl::unlink(surf_file_t fd)
 187 {
 188   if (not fd) {
 189     XBT_WARN("No such file descriptor. Impossible to unlink");
 190     return -1;
 191   } else {
 192
 193     simgrid::surf::StorageImpl* st = findStorageOnMountList(fd->mount);
 194     /* Check if the file is on this storage */
 195     if (st->content_->find(fd->name) == st->content_->end()) {
 196       XBT_WARN("File %s is not on disk %s. Impossible to unlink", fd->name, st->cname());
 197       return -1;
 198     } else {
 199       XBT_DEBUG("UNLINK %s on disk '%s'", fd->name, st->cname());
 200       st->usedSize_ -= fd->size;
 201
 202       // Remove the file from storage
 203       sg_size_t* psize = st->content_->at(fd->name);
 204       delete psize;
 205       st->content_->erase(fd->name);
 206
 207       xbt_free(fd->name);
 208       xbt_free(fd->mount);
 209       xbt_free(fd);
 210       return 0;
 211     }
 212   }
 213 }
 214
 215 sg_size_t HostImpl::getSize(surf_file_t fd)
 216 {
 217   return fd->size;
 218 }
 219
 220 xbt_dynar_t HostImpl::getInfo(surf_file_t fd)
 221 {
 222   simgrid::surf::StorageImpl* st = findStorageOnMountList(fd->mount);
 223   sg_size_t* psize           = xbt_new(sg_size_t, 1);
 224   *psize                     = fd->size;
 225   xbt_dynar_t info           = xbt_dynar_new(sizeof(void*), nullptr);
 226   xbt_dynar_push_as(info, sg_size_t*, psize);
 227   xbt_dynar_push_as(info, void*, fd->mount);
 228   xbt_dynar_push_as(info, void*, (void*)st->cname());
 229   xbt_dynar_push_as(info, void*, st->typeId_);
 230
 231   return info;
 232 }
 233
 234 sg_size_t HostImpl::fileTell(surf_file_t fd)
 235 {
 236   return fd->current_position;
 237 }
 238
 239 int HostImpl::fileSeek(surf_file_t fd, sg_offset_t offset, int origin)
 240 {
 241   switch (origin) {
 242   case SEEK_SET:
 243     fd->current_position = offset;
 244     return 0;
 245   case SEEK_CUR:
 246     fd->current_position += offset;
 247     return 0;
 248   case SEEK_END:
 249     fd->current_position = fd->size + offset;
 250     return 0;
 251   default:
 252     return -1;
 253   }
 254 }
 255
 256 int HostImpl::fileMove(surf_file_t fd, const char* fullpath)
 257 {
 258   /* Check if the new full path is on the same mount point */
 259   if (not strncmp((const char*)fd->mount, fullpath, strlen(fd->mount))) {
 260     std::map<std::string, sg_size_t*>* content = findStorageOnMountList(fd->mount)->content_;
 261     if (content->find(fd->name) != content->end()) { // src file exists
 262       sg_size_t* psize     = content->at(std::string(fd->name));
 263       sg_size_t* new_psize = new sg_size_t;
 264       *new_psize           = *psize;
 265       delete psize;
 266       content->erase(fd->name);
 267       std::string path = std::string(fullpath).substr(strlen(fd->mount), strlen(fullpath));
 268       content->insert({path.c_str(), new_psize});
 269       XBT_DEBUG("Move file from %s to %s, size '%llu'", fd->name, fullpath, *psize);
 270       return 0;
 271     } else {
 272       XBT_WARN("File %s doesn't exist", fd->name);
 273       return -1;
 274     }
 275   } else {
 276     XBT_WARN("New full path %s is not on the same mount point: %s. Action has been canceled.", fullpath, fd->mount);
 277     return -1;
 278   }
 279 }
 280
 281 }
 282 }