src/surf/host_interface.cpp

   1 /* Copyright (c) 2013-2015. The SimGrid Team.
   2  * All rights reserved.                                                     */
   3
   4 /* This program is free software; you can redistribute it and/or modify it
   5  * under the terms of the license (GNU LGPL) which comes with this package. */
   6
   7 #include "host_interface.hpp"
   8
   9 #include <simgrid/s4u/host.hpp>
  10
  11 #include "src/simix/smx_private.h"
  12 #include "cpu_cas01.hpp"
  13 #include "simgrid/sg_config.h"
  14
  15 #include "network_interface.hpp"
  16 #include "virtual_machine.hpp"
  17
  18 XBT_LOG_NEW_DEFAULT_SUBCATEGORY(surf_host, surf,
  19                                 "Logging specific to the SURF host module");
  20
  21 simgrid::surf::HostModel *surf_host_model = NULL;
  22
  23 /*************
  24  * Callbacks *
  25  *************/
  26
  27 namespace simgrid {
  28 namespace surf {
  29
  30 simgrid::xbt::Extension<simgrid::s4u::Host, Host> Host::EXTENSION_ID;
  31
  32 /*********
  33  * Model *
  34  *********/
  35 Host *HostModel::createHost(const char *name,NetCard *netElm, Cpu *cpu, xbt_dict_t props){
  36   xbt_dynar_t storageList = (xbt_dynar_t)xbt_lib_get_or_null(storage_lib, name, ROUTING_STORAGE_HOST_LEVEL);
  37
  38   Host *host = new simgrid::surf::Host(surf_host_model, name, props, storageList, cpu);
  39   XBT_DEBUG("Create host %s with %ld mounted disks", name, xbt_dynar_length(host->p_storage));
  40   return host;
  41 }
  42
  43 /* Each VM has a dummy CPU action on the PM layer. This CPU action works as the
  44  * constraint (capacity) of the VM in the PM layer. If the VM does not have any
  45  * active task, the dummy CPU action must be deactivated, so that the VM does
  46  * not get any CPU share in the PM layer. */
  47 void HostModel::adjustWeightOfDummyCpuActions()
  48 {
  49   /* iterate for all virtual machines */
  50   for (VMModel::vm_list_t::iterator iter =
  51          VMModel::ws_vms.begin();
  52        iter !=  VMModel::ws_vms.end(); ++iter) {
  53
  54     VirtualMachine *ws_vm = &*iter;
  55     CpuCas01 *cpu_cas01 = static_cast<CpuCas01*>(ws_vm->p_cpu);
  56     xbt_assert(cpu_cas01, "cpu-less host");
  57
  58     int is_active = lmm_constraint_used(cpu_cas01->getModel()->getMaxminSystem(), cpu_cas01->getConstraint());
  59     // int is_active_old = constraint_is_active(cpu_cas01);
  60
  61     if (is_active) {
  62       /* some tasks exist on this VM */
  63       XBT_DEBUG("set the weight of the dummy CPU action on PM to 1");
  64
  65       /* FIXME: we should use lmm_update_variable_weight() ? */
  66       /* FIXME: If we assign 1.05 and 0.05, the system makes apparently wrong values. */
  67       ws_vm->p_action->setPriority(1);
  68
  69     } else {
  70       /* no task exits on this VM */
  71       XBT_DEBUG("set the weight of the dummy CPU action on PM to 0");
  72
  73       ws_vm->p_action->setPriority(0);
  74     }
  75   }
  76 }
  77
  78 Action *HostModel::executeParallelTask(int host_nb,
  79     sg_host_t *host_list,
  80     double *flops_amount,
  81     double *bytes_amount,
  82     double rate){
  83 #define cost_or_zero(array,pos) ((array)?(array)[pos]:0.0)
  84   Action *action =NULL;
  85   if ((host_nb == 1)
  86       && (cost_or_zero(bytes_amount, 0) == 0.0)){
  87     action = host_list[0]->pimpl_cpu->execute(flops_amount[0]);
  88   } else if ((host_nb == 1)
  89            && (cost_or_zero(flops_amount, 0) == 0.0)) {
  90     action = surf_network_model->communicate(host_list[0]->pimpl_netcard,
  91                                          host_list[0]->pimpl_netcard,
  92                        bytes_amount[0], rate);
  93   } else if ((host_nb == 2)
  94              && (cost_or_zero(flops_amount, 0) == 0.0)
  95              && (cost_or_zero(flops_amount, 1) == 0.0)) {
  96     int i,nb = 0;
  97     double value = 0.0;
  98
  99     for (i = 0; i < host_nb * host_nb; i++) {
 100       if (cost_or_zero(bytes_amount, i) > 0.0) {
 101         nb++;
 102         value = cost_or_zero(bytes_amount, i);
 103       }
 104     }
 105     if (nb == 1){
 106       action = surf_network_model->communicate(host_list[0]->pimpl_netcard,
 107                                            host_list[1]->pimpl_netcard,
 108                          value, rate);
 109     }
 110   } else
 111     THROW_UNIMPLEMENTED;      /* This model does not implement parallel tasks for more than 2 hosts */
 112 #undef cost_or_zero
 113   xbt_free(host_list);
 114   return action;
 115 }
 116
 117 /************
 118  * Resource *
 119  ************/
 120
 121
 122 void Host::classInit()
 123 {
 124   if (!EXTENSION_ID.valid()) {
 125     EXTENSION_ID = simgrid::s4u::Host::extension_create<simgrid::surf::Host>();
 126   }
 127 }
 128
 129 Host::Host(simgrid::surf::HostModel *model, const char *name, xbt_dict_t props,
 130                                  xbt_dynar_t storage, Cpu *cpu)
 131  : Resource(model, name)
 132  , PropertyHolder(props)
 133  , p_storage(storage), p_cpu(cpu)
 134 {
 135   p_params.ramsize = 0;
 136 }
 137
 138 Host::Host(simgrid::surf::HostModel *model, const char *name, xbt_dict_t props, lmm_constraint_t constraint,
 139                                          xbt_dynar_t storage, Cpu *cpu)
 140  : Resource(model, name, constraint)
 141  , PropertyHolder(props)
 142  , p_storage(storage), p_cpu(cpu)
 143 {
 144   p_params.ramsize = 0;
 145 }
 146
 147 /** @brief use destroy() instead of this destructor */
 148 Host::~Host()
 149 {
 150 }
 151
 152 void Host::attach(simgrid::s4u::Host* host)
 153 {
 154   if (p_host != nullptr)
 155     xbt_die("Already attached to host %s", host->name().c_str());
 156   host->extension_set(this);
 157   p_host = host;
 158 }
 159
 160 bool Host::isOn() {
 161   return p_cpu->isOn();
 162 }
 163 bool Host::isOff() {
 164   return p_cpu->isOff();
 165 }
 166 void Host::turnOn(){
 167   if (isOff()) {
 168     p_cpu->turnOn();
 169     simgrid::s4u::Host::onStateChange(*this->p_host);
 170   }
 171 }
 172 void Host::turnOff(){
 173   if (isOn()) {
 174     p_cpu->turnOff();
 175     simgrid::s4u::Host::onStateChange(*this->p_host);
 176   }
 177 }
 178
 179 simgrid::surf::Storage *Host::findStorageOnMountList(const char* mount)
 180 {
 181   simgrid::surf::Storage *st = NULL;
 182   s_mount_t mnt;
 183   unsigned int cursor;
 184
 185   XBT_DEBUG("Search for storage name '%s' on '%s'", mount, getName());
 186   xbt_dynar_foreach(p_storage,cursor,mnt)
 187   {
 188     XBT_DEBUG("See '%s'",mnt.name);
 189     if(!strcmp(mount,mnt.name)){
 190       st = static_cast<simgrid::surf::Storage*>(mnt.storage);
 191       break;
 192     }
 193   }
 194   if(!st) xbt_die("Can't find mount '%s' for '%s'", mount, getName());
 195   return st;
 196 }
 197
 198 xbt_dict_t Host::getMountedStorageList()
 199 {
 200   s_mount_t mnt;
 201   unsigned int i;
 202   xbt_dict_t storage_list = xbt_dict_new_homogeneous(NULL);
 203   char *storage_name = NULL;
 204
 205   xbt_dynar_foreach(p_storage,i,mnt){
 206     storage_name = (char *)static_cast<simgrid::surf::Storage*>(mnt.storage)->getName();
 207     xbt_dict_set(storage_list,mnt.name,storage_name,NULL);
 208   }
 209   return storage_list;
 210 }
 211
 212 xbt_dynar_t Host::getAttachedStorageList()
 213 {
 214   xbt_lib_cursor_t cursor;
 215   char *key;
 216   void **data;
 217   xbt_dynar_t result = xbt_dynar_new(sizeof(void*), NULL);
 218   xbt_lib_foreach(storage_lib, cursor, key, data) {
 219     if(xbt_lib_get_level(xbt_lib_get_elm_or_null(storage_lib, key), SURF_STORAGE_LEVEL) != NULL) {
 220           simgrid::surf::Storage *storage = static_cast<simgrid::surf::Storage*>(xbt_lib_get_level(xbt_lib_get_elm_or_null(storage_lib, key), SURF_STORAGE_LEVEL));
 221           if(!strcmp((const char*)storage->p_attach,this->getName())){
 222             xbt_dynar_push_as(result, void *, (void*)storage->getName());
 223           }
 224         }
 225   }
 226   return result;
 227 }
 228
 229 Action *Host::open(const char* fullpath) {
 230
 231   simgrid::surf::Storage *st = NULL;
 232   s_mount_t mnt;
 233   unsigned int cursor;
 234   size_t longest_prefix_length = 0;
 235   char *path = NULL;
 236   char *file_mount_name = NULL;
 237   char *mount_name = NULL;
 238
 239   XBT_DEBUG("Search for storage name for '%s' on '%s'", fullpath, getName());
 240   xbt_dynar_foreach(p_storage,cursor,mnt)
 241   {
 242     XBT_DEBUG("See '%s'",mnt.name);
 243     file_mount_name = (char *) xbt_malloc ((strlen(mnt.name)+1));
 244     strncpy(file_mount_name,fullpath,strlen(mnt.name)+1);
 245     file_mount_name[strlen(mnt.name)] = '\0';
 246
 247     if(!strcmp(file_mount_name,mnt.name) && strlen(mnt.name)>longest_prefix_length)
 248     {/* The current mount name is found in the full path and is bigger than the previous*/
 249       longest_prefix_length = strlen(mnt.name);
 250       st = static_cast<simgrid::surf::Storage*>(mnt.storage);
 251     }
 252     free(file_mount_name);
 253   }
 254   if(longest_prefix_length>0)
 255   { /* Mount point found, split fullpath into mount_name and path+filename*/
 256         path = (char *) xbt_malloc ((strlen(fullpath)-longest_prefix_length+1));
 257         mount_name = (char *) xbt_malloc ((longest_prefix_length+1));
 258         strncpy(mount_name, fullpath, longest_prefix_length+1);
 259         strncpy(path, fullpath+longest_prefix_length, strlen(fullpath)-longest_prefix_length+1);
 260         path[strlen(fullpath)-longest_prefix_length] = '\0';
 261         mount_name[longest_prefix_length] = '\0';
 262   }
 263   else
 264     xbt_die("Can't find mount point for '%s' on '%s'", fullpath, getName());
 265
 266   XBT_DEBUG("OPEN %s on disk '%s'",path, st->getName());
 267   Action *action = st->open((const char*)mount_name, (const char*)path);
 268   free((char*)path);
 269   free((char*)mount_name);
 270   return action;
 271 }
 272
 273 Action *Host::close(surf_file_t fd) {
 274   simgrid::surf::Storage *st = findStorageOnMountList(fd->mount);
 275   XBT_DEBUG("CLOSE %s on disk '%s'",fd->name, st->getName());
 276   return st->close(fd);
 277 }
 278
 279 Action *Host::read(surf_file_t fd, sg_size_t size) {
 280   simgrid::surf::Storage *st = findStorageOnMountList(fd->mount);
 281   XBT_DEBUG("READ %s on disk '%s'",fd->name, st->getName());
 282   return st->read(fd, size);
 283 }
 284
 285 Action *Host::write(surf_file_t fd, sg_size_t size) {
 286   simgrid::surf::Storage *st = findStorageOnMountList(fd->mount);
 287   XBT_DEBUG("WRITE %s on disk '%s'",fd->name, st->getName());
 288   return st->write(fd, size);
 289 }
 290
 291 int Host::unlink(surf_file_t fd) {
 292   if (!fd){
 293     XBT_WARN("No such file descriptor. Impossible to unlink");
 294     return -1;
 295   } else {
 296
 297     simgrid::surf::Storage *st = findStorageOnMountList(fd->mount);
 298     /* Check if the file is on this storage */
 299     if (!xbt_dict_get_or_null(st->p_content, fd->name)){
 300       XBT_WARN("File %s is not on disk %s. Impossible to unlink", fd->name,
 301           st->getName());
 302       return -1;
 303     } else {
 304       XBT_DEBUG("UNLINK %s on disk '%s'",fd->name, st->getName());
 305       st->m_usedSize -= fd->size;
 306
 307       // Remove the file from storage
 308       xbt_dict_remove(st->p_content, fd->name);
 309
 310       xbt_free(fd->name);
 311       xbt_free(fd->mount);
 312       xbt_free(fd);
 313       return 0;
 314     }
 315   }
 316 }
 317
 318 sg_size_t Host::getSize(surf_file_t fd){
 319   return fd->size;
 320 }
 321
 322 xbt_dynar_t Host::getInfo( surf_file_t fd)
 323 {
 324   simgrid::surf::Storage *st = findStorageOnMountList(fd->mount);
 325   sg_size_t *psize = xbt_new(sg_size_t, 1);
 326   *psize = fd->size;
 327   xbt_dynar_t info = xbt_dynar_new(sizeof(void*), NULL);
 328   xbt_dynar_push_as(info, sg_size_t *, psize);
 329   xbt_dynar_push_as(info, void *, fd->mount);
 330   xbt_dynar_push_as(info, void *, (void *)st->getName());
 331   xbt_dynar_push_as(info, void *, st->p_typeId);
 332   xbt_dynar_push_as(info, void *, st->p_contentType);
 333
 334   return info;
 335 }
 336
 337 sg_size_t Host::fileTell(surf_file_t fd){
 338   return fd->current_position;
 339 }
 340
 341 int Host::fileSeek(surf_file_t fd, sg_offset_t offset, int origin){
 342
 343   switch (origin) {
 344   case SEEK_SET:
 345     fd->current_position = offset;
 346     return 0;
 347   case SEEK_CUR:
 348     fd->current_position += offset;
 349     return 0;
 350   case SEEK_END:
 351     fd->current_position = fd->size + offset;
 352     return 0;
 353   default:
 354     return -1;
 355   }
 356 }
 357
 358 int Host::fileMove(surf_file_t fd, const char* fullpath){
 359   /* Check if the new full path is on the same mount point */
 360   if(!strncmp((const char*)fd->mount, fullpath, strlen(fd->mount))) {
 361     sg_size_t *psize, *new_psize;
 362     psize = (sg_size_t*)
 363         xbt_dict_get_or_null(findStorageOnMountList(fd->mount)->p_content,
 364                              fd->name);
 365     new_psize = xbt_new(sg_size_t, 1);
 366     *new_psize = *psize;
 367     if (psize){// src file exists
 368       xbt_dict_remove(findStorageOnMountList(fd->mount)->p_content, fd->name);
 369       char *path = (char *) xbt_malloc ((strlen(fullpath)-strlen(fd->mount)+1));
 370       strncpy(path, fullpath+strlen(fd->mount),
 371               strlen(fullpath)-strlen(fd->mount)+1);
 372       xbt_dict_set(findStorageOnMountList(fd->mount)->p_content, path,
 373                    new_psize,NULL);
 374       XBT_DEBUG("Move file from %s to %s, size '%llu'",fd->name, fullpath, *psize);
 375       free(path);
 376       return 0;
 377     } else {
 378       XBT_WARN("File %s doesn't exist", fd->name);
 379       return -1;
 380     }
 381   } else {
 382     XBT_WARN("New full path %s is not on the same mount point: %s. Action has been canceled.",
 383              fullpath, fd->mount);
 384     return -1;
 385   }
 386 }
 387
 388 xbt_dynar_t Host::getVms()
 389 {
 390   xbt_dynar_t dyn = xbt_dynar_new(sizeof(simgrid::surf::VirtualMachine*), NULL);
 391
 392   /* iterate for all virtual machines */
 393   for (simgrid::surf::VMModel::vm_list_t::iterator iter =
 394          simgrid::surf::VMModel::ws_vms.begin();
 395        iter !=  simgrid::surf::VMModel::ws_vms.end(); ++iter) {
 396
 397     simgrid::surf::VirtualMachine *ws_vm = &*iter;
 398     if (this == ws_vm->p_hostPM->extension(simgrid::surf::Host::EXTENSION_ID))
 399       xbt_dynar_push(dyn, &ws_vm);
 400   }
 401
 402   return dyn;
 403 }
 404
 405 void Host::getParams(vm_params_t params)
 406 {
 407   *params = p_params;
 408 }
 409
 410 void Host::setParams(vm_params_t params)
 411 {
 412   /* may check something here. */
 413   p_params = *params;
 414 }
 415
 416 }
 417 }