src/surf/workstation_interface.cpp

   1 /* Copyright (c) 2013-2014. The SimGrid Team.
   2  * All rights reserved.                                                     */
   3
   4 /* This program is free software; you can redistribute it and/or modify it
   5  * under the terms of the license (GNU LGPL) which comes with this package. */
   6
   7 #include "workstation_interface.hpp"
   8 #include "vm_workstation_interface.hpp"
   9 #include "cpu_cas01.hpp"
  10 #include "simgrid/sg_config.h"
  11
  12 #include "network_interface.hpp"
  13
  14 XBT_LOG_NEW_DEFAULT_SUBCATEGORY(surf_workstation, surf,
  15                                 "Logging specific to the SURF workstation module");
  16
  17 WorkstationModelPtr surf_workstation_model = NULL;
  18
  19 /*************
  20  * Callbacks *
  21  *************/
  22
  23 surf_callback(void, WorkstationPtr) workstationCreatedCallbacks;
  24 surf_callback(void, WorkstationPtr) workstationDestructedCallbacks;
  25 surf_callback(void, WorkstationPtr) workstationStateChangedCallbacks;
  26 surf_callback(void, WorkstationActionPtr) workstationActionStateChangedCallbacks;
  27
  28 /*********
  29  * Model *
  30  *********/
  31 WorkstationModel::WorkstationModel(const char *name)
  32  : Model(name)
  33 {
  34   p_cpuModel = surf_cpu_model_pm;
  35 }
  36
  37 WorkstationModel::WorkstationModel()
  38 : Model("Workstation") {
  39   p_cpuModel = surf_cpu_model_pm;
  40 }
  41
  42 WorkstationModel::~WorkstationModel() {
  43 }
  44
  45 /* Each VM has a dummy CPU action on the PM layer. This CPU action works as the
  46  * constraint (capacity) of the VM in the PM layer. If the VM does not have any
  47  * active task, the dummy CPU action must be deactivated, so that the VM does
  48  * not get any CPU share in the PM layer. */
  49 void WorkstationModel::adjustWeightOfDummyCpuActions()
  50 {
  51   /* iterate for all virtual machines */
  52   for (WorkstationVMModel::vm_list_t::iterator iter =
  53          WorkstationVMModel::ws_vms.begin();
  54        iter !=  WorkstationVMModel::ws_vms.end(); ++iter) {
  55
  56     WorkstationVMPtr ws_vm = &*iter;
  57     CpuCas01Ptr cpu_cas01 = static_cast<CpuCas01Ptr>(ws_vm->p_cpu);
  58     xbt_assert(cpu_cas01, "cpu-less workstation");
  59
  60     int is_active = lmm_constraint_used(cpu_cas01->getModel()->getMaxminSystem(), cpu_cas01->getConstraint());
  61     // int is_active_old = constraint_is_active(cpu_cas01);
  62
  63     // {
  64     //   xbt_assert(is_active == is_active_old, "%d %d", is_active, is_active_old);
  65     // }
  66
  67     if (is_active) {
  68       /* some tasks exist on this VM */
  69       XBT_DEBUG("set the weight of the dummy CPU action on PM to 1");
  70
  71       /* FIXME: we shoud use lmm_update_variable_weight() ? */
  72       /* FIXME: If we assgign 1.05 and 0.05, the system makes apparently wrong values. */
  73       ws_vm->p_action->setPriority(1);
  74
  75     } else {
  76       /* no task exits on this VM */
  77       XBT_DEBUG("set the weight of the dummy CPU action on PM to 0");
  78
  79       ws_vm->p_action->setPriority(0);
  80     }
  81   }
  82 }
  83
  84 /************
  85  * Resource *
  86  ************/
  87 Workstation::Workstation()
  88 {
  89   surf_callback_emit(workstationCreatedCallbacks, this);
  90 }
  91
  92 Workstation::Workstation(ModelPtr model, const char *name, xbt_dict_t props,
  93                                  xbt_dynar_t storage, RoutingEdgePtr netElm, CpuPtr cpu)
  94  : Resource(model, name, props)
  95  , p_storage(storage), p_netElm(netElm), p_cpu(cpu)
  96 {
  97   p_params.ramsize = 0;
  98   surf_callback_emit(workstationCreatedCallbacks, this);
  99 }
 100
 101 Workstation::Workstation(ModelPtr model, const char *name, xbt_dict_t props, lmm_constraint_t constraint,
 102                                          xbt_dynar_t storage, RoutingEdgePtr netElm, CpuPtr cpu)
 103  : Resource(model, name, props, constraint)
 104  , p_storage(storage), p_netElm(netElm), p_cpu(cpu)
 105 {
 106   p_params.ramsize = 0;
 107   surf_callback_emit(workstationCreatedCallbacks, this);
 108 }
 109
 110 Workstation::~Workstation(){
 111   surf_callback_emit(workstationDestructedCallbacks, this);
 112 }
 113
 114 void Workstation::setState(e_surf_resource_state_t state){
 115   Resource::setState(state);
 116   surf_callback_emit(workstationStateChangedCallbacks, this);
 117 }
 118
 119 int Workstation::getCore(){
 120   return p_cpu->getCore();
 121 }
 122
 123 double Workstation::getSpeed(double load){
 124   return p_cpu->getSpeed(load);
 125 }
 126
 127 double Workstation::getAvailableSpeed(){
 128   return p_cpu->getAvailableSpeed();
 129 }
 130
 131 double Workstation::getCurrentPowerPeak()
 132 {
 133   return p_cpu->getCurrentPowerPeak();
 134 }
 135
 136 double Workstation::getPowerPeakAt(int pstate_index)
 137 {
 138   return p_cpu->getPowerPeakAt(pstate_index);
 139 }
 140
 141 int Workstation::getNbPstates()
 142 {
 143   return p_cpu->getNbPstates();
 144 }
 145
 146 void Workstation::setPowerPeakAt(int pstate_index)
 147 {
 148         p_cpu->setPowerPeakAt(pstate_index);
 149 }
 150
 151 xbt_dict_t Workstation::getProperties()
 152 {
 153   return p_cpu->getProperties();
 154 }
 155
 156 StoragePtr Workstation::findStorageOnMountList(const char* mount)
 157 {
 158   StoragePtr st = NULL;
 159   s_mount_t mnt;
 160   unsigned int cursor;
 161
 162   XBT_DEBUG("Search for storage name '%s' on '%s'", mount, getName());
 163   xbt_dynar_foreach(p_storage,cursor,mnt)
 164   {
 165     XBT_DEBUG("See '%s'",mnt.name);
 166     if(!strcmp(mount,mnt.name)){
 167       st = static_cast<StoragePtr>(mnt.storage);
 168       break;
 169     }
 170   }
 171   if(!st) xbt_die("Can't find mount '%s' for '%s'", mount, getName());
 172   return st;
 173 }
 174
 175 xbt_dict_t Workstation::getMountedStorageList()
 176 {
 177   s_mount_t mnt;
 178   unsigned int i;
 179   xbt_dict_t storage_list = xbt_dict_new_homogeneous(NULL);
 180   char *storage_name = NULL;
 181
 182   xbt_dynar_foreach(p_storage,i,mnt){
 183     storage_name = (char *)static_cast<StoragePtr>(mnt.storage)->getName();
 184     xbt_dict_set(storage_list,mnt.name,storage_name,NULL);
 185   }
 186   return storage_list;
 187 }
 188
 189 xbt_dynar_t Workstation::getAttachedStorageList()
 190 {
 191   xbt_lib_cursor_t cursor;
 192   char *key;
 193   void **data;
 194   xbt_dynar_t result = xbt_dynar_new(sizeof(void*), NULL);
 195   xbt_lib_foreach(storage_lib, cursor, key, data) {
 196     if(xbt_lib_get_level(xbt_lib_get_elm_or_null(storage_lib, key), SURF_STORAGE_LEVEL) != NULL) {
 197           StoragePtr storage = static_cast<StoragePtr>(xbt_lib_get_level(xbt_lib_get_elm_or_null(storage_lib, key), SURF_STORAGE_LEVEL));
 198           if(!strcmp((const char*)storage->p_attach,this->getName())){
 199             xbt_dynar_push_as(result, void *,(void *)static_cast<ResourcePtr>(storage)->getName());
 200           }
 201         }
 202   }
 203   return result;
 204 }
 205
 206 ActionPtr Workstation::open(const char* fullpath) {
 207
 208   StoragePtr st = NULL;
 209   s_mount_t mnt;
 210   unsigned int cursor;
 211   size_t longest_prefix_length = 0;
 212   char *path = NULL;
 213   char *file_mount_name = NULL;
 214   char *mount_name = NULL;
 215
 216   XBT_DEBUG("Search for storage name for '%s' on '%s'", fullpath, getName());
 217   xbt_dynar_foreach(p_storage,cursor,mnt)
 218   {
 219     XBT_DEBUG("See '%s'",mnt.name);
 220     file_mount_name = (char *) xbt_malloc ((strlen(mnt.name)+1));
 221     strncpy(file_mount_name,fullpath,strlen(mnt.name)+1);
 222     file_mount_name[strlen(mnt.name)] = '\0';
 223
 224     if(!strcmp(file_mount_name,mnt.name) && strlen(mnt.name)>longest_prefix_length)
 225     {/* The current mount name is found in the full path and is bigger than the previous*/
 226       longest_prefix_length = strlen(mnt.name);
 227       st = static_cast<StoragePtr>(mnt.storage);
 228     }
 229     free(file_mount_name);
 230   }
 231   if(longest_prefix_length>0)
 232   { /* Mount point found, split fullpath into mount_name and path+filename*/
 233         path = (char *) xbt_malloc ((strlen(fullpath)-longest_prefix_length+1));
 234         mount_name = (char *) xbt_malloc ((longest_prefix_length+1));
 235         strncpy(mount_name, fullpath, longest_prefix_length+1);
 236         strncpy(path, fullpath+longest_prefix_length, strlen(fullpath)-longest_prefix_length+1);
 237         path[strlen(fullpath)-longest_prefix_length] = '\0';
 238         mount_name[longest_prefix_length] = '\0';
 239   }
 240   else
 241     xbt_die("Can't find mount point for '%s' on '%s'", fullpath, getName());
 242
 243   ActionPtr action = st->open((const char*)mount_name, (const char*)path);
 244   free((char*)path);
 245   free((char*)mount_name);
 246   return action;
 247 }
 248
 249 ActionPtr Workstation::close(surf_file_t fd) {
 250   StoragePtr st = findStorageOnMountList(fd->mount);
 251   XBT_DEBUG("CLOSE on disk '%s'",st->getName());
 252   return st->close(fd);
 253 }
 254
 255 ActionPtr Workstation::read(surf_file_t fd, sg_size_t size) {
 256   StoragePtr st = findStorageOnMountList(fd->mount);
 257   XBT_DEBUG("READ on disk '%s'",st->getName());
 258   return st->read(fd, size);
 259 }
 260
 261 ActionPtr Workstation::write(surf_file_t fd, sg_size_t size) {
 262   StoragePtr st = findStorageOnMountList(fd->mount);
 263   XBT_DEBUG("WRITE on disk '%s'",st->getName());
 264   return st->write(fd, size);
 265 }
 266
 267 int Workstation::unlink(surf_file_t fd) {
 268   if (!fd){
 269     XBT_WARN("No such file descriptor. Impossible to unlink");
 270     return 0;
 271   } else {
 272
 273     StoragePtr st = findStorageOnMountList(fd->mount);
 274     /* Check if the file is on this storage */
 275     if (!xbt_dict_get_or_null(st->p_content, fd->name)){
 276       XBT_WARN("File %s is not on disk %s. Impossible to unlink", fd->name,
 277           st->getName());
 278       return 0;
 279     } else {
 280       XBT_DEBUG("UNLINK on disk '%s'",st->getName());
 281       st->m_usedSize -= fd->size;
 282
 283       // Remove the file from storage
 284       xbt_dict_remove(st->p_content, fd->name);
 285
 286       free(fd->name);
 287       free(fd->mount);
 288       xbt_free(fd);
 289       return 1;
 290     }
 291   }
 292 }
 293
 294 ActionPtr Workstation::ls(const char* mount, const char *path){
 295   XBT_DEBUG("LS on mount '%s' and file '%s'", mount, path);
 296   StoragePtr st = findStorageOnMountList(mount);
 297   return st->ls(path);
 298 }
 299
 300 sg_size_t Workstation::getSize(surf_file_t fd){
 301   return fd->size;
 302 }
 303
 304 xbt_dynar_t Workstation::getInfo( surf_file_t fd)
 305 {
 306   StoragePtr st = findStorageOnMountList(fd->mount);
 307   sg_size_t *psize = xbt_new(sg_size_t, 1);
 308   *psize = fd->size;
 309   xbt_dynar_t info = xbt_dynar_new(sizeof(void*), NULL);
 310   xbt_dynar_push_as(info, sg_size_t *, psize);
 311   xbt_dynar_push_as(info, void *, fd->mount);
 312   xbt_dynar_push_as(info, void *, (void *)st->getName());
 313   xbt_dynar_push_as(info, void *, st->p_typeId);
 314   xbt_dynar_push_as(info, void *, st->p_contentType);
 315
 316   return info;
 317 }
 318
 319 sg_size_t Workstation::fileTell(surf_file_t fd){
 320   return fd->current_position;
 321 }
 322
 323 int Workstation::fileSeek(surf_file_t fd, sg_size_t offset, int origin){
 324
 325   switch (origin) {
 326   case SEEK_SET:
 327     fd->current_position = 0;
 328         return MSG_OK;
 329   case SEEK_CUR:
 330         if(offset > fd->size)
 331           offset = fd->size;
 332         fd->current_position = offset;
 333         return MSG_OK;
 334   case SEEK_END:
 335         fd->current_position = fd->size;
 336         return MSG_OK;
 337   default:
 338         return MSG_TASK_CANCELED;
 339   }
 340 }
 341
 342 int Workstation::fileMove(surf_file_t fd, const char* fullpath){
 343
 344   /* Check if the new full path is on the same mount point */
 345   if(!strncmp((const char*)fd->mount, fullpath, strlen(fd->mount)))
 346   {
 347     sg_size_t *psize, *new_psize;
 348     psize = (sg_size_t*) xbt_dict_get_or_null(findStorageOnMountList(fd->mount)->p_content,fd->name);
 349     new_psize = xbt_new(sg_size_t, 1);
 350     *new_psize = *psize;
 351     if (psize){// src file exists
 352           xbt_dict_remove(findStorageOnMountList(fd->mount)->p_content, fd->name);
 353
 354           char *path = (char *) xbt_malloc ((strlen(fullpath)-strlen(fd->mount)+1));;
 355           strncpy(path, fullpath+strlen(fd->mount), strlen(fullpath)-strlen(fd->mount)+1);
 356           xbt_dict_set(findStorageOnMountList(fd->mount)->p_content, path, new_psize,NULL);
 357           XBT_DEBUG("Move file from %s to %s, size '%llu'",fd->name, fullpath, *psize);
 358           free(path);
 359           return MSG_OK;
 360     }
 361     else
 362           XBT_WARN("File %s doesn't exist", fd->name);
 363       return MSG_TASK_CANCELED;
 364     }
 365   else
 366   {
 367         XBT_WARN("New full path %s is not on the same mount point: %s. Action has been canceled.", fullpath, fd->mount);
 368         return MSG_TASK_CANCELED;
 369   }
 370 }
 371
 372 int Workstation::fileRcopy(surf_file_t fd, surf_resource_t host_dest, const char* fullpath){
 373
 374   XBT_DEBUG("Rcopy file %s on %s to %s",fd->name, host_dest->key, fullpath);
 375
 376   /* Find the host src where the file is located */
 377   StoragePtr storage = findStorageOnMountList(fd->mount);
 378   const char* host_name_src = (const char*)storage->p_attach;
 379
 380   /* Find the real host dest where the file will be stored */
 381   s_mount_t mnt;
 382   unsigned int cursor;
 383   StoragePtr storage_dest = NULL;
 384   const char* host_name_dest;
 385   char *file_mount_name;
 386   size_t longest_prefix_length = 0;
 387   WorkstationPtr dest_ws, src_ws;
 388
 389   dest_ws = static_cast<WorkstationPtr>(surf_workstation_resource_priv(host_dest));
 390
 391   xbt_dynar_foreach(dest_ws->p_storage,cursor,mnt)
 392   {
 393         file_mount_name = (char *) xbt_malloc ((strlen(mnt.name)+1));
 394     strncpy(file_mount_name,fullpath,strlen(mnt.name)+1);
 395     file_mount_name[strlen(mnt.name)] = '\0';
 396
 397         if(!strcmp(file_mount_name,mnt.name) && strlen(mnt.name)>longest_prefix_length)
 398         {/* The current mount name is found in the full path and is bigger than the previous*/
 399       longest_prefix_length = strlen(mnt.name);
 400       storage_dest = static_cast<StoragePtr>(mnt.storage);
 401         }
 402         free(file_mount_name);
 403   }
 404   if(longest_prefix_length>0)
 405   { /* Mount point found, retrieve the host the storage is attached to */
 406     host_name_dest = storage_dest->p_attach;
 407   }
 408   else
 409   {
 410     XBT_WARN("Can't find mount point for '%s' on destination host '%s'", fullpath, host_dest->key);
 411     return MSG_TASK_CANCELED;
 412   }
 413
 414   /* Check that there is a route between src and dest workstations */
 415   xbt_dynar_t route = NULL;
 416   dest_ws = static_cast<WorkstationPtr>(surf_workstation_resource_priv(xbt_lib_get_elm_or_null(host_lib, host_name_dest)));
 417   src_ws = static_cast<WorkstationPtr>(surf_workstation_resource_priv(xbt_lib_get_elm_or_null(host_lib, host_name_src)));
 418
 419   routing_get_route_and_latency(src_ws->p_netElm, dest_ws->p_netElm, &route, NULL);
 420   if(!xbt_dynar_length (route))
 421   {
 422         XBT_WARN("There is no route between %s and %s. Action has been canceled", src_ws->getName(), dest_ws->getName());
 423         return MSG_TASK_CANCELED;
 424   }
 425   else
 426   {/* There is a route between src and dest, let's copy the file */
 427
 428     /* Read the file on the src side */
 429         src_ws->read(fd, fd->size);
 430
 431         /* Send a message from src to dest to simulate data transfer */
 432         surf_network_model->communicate(src_ws->p_netElm, dest_ws->p_netElm, fd->size, -1.0);
 433
 434         /* Create the file on the dest side and write data into it*/
 435         char *mount_name, *path;
 436         path = (char *) xbt_malloc ((strlen(fullpath)-longest_prefix_length+1));
 437         mount_name = (char *) xbt_malloc ((longest_prefix_length+1));
 438         /* deduce mount_name and path from fullpath */
 439         strncpy(mount_name, fullpath, longest_prefix_length+1);
 440         strncpy(path, fullpath+longest_prefix_length, strlen(fullpath)-longest_prefix_length+1);
 441         path[strlen(fullpath)-longest_prefix_length] = '\0';
 442         mount_name[longest_prefix_length] = '\0';
 443     /* create the file */
 444         ActionPtr open_action = storage_dest->open((const char*)mount_name, (const char*)path);
 445     /* write data */
 446         dest_ws->write(static_cast<StorageActionPtr>(open_action)->p_file, fd->size);
 447     dest_ws->close(static_cast<StorageActionPtr>(open_action)->p_file);
 448     free(path);
 449     free(mount_name);
 450     XBT_DEBUG("File %s has been copied on %s to %s",fd->name, host_dest->key, fullpath);
 451     return MSG_OK;
 452   }
 453
 454
 455   XBT_INFO("SRC %s DEST %s", host_name_src, host_name_dest);
 456
 457
 458
 459 //  /* Check that file to copy is local to the src workstation (storage is attached to src workstation) */
 460 //  StoragePtr storage = findStorageOnMountList(fd->mount);
 461 //  if(!strcmp((const char*)storage->p_attach, this->getName()))
 462 //  {
 463 //    /* Check that there is a route between src and dest workstations */
 464 //    xbt_dynar_t route = NULL;
 465 //    routing_get_route_and_latency(this->p_netElm, ((WorkstationPtr)host_dest)->p_netElm, &route, NULL);
 466 //    if(route){
 467 //
 468 //      ATTENTION DISCUSSION AVEC FRED !
 469 //      return MSG_OK;
 470 //    }
 471 //    else
 472 //    {
 473 //      XBT_WARN("There is no route between %s and %s. Action has been canceled", this->getName(), host_dest->key);
 474 //      return MSG_TASK_CANCELED;
 475 //    }
 476 //  }
 477 //  else
 478 //  {
 479 //    XBT_WARN("File %s is not local to %s but to %s. Action has been canceled", fd->name,this->getName(), storage->p_attach);
 480 //    return MSG_TASK_CANCELED;
 481 //  }
 482 }
 483
 484 sg_size_t Workstation::getFreeSize(const char* name)
 485 {
 486   StoragePtr st = findStorageOnMountList(name);
 487   return st->m_size - st->m_usedSize;
 488 }
 489
 490 sg_size_t Workstation::getUsedSize(const char* name)
 491 {
 492   StoragePtr st = findStorageOnMountList(name);
 493   return st->m_usedSize;
 494 }
 495
 496 xbt_dynar_t Workstation::getVms()
 497 {
 498   xbt_dynar_t dyn = xbt_dynar_new(sizeof(smx_host_t), NULL);
 499
 500   /* iterate for all virtual machines */
 501   for (WorkstationVMModel::vm_list_t::iterator iter =
 502          WorkstationVMModel::ws_vms.begin();
 503        iter !=  WorkstationVMModel::ws_vms.end(); ++iter) {
 504
 505     WorkstationVMPtr ws_vm = &*iter;
 506     if (this == ws_vm-> p_subWs)
 507       xbt_dynar_push(dyn, &ws_vm->p_subWs);
 508   }
 509
 510   return dyn;
 511 }
 512
 513 void Workstation::getParams(ws_params_t params)
 514 {
 515   *params = p_params;
 516 }
 517
 518 void Workstation::setParams(ws_params_t params)
 519 {
 520   /* may check something here. */
 521   p_params = *params;
 522 }
 523
 524 /**********
 525  * Action *
 526  **********/
 527
 528 void WorkstationAction::setState(e_surf_action_state_t state){
 529   Action::setState(state);
 530   surf_callback_emit(workstationActionStateChangedCallbacks, this);
 531 }