src/surf/surf_c_bindings.cpp

   1 /* Copyright (c) 2013-2015. The SimGrid Team.
   2  * All rights reserved.                                                     */
   3
   4 /* This program is free software; you can redistribute it and/or modify it
   5  * under the terms of the license (GNU LGPL) which comes with this package. */
   6
   7 #include "host_interface.hpp"
   8 #include "surf_interface.hpp"
   9 #include "network_interface.hpp"
  10 #include "surf_routing_cluster.hpp"
  11 #include "src/instr/instr_private.h"
  12 #include "plugins/energy.hpp"
  13 #include "virtual_machine.hpp"
  14
  15 XBT_LOG_EXTERNAL_DEFAULT_CATEGORY(surf_kernel);
  16
  17 /*********
  18  * TOOLS *
  19  *********/
  20
  21 static Host *get_casted_host(surf_resource_t resource){
  22   return static_cast<Host*>(surf_host_resource_priv(resource));
  23 }
  24
  25 static VirtualMachine *get_casted_vm(surf_resource_t resource){
  26   return static_cast<VirtualMachine*>(surf_host_resource_priv(resource));
  27 }
  28
  29 extern double NOW;
  30
  31 void surf_presolve(void)
  32 {
  33   double next_event_date = -1.0;
  34   tmgr_trace_event_t event = NULL;
  35   double value = -1.0;
  36   Resource *resource = NULL;
  37   Model *model = NULL;
  38   unsigned int iter;
  39
  40   XBT_DEBUG ("First Run! Let's \"purge\" events and put models in the right state");
  41
  42   while ((next_event_date = tmgr_history_next_date(history)) != -1.0) {
  43     if (next_event_date > NOW)
  44       break;
  45     while ((event =
  46             tmgr_history_get_next_event_leq(history, next_event_date,
  47                                             &value,
  48                                             (void **) &resource))) {
  49       if (value >= 0){
  50         resource->updateState(event, value, NOW);
  51       }
  52     }
  53   }
  54   xbt_dynar_foreach(all_existing_models, iter, model)
  55       model->updateActionsState(NOW, 0.0);
  56 }
  57
  58 double surf_solve(double max_date)
  59 {
  60   double surf_min = -1.0; /* duration */
  61   double next_event_date = -1.0;
  62   double model_next_action_end = -1.0;
  63   double value = -1.0;
  64   Resource *resource = NULL;
  65   Model *model = NULL;
  66   tmgr_trace_event_t event = NULL;
  67   unsigned int iter;
  68
  69   if(!host_that_restart)
  70     host_that_restart = xbt_dynar_new(sizeof(char*), NULL);
  71
  72   if (max_date != -1.0 && max_date != NOW) {
  73     surf_min = max_date - NOW;
  74   }
  75
  76   /* Physical models MUST be resolved first */
  77   XBT_DEBUG("Looking for next event in physical models");
  78   double next_event_phy = surf_host_model->shareResources(NOW);
  79   if ((surf_min < 0.0 || next_event_phy < surf_min) && next_event_phy >= 0.0) {
  80           surf_min = next_event_phy;
  81   }
  82   if (surf_vm_model != NULL) {
  83           XBT_DEBUG("Looking for next event in virtual models");
  84           double next_event_virt = surf_vm_model->shareResources(NOW);
  85           if ((surf_min < 0.0 || next_event_virt < surf_min) && next_event_virt >= 0.0)
  86                   surf_min = next_event_virt;
  87   }
  88
  89   XBT_DEBUG("Min for resources (remember that NS3 don't update that value) : %f", surf_min);
  90
  91   XBT_DEBUG("Looking for next trace event");
  92
  93   do {
  94     XBT_DEBUG("Next TRACE event : %f", next_event_date);
  95
  96     next_event_date = tmgr_history_next_date(history);
  97
  98     if(! surf_network_model->shareResourcesIsIdempotent()){ // NS3, I see you
  99       if(next_event_date!=-1.0 && surf_min!=-1.0) {
 100         surf_min = MIN(next_event_date - NOW, surf_min);
 101       } else{
 102         surf_min = MAX(next_event_date - NOW, surf_min);
 103       }
 104
 105       XBT_DEBUG("Run for network at most %f", surf_min);
 106       // run until min or next flow
 107       model_next_action_end = surf_network_model->shareResources(surf_min);
 108
 109       XBT_DEBUG("Min for network : %f", model_next_action_end);
 110       if(model_next_action_end>=0.0)
 111         surf_min = model_next_action_end;
 112     }
 113
 114     if (next_event_date < 0.0) {
 115       XBT_DEBUG("no next TRACE event. Stop searching for it");
 116       break;
 117     }
 118
 119     if ((surf_min == -1.0) || (next_event_date > NOW + surf_min)) break;
 120
 121     XBT_DEBUG("Updating models (min = %g, NOW = %g, next_event_date = %g)", surf_min, NOW, next_event_date);
 122     while ((event =
 123             tmgr_history_get_next_event_leq(history, next_event_date,
 124                                             &value,
 125                                             (void **) &resource))) {
 126       if (resource->isUsed() || xbt_dict_get_or_null(watched_hosts_lib, resource->getName())) {
 127         surf_min = next_event_date - NOW;
 128         XBT_DEBUG
 129             ("This event will modify model state. Next event set to %f",
 130              surf_min);
 131       }
 132       /* update state of model_obj according to new value. Does not touch lmm.
 133          It will be modified if needed when updating actions */
 134       XBT_DEBUG("Calling update_resource_state for resource %s with min %f",
 135              resource->getName(), surf_min);
 136       resource->updateState(event, value, next_event_date);
 137     }
 138   } while (1);
 139
 140   /* FIXME: Moved this test to here to avoid stopping simulation if there are actions running on cpus and all cpus are with availability = 0.
 141    * This may cause an infinite loop if one cpu has a trace with periodicity = 0 and the other a trace with periodicity > 0.
 142    * The options are: all traces with same periodicity(0 or >0) or we need to change the way how the events are managed */
 143   if (surf_min == -1.0) {
 144   XBT_DEBUG("No next event at all. Bail out now.");
 145     return -1.0;
 146   }
 147
 148   XBT_DEBUG("Duration set to %f", surf_min);
 149
 150   NOW = NOW + surf_min;
 151   /* FIXME: model_list or model_list_invoke? revisit here later */
 152   /* sequential version */
 153   xbt_dynar_foreach(all_existing_models, iter, model) {
 154           model->updateActionsState(NOW, surf_min);
 155   }
 156
 157   TRACE_paje_dump_buffer (0);
 158
 159   return surf_min;
 160 }
 161
 162 void routing_get_route_and_latency(sg_routing_edge_t src, sg_routing_edge_t dst,
 163                               xbt_dynar_t * route, double *latency){
 164   routing_platf->getRouteAndLatency(src, dst, route, latency);
 165 }
 166
 167 /*********
 168  * MODEL *
 169  *********/
 170
 171 surf_model_t surf_resource_model(const void *host, int level) {
 172   /* If level is SURF_WKS_LEVEL, ws is a host_CLM03 object. It has
 173    * surf_resource at the generic_resource field. */
 174   Resource *ws = static_cast<Resource*>(xbt_lib_get_level((xbt_dictelm_t) host, level));
 175   return ws->getModel();
 176 }
 177
 178 surf_action_t surf_model_extract_done_action_set(surf_model_t model){
 179   if (model->getDoneActionSet()->empty())
 180         return NULL;
 181   surf_action_t res = &model->getDoneActionSet()->front();
 182   model->getDoneActionSet()->pop_front();
 183   return res;
 184 }
 185
 186 surf_action_t surf_model_extract_failed_action_set(surf_model_t model){
 187   if (model->getFailedActionSet()->empty())
 188         return NULL;
 189   surf_action_t res = &model->getFailedActionSet()->front();
 190   model->getFailedActionSet()->pop_front();
 191   return res;
 192 }
 193
 194 surf_action_t surf_model_extract_ready_action_set(surf_model_t model){
 195   if (model->getReadyActionSet()->empty())
 196         return NULL;
 197   surf_action_t res = &model->getReadyActionSet()->front();
 198   model->getReadyActionSet()->pop_front();
 199   return res;
 200 }
 201
 202 surf_action_t surf_model_extract_running_action_set(surf_model_t model){
 203   if (model->getRunningActionSet()->empty())
 204         return NULL;
 205   surf_action_t res = &model->getRunningActionSet()->front();
 206   model->getRunningActionSet()->pop_front();
 207   return res;
 208 }
 209
 210 int surf_model_running_action_set_size(surf_model_t model){
 211   return model->getRunningActionSet()->size();
 212 }
 213
 214 surf_action_t surf_host_model_execute_parallel_task(surf_host_model_t model,
 215                                                     int host_nb,
 216                                             sg_host_t *host_list,
 217                                             double *flops_amount,
 218                                             double *bytes_amount,
 219                                             double rate){
 220   return static_cast<Action*>(model->executeParallelTask(host_nb, host_list, flops_amount, bytes_amount, rate));
 221 }
 222
 223 xbt_dynar_t surf_host_model_get_route(surf_host_model_t /*model*/,
 224                                              surf_resource_t src, surf_resource_t dst){
 225   xbt_dynar_t route = NULL;
 226   routing_platf->getRouteAndLatency(get_casted_host(src)->p_netElm,
 227                                             get_casted_host(dst)->p_netElm, &route, NULL);
 228   return route;
 229 }
 230
 231 void surf_vm_model_create(const char *name, surf_resource_t ind_phys_host){
 232   surf_vm_model->createVM(name, ind_phys_host);
 233 }
 234
 235 surf_action_t surf_network_model_communicate(surf_network_model_t model, sg_host_t src, sg_host_t dst, double size, double rate){
 236   return model->communicate(sg_host_edge(src), sg_host_edge(dst), size, rate);
 237 }
 238
 239 const char *surf_resource_name(surf_cpp_resource_t resource){
 240   return resource->getName();
 241 }
 242
 243 xbt_dict_t surf_resource_get_properties(surf_cpp_resource_t resource){
 244   return resource->getProperties();
 245 }
 246
 247 e_surf_resource_state_t surf_resource_get_state(surf_cpp_resource_t resource){
 248   return resource->getState();
 249 }
 250
 251 void surf_resource_set_state(surf_cpp_resource_t resource, e_surf_resource_state_t state){
 252   resource->setState(state);
 253 }
 254
 255 surf_action_t surf_host_sleep(surf_resource_t host, double duration){
 256   return get_casted_host(host)->sleep(duration);
 257 }
 258
 259 double surf_host_get_speed(surf_resource_t host, double load){
 260   return sg_host_surfcpu(host)->getSpeed(load);
 261 }
 262
 263 double surf_host_get_available_speed(surf_resource_t host){
 264   return sg_host_surfcpu(host)->getAvailableSpeed();
 265 }
 266
 267 int surf_host_get_core(surf_resource_t host){
 268   return sg_host_surfcpu(host)->getCore();
 269 }
 270
 271 surf_action_t surf_host_execute(surf_resource_t host, double size){
 272   return get_casted_host(host)->execute(size);
 273 }
 274
 275 double surf_host_get_current_power_peak(surf_resource_t host){
 276   return sg_host_surfcpu(host)->getCurrentPowerPeak();
 277 }
 278
 279 double surf_host_get_power_peak_at(surf_resource_t host, int pstate_index){
 280   return sg_host_surfcpu(host)->getPowerPeakAt(pstate_index);
 281 }
 282
 283 int surf_host_get_nb_pstates(surf_resource_t host){
 284   return sg_host_surfcpu(host)->getNbPstates();
 285 }
 286
 287 void surf_host_set_pstate(surf_resource_t host, int pstate_index){
 288         sg_host_surfcpu(host)->setPstate(pstate_index);
 289 }
 290 int surf_host_get_pstate(surf_resource_t host){
 291   return sg_host_surfcpu(host)->getPstate();
 292 }
 293 double surf_host_get_wattmin_at(surf_resource_t resource, int pstate){
 294   xbt_assert(surf_energy!=NULL, "The Energy plugin is not active. Please call sg_energy_plugin_init() during initialization.");
 295   std::map<Host*, HostEnergy*>::iterator hostIt = surf_energy->find(get_casted_host(resource));
 296   return hostIt->second->getWattMinAt(pstate);
 297 }
 298 double surf_host_get_wattmax_at(surf_resource_t resource, int pstate){
 299   xbt_assert(surf_energy!=NULL, "The Energy plugin is not active. Please call sg_energy_plugin_init() during initialization.");
 300   std::map<Host*, HostEnergy*>::iterator hostIt = surf_energy->find(get_casted_host(resource));
 301   return hostIt->second->getWattMaxAt(pstate);
 302 }
 303
 304 double surf_host_get_consumed_energy(surf_resource_t resource){
 305   xbt_assert(surf_energy!=NULL, "The Energy plugin is not active. Please call sg_energy_plugin_init() during initialization.");
 306   std::map<Host*, HostEnergy*>::iterator hostIt = surf_energy->find(get_casted_host(resource));
 307   return hostIt->second->getConsumedEnergy();
 308 }
 309
 310 xbt_dict_t surf_host_get_mounted_storage_list(surf_resource_t host){
 311   return get_casted_host(host)->getMountedStorageList();
 312 }
 313
 314 xbt_dynar_t surf_host_get_attached_storage_list(surf_resource_t host){
 315   return get_casted_host(host)->getAttachedStorageList();
 316 }
 317
 318 surf_action_t surf_host_open(surf_resource_t host, const char* fullpath){
 319   return get_casted_host(host)->open(fullpath);
 320 }
 321
 322 surf_action_t surf_host_close(surf_resource_t host, surf_file_t fd){
 323   return get_casted_host(host)->close(fd);
 324 }
 325
 326 int surf_host_unlink(surf_resource_t host, surf_file_t fd){
 327   return get_casted_host(host)->unlink(fd);
 328 }
 329
 330 size_t surf_host_get_size(surf_resource_t host, surf_file_t fd){
 331   return get_casted_host(host)->getSize(fd);
 332 }
 333
 334 surf_action_t surf_host_read(surf_resource_t host, surf_file_t fd, sg_size_t size){
 335   return get_casted_host(host)->read(fd, size);
 336 }
 337
 338 surf_action_t surf_host_write(surf_resource_t host, surf_file_t fd, sg_size_t size){
 339   return get_casted_host(host)->write(fd, size);
 340 }
 341
 342 xbt_dynar_t surf_host_get_info(surf_resource_t host, surf_file_t fd){
 343   return get_casted_host(host)->getInfo(fd);
 344 }
 345
 346 size_t surf_host_file_tell(surf_resource_t host, surf_file_t fd){
 347   return get_casted_host(host)->fileTell(fd);
 348 }
 349
 350 int surf_host_file_seek(surf_resource_t host, surf_file_t fd,
 351                                sg_offset_t offset, int origin){
 352   return get_casted_host(host)->fileSeek(fd, offset, origin);
 353 }
 354
 355 int surf_host_file_move(surf_resource_t host, surf_file_t fd, const char* fullpath){
 356   return get_casted_host(host)->fileMove(fd, fullpath);
 357 }
 358
 359 xbt_dynar_t surf_host_get_vms(surf_resource_t host){
 360   xbt_dynar_t vms = get_casted_host(host)->getVms();
 361   xbt_dynar_t vms_ = xbt_dynar_new(sizeof(sg_host_t), NULL);
 362   unsigned int cpt;
 363   VirtualMachine *vm;
 364   xbt_dynar_foreach(vms, cpt, vm) {
 365     sg_host_t vm_ = xbt_lib_get_elm_or_null(host_lib, vm->getName());
 366     xbt_dynar_push(vms_, &vm_);
 367   }
 368   xbt_dynar_free(&vms);
 369   return vms_;
 370 }
 371
 372 void surf_host_get_params(surf_resource_t host, vm_params_t params){
 373   get_casted_host(host)->getParams(params);
 374 }
 375
 376 void surf_host_set_params(surf_resource_t host, vm_params_t params){
 377   get_casted_host(host)->setParams(params);
 378 }
 379
 380 void surf_vm_destroy(surf_resource_t resource){
 381   /* Before clearing the entries in host_lib, we have to pick up resources. */
 382   VirtualMachine *vm = get_casted_vm(resource);
 383   char* name = xbt_dict_get_elm_key(resource);
 384   /* We deregister objects from host_lib, without invoking the freeing callback
 385    * of each level.
 386    *
 387    * Do not call xbt_lib_remove() here. It deletes all levels of the key,
 388    * including MSG_HOST_LEVEL and others. We should unregister only what we know.
 389    */
 390   sg_host_surfcpu_destroy((sg_host_t)resource);
 391   sg_host_edge_destroy((sg_host_t)resource,1);
 392   xbt_lib_unset(host_lib, name, SURF_HOST_LEVEL, 0);
 393
 394   /* TODO: comment out when VM storage is implemented. */
 395   // xbt_lib_unset(host_lib, name, SURF_STORAGE_LEVEL, 0);
 396
 397   delete vm;
 398 }
 399
 400 void surf_vm_suspend(surf_resource_t vm){
 401   get_casted_vm(vm)->suspend();
 402 }
 403
 404 void surf_vm_resume(surf_resource_t vm){
 405   get_casted_vm(vm)->resume();
 406 }
 407
 408 void surf_vm_save(surf_resource_t vm){
 409   get_casted_vm(vm)->save();
 410 }
 411
 412 void surf_vm_restore(surf_resource_t vm){
 413   get_casted_vm(vm)->restore();
 414 }
 415
 416 void surf_vm_migrate(surf_resource_t vm, surf_resource_t ind_vm_ws_dest){
 417   get_casted_vm(vm)->migrate(ind_vm_ws_dest);
 418 }
 419
 420 surf_resource_t surf_vm_get_pm(surf_resource_t vm){
 421   return get_casted_vm(vm)->getPm();
 422 }
 423
 424 void surf_vm_set_bound(surf_resource_t vm, double bound){
 425   return get_casted_vm(vm)->setBound(bound);
 426 }
 427
 428 void surf_vm_set_affinity(surf_resource_t vm, surf_resource_t cpu, unsigned long mask){
 429   return get_casted_vm(vm)->setAffinity(sg_host_surfcpu(cpu), mask);
 430 }
 431
 432 xbt_dict_t surf_storage_get_content(surf_resource_t resource){
 433   return static_cast<Storage*>(surf_storage_resource_priv(resource))->getContent();
 434 }
 435
 436 sg_size_t surf_storage_get_size(surf_resource_t resource){
 437   return static_cast<Storage*>(surf_storage_resource_priv(resource))->getSize();
 438 }
 439
 440 sg_size_t surf_storage_get_free_size(surf_resource_t resource){
 441   return static_cast<Storage*>(surf_storage_resource_priv(resource))->getFreeSize();
 442 }
 443
 444 sg_size_t surf_storage_get_used_size(surf_resource_t resource){
 445   return static_cast<Storage*>(surf_storage_resource_priv(resource))->getUsedSize();
 446 }
 447
 448 const char* surf_storage_get_host(surf_resource_t resource){
 449   return static_cast<Storage*>(surf_storage_resource_priv(resource))->p_attach;
 450 }
 451
 452 surf_action_t surf_cpu_execute(surf_resource_t cpu, double size){
 453   return sg_host_surfcpu(cpu)->execute(size);
 454 }
 455
 456 surf_action_t surf_cpu_sleep(surf_resource_t cpu, double duration){
 457   return sg_host_surfcpu(cpu)->sleep(duration);
 458 }
 459
 460 double surf_action_get_start_time(surf_action_t action){
 461   return action->getStartTime();
 462 }
 463
 464 double surf_action_get_finish_time(surf_action_t action){
 465   return action->getFinishTime();
 466 }
 467
 468 double surf_action_get_remains(surf_action_t action){
 469   return action->getRemains();
 470 }
 471
 472 void surf_action_unref(surf_action_t action){
 473   action->unref();
 474 }
 475
 476 void surf_action_suspend(surf_action_t action){
 477   action->suspend();
 478 }
 479
 480 void surf_action_resume(surf_action_t action){
 481   action->resume();
 482 }
 483
 484 void surf_action_cancel(surf_action_t action){
 485   action->cancel();
 486 }
 487
 488 void surf_action_set_priority(surf_action_t action, double priority){
 489   action->setPriority(priority);
 490 }
 491
 492 void surf_action_set_category(surf_action_t action, const char *category){
 493   action->setCategory(category);
 494 }
 495
 496 void *surf_action_get_data(surf_action_t action){
 497   return action->getData();
 498 }
 499
 500 void surf_action_set_data(surf_action_t action, void *data){
 501   action->setData(data);
 502 }
 503
 504 e_surf_action_state_t surf_action_get_state(surf_action_t action){
 505   return action->getState();
 506 }
 507
 508 double surf_action_get_cost(surf_action_t action){
 509   return action->getCost();
 510 }
 511
 512 void surf_cpu_action_set_affinity(surf_action_t action, surf_resource_t cpu, unsigned long mask) {
 513   static_cast<CpuAction*>(action)->setAffinity(sg_host_surfcpu(cpu), mask);
 514 }
 515
 516 void surf_cpu_action_set_bound(surf_action_t action, double bound) {
 517   static_cast<CpuAction*>(action)->setBound(bound);
 518 }
 519
 520 #ifdef HAVE_LATENCY_BOUND_TRACKING
 521 double surf_network_action_get_latency_limited(surf_action_t action) {
 522   return static_cast<NetworkActionPtr>(action)->getLatencyLimited();
 523 }
 524 #endif
 525
 526 surf_file_t surf_storage_action_get_file(surf_action_t action){
 527   return static_cast<StorageAction*>(action)->p_file;
 528 }