src/simix/smx_network.c

   1 /* Copyright (c) 2009, 2010. The SimGrid Team.
   2  * All rights reserved.                                                     */
   3
   4 /* This program is free software; you can redistribute it and/or modify it
   5  * under the terms of the license (GNU LGPL) which comes with this package. */
   6
   7 #include "private.h"
   8 #include "xbt/log.h"
   9 #include "mc/mc.h"
  10 #include "xbt/dict.h"
  11
  12 XBT_LOG_NEW_DEFAULT_SUBCATEGORY(simix_network, simix,
  13                                 "Logging specific to SIMIX (network)");
  14
  15 static xbt_dict_t rdv_points = NULL;
  16 unsigned long int smx_total_comms = 0;
  17
  18 static void SIMIX_waitany_req_remove_from_actions(smx_req_t req);
  19 static void SIMIX_comm_copy_data(smx_action_t comm);
  20 static smx_action_t SIMIX_comm_new(e_smx_comm_type_t type);
  21 static XBT_INLINE void SIMIX_rdv_push(smx_rdv_t rdv, smx_action_t comm);
  22 static XBT_INLINE void SIMIX_rdv_remove(smx_rdv_t rdv, smx_action_t comm);
  23 static smx_action_t SIMIX_rdv_get_request(smx_rdv_t rdv, e_smx_comm_type_t type,
  24                                           int (*match_fun)(void *, void *), void *);
  25 static void SIMIX_rdv_free(void *data);
  26
  27 void SIMIX_network_init(void)
  28 {
  29   rdv_points = xbt_dict_new_homogeneous(SIMIX_rdv_free);
  30 }
  31
  32 void SIMIX_network_exit(void)
  33 {
  34   xbt_dict_free(&rdv_points);
  35 }
  36
  37 /******************************************************************************/
  38 /*                           Rendez-Vous Points                               */
  39 /******************************************************************************/
  40
  41 smx_rdv_t SIMIX_rdv_create(const char *name)
  42 {
  43   /* two processes may have pushed the same rdv_create request at the same time */
  44   smx_rdv_t rdv = name ? xbt_dict_get_or_null(rdv_points, name) : NULL;
  45
  46   if (!rdv) {
  47     rdv = xbt_new0(s_smx_rvpoint_t, 1);
  48     rdv->name = name ? xbt_strdup(name) : NULL;
  49     rdv->comm_fifo = xbt_fifo_new();
  50
  51     if (rdv->name)
  52       xbt_dict_set(rdv_points, rdv->name, rdv, NULL);
  53   }
  54   return rdv;
  55 }
  56
  57 void SIMIX_rdv_destroy(smx_rdv_t rdv)
  58 {
  59   if (rdv->name)
  60     xbt_dict_remove(rdv_points, rdv->name);
  61 }
  62
  63 void SIMIX_rdv_free(void *data)
  64 {
  65   smx_rdv_t rdv = (smx_rdv_t) data;
  66   xbt_free(rdv->name);
  67   xbt_fifo_free(rdv->comm_fifo);
  68   xbt_free(rdv);
  69 }
  70
  71 smx_rdv_t SIMIX_rdv_get_by_name(const char *name)
  72 {
  73   return xbt_dict_get_or_null(rdv_points, name);
  74 }
  75
  76 int SIMIX_rdv_comm_count_by_host(smx_rdv_t rdv, smx_host_t host)
  77 {
  78   smx_action_t comm = NULL;
  79   xbt_fifo_item_t item = NULL;
  80   int count = 0;
  81
  82   xbt_fifo_foreach(rdv->comm_fifo, item, comm, smx_action_t) {
  83     if (comm->comm.src_proc->smx_host == host)
  84       count++;
  85   }
  86
  87   return count;
  88 }
  89
  90 smx_action_t SIMIX_rdv_get_head(smx_rdv_t rdv)
  91 {
  92   return xbt_fifo_get_item_content(xbt_fifo_get_first_item(rdv->comm_fifo));
  93 }
  94
  95 /**
  96  *  \brief Push a communication request into a rendez-vous point
  97  *  \param rdv The rendez-vous point
  98  *  \param comm The communication request
  99  */
 100 static XBT_INLINE void SIMIX_rdv_push(smx_rdv_t rdv, smx_action_t comm)
 101 {
 102   xbt_fifo_push(rdv->comm_fifo, comm);
 103   comm->comm.rdv = rdv;
 104 }
 105
 106 /**
 107  *  \brief Remove a communication request from a rendez-vous point
 108  *  \param rdv The rendez-vous point
 109  *  \param comm The communication request
 110  */
 111 static XBT_INLINE void SIMIX_rdv_remove(smx_rdv_t rdv, smx_action_t comm)
 112 {
 113   xbt_fifo_remove(rdv->comm_fifo, comm);
 114   comm->comm.rdv = NULL;
 115 }
 116
 117 /**
 118  *  \brief Wrapper to SIMIX_rdv_get_request
 119  */
 120 smx_action_t SIMIX_comm_get_send_match(smx_rdv_t rdv, int (*match_fun)(void*, void*), void* data) {
 121    return SIMIX_rdv_get_request(rdv, SIMIX_COMM_SEND, match_fun, data);
 122 }
 123
 124 /**
 125  *  \brief Checks if there is a communication action queued in a rendez-vous matching our needs
 126  *  \param type The type of communication we are looking for (comm_send, comm_recv)
 127  *  \return The communication action if found, NULL otherwise
 128  */
 129 smx_action_t SIMIX_rdv_get_request(smx_rdv_t rdv, e_smx_comm_type_t type,
 130                                    int (*match_fun)(void *, void *), void *data)
 131 {
 132   // FIXME rewrite this function by using SIMIX_rdv_has_send/recv_match
 133   smx_action_t action;
 134   xbt_fifo_item_t item;
 135   void* req_data = NULL;
 136
 137   xbt_fifo_foreach(rdv->comm_fifo, item, action, smx_action_t) {
 138     if (action->comm.type == SIMIX_COMM_SEND) {
 139       req_data = action->comm.src_data;
 140     } else if (action->comm.type == SIMIX_COMM_RECEIVE) {
 141       req_data = action->comm.dst_data;
 142     }
 143     if (action->comm.type == type && (!match_fun || match_fun(data, req_data))) {
 144       XBT_DEBUG("Found a matching communication action %p", action);
 145       xbt_fifo_remove_item(rdv->comm_fifo, item);
 146       xbt_fifo_free_item(item);
 147       action->comm.refcount++;
 148       action->comm.rdv = NULL;
 149       return action;
 150     }
 151     XBT_DEBUG("Sorry, communication action %p does not match our needs:"
 152            " its type is %d but we are looking for a comm of type %d",
 153            action, action->comm.type, type);
 154   }
 155   XBT_DEBUG("No matching communication action found");
 156   return NULL;
 157 }
 158
 159 /**
 160  *  \brief Checks if there is a send communication action
 161  *  queued in a rendez-vous matching our needs.
 162  *  \return 1 if found, 0 otherwise
 163  */
 164 int SIMIX_comm_has_send_match(smx_rdv_t rdv, int (*match_fun)(void*, void*), void* data) {
 165
 166   smx_action_t action;
 167   xbt_fifo_item_t item;
 168
 169   xbt_fifo_foreach(rdv->comm_fifo, item, action, smx_action_t){
 170     if (action->comm.type == SIMIX_COMM_SEND
 171         && (!match_fun || match_fun(data, action->comm.src_data))) {
 172       XBT_DEBUG("Found a matching communication action %p", action);
 173       return 1;
 174     }
 175   }
 176   XBT_DEBUG("No matching communication action found");
 177   return 0;
 178 }
 179
 180 /**
 181  *  \brief Checks if there is a recv communication action
 182  *  queued in a rendez-vous matching our needs.
 183  *  \return 1 if found, 0 otherwise
 184  */
 185 int SIMIX_comm_has_recv_match(smx_rdv_t rdv, int (*match_fun)(void*, void*), void* data) {
 186
 187   smx_action_t action;
 188   xbt_fifo_item_t item;
 189
 190   xbt_fifo_foreach(rdv->comm_fifo, item, action, smx_action_t) {
 191     if (action->comm.type == SIMIX_COMM_RECEIVE
 192         && (!match_fun || match_fun(data, action->comm.dst_data))) {
 193       XBT_DEBUG("Found a matching communication action %p", action);
 194       return 1;
 195     }
 196   }
 197   XBT_DEBUG("No matching communication action found");
 198   return 0;
 199 }
 200
 201 /******************************************************************************/
 202 /*                            Comunication Actions                            */
 203 /******************************************************************************/
 204
 205 /**
 206  *  \brief Creates a new comunicate action
 207  *  \param type The type of request (comm_send, comm_recv)
 208  *  \return The new comunicate action
 209  */
 210 smx_action_t SIMIX_comm_new(e_smx_comm_type_t type)
 211 {
 212   smx_action_t act;
 213
 214   /* alloc structures */
 215   act = xbt_mallocator_get(simix_global->action_mallocator);
 216
 217   act->type = SIMIX_ACTION_COMMUNICATE;
 218   act->state = SIMIX_WAITING;
 219
 220   /* set communication */
 221   act->comm.type = type;
 222   act->comm.refcount = 1;
 223
 224 #ifdef HAVE_LATENCY_BOUND_TRACKING
 225   //initialize with unknown value
 226   act->latency_limited = -1;
 227 #endif
 228
 229 #ifdef HAVE_TRACING
 230   act->category = NULL;
 231 #endif
 232
 233   XBT_DEBUG("Create communicate action %p", act);
 234   ++smx_total_comms;
 235
 236   return act;
 237 }
 238
 239 /**
 240  *  \brief Destroy a communicate action
 241  *  \param action The communicate action to be destroyed
 242  */
 243 void SIMIX_comm_destroy(smx_action_t action)
 244 {
 245   XBT_DEBUG("Destroy action %p (refcount: %d), state: %d",
 246       action, action->comm.refcount, action->state);
 247
 248   if (action->comm.refcount <= 0) {
 249         xbt_backtrace_display_current();
 250     xbt_die("the refcount of comm %p is already 0 before decreasing it. "
 251             "That's a bug!", action);
 252   }
 253   action->comm.refcount--;
 254   if (action->comm.refcount > 0)
 255     return;
 256   XBT_DEBUG("Really free communication %p; refcount is now %d", action,
 257         action->comm.refcount);
 258
 259 #ifdef HAVE_LATENCY_BOUND_TRACKING
 260     action->latency_limited = SIMIX_comm_is_latency_bounded( action ) ;
 261 #endif
 262
 263   xbt_free(action->name);
 264   SIMIX_comm_destroy_internal_actions(action);
 265
 266   if (action->comm.detached && action->state != SIMIX_DONE) {
 267     /* the communication has failed and was detached:
 268      * we have to free the buffer */
 269     action->comm.clean_fun(action->comm.src_buff);
 270     action->comm.src_buff = NULL;
 271   }
 272
 273   xbt_mallocator_release(simix_global->action_mallocator, action);
 274 }
 275
 276 void SIMIX_comm_destroy_internal_actions(smx_action_t action)
 277 {
 278   if (action->comm.surf_comm){
 279 #ifdef HAVE_LATENCY_BOUND_TRACKING
 280     action->latency_limited = SIMIX_comm_is_latency_bounded(action);
 281 #endif
 282     action->comm.surf_comm->model_type->action_unref(action->comm.surf_comm);
 283     action->comm.surf_comm = NULL;
 284   }
 285
 286   if (action->comm.src_timeout){
 287     action->comm.src_timeout->model_type->action_unref(action->comm.src_timeout);
 288     action->comm.src_timeout = NULL;
 289   }
 290
 291   if (action->comm.dst_timeout){
 292     action->comm.dst_timeout->model_type->action_unref(action->comm.dst_timeout);
 293     action->comm.dst_timeout = NULL;
 294   }
 295 }
 296
 297 smx_action_t SIMIX_comm_isend(smx_process_t src_proc, smx_rdv_t rdv,
 298                               double task_size, double rate,
 299                               void *src_buff, size_t src_buff_size,
 300                               int (*match_fun)(void *, void *),
 301                               void (*clean_fun)(void *), // used to free the action in case of problem after a detached send
 302                               void *data,
 303                               int detached)
 304 {
 305   smx_action_t action;
 306
 307   /* Look for communication request matching our needs.
 308      If it is not found then create it and push it into the rendez-vous point */
 309   action = SIMIX_rdv_get_request(rdv, SIMIX_COMM_RECEIVE, match_fun, data);
 310
 311   if (!action) {
 312     action = SIMIX_comm_new(SIMIX_COMM_SEND);
 313     SIMIX_rdv_push(rdv, action);
 314   } else {
 315     action->state = SIMIX_READY;
 316     action->comm.type = SIMIX_COMM_READY;
 317   }
 318   xbt_fifo_push(src_proc->comms, action);
 319
 320   /* if the communication action is detached then decrease the refcount
 321    * by one, so it will be eliminated by the receiver's destroy call */
 322   if (detached) {
 323     action->comm.detached = 1;
 324     action->comm.refcount--;
 325     action->comm.clean_fun = clean_fun;
 326   } else {
 327     action->comm.clean_fun = NULL;
 328   }
 329
 330   /* Setup the communication request */
 331   action->comm.src_proc = src_proc;
 332   action->comm.task_size = task_size;
 333   action->comm.rate = rate;
 334   action->comm.src_buff = src_buff;
 335   action->comm.src_buff_size = src_buff_size;
 336   action->comm.src_data = data;
 337
 338   if (MC_IS_ENABLED) {
 339     action->state = SIMIX_RUNNING;
 340     return action;
 341   }
 342
 343   SIMIX_comm_start(action);
 344   return (detached ? NULL : action);
 345 }
 346
 347 smx_action_t SIMIX_comm_irecv(smx_process_t dst_proc, smx_rdv_t rdv,
 348                       void *dst_buff, size_t *dst_buff_size,
 349                       int (*match_fun)(void *, void *), void *data)
 350 {
 351   smx_action_t action;
 352
 353   /* Look for communication request matching our needs.
 354    * If it is not found then create it and push it into the rendez-vous point
 355    */
 356   action = SIMIX_rdv_get_request(rdv, SIMIX_COMM_SEND, match_fun, data);
 357
 358   if (!action) {
 359     action = SIMIX_comm_new(SIMIX_COMM_RECEIVE);
 360     SIMIX_rdv_push(rdv, action);
 361   } else {
 362     action->state = SIMIX_READY;
 363     action->comm.type = SIMIX_COMM_READY;
 364   }
 365   xbt_fifo_push(dst_proc->comms, action);
 366
 367   /* Setup communication request */
 368   action->comm.dst_proc = dst_proc;
 369   action->comm.dst_buff = dst_buff;
 370   action->comm.dst_buff_size = dst_buff_size;
 371   action->comm.dst_data = data;
 372
 373   if (MC_IS_ENABLED) {
 374     action->state = SIMIX_RUNNING;
 375     return action;
 376   }
 377
 378   SIMIX_comm_start(action);
 379   return action;
 380 }
 381
 382 void SIMIX_pre_comm_wait(smx_req_t req, smx_action_t action, double timeout, int idx)
 383 {
 384
 385   /* the request may be a wait, a send or a recv */
 386   surf_action_t sleep;
 387
 388   /* Associate this request to the action */
 389   xbt_fifo_push(action->request_list, req);
 390   req->issuer->waiting_action = action;
 391
 392   if (MC_IS_ENABLED) {
 393     if (idx == 0) {
 394       action->state = SIMIX_DONE;
 395     } else {
 396       /* If we reached this point, the wait request must have a timeout */
 397       /* Otherwise it shouldn't be enabled and executed by the MC */
 398       if (timeout == -1)
 399         THROW_IMPOSSIBLE;
 400
 401       if (action->comm.src_proc == req->issuer)
 402         action->state = SIMIX_SRC_TIMEOUT;
 403       else
 404         action->state = SIMIX_DST_TIMEOUT;
 405     }
 406
 407     SIMIX_comm_finish(action);
 408     return;
 409   }
 410
 411   /* If the action has already finish perform the error handling, */
 412   /* otherwise set up a waiting timeout on the right side         */
 413   if (action->state != SIMIX_WAITING && action->state != SIMIX_RUNNING) {
 414     SIMIX_comm_finish(action);
 415   } else { /* if (timeout >= 0) { we need a surf sleep action even when there is no timeout, otherwise surf won't tell us when the host fails */
 416     sleep = surf_workstation_model->extension.workstation.sleep(req->issuer->smx_host->host, timeout);
 417     surf_workstation_model->action_data_set(sleep, action);
 418
 419     if (req->issuer == action->comm.src_proc)
 420       action->comm.src_timeout = sleep;
 421     else
 422       action->comm.dst_timeout = sleep;
 423   }
 424 }
 425
 426 void SIMIX_pre_comm_test(smx_req_t req)
 427 {
 428   smx_action_t action = req->comm_test.comm;
 429
 430   if(MC_IS_ENABLED){
 431     req->comm_test.result = action->comm.src_proc && action->comm.dst_proc;
 432     if(req->comm_test.result){
 433       action->state = SIMIX_DONE;
 434       xbt_fifo_push(action->request_list, req);
 435       SIMIX_comm_finish(action);
 436     }else{
 437       SIMIX_request_answer(req);
 438     }
 439     return;
 440   }
 441
 442   req->comm_test.result = (action->state != SIMIX_WAITING && action->state != SIMIX_RUNNING);
 443   if (req->comm_test.result) {
 444     xbt_fifo_push(action->request_list, req);
 445     SIMIX_comm_finish(action);
 446   } else {
 447     SIMIX_request_answer(req);
 448   }
 449 }
 450
 451 void SIMIX_pre_comm_testany(smx_req_t req, int idx)
 452 {
 453   unsigned int cursor;
 454   smx_action_t action;
 455   xbt_dynar_t actions = req->comm_testany.comms;
 456   req->comm_testany.result = -1;
 457
 458   if (MC_IS_ENABLED){
 459     if(idx == -1){
 460       SIMIX_request_answer(req);
 461     }else{
 462       action = xbt_dynar_get_as(actions, idx, smx_action_t);
 463       req->comm_testany.result = idx;
 464       xbt_fifo_push(action->request_list, req);
 465       action->state = SIMIX_DONE;
 466       SIMIX_comm_finish(action);
 467     }
 468     return;
 469   }
 470
 471   xbt_dynar_foreach(req->comm_testany.comms,cursor,action) {
 472     if (action->state != SIMIX_WAITING && action->state != SIMIX_RUNNING) {
 473       req->comm_testany.result = cursor;
 474       xbt_fifo_push(action->request_list, req);
 475       SIMIX_comm_finish(action);
 476       return;
 477     }
 478   }
 479   SIMIX_request_answer(req);
 480 }
 481
 482 void SIMIX_pre_comm_waitany(smx_req_t req, int idx)
 483 {
 484   smx_action_t action;
 485   unsigned int cursor = 0;
 486   xbt_dynar_t actions = req->comm_waitany.comms;
 487
 488   if (MC_IS_ENABLED){
 489     action = xbt_dynar_get_as(actions, idx, smx_action_t);
 490     xbt_fifo_push(action->request_list, req);
 491     req->comm_waitany.result = idx;
 492     action->state = SIMIX_DONE;
 493     SIMIX_comm_finish(action);
 494     return;
 495   }
 496
 497   xbt_dynar_foreach(actions, cursor, action){
 498     /* Associate this request to the action */
 499     xbt_fifo_push(action->request_list, req);
 500     if (action->state != SIMIX_WAITING && action->state != SIMIX_RUNNING){
 501       SIMIX_comm_finish(action);
 502       break;
 503     }
 504   }
 505 }
 506
 507 void SIMIX_waitany_req_remove_from_actions(smx_req_t req)
 508 {
 509   smx_action_t action;
 510   unsigned int cursor = 0;
 511   xbt_dynar_t actions = req->comm_waitany.comms;
 512
 513   xbt_dynar_foreach(actions, cursor, action){
 514     xbt_fifo_remove(action->request_list, req);
 515   }
 516 }
 517
 518 /**
 519  *  \brief Start the simulation of a communication request
 520  *  \param action The communication action
 521  */
 522
 523 XBT_INLINE void SIMIX_comm_start(smx_action_t action)
 524 {
 525   /* If both the sender and the receiver are already there, start the communication */
 526   if (action->state == SIMIX_READY) {
 527
 528     smx_host_t sender = action->comm.src_proc->smx_host;
 529     smx_host_t receiver = action->comm.dst_proc->smx_host;
 530
 531     XBT_DEBUG("Starting communication %p from '%s' to '%s'", action,
 532            SIMIX_host_get_name(sender), SIMIX_host_get_name(receiver));
 533
 534     action->comm.surf_comm = surf_workstation_model->extension.workstation.
 535         communicate(sender->host, receiver->host, action->comm.task_size, action->comm.rate);
 536
 537     surf_workstation_model->action_data_set(action->comm.surf_comm, action);
 538
 539     action->state = SIMIX_RUNNING;
 540
 541     /* If a link is failed, detect it immediately */
 542     if (surf_workstation_model->action_state_get(action->comm.surf_comm) == SURF_ACTION_FAILED) {
 543       XBT_DEBUG("Communication from '%s' to '%s' failed to start because of a link failure",
 544           SIMIX_host_get_name(sender), SIMIX_host_get_name(receiver));
 545       action->state = SIMIX_LINK_FAILURE;
 546       SIMIX_comm_destroy_internal_actions(action);
 547     }
 548
 549     /* If any of the process is suspend, create the action but stop its execution,
 550        it will be restarted when the sender process resume */
 551     if (SIMIX_process_is_suspended(action->comm.src_proc) ||
 552         SIMIX_process_is_suspended(action->comm.dst_proc)) {
 553       /* FIXME: check what should happen with the action state */
 554       surf_workstation_model->suspend(action->comm.surf_comm);
 555     }
 556   }
 557 }
 558
 559 /**
 560  * \brief Answers the SIMIX requests associated to a communication action.
 561  * \param action a finished communication action
 562  */
 563 void SIMIX_comm_finish(smx_action_t action)
 564 {
 565   volatile unsigned int destroy_count = 0;
 566   smx_req_t req;
 567
 568   while ((req = xbt_fifo_shift(action->request_list))) {
 569
 570     /* If a waitany request is waiting for this action to finish, then remove
 571        it from the other actions in the waitany list. Afterwards, get the
 572        position of the actual action in the waitany request's actions dynar and
 573        return it as the result of the call */
 574     if (req->call == REQ_COMM_WAITANY) {
 575       SIMIX_waitany_req_remove_from_actions(req);
 576       if (!MC_IS_ENABLED)
 577         req->comm_waitany.result = xbt_dynar_search(req->comm_waitany.comms, &action);
 578     }
 579
 580     /* If the action is still in a rendez-vous point then remove from it */
 581     if (action->comm.rdv)
 582       SIMIX_rdv_remove(action->comm.rdv, action);
 583
 584     XBT_DEBUG("SIMIX_comm_finish: action state = %d", action->state);
 585
 586     /* Check out for errors */
 587     switch (action->state) {
 588
 589       case SIMIX_DONE:
 590         XBT_DEBUG("Communication %p complete!", action);
 591         SIMIX_comm_copy_data(action);
 592         break;
 593
 594       case SIMIX_SRC_TIMEOUT:
 595         TRY {
 596           THROWF(timeout_error, 0, "Communication timeouted because of sender");
 597         }
 598         CATCH(req->issuer->running_ctx->exception) {
 599           req->issuer->doexception = 1;
 600         }
 601         break;
 602
 603       case SIMIX_DST_TIMEOUT:
 604         TRY {
 605           THROWF(timeout_error, 0, "Communication timeouted because of receiver");
 606         }
 607         CATCH(req->issuer->running_ctx->exception) {
 608           req->issuer->doexception = 1;
 609         }
 610         break;
 611
 612       case SIMIX_SRC_HOST_FAILURE:
 613         TRY {
 614           if (req->issuer == action->comm.src_proc)
 615             THROWF(host_error, 0, "Host failed");
 616           else
 617             THROWF(network_error, 0, "Remote peer failed");
 618         }
 619         CATCH(req->issuer->running_ctx->exception) {
 620           req->issuer->doexception = 1;
 621         }
 622         break;
 623
 624       case SIMIX_DST_HOST_FAILURE:
 625         TRY {
 626           if (req->issuer == action->comm.dst_proc)
 627             THROWF(host_error, 0, "Host failed");
 628           else
 629             THROWF(network_error, 0, "Remote peer failed");
 630         }
 631         CATCH(req->issuer->running_ctx->exception) {
 632           req->issuer->doexception = 1;
 633         }
 634         break;
 635
 636       case SIMIX_LINK_FAILURE:
 637         TRY {
 638           XBT_INFO("Link failure in action %p between '%s' and '%s': posting an exception to the issuer: %s (%p) detached:%d",
 639               action,
 640               action->comm.src_proc ? action->comm.src_proc->smx_host->name : NULL,
 641               action->comm.dst_proc ? action->comm.dst_proc->smx_host->name : NULL,
 642               req->issuer->name, req->issuer,action->comm.detached);
 643           if (action->comm.src_proc == req->issuer) {
 644                   XBT_INFO("I'm source");
 645           } else if (action->comm.dst_proc == req->issuer) {
 646                   XBT_INFO("I'm dest");
 647           } else {
 648                   XBT_INFO("I'm neither source nor dest");
 649           }
 650           THROWF(network_error, 0, "Link failure");
 651         }
 652         CATCH(req->issuer->running_ctx->exception) {
 653           req->issuer->doexception = 1;
 654         }
 655         break;
 656
 657       case SIMIX_CANCELED:
 658         TRY {
 659           if (req->issuer == action->comm.dst_proc) {
 660             THROWF(cancel_error, 0, "Communication canceled by the sender");
 661           }
 662           else {
 663             THROWF(cancel_error, 0, "Communication canceled by the receiver");
 664           }
 665         }
 666         CATCH(req->issuer->running_ctx->exception) {
 667           req->issuer->doexception = 1;
 668         }
 669         break;
 670
 671       default:
 672         xbt_die("Unexpected action state in SIMIX_comm_finish: %d", action->state);
 673     }
 674
 675     /* if there is an exception during a waitany or a testany, indicate the position of the failed communication */
 676     if (req->issuer->doexception) {
 677       if (req->call == REQ_COMM_WAITANY) {
 678         req->issuer->running_ctx->exception.value = xbt_dynar_search(req->comm_waitany.comms, &action);
 679       }
 680       else if (req->call == REQ_COMM_TESTANY) {
 681         req->issuer->running_ctx->exception.value = xbt_dynar_search(req->comm_testany.comms, &action);
 682       }
 683     }
 684
 685     req->issuer->waiting_action = NULL;
 686     xbt_fifo_remove(req->issuer->comms, action);
 687     SIMIX_request_answer(req);
 688     destroy_count++;
 689   }
 690
 691   while (destroy_count-- > 0)
 692     SIMIX_comm_destroy(action);
 693 }
 694
 695 /**
 696  * \brief This function is called when a Surf communication action is finished.
 697  * \param action the corresponding Simix communication
 698  */
 699 void SIMIX_post_comm(smx_action_t action)
 700 {
 701   /* Update action state */
 702   if (action->comm.src_timeout &&
 703      surf_workstation_model->action_state_get(action->comm.src_timeout) == SURF_ACTION_DONE)
 704      action->state = SIMIX_SRC_TIMEOUT;
 705   else if (action->comm.dst_timeout &&
 706           surf_workstation_model->action_state_get(action->comm.dst_timeout) == SURF_ACTION_DONE)
 707      action->state = SIMIX_DST_TIMEOUT;
 708   else if (action->comm.src_timeout &&
 709           surf_workstation_model->action_state_get(action->comm.src_timeout) == SURF_ACTION_FAILED)
 710      action->state = SIMIX_SRC_HOST_FAILURE;
 711   else if (action->comm.dst_timeout &&
 712           surf_workstation_model->action_state_get(action->comm.dst_timeout) == SURF_ACTION_FAILED)
 713      action->state = SIMIX_DST_HOST_FAILURE;
 714   else if (action->comm.surf_comm &&
 715           surf_workstation_model->action_state_get(action->comm.surf_comm) == SURF_ACTION_FAILED) {
 716           XBT_INFO("Puta madre. Surf says that the link broke");
 717      action->state = SIMIX_LINK_FAILURE;
 718   } else
 719     action->state = SIMIX_DONE;
 720
 721   XBT_DEBUG("SIMIX_post_comm: comm %p, state %d, src_proc %p, dst_proc %p, detached: %d",
 722       action, action->state, action->comm.src_proc, action->comm.dst_proc, action->comm.detached);
 723
 724   /* destroy the surf actions associated with the Simix communication */
 725   SIMIX_comm_destroy_internal_actions(action);
 726
 727   /* remove the communication action from the list of pending communications
 728    * of both processes (if they still exist) */
 729   if (action->comm.src_proc) {
 730     xbt_fifo_remove(action->comm.src_proc->comms, action);
 731   }
 732   if (action->comm.dst_proc) {
 733     xbt_fifo_remove(action->comm.dst_proc->comms, action);
 734   }
 735
 736   /* if there are requests associated with the action, then answer them */
 737   if (xbt_fifo_size(action->request_list)) {
 738     SIMIX_comm_finish(action);
 739   }
 740 }
 741
 742 void SIMIX_comm_cancel(smx_action_t action)
 743 {
 744   /* if the action is a waiting state means that it is still in a rdv */
 745   /* so remove from it and delete it */
 746   if (action->state == SIMIX_WAITING) {
 747     SIMIX_rdv_remove(action->comm.rdv, action);
 748     action->state = SIMIX_CANCELED;
 749   }
 750   else if (!MC_IS_ENABLED /* when running the MC there are no surf actions */
 751       && (action->state == SIMIX_READY || action->state == SIMIX_RUNNING)) {
 752
 753     surf_workstation_model->action_cancel(action->comm.surf_comm);
 754   }
 755 }
 756
 757 void SIMIX_comm_suspend(smx_action_t action)
 758 {
 759   /*FIXME: shall we suspend also the timeout actions? */
 760   surf_workstation_model->suspend(action->comm.surf_comm);
 761 }
 762
 763 void SIMIX_comm_resume(smx_action_t action)
 764 {
 765   /*FIXME: check what happen with the timeouts */
 766   surf_workstation_model->resume(action->comm.surf_comm);
 767 }
 768
 769
 770 /************* Action Getters **************/
 771
 772 /**
 773  *  \brief get the amount remaining from the communication
 774  *  \param action The communication
 775  */
 776 double SIMIX_comm_get_remains(smx_action_t action)
 777 {
 778   double remains;
 779
 780   if(!action){
 781       return 0;
 782   }
 783
 784   switch (action->state) {
 785
 786     case SIMIX_RUNNING:
 787       remains = surf_workstation_model->get_remains(action->comm.surf_comm);
 788       break;
 789
 790     case SIMIX_WAITING:
 791     case SIMIX_READY:
 792       remains = 0; /*FIXME: check what should be returned */
 793       break;
 794
 795     default:
 796       remains = 0; /*FIXME: is this correct? */
 797       break;
 798   }
 799   return remains;
 800 }
 801
 802 e_smx_state_t SIMIX_comm_get_state(smx_action_t action)
 803 {
 804   return action->state;
 805 }
 806
 807 /**
 808  *  \brief Return the user data associated to the sender of the communication
 809  *  \param action The communication
 810  *  \return the user data
 811  */
 812 void* SIMIX_comm_get_src_data(smx_action_t action)
 813 {
 814   return action->comm.src_data;
 815 }
 816
 817 /**
 818  *  \brief Return the user data associated to the receiver of the communication
 819  *  \param action The communication
 820  *  \return the user data
 821  */
 822 void* SIMIX_comm_get_dst_data(smx_action_t action)
 823 {
 824   return action->comm.dst_data;
 825 }
 826
 827 smx_process_t SIMIX_comm_get_src_proc(smx_action_t action)
 828 {
 829   return action->comm.src_proc;
 830 }
 831
 832 smx_process_t SIMIX_comm_get_dst_proc(smx_action_t action)
 833 {
 834   return action->comm.dst_proc;
 835 }
 836
 837 #ifdef HAVE_LATENCY_BOUND_TRACKING
 838 /**
 839  *  \brief verify if communication is latency bounded
 840  *  \param comm The communication
 841  */
 842 XBT_INLINE int SIMIX_comm_is_latency_bounded(smx_action_t action)
 843 {
 844   if(!action){
 845       return 0;
 846   }
 847   if (action->comm.surf_comm){
 848       XBT_DEBUG("Getting latency limited for surf_action (%p)", action->comm.surf_comm);
 849       action->latency_limited = surf_workstation_model->get_latency_limited(action->comm.surf_comm);
 850       XBT_DEBUG("Action limited is %d", action->latency_limited);
 851   }
 852   return action->latency_limited;
 853 }
 854 #endif
 855
 856 /******************************************************************************/
 857 /*                    SIMIX_comm_copy_data callbacks                       */
 858 /******************************************************************************/
 859 static void (*SIMIX_comm_copy_data_callback) (smx_action_t, size_t) =
 860     &SIMIX_comm_copy_pointer_callback;
 861
 862 void
 863 SIMIX_comm_set_copy_data_callback(void (*callback) (smx_action_t, size_t))
 864 {
 865   SIMIX_comm_copy_data_callback = callback;
 866 }
 867
 868 void SIMIX_comm_copy_pointer_callback(smx_action_t comm, size_t buff_size)
 869 {
 870   xbt_assert((buff_size == sizeof(void *)),
 871               "Cannot copy %zu bytes: must be sizeof(void*)", buff_size);
 872   *(void **) (comm->comm.dst_buff) = comm->comm.src_buff;
 873 }
 874
 875 void SIMIX_comm_copy_buffer_callback(smx_action_t comm, size_t buff_size)
 876 {
 877   XBT_DEBUG("Copy the data over");
 878   memcpy(comm->comm.dst_buff, comm->comm.src_buff, buff_size);
 879 }
 880
 881 void smpi_comm_copy_data_callback(smx_action_t comm, size_t buff_size)
 882 {
 883   XBT_DEBUG("Copy the data over");
 884   memcpy(comm->comm.dst_buff, comm->comm.src_buff, buff_size);
 885   if (comm->comm.detached) { // if this is a detached send, the source buffer was duplicated by SMPI sender to make the original buffer available to the application ASAP
 886           comm->comm.clean_fun(comm->comm.src_buff);
 887           comm->comm.src_buff = NULL;
 888   }
 889 }
 890
 891 /**
 892  *  \brief Copy the communication data from the sender's buffer to the receiver's one
 893  *  \param comm The communication
 894  */
 895 void SIMIX_comm_copy_data(smx_action_t comm)
 896 {
 897   size_t buff_size = comm->comm.src_buff_size;
 898   /* If there is no data to be copy then return */
 899   if (!comm->comm.src_buff || !comm->comm.dst_buff || comm->comm.copied == 1)
 900     return;
 901
 902   XBT_DEBUG("Copying comm %p data from %s (%p) -> %s (%p) (%zu bytes)",
 903          comm,
 904          comm->comm.src_proc->smx_host->name, comm->comm.src_buff,
 905          comm->comm.dst_proc->smx_host->name, comm->comm.dst_buff, buff_size);
 906
 907   /* Copy at most dst_buff_size bytes of the message to receiver's buffer */
 908   if (comm->comm.dst_buff_size)
 909     buff_size = MIN(buff_size, *(comm->comm.dst_buff_size));
 910
 911   /* Update the receiver's buffer size to the copied amount */
 912   if (comm->comm.dst_buff_size)
 913     *comm->comm.dst_buff_size = buff_size;
 914
 915   if (buff_size > 0)
 916     SIMIX_comm_copy_data_callback (comm, buff_size);
 917
 918   /* Set the copied flag so we copy data only once */
 919   /* (this function might be called from both communication ends) */
 920   comm->comm.copied = 1;
 921 }