src/gras/Transport/transport_plugin_sg.c

   1 /* $Id$ */
   2
   3 /* file trp (transport) - send/receive a bunch of bytes in SG realm         */
   4
   5 /* Note that this is only used to debug other parts of GRAS since message   */
   6 /*  exchange in SG realm is implemented directly without mimicing real life */
   7 /*  This would be terribly unefficient.                                     */
   8
   9 /* Copyright (c) 2004 Martin Quinson. All rights reserved.                  */
  10
  11 /* This program is free software; you can redistribute it and/or modify it
  12  * under the terms of the license (GNU LGPL) which comes with this package. */
  13
  14 #include "xbt/ex.h"
  15
  16 #include "gras/Msg/msg_private.h"
  17 #include "gras/Transport/transport_private.h"
  18 #include "gras/Virtu/virtu_sg.h"
  19
  20 XBT_LOG_NEW_DEFAULT_SUBCATEGORY(gras_trp_sg,gras_trp,"SimGrid pseudo-transport");
  21
  22 /***
  23  *** Prototypes
  24  ***/
  25
  26 /* retrieve the port record associated to a numerical port on an host */
  27 static void find_port(gras_hostdata_t *hd, int port, gras_sg_portrec_t *hpd);
  28
  29
  30 void gras_trp_sg_socket_client(gras_trp_plugin_t self,
  31                                /* OUT */ gras_socket_t sock);
  32 void gras_trp_sg_socket_server(gras_trp_plugin_t self,
  33                                /* OUT */ gras_socket_t sock);
  34 void gras_trp_sg_socket_close(gras_socket_t sd);
  35
  36 void gras_trp_sg_chunk_send_raw(gras_socket_t sd,
  37                                 const char *data,
  38                                 unsigned long int size);
  39 void gras_trp_sg_chunk_send(gras_socket_t sd,
  40                             const char *data,
  41                             unsigned long int size,
  42                             int stable_ignored);
  43
  44 int gras_trp_sg_chunk_recv(gras_socket_t sd,
  45                             char *data,
  46                             unsigned long int size);
  47
  48 /***
  49  *** Specific plugin part
  50  ***/
  51 typedef struct {
  52   int placeholder; /* nothing plugin specific so far */
  53 } gras_trp_sg_plug_data_t;
  54
  55
  56 /***
  57  *** Code
  58  ***/
  59 static void find_port(gras_hostdata_t *hd, int port,
  60                       gras_sg_portrec_t *hpd) {
  61   int cpt;
  62   gras_sg_portrec_t pr;
  63
  64   xbt_assert0(hd,"Please run gras_process_init on each process");
  65
  66   xbt_dynar_foreach(hd->ports, cpt, pr) {
  67     if (pr.port == port) {
  68       memcpy(hpd,&pr,sizeof(gras_sg_portrec_t));
  69       return;
  70     }
  71   }
  72   THROW1(mismatch_error,0,"Unable to find any portrec for port #%d",port);
  73 }
  74
  75
  76 void
  77 gras_trp_sg_setup(gras_trp_plugin_t plug) {
  78
  79   gras_trp_sg_plug_data_t *data=xbt_new(gras_trp_sg_plug_data_t,1);
  80
  81   plug->data      = data;
  82
  83   plug->socket_client = gras_trp_sg_socket_client;
  84   plug->socket_server = gras_trp_sg_socket_server;
  85   plug->socket_close  = gras_trp_sg_socket_close;
  86
  87   plug->raw_send = gras_trp_sg_chunk_send_raw;
  88   plug->send = gras_trp_sg_chunk_send;
  89   plug->raw_recv = plug->recv = gras_trp_sg_chunk_recv;
  90
  91   plug->flush         = NULL; /* nothing cached */
  92 }
  93
  94 void gras_trp_sg_socket_client(gras_trp_plugin_t self,
  95                                /* OUT */ gras_socket_t sock){
  96   xbt_ex_t e;
  97
  98   smx_host_t peer;
  99   gras_hostdata_t *hd;
 100   gras_trp_sg_sock_data_t *data;
 101   gras_sg_portrec_t pr;
 102
 103   /* make sure this socket will reach someone */
 104   if (!(peer=SIMIX_host_get_by_name(sock->peer_name)))
 105     THROW1(mismatch_error,0,
 106            "Can't connect to %s: no such host.\n",sock->peer_name);
 107
 108   if (!(hd=(gras_hostdata_t *)SIMIX_host_get_data(peer)))
 109     THROW1(mismatch_error,0,
 110            "can't connect to %s: no process on this host",
 111            sock->peer_name);
 112
 113   TRY {
 114     find_port(hd,sock->peer_port,&pr);
 115   } CATCH(e) {
 116     if (e.category == mismatch_error) {
 117       xbt_ex_free(e);
 118       THROW2(mismatch_error,0,
 119              "can't connect to %s:%d, no process listen on this port",
 120              sock->peer_name,sock->peer_port);
 121     }
 122     RETHROW;
 123   }
 124
 125   if (pr.meas && !sock->meas) {
 126     THROW2(mismatch_error,0,
 127            "can't connect to %s:%d in regular mode, the process listen "
 128            "in measurement mode on this port",sock->peer_name,sock->peer_port);
 129   }
 130   if (!pr.meas && sock->meas) {
 131     THROW2(mismatch_error,0,
 132            "can't connect to %s:%d in measurement mode, the process listen "
 133            "in regular mode on this port",sock->peer_name,sock->peer_port);
 134   }
 135   /* create the socket */
 136   data = xbt_new(gras_trp_sg_sock_data_t,1);
 137   data->from_process = SIMIX_process_self();
 138   data->to_process   = pr.process;
 139   data->to_host      = peer;
 140
 141   /* initialize mutex and condition of the socket */
 142   data->mutex = SIMIX_mutex_init();
 143   data->cond = SIMIX_cond_init();
 144   data->to_socket = pr.socket;
 145
 146   sock->data = data;
 147   sock->incoming = 1;
 148
 149   DEBUG5("%s (PID %d) connects in %s mode to %s:%d",
 150          SIMIX_process_get_name(SIMIX_process_self()), gras_os_getpid(),
 151          sock->meas?"meas":"regular",
 152          sock->peer_name,sock->peer_port);
 153 }
 154
 155 void gras_trp_sg_socket_server(gras_trp_plugin_t self,
 156                                gras_socket_t sock){
 157
 158   gras_hostdata_t *hd=(gras_hostdata_t *)SIMIX_host_get_data(SIMIX_host_self());
 159   gras_sg_portrec_t pr;
 160   gras_trp_sg_sock_data_t *data;
 161   volatile int found;
 162
 163   const char *host=SIMIX_host_get_name(SIMIX_host_self());
 164
 165   xbt_ex_t e;
 166
 167   xbt_assert0(hd,"Please run gras_process_init on each process");
 168
 169   sock->accepting = 0; /* no such nuisance in SG */
 170   found = 0;
 171   TRY {
 172     find_port(hd,sock->port,&pr);
 173     found = 1;
 174   } CATCH(e) {
 175     if (e.category == mismatch_error)
 176       xbt_ex_free(e);
 177     else
 178       RETHROW;
 179   }
 180
 181   if (found)
 182     THROW2(mismatch_error,0,
 183            "can't listen on address %s:%d: port already in use.",
 184            host,sock->port);
 185
 186   pr.port = sock->port;
 187   pr.meas = sock->meas;
 188   pr.socket = sock;
 189   pr.process = SIMIX_process_self();
 190   xbt_dynar_push(hd->ports,&pr);
 191
 192   /* Create the socket */
 193   data = xbt_new(gras_trp_sg_sock_data_t,1);
 194   data->from_process     = SIMIX_process_self();
 195   data->to_process       = NULL;
 196   data->to_host      = SIMIX_host_self();
 197
 198   data->cond = SIMIX_cond_init();
 199   data->mutex = SIMIX_mutex_init();
 200
 201   sock->data = data;
 202
 203   VERB6("'%s' (%d) ears on %s:%d%s (%p)",
 204         SIMIX_process_get_name(SIMIX_process_self()), gras_os_getpid(),
 205         host,sock->port,sock->meas? " (mode meas)":"",sock);
 206
 207 }
 208
 209 void gras_trp_sg_socket_close(gras_socket_t sock){
 210   gras_hostdata_t *hd=(gras_hostdata_t *)SIMIX_host_get_data(SIMIX_host_self());
 211   int cpt;
 212   gras_sg_portrec_t pr;
 213
 214   XBT_IN1(" (sock=%p)",sock);
 215
 216   if (!sock) return;
 217
 218   xbt_assert0(hd,"Please run gras_process_init on each process");
 219
 220   if (sock->data) {
 221     SIMIX_cond_destroy(((gras_trp_sg_sock_data_t*)sock->data)->cond);
 222     SIMIX_mutex_destroy(((gras_trp_sg_sock_data_t*)sock->data)->mutex);
 223     free(sock->data);
 224   }
 225
 226   if (sock->incoming && !sock->outgoing && sock->port >= 0) {
 227     /* server mode socket. Unregister it from 'OS' tables */
 228     xbt_dynar_foreach(hd->ports, cpt, pr) {
 229       DEBUG2("Check pr %d of %lu", cpt, xbt_dynar_length(hd->ports));
 230       if (pr.port == sock->port) {
 231         xbt_dynar_cursor_rm(hd->ports, &cpt);
 232         XBT_OUT;
 233         return;
 234       }
 235     }
 236     WARN2("socket_close called on the unknown incoming socket %p (port=%d)",
 237           sock,sock->port);
 238   }
 239   XBT_OUT;
 240 }
 241
 242 typedef struct {
 243   int size;
 244   void *data;
 245 } sg_task_data_t;
 246
 247 void gras_trp_sg_chunk_send(gras_socket_t sock,
 248                             const char *data,
 249                             unsigned long int size,
 250                             int stable_ignored) {
 251   gras_trp_sg_chunk_send_raw(sock,data,size);
 252 }
 253
 254 void gras_trp_sg_chunk_send_raw(gras_socket_t sock,
 255                                 const char *data,
 256                                 unsigned long int size) {
 257   char name[256];
 258   static unsigned int count=0;
 259
 260   smx_action_t act; /* simix action */
 261   gras_trp_sg_sock_data_t *sock_data;
 262   gras_trp_procdata_t trp_remote_proc;
 263   gras_msg_procdata_t msg_remote_proc;
 264   gras_msg_t msg; /* message to send */
 265
 266   sock_data = (gras_trp_sg_sock_data_t *)sock->data;
 267
 268   xbt_assert0(sock->meas,
 269            "SG chunk exchange shouldn't be used on non-measurement sockets");
 270
 271   SIMIX_mutex_lock(sock_data->mutex);
 272   sprintf(name,"Chunk[%d]",count++);
 273   /*initialize gras message */
 274   msg = xbt_new(s_gras_msg_t,1);
 275   msg->expe = sock;
 276   msg->payl_size=size;
 277
 278   if (data) {
 279     msg->payl=(void*)xbt_malloc(size);
 280     memcpy(msg->payl,data,size);
 281   } else {
 282     msg->payl = NULL;
 283   }
 284
 285   /* put message on msg_queue */
 286   msg_remote_proc = (gras_msg_procdata_t)
 287     gras_libdata_by_name_from_remote("gras_msg", sock_data->to_process);
 288
 289   xbt_fifo_push(msg_remote_proc->msg_to_receive_queue_meas,msg);
 290
 291   /* put his socket on the selectable socket list */
 292   trp_remote_proc = (gras_trp_procdata_t)
 293     gras_libdata_by_name_from_remote("gras_trp",sock_data->to_process);
 294
 295   xbt_fifo_push(trp_remote_proc->meas_selectable_sockets,sock);
 296
 297   /* wake-up the receiver */
 298   SIMIX_cond_signal(trp_remote_proc->meas_select_cond);
 299
 300   /* wait for the receiver */
 301   SIMIX_cond_wait(sock_data->cond,sock_data->mutex);
 302
 303   /* creates simix action and waits its ends, waits in the sender host
 304      condition*/
 305   DEBUG5("send chunk %s from %s to  %s:%d (size=%ld)",
 306          name, SIMIX_host_get_name(SIMIX_host_self()),
 307          SIMIX_host_get_name(sock_data->to_host), sock->peer_port,size);
 308
 309   act = SIMIX_action_communicate(SIMIX_host_self(), sock_data->to_host,
 310                                  name, size, -1);
 311   SIMIX_register_action_to_condition(act,sock_data->cond);
 312   SIMIX_register_condition_to_action(act,sock_data->cond);
 313
 314   SIMIX_cond_wait(sock_data->cond,sock_data->mutex);
 315   /* error treatmeant (FIXME)*/
 316
 317   /* cleanup structures */
 318   SIMIX_action_destroy(act);
 319
 320   SIMIX_mutex_unlock(sock_data->mutex);
 321 }
 322
 323 int gras_trp_sg_chunk_recv(gras_socket_t sock,
 324                            char *data,
 325                            unsigned long int size){
 326   gras_trp_sg_sock_data_t *sock_data;
 327   gras_trp_sg_sock_data_t *remote_sock_data;
 328   gras_socket_t remote_socket;
 329   gras_msg_t msg_got;
 330   gras_msg_procdata_t msg_procdata =
 331     (gras_msg_procdata_t)gras_libdata_by_name("gras_msg");
 332   gras_trp_procdata_t trp_proc =
 333     (gras_trp_procdata_t)gras_libdata_by_id(gras_trp_libdata_id);
 334
 335   xbt_assert0(sock->meas,
 336             "SG chunk exchange shouldn't be used on non-measurement sockets");
 337
 338   SIMIX_mutex_lock(trp_proc->meas_select_mutex);
 339   if (xbt_fifo_size(msg_procdata->msg_to_receive_queue_meas) == 0 ) {
 340     SIMIX_cond_wait_timeout(trp_proc->meas_select_cond,
 341                             trp_proc->meas_select_mutex,60);
 342   }
 343   if (xbt_fifo_size(msg_procdata->msg_to_receive_queue_meas) == 0 ) {
 344     SIMIX_mutex_unlock(trp_proc->meas_select_mutex);
 345     THROW0(timeout_error,0,"Timeout");
 346   }
 347   SIMIX_mutex_unlock(trp_proc->meas_select_mutex);
 348
 349   remote_socket = xbt_fifo_shift(trp_proc->meas_selectable_sockets);
 350   remote_sock_data = (gras_trp_sg_sock_data_t *)remote_socket->data;
 351   msg_got = xbt_fifo_shift(msg_procdata->msg_to_receive_queue_meas);
 352
 353   sock_data = (gras_trp_sg_sock_data_t *)sock->data;
 354
 355   /* ok, I'm here, you can continue the communication */
 356   SIMIX_cond_signal(remote_sock_data->cond);
 357
 358   SIMIX_mutex_lock(remote_sock_data->mutex);
 359   /* wait for communication end */
 360   SIMIX_cond_wait(remote_sock_data->cond,remote_sock_data->mutex);
 361
 362   if (msg_got->payl_size != size)
 363     THROW5(mismatch_error,0,
 364            "Got %d bytes when %ld where expected (in %s->%s:%d)",
 365            msg_got->payl_size, size,
 366            SIMIX_host_get_name(sock_data->to_host),
 367            SIMIX_host_get_name(SIMIX_host_self()), sock->peer_port);
 368
 369   if (data)
 370     memcpy(data,msg_got->payl,size);
 371
 372   if (msg_got->payl)
 373     xbt_free(msg_got->payl);
 374
 375   xbt_free(msg_got);
 376   SIMIX_mutex_unlock(remote_sock_data->mutex);
 377   return 0;
 378 }
 379