src/instr/instr_smpi.c

   1 /* Copyright (c) 2010. The SimGrid Team.
   2  * All rights reserved.                                                     */
   3
   4 /* This program is free software; you can redistribute it and/or modify it
   5   * under the terms of the license (GNU LGPL) which comes with this package. */
   6
   7 #include "instr/instr_private.h"
   8 #include "mc/mc.h"
   9 #include <ctype.h>
  10 #include <wchar.h>
  11
  12 #ifdef HAVE_TRACING
  13
  14 XBT_LOG_NEW_DEFAULT_SUBCATEGORY(instr_smpi, instr, "Tracing SMPI");
  15
  16 static xbt_dict_t keys;
  17
  18 static const char *smpi_colors[] ={
  19     "recv",     "1 0 0",
  20     "irecv",    "1 0.52 0.52",
  21     "send",     "0 0 1",
  22     "isend",    "0.52 0.52 1",
  23     "sendrecv", "0 1 1",
  24     "wait",     "1 1 0",
  25     "waitall",  "0.78 0.78 0",
  26     "waitany",  "0.78 0.78 0.58",
  27
  28     "allgather",     "1 0 0",
  29     "allgatherv",    "1 0.52 0.52",
  30     "allreduce",     "1 0 1",
  31     "alltoall",      "0.52 0 1",
  32     "alltoallv",     "0.78 0.52 1",
  33     "barrier",       "0 0.78 0.78",
  34     "bcast",         "0 0.78 0.39",
  35     "gather",        "1 1 0",
  36     "gatherv",       "1 1 0.52",
  37     "reduce",        "0 1 0",
  38     "reducescatter", "0.52 1 0.52",
  39     "scan",          "1 0.58 0.23",
  40     "scatterv",      "0.52 0 0.52",
  41     "scatter",       "1 0.74 0.54",
  42     "computing",     "0 1 1",
  43     NULL, NULL,
  44 };
  45
  46 static char *str_tolower (const char *str)
  47 {
  48   char *ret = xbt_strdup (str);
  49   int i, n = strlen (ret);
  50   for (i = 0; i < n; i++)
  51     ret[i] = tolower (str[i]);
  52   return ret;
  53 }
  54
  55 static const char *instr_find_color (const char *state)
  56 {
  57   char *target = str_tolower (state);
  58   const char *ret = NULL;
  59   const char *current;
  60   unsigned int i = 0;
  61   while ((current = smpi_colors[i])){
  62     if (strcmp (state, current) == 0){ ret = smpi_colors[i+1]; break; } //exact match
  63     if (strstr(target, current)) { ret = smpi_colors[i+1]; break; }; //as substring
  64     i+=2;
  65   }
  66   free (target);
  67   return ret;
  68 }
  69
  70
  71 static char *smpi_container(int rank, char *container, int n)
  72 {
  73   snprintf(container, n, "rank-%d", rank);
  74   return container;
  75 }
  76
  77 static char *TRACE_smpi_put_key(int src, int dst, char *key, int n)
  78 {
  79   //get the dynar for src#dst
  80   char aux[INSTR_DEFAULT_STR_SIZE];
  81   snprintf(aux, INSTR_DEFAULT_STR_SIZE, "%d#%d", src, dst);
  82   xbt_dynar_t d = xbt_dict_get_or_null(keys, aux);
  83   if (d == NULL) {
  84     d = xbt_dynar_new(sizeof(char *), &xbt_free_ref);
  85     xbt_dict_set(keys, aux, d, NULL);
  86   }
  87   //generate the key
  88   static unsigned long long counter = 0;
  89
  90   if(MC_is_active())
  91     MC_ignore_data_bss(&counter, sizeof(counter));
  92
  93   snprintf(key, n, "%d_%d_%llu", src, dst, counter++);
  94
  95   //push it
  96   char *a = (char*)xbt_strdup(key);
  97   xbt_dynar_push_as(d, char *, a);
  98
  99   return key;
 100 }
 101
 102 static char *TRACE_smpi_get_key(int src, int dst, char *key, int n)
 103 {
 104   char aux[INSTR_DEFAULT_STR_SIZE];
 105   snprintf(aux, INSTR_DEFAULT_STR_SIZE, "%d#%d", src, dst);
 106   xbt_dynar_t d = xbt_dict_get_or_null(keys, aux);
 107
 108   xbt_assert(!xbt_dynar_is_empty(d),
 109       "Trying to get a link key (for message reception) that has no corresponding send (%s).", __FUNCTION__);
 110   char *s = xbt_dynar_get_as (d, 0, char *);
 111   snprintf (key, n, "%s", s);
 112   xbt_dynar_remove_at (d, 0, NULL);
 113   return key;
 114 }
 115
 116 static xbt_dict_t process_category;
 117
 118 void TRACE_internal_smpi_set_category (const char *category)
 119 {
 120   if (!TRACE_smpi_is_enabled()) return;
 121
 122   //declare category
 123   TRACE_category (category);
 124
 125   char processid[INSTR_DEFAULT_STR_SIZE];
 126   snprintf (processid, INSTR_DEFAULT_STR_SIZE, "%p", SIMIX_process_self());
 127   if (xbt_dict_get_or_null (process_category, processid))
 128     xbt_dict_remove (process_category, processid);
 129   if (category != NULL)
 130     xbt_dict_set (process_category, processid, xbt_strdup(category), NULL);
 131 }
 132
 133 const char *TRACE_internal_smpi_get_category (void)
 134 {
 135   if (!TRACE_smpi_is_enabled()) return NULL;
 136
 137   char processid[INSTR_DEFAULT_STR_SIZE];
 138   snprintf (processid, INSTR_DEFAULT_STR_SIZE, "%p", SIMIX_process_self());
 139   return xbt_dict_get_or_null (process_category, processid);
 140 }
 141
 142 void TRACE_smpi_alloc()
 143 {
 144   keys = xbt_dict_new_homogeneous(xbt_free);
 145   process_category = xbt_dict_new_homogeneous(xbt_free);
 146 }
 147
 148 void TRACE_smpi_release(void)
 149 {
 150   xbt_dict_free(&keys);
 151   xbt_dict_free(&process_category);
 152 }
 153
 154 void TRACE_smpi_init(int rank)
 155 {
 156   if (!TRACE_smpi_is_enabled()) return;
 157
 158   char str[INSTR_DEFAULT_STR_SIZE];
 159   smpi_container(rank, str, INSTR_DEFAULT_STR_SIZE);
 160
 161   container_t father;
 162   if (TRACE_smpi_is_grouped()){
 163     father = PJ_container_get (SIMIX_host_self_get_name());
 164   }else{
 165     father = PJ_container_get_root ();
 166   }
 167   xbt_assert(father!=NULL,
 168       "Could not find a parent for mpi rank %s at function %s", str, __FUNCTION__);
 169   PJ_container_new(str, INSTR_SMPI, father);
 170 }
 171
 172 void TRACE_smpi_finalize(int rank)
 173 {
 174   if (!TRACE_smpi_is_enabled()) return;
 175
 176   char str[INSTR_DEFAULT_STR_SIZE];
 177   container_t container = PJ_container_get(smpi_container(rank, str, INSTR_DEFAULT_STR_SIZE));
 178   PJ_container_remove_from_parent (container);
 179   PJ_container_free (container);
 180 }
 181
 182 void TRACE_smpi_collective_in(int rank, int root, const char *operation)
 183 {
 184   if (!TRACE_smpi_is_enabled()) return;
 185
 186   char str[INSTR_DEFAULT_STR_SIZE];
 187   smpi_container(rank, str, INSTR_DEFAULT_STR_SIZE);
 188   container_t container = PJ_container_get (str);
 189   type_t type = PJ_type_get ("MPI_STATE", container->type);
 190   const char *color = instr_find_color (operation);
 191   val_t value = PJ_value_get_or_new (operation, color, type);
 192   new_pajePushState (SIMIX_get_clock(), container, type, value);
 193 }
 194
 195 void TRACE_smpi_collective_out(int rank, int root, const char *operation)
 196 {
 197   if (!TRACE_smpi_is_enabled()) return;
 198
 199   char str[INSTR_DEFAULT_STR_SIZE];
 200   smpi_container(rank, str, INSTR_DEFAULT_STR_SIZE);
 201   container_t container = PJ_container_get (str);
 202   type_t type = PJ_type_get ("MPI_STATE", container->type);
 203
 204   new_pajePopState (SIMIX_get_clock(), container, type);
 205 }
 206
 207 void TRACE_smpi_computing_init(int rank)
 208 {
 209  //first use, initialize the color in the trace
 210  //TODO : check with lucas and Pierre how to generalize this approach
 211   //to avoid unnecessary access to the color array
 212   if (!TRACE_smpi_is_enabled() || !TRACE_smpi_is_computing()) return;
 213
 214   char str[INSTR_DEFAULT_STR_SIZE];
 215   smpi_container(rank, str, INSTR_DEFAULT_STR_SIZE);
 216   container_t container = PJ_container_get (str);
 217   type_t type = PJ_type_get ("MPI_STATE", container->type);
 218   const char *color = instr_find_color ("computing");
 219   val_t value = PJ_value_get_or_new ("computing", color, type);
 220   new_pajePushState (SIMIX_get_clock(), container, type, value);
 221 }
 222
 223 void TRACE_smpi_computing_in(int rank)
 224 {
 225   //do not forget to set the color first, otherwise this will explode
 226   if (!TRACE_smpi_is_enabled()|| !TRACE_smpi_is_computing()) return;
 227
 228   char str[INSTR_DEFAULT_STR_SIZE];
 229   smpi_container(rank, str, INSTR_DEFAULT_STR_SIZE);
 230   container_t container = PJ_container_get (str);
 231   type_t type = PJ_type_get ("MPI_STATE", container->type);
 232   val_t value = PJ_value_get_or_new ("computing", NULL, type);
 233   new_pajePushState (SIMIX_get_clock(), container, type, value);
 234 }
 235
 236 void TRACE_smpi_computing_out(int rank)
 237 {
 238   if (!TRACE_smpi_is_enabled()|| !TRACE_smpi_is_computing()) return;
 239   char str[INSTR_DEFAULT_STR_SIZE];
 240   smpi_container(rank, str, INSTR_DEFAULT_STR_SIZE);
 241   container_t container = PJ_container_get (str);
 242   type_t type = PJ_type_get ("MPI_STATE", container->type);
 243   new_pajePopState (SIMIX_get_clock(), container, type);
 244 }
 245
 246 void TRACE_smpi_ptp_in(int rank, int src, int dst, const char *operation)
 247 {
 248   if (!TRACE_smpi_is_enabled()) return;
 249
 250
 251   char str[INSTR_DEFAULT_STR_SIZE];
 252   smpi_container(rank, str, INSTR_DEFAULT_STR_SIZE);
 253   container_t container = PJ_container_get (str);
 254   type_t type = PJ_type_get ("MPI_STATE", container->type);
 255   const char *color = instr_find_color (operation);
 256   val_t value = PJ_value_get_or_new (operation, color, type);
 257   new_pajePushState (SIMIX_get_clock(), container, type, value);
 258 }
 259
 260 void TRACE_smpi_ptp_out(int rank, int src, int dst, const char *operation)
 261 {
 262   if (!TRACE_smpi_is_enabled()) return;
 263
 264   char str[INSTR_DEFAULT_STR_SIZE];
 265   smpi_container(rank, str, INSTR_DEFAULT_STR_SIZE);
 266   container_t container = PJ_container_get (str);
 267   type_t type = PJ_type_get ("MPI_STATE", container->type);
 268
 269   new_pajePopState (SIMIX_get_clock(), container, type);
 270 }
 271
 272 void TRACE_smpi_send(int rank, int src, int dst)
 273 {
 274   if (!TRACE_smpi_is_enabled()) return;
 275
 276   char key[INSTR_DEFAULT_STR_SIZE];
 277   bzero (key, INSTR_DEFAULT_STR_SIZE);
 278   TRACE_smpi_put_key(src, dst, key, INSTR_DEFAULT_STR_SIZE);
 279
 280   char str[INSTR_DEFAULT_STR_SIZE];
 281   smpi_container(src, str, INSTR_DEFAULT_STR_SIZE);
 282   container_t container = PJ_container_get (str);
 283   type_t type = PJ_type_get ("MPI_LINK", PJ_type_get_root());
 284
 285   new_pajeStartLink (SIMIX_get_clock(), PJ_container_get_root(), type, container, "PTP", key);
 286 }
 287
 288 void TRACE_smpi_recv(int rank, int src, int dst)
 289 {
 290   if (!TRACE_smpi_is_enabled()) return;
 291
 292   char key[INSTR_DEFAULT_STR_SIZE];
 293   bzero (key, INSTR_DEFAULT_STR_SIZE);
 294   TRACE_smpi_get_key(src, dst, key, INSTR_DEFAULT_STR_SIZE);
 295
 296   char str[INSTR_DEFAULT_STR_SIZE];
 297   smpi_container(dst, str, INSTR_DEFAULT_STR_SIZE);
 298   container_t container = PJ_container_get (str);
 299   type_t type = PJ_type_get ("MPI_LINK", PJ_type_get_root());
 300
 301   new_pajeEndLink (SIMIX_get_clock(), PJ_container_get_root(), type, container, "PTP", key);
 302 }
 303 #endif /* HAVE_TRACING */