src/surf/surf_config.c

   1 /* Copyright (c) 2009, 2010. The SimGrid Team.
   2  * All rights reserved.                                                     */
   3
   4 /* This program is free software; you can redistribute it and/or modify it
   5  * under the terms of the license (GNU LGPL) which comes with this package. */
   6
   7 /* surf_config: configuration infrastructure for the simulation world       */
   8
   9 #include "xbt/config.h"
  10 #include "xbt/str.h"
  11 #include "surf/surf_private.h"
  12 #include "simix/context.h"
  13
  14 XBT_LOG_NEW_DEFAULT_SUBCATEGORY(surf_config, surf,
  15                                 "About the configuration of surf (and the rest of the simulation)");
  16
  17 xbt_cfg_t _surf_cfg_set = NULL;
  18
  19 /* Parse the command line, looking for options */
  20 static void surf_config_cmd_line(int *argc, char **argv)
  21 {
  22   int i, j;
  23   char *opt;
  24
  25   for (i = 1; i < *argc; i++) {
  26     int remove_it = 0;
  27     if (!strncmp(argv[i], "--cfg=", strlen("--cfg="))) {
  28       opt = strchr(argv[i], '=');
  29       opt++;
  30
  31       xbt_cfg_set_parse(_surf_cfg_set, opt);
  32       DEBUG1("Did apply '%s' as config setting", opt);
  33       remove_it = 1;
  34     } else if (!strncmp(argv[i], "--cfg-help", strlen("--cfg-help") + 1) ||
  35                !strncmp(argv[i], "--help", strlen("--help") + 1)) {
  36       printf
  37           ("Description of the configuration accepted by this simulator:\n");
  38       xbt_cfg_help(_surf_cfg_set);
  39       printf
  40           ("\nYou can also use --help-models to see the details of all models known by this simulator.\n");
  41 #ifdef HAVE_TRACING
  42       printf
  43           ("\nYou can also use --help-tracing to see the details of all tracing options known by this simulator.\n");
  44 #endif
  45       exit(0);
  46     } else
  47         if (!strncmp
  48             (argv[i], "--help-models", strlen("--help-models") + 1)) {
  49       model_help("workstation", surf_workstation_model_description);
  50       model_help("CPU", surf_cpu_model_description);
  51       model_help("network", surf_network_model_description);
  52       exit(0);
  53 #ifdef HAVE_TRACING
  54     }else
  55         if (!strncmp
  56             (argv[i], "--help-tracing", strlen("--help-tracing") + 1)) {
  57       TRACE_help (1);
  58       exit(0);
  59 #endif
  60     }
  61     if (remove_it) {            /*remove this from argv */
  62       for (j = i + 1; j < *argc; j++) {
  63         argv[j - 1] = argv[j];
  64       }
  65
  66       argv[j - 1] = NULL;
  67       (*argc)--;
  68       i--;                      /* compensate effect of next loop incrementation */
  69     }
  70   }
  71 }
  72
  73
  74 int _surf_init_status = 0;      /* 0: beginning of time;
  75                                    1: pre-inited (cfg_set created);
  76                                    2: inited (running) */
  77
  78 /* callback of the workstation/model variable */
  79 static void _surf_cfg_cb__workstation_model(const char *name, int pos)
  80 {
  81   char *val;
  82
  83   xbt_assert0(_surf_init_status < 2,
  84               "Cannot change the model after the initialization");
  85
  86   val = xbt_cfg_get_string(_surf_cfg_set, name);
  87
  88   if (!strcmp(val, "help")) {
  89     model_help("workstation", surf_workstation_model_description);
  90     exit(0);
  91   }
  92
  93   /* Make sure that the model exists */
  94   find_model_description(surf_workstation_model_description, val);
  95 }
  96
  97 /* callback of the cpu/model variable */
  98 static void _surf_cfg_cb__cpu_model(const char *name, int pos)
  99 {
 100   char *val;
 101
 102   xbt_assert0(_surf_init_status < 2,
 103               "Cannot change the model after the initialization");
 104
 105   val = xbt_cfg_get_string(_surf_cfg_set, name);
 106
 107   if (!strcmp(val, "help")) {
 108     model_help("CPU", surf_cpu_model_description);
 109     exit(0);
 110   }
 111
 112   /* New Module missing */
 113   find_model_description(surf_cpu_model_description, val);
 114 }
 115
 116 /* callback of the workstation_model variable */
 117 static void _surf_cfg_cb__network_model(const char *name, int pos)
 118 {
 119   char *val;
 120
 121   xbt_assert0(_surf_init_status < 2,
 122               "Cannot change the model after the initialization");
 123
 124   val = xbt_cfg_get_string(_surf_cfg_set, name);
 125
 126   if (!strcmp(val, "help")) {
 127     model_help("network", surf_network_model_description);
 128     exit(0);
 129   }
 130
 131   /* New Module missing */
 132   find_model_description(surf_network_model_description, val);
 133 }
 134
 135
 136 /* callbacks of the network models values */
 137 static void _surf_cfg_cb__tcp_gamma(const char *name, int pos)
 138 {
 139   sg_tcp_gamma = xbt_cfg_get_double(_surf_cfg_set, name);
 140 }
 141
 142 static void _surf_cfg_cb__maxmin_precision(const char* name, int pos)
 143 {
 144   sg_maxmin_precision = xbt_cfg_get_double(_surf_cfg_set, name);
 145 }
 146
 147 static void _surf_cfg_cb__sender_gap(const char* name, int pos)
 148 {
 149   sg_sender_gap = xbt_cfg_get_double(_surf_cfg_set, name);
 150 }
 151
 152 static void _surf_cfg_cb__latency_factor(const char *name, int pos)
 153 {
 154   sg_latency_factor = xbt_cfg_get_double(_surf_cfg_set, name);
 155 }
 156
 157 static void _surf_cfg_cb__bandwidth_factor(const char *name, int pos)
 158 {
 159   sg_bandwidth_factor = xbt_cfg_get_double(_surf_cfg_set, name);
 160 }
 161
 162 static void _surf_cfg_cb__weight_S(const char *name, int pos)
 163 {
 164   sg_weight_S_parameter = xbt_cfg_get_double(_surf_cfg_set, name);
 165 }
 166
 167 static void _surf_cfg_cb__surf_maxmin_selective_update(const char *name,
 168                                                        int pos)
 169 {
 170   sg_maxmin_selective_update = xbt_cfg_get_int(_surf_cfg_set, name);
 171 }
 172
 173 /* callback of the inclusion path */
 174 static void _surf_cfg_cb__surf_path(const char *name, int pos)
 175 {
 176   char *path = xbt_cfg_get_string_at(_surf_cfg_set, name, pos);
 177   xbt_dynar_push(surf_path, &path);
 178 }
 179
 180 /* callback to decide if we want to use the model-checking */
 181 #include "xbt_modinter.h"
 182 extern int _surf_do_model_check;   /* this variable lives in xbt_main until I find a right location for it */
 183
 184 static void _surf_cfg_cb_model_check(const char *name, int pos)
 185 {
 186   _surf_do_model_check = 1;
 187   /* Tell modules using mallocators that they shouldn't. MC don't like them */
 188   xbt_fifo_preinit();
 189   xbt_dict_preinit();
 190 }
 191
 192 static void _surf_cfg_cb_context_factory(const char *name, int pos)
 193 {
 194   smx_context_factory_name = xbt_cfg_get_string(_surf_cfg_set, name);
 195 }
 196
 197 static void _surf_cfg_cb_context_stack_size(const char *name, int pos)
 198 {
 199   smx_context_stack_size = xbt_cfg_get_int(_surf_cfg_set, name) * 1024;
 200 }
 201
 202 static void _surf_cfg_cb_contexts_nthreads(const char *name, int pos)
 203 {
 204   SIMIX_context_set_nthreads(xbt_cfg_get_int(_surf_cfg_set, name));
 205 }
 206
 207 static void _surf_cfg_cb_contexts_parallel_threshold(const char *name, int pos)
 208 {
 209   SIMIX_context_set_parallel_threshold(xbt_cfg_get_int(_surf_cfg_set, name));
 210 }
 211
 212 static void _surf_cfg_cb__surf_network_fullduplex(const char *name,
 213                                                   int pos)
 214 {
 215   sg_network_fullduplex = xbt_cfg_get_int(_surf_cfg_set, name);
 216 }
 217
 218 #ifdef HAVE_GTNETS
 219 static void _surf_cfg_cb__gtnets_jitter(const char *name, int pos)
 220 {
 221   sg_gtnets_jitter = xbt_cfg_get_double(_surf_cfg_set, name);
 222 }
 223
 224 static void _surf_cfg_cb__gtnets_jitter_seed(const char *name, int pos)
 225 {
 226   sg_gtnets_jitter_seed = xbt_cfg_get_int(_surf_cfg_set, name);
 227 }
 228 #endif
 229
 230 /* create the config set, register what should be and parse the command line*/
 231 void surf_config_init(int *argc, char **argv)
 232 {
 233   char *description = xbt_malloc(1024), *p = description;
 234   char *default_value;
 235   double double_default_value;
 236   int default_value_int;
 237   int i;
 238
 239   /* Create the configuration support */
 240   if (_surf_init_status == 0) { /* Only create stuff if not already inited */
 241     _surf_init_status = 1;
 242
 243     sprintf(description,
 244             "The model to use for the CPU. Possible values: ");
 245     p = description;
 246     while (*(++p) != '\0');
 247     for (i = 0; surf_cpu_model_description[i].name; i++)
 248       p += sprintf(p, "%s%s", (i == 0 ? "" : ", "),
 249                    surf_cpu_model_description[i].name);
 250     sprintf(p,
 251             ".\n       (use 'help' as a value to see the long description of each model)");
 252     default_value = xbt_strdup("Cas01");
 253     xbt_cfg_register(&_surf_cfg_set,
 254                      "cpu/model", description, xbt_cfgelm_string,
 255                      &default_value, 1, 1, &_surf_cfg_cb__cpu_model, NULL);
 256
 257     sprintf(description,
 258             "The model to use for the network. Possible values: ");
 259     p = description;
 260     while (*(++p) != '\0');
 261     for (i = 0; surf_network_model_description[i].name; i++)
 262       p += sprintf(p, "%s%s", (i == 0 ? "" : ", "),
 263                    surf_network_model_description[i].name);
 264     sprintf(p,
 265             ".\n       (use 'help' as a value to see the long description of each model)");
 266     default_value = xbt_strdup("LV08");
 267     xbt_cfg_register(&_surf_cfg_set,
 268                      "network/model", description, xbt_cfgelm_string,
 269                      &default_value, 1, 1, &_surf_cfg_cb__network_model,
 270                      NULL);
 271
 272     sprintf(description,
 273             "The model to use for the workstation. Possible values: ");
 274     p = description;
 275     while (*(++p) != '\0');
 276     for (i = 0; surf_workstation_model_description[i].name; i++)
 277       p += sprintf(p, "%s%s", (i == 0 ? "" : ", "),
 278                    surf_workstation_model_description[i].name);
 279     sprintf(p,
 280             ".\n       (use 'help' as a value to see the long description of each model)");
 281     default_value = xbt_strdup("CLM03");
 282     xbt_cfg_register(&_surf_cfg_set,
 283                      "workstation/model", description, xbt_cfgelm_string,
 284                      &default_value, 1, 1,
 285                      &_surf_cfg_cb__workstation_model, NULL);
 286
 287     xbt_free(description);
 288
 289     default_value = xbt_strdup("Full");
 290     xbt_cfg_register(&_surf_cfg_set, "routing",
 291                      "Model to use to store the routing information",
 292                      xbt_cfgelm_string, &default_value, 1, 1, NULL, NULL);
 293
 294     xbt_cfg_register(&_surf_cfg_set, "TCP_gamma",
 295                      "Size of the biggest TCP window (cat /proc/sys/net/ipv4/tcp_[rw]mem for recv/send window; Use the last given value, which is the max window size)",
 296                      xbt_cfgelm_double, NULL, 1, 1,
 297                      _surf_cfg_cb__tcp_gamma, NULL);
 298     xbt_cfg_setdefault_double(_surf_cfg_set, "TCP_gamma", 20000.0);
 299
 300     xbt_cfg_register(&_surf_cfg_set, "maxmin/precision",
 301                      "Minimum retained action value when updating simulation",
 302                      xbt_cfgelm_double, NULL, 1, 1, _surf_cfg_cb__maxmin_precision, NULL);
 303     xbt_cfg_setdefault_double(_surf_cfg_set, "maxmin/precision", 0.00001); // FIXME use setdefault everywhere here!
 304
 305     /* The parameters of network models */
 306
 307     double_default_value = 0.0;
 308     xbt_cfg_register(&_surf_cfg_set, "network/sender_gap",
 309                      "Minimum gap between two overlapping sends",
 310                      xbt_cfgelm_double, &double_default_value, 1, 1,
 311                      _surf_cfg_cb__sender_gap, NULL);
 312
 313     double_default_value = 1.0;
 314     xbt_cfg_register(&_surf_cfg_set, "network/latency_factor",
 315                      "Correction factor to apply to the provided latency (default value set by network model)",
 316                      xbt_cfgelm_double, &double_default_value, 1, 1,
 317                      _surf_cfg_cb__latency_factor, NULL);
 318     double_default_value = 1.0;
 319     xbt_cfg_register(&_surf_cfg_set, "network/bandwidth_factor",
 320                      "Correction factor to apply to the provided bandwidth (default value set by network model)",
 321                      xbt_cfgelm_double, &double_default_value, 1, 1,
 322                      _surf_cfg_cb__bandwidth_factor, NULL);
 323     double_default_value = 0.0;
 324     xbt_cfg_register(&_surf_cfg_set, "network/weight_S",
 325                      "Correction factor to apply to the weight of competing streams(default value set by network model)",
 326                      xbt_cfgelm_double, &double_default_value, 1, 1,
 327                      _surf_cfg_cb__weight_S, NULL);
 328
 329     /* Inclusion path */
 330     xbt_cfg_register(&_surf_cfg_set, "path",
 331                      "Lookup path for inclusions in platform and deployment XML files",
 332                      xbt_cfgelm_string, NULL, 0, 0,
 333                      _surf_cfg_cb__surf_path, NULL);
 334
 335     default_value_int = 0;
 336     xbt_cfg_register(&_surf_cfg_set, "maxmin_selective_update",
 337                      "Update the constraint set propagating recursively to others constraints",
 338                      xbt_cfgelm_int, &default_value_int, 0, 1,
 339                      _surf_cfg_cb__surf_maxmin_selective_update, NULL);
 340
 341     /* do model-check */
 342     default_value_int = 0;
 343     xbt_cfg_register(&_surf_cfg_set, "model-check",
 344                      "Activate the model-checking of the \"simulated\" system (EXPERIMENTAL -- msg only for now)",
 345                      xbt_cfgelm_int, &default_value_int, 0, 1,
 346                      _surf_cfg_cb_model_check, NULL);
 347     /*
 348        FIXME: this function is not setting model-check to it's default value because
 349        internally it calls to variable->cb_set that in this case is the function
 350        _surf_cfg_cb_model_check which sets it's value to 1 (instead of the defalut value 0)
 351        xbt_cfg_set_int(_surf_cfg_set, "model-check", default_value_int); */
 352
 353     /* context factory */
 354     default_value = xbt_strdup("ucontext");
 355     xbt_cfg_register(&_surf_cfg_set, "contexts/factory",
 356                      "Context factory to use in SIMIX (ucontext, thread or raw)",
 357                      xbt_cfgelm_string, &default_value, 1, 1, _surf_cfg_cb_context_factory, NULL);
 358
 359     /* stack size of contexts in Ko */
 360     default_value_int = 128;
 361     xbt_cfg_register(&_surf_cfg_set, "contexts/stack_size",
 362                      "Stack size of contexts in Ko (ucontext or raw only)",
 363                      xbt_cfgelm_int, &default_value_int, 1, 1,
 364                      _surf_cfg_cb_context_stack_size, NULL);
 365
 366     /* number of parallel threads for user processes */
 367     default_value_int = 1;
 368     xbt_cfg_register(&_surf_cfg_set, "contexts/nthreads",
 369                      "Number of parallel threads for user contexts (EXPERIMENTAL)",
 370                      xbt_cfgelm_int, &default_value_int, 1, 1,
 371                      _surf_cfg_cb_contexts_nthreads, NULL);
 372
 373     /* minimal number of user contexts to be run in parallel */
 374     default_value_int = 20;
 375     xbt_cfg_register(&_surf_cfg_set, "contexts/parallel_threshold",
 376         "Minimal number of user contexts to be run in parallel",
 377         xbt_cfgelm_int, &default_value_int, 1, 1,
 378         _surf_cfg_cb_contexts_parallel_threshold, NULL);
 379
 380     default_value_int = 0;
 381     xbt_cfg_register(&_surf_cfg_set, "fullduplex",
 382                      "Activate the interferences between uploads and downloads for fluid max-min models (LV08, CM03)",
 383                      xbt_cfgelm_int, &default_value_int, 0, 1,
 384                      _surf_cfg_cb__surf_network_fullduplex, NULL);
 385     xbt_cfg_setdefault_int(_surf_cfg_set, "fullduplex", default_value_int);
 386
 387 #ifdef HAVE_GTNETS
 388     xbt_cfg_register(&_surf_cfg_set, "gtnets_jitter",
 389                      "Double value to oscillate the link latency, uniformly in random interval [-latency*gtnets_jitter,latency*gtnets_jitter)",
 390                      xbt_cfgelm_double, NULL, 1, 1,
 391                      _surf_cfg_cb__gtnets_jitter, NULL);
 392     xbt_cfg_setdefault_double(_surf_cfg_set, "gtnets_jitter", 0.0);
 393
 394     default_value_int = 10;
 395     xbt_cfg_register(&_surf_cfg_set, "gtnets_jitter_seed",
 396                      "Use a positive seed to reproduce jitted results, value must be in [1,1e8], default is 10",
 397                      xbt_cfgelm_int, &default_value_int, 0, 1,
 398                      _surf_cfg_cb__gtnets_jitter_seed, NULL);
 399 #endif
 400
 401     if (!surf_path) {
 402       /* retrieves the current directory of the        current process */
 403       const char *initial_path = __surf_get_initial_path();
 404       xbt_assert0((initial_path),
 405                   "__surf_get_initial_path() failed! Can't resolves current Windows directory");
 406
 407       surf_path = xbt_dynar_new(sizeof(char *), NULL);
 408       xbt_cfg_setdefault_string(_surf_cfg_set, "path", initial_path);
 409     }
 410
 411
 412     surf_config_cmd_line(argc, argv);
 413   } else {
 414     WARN0("Call to surf_config_init() after initialization ignored");
 415   }
 416 }
 417
 418 void surf_config_finalize(void)
 419 {
 420   if (!_surf_init_status)
 421     return;                     /* Not initialized yet. Nothing to do */
 422
 423   xbt_cfg_free(&_surf_cfg_set);
 424   _surf_init_status = 0;
 425 }
 426
 427 void surf_config_models_setup(const char *platform_file)
 428 {
 429   char *workstation_model_name;
 430   int workstation_id = -1;
 431   char *network_model_name = NULL;
 432   char *cpu_model_name = NULL;
 433
 434   workstation_model_name =
 435       xbt_cfg_get_string(_surf_cfg_set, "workstation/model");
 436   network_model_name = xbt_cfg_get_string(_surf_cfg_set, "network/model");
 437   cpu_model_name = xbt_cfg_get_string(_surf_cfg_set, "cpu/model");
 438
 439   /* Check whether we use a net/cpu model differing from the default ones, in which case
 440    * we should switch to the "compound" workstation model to correctly dispatch stuff to
 441    * the right net/cpu models.
 442    */
 443   if ((strcmp(network_model_name, "LV08")
 444        || strcmp(cpu_model_name, "Cas01"))
 445       && !strcmp(workstation_model_name, "CLM03")) {
 446     const char *val = "compound";
 447     INFO0
 448         ("Switching workstation model to compound since you changed the network and/or cpu model(s)");
 449     xbt_cfg_set_string(_surf_cfg_set, "workstation/model", val);
 450     workstation_model_name = (char *) "compound";
 451   }
 452
 453   DEBUG1("Workstation model: %s", workstation_model_name);
 454   workstation_id =
 455       find_model_description(surf_workstation_model_description,
 456                              workstation_model_name);
 457   if (!strcmp(workstation_model_name, "compound")) {
 458     int network_id = -1;
 459     int cpu_id = -1;
 460
 461     xbt_assert0(cpu_model_name,
 462                 "Set a cpu model to use with the 'compound' workstation model");
 463
 464     xbt_assert0(network_model_name,
 465                 "Set a network model to use with the 'compound' workstation model");
 466
 467     network_id =
 468         find_model_description(surf_network_model_description,
 469                                network_model_name);
 470     cpu_id =
 471         find_model_description(surf_cpu_model_description, cpu_model_name);
 472
 473     surf_cpu_model_description[cpu_id].model_init_preparse(platform_file);
 474     surf_network_model_description[network_id].model_init_preparse
 475         (platform_file);
 476   }
 477
 478   DEBUG0("Call workstation_model_init");
 479   surf_workstation_model_description[workstation_id].model_init_preparse
 480       (platform_file);
 481 }
 482
 483 void surf_config_models_create_elms(void)
 484 {
 485   char *workstation_model_name =
 486       xbt_cfg_get_string(_surf_cfg_set, "workstation/model");
 487   int workstation_id =
 488       find_model_description(surf_workstation_model_description,
 489                              workstation_model_name);
 490   if (surf_workstation_model_description
 491       [workstation_id].model_init_postparse != NULL)
 492     surf_workstation_model_description[workstation_id].model_init_postparse
 493         ();
 494 }