Logo AND Algorithmique Numérique Distribuée

Public GIT Repository
further streamline r_get_route_a_l: now that latency is nicely additive, no need...
[simgrid.git] / src / surf / surf_routing.c
1 /* Copyright (c) 2009, 2010, 2011. The SimGrid Team.
2  * All rights reserved.                                                     */
3
4 /* This program is free software; you can redistribute it and/or modify it
5  * under the terms of the license (GNU LGPL) which comes with this package. */
6
7 #include <pcre.h>               /* regular expression library */
8
9 #include "simgrid/platf_interface.h"    // platform creation API internal interface
10
11 #include "surf_routing_private.h"
12 #include "surf/surf_routing.h"
13 #include "surf/surfxml_parse_values.h"
14
15 xbt_lib_t host_lib;
16 int ROUTING_HOST_LEVEL;         //Routing level
17 int SURF_CPU_LEVEL;             //Surf cpu level
18 int SURF_WKS_LEVEL;             //Surf workstation level
19 int SIMIX_HOST_LEVEL;           //Simix level
20 int MSG_HOST_LEVEL;             //Msg level
21 int SD_HOST_LEVEL;              //Simdag level
22 int COORD_HOST_LEVEL=0;         //Coordinates level
23 int NS3_HOST_LEVEL;             //host node for ns3
24
25 xbt_lib_t link_lib;
26 int SD_LINK_LEVEL;              //Simdag level
27 int SURF_LINK_LEVEL;            //Surf level
28 int NS3_LINK_LEVEL;             //link for ns3
29
30 xbt_lib_t as_router_lib;
31 int ROUTING_ASR_LEVEL;          //Routing level
32 int COORD_ASR_LEVEL;            //Coordinates level
33 int NS3_ASR_LEVEL;              //host node for ns3
34
35 static xbt_dict_t random_value = NULL;
36
37 /* Global vars */
38 routing_global_t global_routing = NULL;
39 AS_t current_routing = NULL;
40
41 /* global parse functions */
42 xbt_dynar_t link_list = NULL;   /* temporary store of current list link of a route */
43 static const char *src = NULL;  /* temporary store the source name of a route */
44 static const char *dst = NULL;  /* temporary store the destination name of a route */
45 static char *gw_src = NULL;     /* temporary store the gateway source name of a route */
46 static char *gw_dst = NULL;     /* temporary store the gateway destination name of a route */
47
48 XBT_LOG_NEW_DEFAULT_SUBCATEGORY(surf_route, surf, "Routing part of surf");
49
50 static void routing_parse_peer(sg_platf_peer_cbarg_t peer);     /* peer bypass */
51 static void routing_parse_Srandom(void);        /* random bypass */
52
53 static void routing_parse_postparse(void);
54
55 /* this lines are only for replace use like index in the model table */
56 typedef enum {
57   SURF_MODEL_FULL = 0,
58   SURF_MODEL_FLOYD,
59   SURF_MODEL_DIJKSTRA,
60   SURF_MODEL_DIJKSTRACACHE,
61   SURF_MODEL_NONE,
62   SURF_MODEL_RULEBASED,
63   SURF_MODEL_VIVALDI,
64   SURF_MODEL_CLUSTER
65 } e_routing_types;
66
67 struct s_model_type routing_models[] = {
68   {"Full",
69    "Full routing data (fast, large memory requirements, fully expressive)",
70    model_full_create, model_full_end},
71   {"Floyd",
72    "Floyd routing data (slow initialization, fast lookup, lesser memory requirements, shortest path routing only)",
73    model_floyd_create, model_floyd_end},
74   {"Dijkstra",
75    "Dijkstra routing data (fast initialization, slow lookup, small memory requirements, shortest path routing only)",
76    model_dijkstra_create, model_dijkstra_both_end},
77   {"DijkstraCache",
78    "Dijkstra routing data (fast initialization, fast lookup, small memory requirements, shortest path routing only)",
79    model_dijkstracache_create, model_dijkstra_both_end},
80   {"none", "No routing (usable with Constant network only)",
81    model_none_create,  NULL},
82   {"RuleBased", "Rule-Based routing data (...)",
83    model_rulebased_create, NULL},
84   {"Vivaldi", "Vivaldi routing",
85    model_vivaldi_create, NULL},
86   {"Cluster", "Cluster routing",
87    model_cluster_create, NULL},
88   {NULL, NULL, NULL, NULL}
89 };
90
91 /**
92  * \brief Add a "host" to the network element list
93  */
94 static void parse_S_host(sg_platf_host_cbarg_t host)
95 {
96   network_element_info_t info = NULL;
97   if (current_routing->hierarchy == SURF_ROUTING_NULL)
98     current_routing->hierarchy = SURF_ROUTING_BASE;
99   xbt_assert(!xbt_lib_get_or_null(host_lib, host->id, ROUTING_HOST_LEVEL),
100              "Reading a host, processing unit \"%s\" already exists", host->id);
101
102   current_routing->parse_PU(current_routing, host->id);
103   info = xbt_new0(s_network_element_info_t, 1);
104   info->rc_component = current_routing;
105   info->rc_type = SURF_NETWORK_ELEMENT_HOST;
106   xbt_lib_set(host_lib, host->id, ROUTING_HOST_LEVEL, (void *) info);
107   if (host->coord && strcmp(host->coord, "")) {
108     unsigned int cursor;
109     char*str;
110
111     if (!COORD_HOST_LEVEL)
112       xbt_die ("To use host coordinates, please add --cfg=coordinates:yes to your command line");
113
114     /* Pre-parse the host coordinates -- FIXME factorize with routers by overloading the routing->parse_PU function*/
115     xbt_dynar_t ctn_str = xbt_str_split_str(host->coord, " ");
116     xbt_dynar_t ctn = xbt_dynar_new(sizeof(double),NULL);
117     xbt_dynar_foreach(ctn_str,cursor, str) {
118       double val = atof(str);
119       xbt_dynar_push(ctn,&val);
120     }
121     xbt_dynar_shrink(ctn, 0);
122     xbt_dynar_free(&ctn_str);
123     xbt_lib_set(host_lib, host->id, COORD_HOST_LEVEL, (void *) ctn);
124   }
125 }
126
127 /**
128  * \brief Add a "router" to the network element list
129  */
130 static void parse_S_router(sg_platf_router_cbarg_t router)
131 {
132   network_element_info_t info = NULL;
133   if (current_routing->hierarchy == SURF_ROUTING_NULL)
134     current_routing->hierarchy = SURF_ROUTING_BASE;
135   xbt_assert(!xbt_lib_get_or_null(as_router_lib, router->id, ROUTING_ASR_LEVEL),
136              "Reading a router, processing unit \"%s\" already exists",
137              router->id);
138
139   current_routing->parse_PU(current_routing, router->id);
140   info = xbt_new0(s_network_element_info_t, 1);
141   info->rc_component = current_routing;
142   info->rc_type = SURF_NETWORK_ELEMENT_ROUTER;
143
144   xbt_lib_set(as_router_lib, router->id, ROUTING_ASR_LEVEL, (void *) info);
145   if (strcmp(router->coord, "")) {
146     unsigned int cursor;
147     char*str;
148
149     if (!COORD_ASR_LEVEL)
150       xbt_die ("To use host coordinates, please add --cfg=coordinates:yes to your command line");
151
152     /* Pre-parse the host coordinates */
153     xbt_dynar_t ctn_str = xbt_str_split_str(router->coord, " ");
154     xbt_dynar_t ctn = xbt_dynar_new(sizeof(double),NULL);
155     xbt_dynar_foreach(ctn_str,cursor, str) {
156       double val = atof(str);
157       xbt_dynar_push(ctn,&val);
158     }
159     xbt_dynar_shrink(ctn, 0);
160     xbt_dynar_free(&ctn_str);
161     xbt_lib_set(as_router_lib, router->id, COORD_ASR_LEVEL, (void *) ctn);
162   }
163 }
164
165
166 /**
167  * \brief Set the end points for a route
168  */
169 static void routing_parse_S_route(void)
170 {
171   if (src != NULL && dst != NULL && link_list != NULL)
172     THROWF(arg_error, 0, "Route between %s to %s can not be defined",
173            A_surfxml_route_src, A_surfxml_route_dst);
174   src = A_surfxml_route_src;
175   dst = A_surfxml_route_dst;
176   xbt_assert(strlen(src) > 0 || strlen(dst) > 0,
177              "Some limits are null in the route between \"%s\" and \"%s\"",
178              src, dst);
179   link_list = xbt_dynar_new(sizeof(char *), &xbt_free_ref);
180 }
181
182 /**
183  * \brief Set the end points and gateways for a ASroute
184  */
185 static void routing_parse_S_ASroute(void)
186 {
187   if (src != NULL && dst != NULL && link_list != NULL)
188     THROWF(arg_error, 0, "Route between %s to %s can not be defined",
189            A_surfxml_ASroute_src, A_surfxml_ASroute_dst);
190   src = A_surfxml_ASroute_src;
191   dst = A_surfxml_ASroute_dst;
192   gw_src = A_surfxml_ASroute_gw_src;
193   gw_dst = A_surfxml_ASroute_gw_dst;
194   xbt_assert(strlen(src) > 0 || strlen(dst) > 0 || strlen(gw_src) > 0
195              || strlen(gw_dst) > 0,
196              "Some limits are null in the route between \"%s\" and \"%s\"",
197              src, dst);
198   link_list = xbt_dynar_new(sizeof(char *), &xbt_free_ref);
199 }
200
201 /**
202  * \brief Set the end points for a bypassRoute
203  */
204 static void routing_parse_S_bypassRoute(void)
205 {
206   if (src != NULL && dst != NULL && link_list != NULL)
207     THROWF(arg_error, 0,
208            "Bypass Route between %s to %s can not be defined",
209            A_surfxml_bypassRoute_src, A_surfxml_bypassRoute_dst);
210   src = A_surfxml_bypassRoute_src;
211   dst = A_surfxml_bypassRoute_dst;
212   gw_src = A_surfxml_bypassRoute_gw_src;
213   gw_dst = A_surfxml_bypassRoute_gw_dst;
214   xbt_assert(strlen(src) > 0 || strlen(dst) > 0 || strlen(gw_src) > 0
215              || strlen(gw_dst) > 0,
216              "Some limits are null in the route between \"%s\" and \"%s\"",
217              src, dst);
218   link_list = xbt_dynar_new(sizeof(char *), &xbt_free_ref);
219 }
220
221 /**
222  * \brief Set a new link on the actual list of link for a route or ASroute from XML
223  */
224
225 static void routing_parse_link_ctn(void)
226 {
227   char *link_id;
228   switch (A_surfxml_link_ctn_direction) {
229   case AU_surfxml_link_ctn_direction:
230   case A_surfxml_link_ctn_direction_NONE:
231     link_id = xbt_strdup(A_surfxml_link_ctn_id);
232     break;
233   case A_surfxml_link_ctn_direction_UP:
234     link_id = bprintf("%s_UP", A_surfxml_link_ctn_id);
235     break;
236   case A_surfxml_link_ctn_direction_DOWN:
237     link_id = bprintf("%s_DOWN", A_surfxml_link_ctn_id);
238     break;
239   }
240   xbt_dynar_push(link_list, &link_id);
241 }
242
243 /**
244  * \brief Store the route by calling the set_route function of the current routing component
245  */
246 static void routing_parse_E_route(void)
247 {
248   route_t route = xbt_new0(s_route_t, 1);
249   route->link_list = link_list;
250   xbt_assert(current_routing->parse_route,
251              "no defined method \"set_route\" in \"%s\"",
252              current_routing->name);
253   current_routing->parse_route(current_routing, src, dst, route);
254   link_list = NULL;
255   src = NULL;
256   dst = NULL;
257 }
258
259 /**
260  * \brief Store the ASroute by calling the set_ASroute function of the current routing component
261  */
262 static void routing_parse_E_ASroute(void)
263 {
264   route_t e_route = xbt_new0(s_route_t, 1);
265   e_route->link_list = link_list;
266   e_route->src_gateway = xbt_strdup(gw_src);
267   e_route->dst_gateway = xbt_strdup(gw_dst);
268   xbt_assert(current_routing->parse_ASroute,
269              "no defined method \"set_ASroute\" in \"%s\"",
270              current_routing->name);
271   current_routing->parse_ASroute(current_routing, src, dst, e_route);
272   link_list = NULL;
273   src = NULL;
274   dst = NULL;
275   gw_src = NULL;
276   gw_dst = NULL;
277 }
278
279 /**
280  * \brief Store the bypass route by calling the set_bypassroute function of the current routing component
281  */
282 static void routing_parse_E_bypassRoute(void)
283 {
284   route_t e_route = xbt_new0(s_route_t, 1);
285   e_route->link_list = link_list;
286   e_route->src_gateway = xbt_strdup(gw_src);
287   e_route->dst_gateway = xbt_strdup(gw_dst);
288   xbt_assert(current_routing->parse_bypassroute,
289              "Bypassing mechanism not implemented by routing '%s'",
290              current_routing->name);
291   current_routing->parse_bypassroute(current_routing, src, dst, e_route);
292   link_list = NULL;
293   src = NULL;
294   dst = NULL;
295   gw_src = NULL;
296   gw_dst = NULL;
297 }
298
299 /**
300  * \brief Make a new routing component to the platform
301  *
302  * Add a new autonomous system to the platform. Any elements (such as host,
303  * router or sub-AS) added after this call and before the corresponding call
304  * to sg_platf_new_AS_close() will be added to this AS.
305  *
306  * Once this function was called, the configuration concerning the used
307  * models cannot be changed anymore.
308  *
309  * @param AS_id name of this autonomous system. Must be unique in the platform
310  * @param wanted_routing_type one of Full, Floyd, Dijkstra or similar. Full list in the variable routing_models, in src/surf/surf_routing.c
311  */
312 void routing_AS_begin(const char *AS_id, const char *wanted_routing_type)
313 {
314   AS_t new_as;
315   routing_model_description_t model = NULL;
316   int cpt;
317
318   /* search the routing model */
319   for (cpt = 0; routing_models[cpt].name; cpt++)
320     if (!strcmp(wanted_routing_type, routing_models[cpt].name))
321       model = &routing_models[cpt];
322   /* if its not exist, error */
323   if (model == NULL) {
324     fprintf(stderr, "Routing model %s not found. Existing models:\n",
325             wanted_routing_type);
326     for (cpt = 0; routing_models[cpt].name; cpt++)
327       fprintf(stderr, "   %s: %s\n", routing_models[cpt].name,
328               routing_models[cpt].desc);
329     xbt_die(NULL);
330   }
331
332   /* make a new routing component */
333   new_as = (AS_t) model->create();
334   new_as->model_desc = model;
335   new_as->hierarchy = SURF_ROUTING_NULL;
336   new_as->name = xbt_strdup(AS_id);
337
338   if (current_routing == NULL && global_routing->root == NULL) {
339
340     /* it is the first one */
341     new_as->routing_father = NULL;
342     global_routing->root = new_as;
343
344   } else if (current_routing != NULL && global_routing->root != NULL) {
345
346     xbt_assert(!xbt_dict_get_or_null
347                (current_routing->routing_sons, AS_id),
348                "The AS \"%s\" already exists", AS_id);
349     /* it is a part of the tree */
350     new_as->routing_father = current_routing;
351     /* set the father behavior */
352     if (current_routing->hierarchy == SURF_ROUTING_NULL)
353       current_routing->hierarchy = SURF_ROUTING_RECURSIVE;
354     /* add to the sons dictionary */
355     xbt_dict_set(current_routing->routing_sons, AS_id,
356                  (void *) new_as, NULL);
357     /* add to the father element list */
358     current_routing->parse_AS(current_routing, AS_id);
359   } else {
360     THROWF(arg_error, 0, "All defined components must be belong to a AS");
361   }
362   /* set the new current component of the tree */
363   current_routing = new_as;
364 }
365
366 /**
367  * \brief Specify that the current description of AS is finished
368  *
369  * Once you've declared all the content of your AS, you have to close
370  * it with this call. Your AS is not usable until you call this function.
371  *
372  * @fixme: this call is not as robust as wanted: bad things WILL happen
373  * if you call it twice for the same AS, or if you forget calling it, or
374  * even if you add stuff to a closed AS
375  *
376  */
377 void routing_AS_end()
378 {
379
380   if (current_routing == NULL) {
381     THROWF(arg_error, 0, "Close an AS, but none was under construction");
382   } else {
383     network_element_info_t info = NULL;
384     xbt_assert(!xbt_lib_get_or_null
385                (as_router_lib, current_routing->name, ROUTING_ASR_LEVEL),
386                "The AS \"%s\" already exists", current_routing->name);
387     info = xbt_new0(s_network_element_info_t, 1);
388     info->rc_component = current_routing->routing_father;
389     info->rc_type = SURF_NETWORK_ELEMENT_AS;
390     xbt_lib_set(as_router_lib, current_routing->name, ROUTING_ASR_LEVEL,
391                 (void *) info);
392
393     if (current_routing->model_desc->end)
394       current_routing->model_desc->end(current_routing);
395     current_routing = current_routing->routing_father;
396   }
397 }
398
399 /* Aux Business methods */
400
401 /**
402  * \brief Get the AS father and the first elements of the chain
403  *
404  * \param src the source host name 
405  * \param dst the destination host name
406  * 
407  * Get the common father of the to processing units, and the first different 
408  * father in the chain
409  */
410 static void elements_father(const char *src, const char *dst,
411                             AS_t * res_father,
412                             AS_t * res_src,
413                             AS_t * res_dst)
414 {
415   xbt_assert(src && dst, "bad parameters for \"elements_father\" method");
416 #define ELEMENTS_FATHER_MAXDEPTH 16     /* increase if it is not enough */
417   AS_t src_as, dst_as;
418   AS_t path_src[ELEMENTS_FATHER_MAXDEPTH];
419   AS_t path_dst[ELEMENTS_FATHER_MAXDEPTH];
420   int index_src = 0;
421   int index_dst = 0;
422   AS_t current;
423   AS_t current_src;
424   AS_t current_dst;
425   AS_t father;
426
427   /* (1) find the as where the src and dst are located */
428   network_element_info_t src_data = xbt_lib_get_or_null(host_lib, src,
429                                                         ROUTING_HOST_LEVEL);
430   network_element_info_t dst_data = xbt_lib_get_or_null(host_lib, dst,
431                                                         ROUTING_HOST_LEVEL);
432   if (!src_data)
433     src_data = xbt_lib_get_or_null(as_router_lib, src, ROUTING_ASR_LEVEL);
434   if (!dst_data)
435     dst_data = xbt_lib_get_or_null(as_router_lib, dst, ROUTING_ASR_LEVEL);
436   src_as = src_data->rc_component;
437   dst_as = dst_data->rc_component;
438
439   xbt_assert(src_as && dst_as,
440              "Ask for route \"from\"(%s) or \"to\"(%s) no found", src, dst);
441
442   /* (2) find the path to the root routing component */
443   for (current = src_as; current != NULL; current = current->routing_father) {
444     if (index_src >= ELEMENTS_FATHER_MAXDEPTH)
445       xbt_die("ELEMENTS_FATHER_MAXDEPTH should be increased for path_src");
446     path_src[index_src++] = current;
447   }
448   for (current = dst_as; current != NULL; current = current->routing_father) {
449     if (index_dst >= ELEMENTS_FATHER_MAXDEPTH)
450       xbt_die("ELEMENTS_FATHER_MAXDEPTH should be increased for path_dst");
451     path_dst[index_dst++] = current;
452   }
453
454   /* (3) find the common father */
455   do {
456     current_src = path_src[--index_src];
457     current_dst = path_dst[--index_dst];
458   } while (index_src > 0 && index_dst > 0 && current_src == current_dst);
459
460   /* (4) they are not in the same routing component, make the path */
461   if (current_src == current_dst)
462     father = current_src;
463   else
464     father = path_src[index_src + 1];
465
466   /* (5) result generation */
467   *res_father = father;         /* first the common father of src and dst */
468   *res_src = current_src;       /* second the first different father of src */
469   *res_dst = current_dst;       /* three  the first different father of dst */
470
471 #undef ELEMENTS_FATHER_MAXDEPTH
472 }
473
474 /* Global Business methods */
475
476 /**
477  * \brief Recursive function for get_route_latency
478  *
479  * \param src the source host name 
480  * \param dst the destination host name
481  * \param *route the route where the links are stored. It is either NULL or a ready to use dynar
482  * \param *latency the latency, if needed
483  * 
484  * This function is called by "get_route" and "get_latency". It allows to walk
485  * recursively through the ASes tree.
486  */
487 static void _get_route_and_latency(const char *src, const char *dst,
488                                    xbt_dynar_t * route, double *latency)
489 {
490   void *link;
491   unsigned int cpt;
492
493   XBT_DEBUG("Solve route/latency  \"%s\" to \"%s\"", src, dst);
494   xbt_assert(src && dst, "bad parameters for \"_get_route_latency\" method");
495
496   /* Find how src and dst are interconnected */
497   AS_t common_father, src_father, dst_father;
498   elements_father(src, dst, &common_father, &src_father, &dst_father);
499
500   /* If src and dst are in the same AS, life is good */
501   if (src_father == dst_father) {       /* SURF_ROUTING_BASE */
502
503     route_t e_route = xbt_new0(s_route_t, 1);
504     e_route->link_list = xbt_dynar_new(global_routing->size_of_link, NULL);
505
506     common_father->get_route(common_father, src, dst, e_route);
507     xbt_assert(e_route, "no route between \"%s\" and \"%s\"", src, dst);
508     *route = e_route->link_list;
509
510     if (latency)
511       *latency += common_father->get_latency(common_father, src, dst, e_route);
512
513     xbt_free(e_route->src_gateway);
514     xbt_free(e_route->dst_gateway);
515     xbt_free(e_route);
516     return;
517   }
518
519   /* If we are here, src and dst are not in the same AS; check whether a direct bypass is defined */
520
521   route_t e_route_bypass = NULL;
522   if (common_father->get_bypass_route)
523     e_route_bypass = common_father->get_bypass_route(common_father, src, dst);
524
525   if (e_route_bypass) { /* Common ancestor is kind enough to declare a bypass route from src to dst -- use it and bail out */
526     if (latency)
527       xbt_die("Bypass cannot work yet with get_latency"); // FIXME: that limitation seems supurious to me -- check with alvin
528
529     *route = xbt_dynar_new(global_routing->size_of_link, NULL);
530
531     xbt_dynar_foreach(e_route_bypass->link_list, cpt, link) {
532       xbt_dynar_push(*route, &link);
533     }
534
535     generic_free_route(e_route_bypass);
536     return;
537   }
538
539
540   /* Not in the same AS, no bypass. We'll have to find our path between the ASes recursively*/
541
542   route_t e_route_cnt = xbt_new0(s_route_t, 1);
543   e_route_cnt->link_list = xbt_dynar_new(global_routing->size_of_link, NULL);
544   common_father->get_route(common_father, src_father->name, dst_father->name, e_route_cnt);
545
546   xbt_assert(e_route_cnt, "no route between \"%s\" and \"%s\"",
547       src_father->name, dst_father->name);
548
549   xbt_assert((e_route_cnt->src_gateway == NULL) ==
550       (e_route_cnt->dst_gateway == NULL),
551       "bad gateway for route between \"%s\" and \"%s\"", src, dst);
552
553   *route = xbt_dynar_new(global_routing->size_of_link, NULL);
554
555   if (latency) {
556     *latency += common_father->get_latency(common_father,
557         src_father->name, dst_father->name,
558         e_route_cnt);
559   }
560
561
562   /* If source gateway is not our source, we have to recursively find our way up to this point */
563   if (strcmp(src, e_route_cnt->src_gateway)) {
564     xbt_dynar_t route_src;
565
566     _get_route_and_latency(src, e_route_cnt->src_gateway,
567         (route ? &route_src : NULL),
568         latency);
569
570     xbt_assert(route_src, "no route between \"%s\" and \"%s\"",
571         src, e_route_cnt->src_gateway);
572     xbt_dynar_foreach(route_src, cpt, link) {
573       xbt_dynar_push(*route, &link);
574     }
575     xbt_dynar_free(&route_src);
576   }
577
578   xbt_dynar_foreach(e_route_cnt->link_list, cpt, link) {
579     xbt_dynar_push(*route, &link);
580   }
581
582   /* If dest gateway is not our destination, we have to recursively find our way from this point */
583   if (strcmp(e_route_cnt->dst_gateway, dst)) {
584     xbt_dynar_t route_dst;
585
586     _get_route_and_latency(e_route_cnt->dst_gateway, dst,
587         (route ? &route_dst : NULL),
588         latency);
589
590     xbt_assert(route_dst, "no route between \"%s\" and \"%s\"",
591         e_route_cnt->dst_gateway, dst);
592     xbt_dynar_foreach(route_dst, cpt, link) {
593       xbt_dynar_push(*route, &link);
594     }
595     xbt_dynar_free(&route_dst);
596
597   }
598
599   generic_free_route(e_route_cnt);
600 }
601
602 /**
603  * \brief Find a route between hosts
604  *
605  * \param src the source host name
606  * \param dst the destination host name
607  * \param route where to store the list of links.
608  *              If *route=NULL, create a short lived dynar. Else, fill the provided dynar
609  * \param latency where to store the latency experienced on the path (or NULL if not interested)
610  *                It is the caller responsability to initialize latency to 0 (we add to provided route)
611  * \pre route!=NULL
612  *
613  * walk through the routing components tree and find a route between hosts
614  * by calling the differents "get_route" functions in each routing component.
615  */
616 void routing_get_route_and_latency(const char *src, const char *dst,
617                                    xbt_dynar_t * route, double *latency)
618 {
619   static xbt_dynar_t last_route = NULL;
620
621   int need_cleanup = !(*route);
622
623   if (need_cleanup) {
624     xbt_dynar_free(&last_route);
625     last_route = *route = xbt_dynar_new(global_routing->size_of_link,NULL);
626   }
627
628   _get_route_and_latency(src, dst, route, latency);
629
630   xbt_assert(!latency || *latency >= 0.0,
631              "negative latency on route between \"%s\" and \"%s\"", src, dst);
632 }
633
634 static xbt_dynar_t recursive_get_onelink_routes(AS_t rc)
635 {
636   xbt_dynar_t ret = xbt_dynar_new(sizeof(onelink_t), xbt_free);
637
638   //adding my one link routes
639   unsigned int cpt;
640   void *link;
641   xbt_dynar_t onelink_mine = rc->get_onelink_routes(rc);
642   if (onelink_mine) {
643     xbt_dynar_foreach(onelink_mine, cpt, link) {
644       xbt_dynar_push(ret, &link);
645     }
646   }
647   //recursing
648   char *key;
649   xbt_dict_cursor_t cursor = NULL;
650   AS_t rc_child;
651   xbt_dict_foreach(rc->routing_sons, cursor, key, rc_child) {
652     xbt_dynar_t onelink_child = recursive_get_onelink_routes(rc_child);
653     if (onelink_child) {
654       xbt_dynar_foreach(onelink_child, cpt, link) {
655         xbt_dynar_push(ret, &link);
656       }
657     }
658   }
659   return ret;
660 }
661
662 static xbt_dynar_t get_onelink_routes(void)
663 {
664   return recursive_get_onelink_routes(global_routing->root);
665 }
666
667 e_surf_network_element_type_t routing_get_network_element_type(const char *name)
668 {
669   network_element_info_t rc = NULL;
670
671   rc = xbt_lib_get_or_null(host_lib, name, ROUTING_HOST_LEVEL);
672   if (rc)
673     return rc->rc_type;
674
675   rc = xbt_lib_get_or_null(as_router_lib, name, ROUTING_ASR_LEVEL);
676   if (rc)
677     return rc->rc_type;
678
679   return SURF_NETWORK_ELEMENT_NULL;
680 }
681
682 /**
683  * \brief Generic method: create the global routing schema
684  * 
685  * Make a global routing structure and set all the parsing functions.
686  */
687 void routing_model_create(size_t size_of_links, void *loopback)
688 {
689   /* config the uniq global routing */
690   global_routing = xbt_new0(s_routing_global_t, 1);
691   global_routing->root = NULL;
692   global_routing->get_onelink_routes = get_onelink_routes;
693   global_routing->loopback = loopback;
694   global_routing->size_of_link = size_of_links;
695   /* no current routing at moment */
696   current_routing = NULL;
697 }
698
699
700 /* ************************************************** */
701 /* ********** PATERN FOR NEW ROUTING **************** */
702
703 /* The minimal configuration of a new routing model need the next functions,
704  * also you need to set at the start of the file, the new model in the model
705  * list. Remember keep the null ending of the list.
706  */
707 /*** Routing model structure ***/
708 // typedef struct {
709 //   s_routing_component_t generic_routing;
710 //   /* things that your routing model need */
711 // } s_routing_component_NEW_t,*routing_component_NEW_t;
712
713 /*** Parse routing model functions ***/
714 // static void model_NEW_set_processing_unit(routing_component_t rc, const char* name) {}
715 // static void model_NEW_set_autonomous_system(routing_component_t rc, const char* name) {}
716 // static void model_NEW_set_route(routing_component_t rc, const char* src, const char* dst, route_t route) {}
717 // static void model_NEW_set_ASroute(routing_component_t rc, const char* src, const char* dst, route_extended_t route) {}
718 // static void model_NEW_set_bypassroute(routing_component_t rc, const char* src, const char* dst, route_extended_t e_route) {}
719
720 /*** Business methods ***/
721 // static route_extended_t NEW_get_route(routing_component_t rc, const char* src,const char* dst) {return NULL;}
722 // static route_extended_t NEW_get_bypass_route(routing_component_t rc, const char* src,const char* dst) {return NULL;}
723 // static void NEW_finalize(routing_component_t rc) { xbt_free(rc);}
724
725 /*** Creation routing model functions ***/
726 // static void* model_NEW_create(void) {
727 //   routing_component_NEW_t new_component =  xbt_new0(s_routing_component_NEW_t,1);
728 //   new_component->generic_routing.set_processing_unit = model_NEW_set_processing_unit;
729 //   new_component->generic_routing.set_autonomous_system = model_NEW_set_autonomous_system;
730 //   new_component->generic_routing.set_route = model_NEW_set_route;
731 //   new_component->generic_routing.set_ASroute = model_NEW_set_ASroute;
732 //   new_component->generic_routing.set_bypassroute = model_NEW_set_bypassroute;
733 //   new_component->generic_routing.get_route = NEW_get_route;
734 //   new_component->generic_routing.get_bypass_route = NEW_get_bypass_route;
735 //   new_component->generic_routing.finalize = NEW_finalize;
736 //   /* initialization of internal structures */
737 //   return new_component;
738 // } /* mandatory */
739 // static void  model_NEW_load(void) {}   /* mandatory */
740 // static void  model_NEW_unload(void) {} /* mandatory */
741 // static void  model_NEW_end(void) {}    /* mandatory */
742
743 /* ************************************************************************** */
744 /* ************************* GENERIC PARSE FUNCTIONS ************************ */
745
746
747 static void routing_parse_cluster(sg_platf_cluster_cbarg_t cluster)
748 {
749   char *host_id, *groups, *link_id = NULL;
750   xbt_dict_t patterns = NULL;
751
752   s_sg_platf_host_cbarg_t host;
753   s_sg_platf_link_cbarg_t link;
754
755   unsigned int iter;
756   int start, end, i;
757   xbt_dynar_t radical_elements;
758   xbt_dynar_t radical_ends;
759
760   if (strcmp(cluster->availability_trace, "")
761       || strcmp(cluster->state_trace, "")) {
762     patterns = xbt_dict_new();
763     xbt_dict_set(patterns, "id", xbt_strdup(cluster->id), free);
764     xbt_dict_set(patterns, "prefix", xbt_strdup(cluster->prefix), free);
765     xbt_dict_set(patterns, "suffix", xbt_strdup(cluster->suffix), free);
766   }
767
768
769   XBT_DEBUG("<AS id=\"%s\"\trouting=\"Cluster\">", cluster->id);
770   sg_platf_new_AS_begin(cluster->id, "Cluster");
771
772   //Make all hosts
773   radical_elements = xbt_str_split(cluster->radical, ",");
774   xbt_dynar_foreach(radical_elements, iter, groups) {
775
776     radical_ends = xbt_str_split(groups, "-");
777     start = surf_parse_get_int(xbt_dynar_get_as(radical_ends, 0, char *));
778
779     switch (xbt_dynar_length(radical_ends)) {
780     case 1:
781       end = start;
782       break;
783     case 2:
784       end = surf_parse_get_int(xbt_dynar_get_as(radical_ends, 1, char *));
785       break;
786     default:
787       surf_parse_error("Malformed radical");
788       break;
789     }
790     for (i = start; i <= end; i++) {
791       host_id =
792           bprintf("%s%d%s", cluster->prefix, i, cluster->suffix);
793       link_id = bprintf("%s_link_%d", cluster->id, i);
794
795       XBT_DEBUG("<host\tid=\"%s\"\tpower=\"%f\">", host_id, cluster->power);
796
797       memset(&host, 0, sizeof(host));
798       host.id = host_id;
799       if (strcmp(cluster->availability_trace, "")) {
800         xbt_dict_set(patterns, "radical", bprintf("%d", i), xbt_free);
801         char *avail_file = xbt_str_varsubst(cluster->availability_trace, patterns);
802         XBT_DEBUG("\tavailability_file=\"%s\"", avail_file);
803         host.power_trace = tmgr_trace_new(avail_file);
804         xbt_free(avail_file);
805       } else {
806         XBT_DEBUG("\tavailability_file=\"\"");
807       }
808
809       if (strcmp(cluster->state_trace, "")) {
810         char *avail_file = xbt_str_varsubst(cluster->state_trace, patterns);
811         XBT_DEBUG("\tstate_file=\"%s\"", avail_file);
812         host.state_trace = tmgr_trace_new(avail_file);
813         xbt_free(avail_file);
814       } else {
815         XBT_DEBUG("\tstate_file=\"\"");
816       }
817
818       host.power_peak = cluster->power;
819       host.power_scale = 1.0;
820       host.core_amount = cluster->core_amount;
821       host.initial_state = SURF_RESOURCE_ON;
822       host.coord = "";
823       sg_platf_new_host(&host);
824       XBT_DEBUG("</host>");
825
826       XBT_DEBUG("<link\tid=\"%s\"\tbw=\"%f\"\tlat=\"%f\"/>", link_id,
827                 cluster->bw, cluster->lat);
828
829       memset(&link, 0, sizeof(link));
830       link.id = link_id;
831       link.bandwidth = cluster->bw;
832       link.latency = cluster->lat;
833       link.state = SURF_RESOURCE_ON;
834       link.policy = cluster->sharing_policy;
835       sg_platf_new_link(&link);
836
837       surf_parsing_link_up_down_t info =
838           xbt_new0(s_surf_parsing_link_up_down_t, 1);
839       if (link.policy == SURF_LINK_FULLDUPLEX) {
840         char *tmp_link = bprintf("%s_UP", link_id);
841         info->link_up =
842             xbt_lib_get_or_null(link_lib, tmp_link, SURF_LINK_LEVEL);
843         free(tmp_link);
844         tmp_link = bprintf("%s_DOWN", link_id);
845         info->link_down =
846             xbt_lib_get_or_null(link_lib, tmp_link, SURF_LINK_LEVEL);
847         free(tmp_link);
848       } else {
849         info->link_up = xbt_lib_get_or_null(link_lib, link_id, SURF_LINK_LEVEL);
850         info->link_down = info->link_up;
851       }
852       surf_routing_cluster_add_link(host_id, info);
853
854       xbt_free(link_id);
855       xbt_free(host_id);
856     }
857
858     xbt_dynar_free(&radical_ends);
859   }
860   xbt_dynar_free(&radical_elements);
861
862   // Add a router. It is magically used thanks to the way in which surf_routing_cluster is written,
863   // and it's very useful to connect clusters together
864   XBT_DEBUG(" ");
865   XBT_DEBUG("<router id=\"%s\"/>", cluster->router_id);
866   char *newid = NULL;
867   s_sg_platf_router_cbarg_t router;
868   memset(&router, 0, sizeof(router));
869   router.id = cluster->router_id;
870   router.coord = "";
871   if (!router.id || !strcmp(router.id, ""))
872     router.id = newid =
873         bprintf("%s%s_router%s", cluster->prefix, cluster->id,
874                 cluster->suffix);
875   sg_platf_new_router(&router);
876   free(newid);
877
878   //Make the backbone
879   if ((cluster->bb_bw != 0) && (cluster->bb_lat != 0)) {
880     char *link_backbone = bprintf("%s_backbone", cluster->id);
881     XBT_DEBUG("<link\tid=\"%s\" bw=\"%f\" lat=\"%f\"/>", link_backbone,
882               cluster->bb_bw, cluster->bb_lat);
883
884     memset(&link, 0, sizeof(link));
885     link.id = link_backbone;
886     link.bandwidth = cluster->bb_bw;
887     link.latency = cluster->bb_lat;
888     link.state = SURF_RESOURCE_ON;
889     link.policy = cluster->bb_sharing_policy;
890
891     sg_platf_new_link(&link);
892
893     surf_routing_cluster_add_backbone(current_routing, xbt_lib_get_or_null(link_lib, link_backbone, SURF_LINK_LEVEL));
894
895     free(link_backbone);
896   }
897
898   XBT_DEBUG("</AS>");
899   sg_platf_new_AS_end();
900   XBT_DEBUG(" ");
901   xbt_dict_free(&patterns); // no op if it were never set
902 }
903
904 static void routing_parse_postparse(void) {
905   xbt_dict_free(&random_value);
906 }
907
908 static void routing_parse_peer(sg_platf_peer_cbarg_t peer)
909 {
910   static int AX_ptr = 0;
911   char *host_id = NULL;
912   char *router_id, *link_router, *link_backbone, *link_id_up, *link_id_down;
913
914   static unsigned int surfxml_buffer_stack_stack_ptr = 1;
915   static unsigned int surfxml_buffer_stack_stack[1024];
916
917   surfxml_buffer_stack_stack[0] = 0;
918
919   surfxml_bufferstack_push(1);
920
921   XBT_DEBUG("<AS id=\"%s\"\trouting=\"Full\">", peer->id);
922   sg_platf_new_AS_begin(peer->id, "Full");
923
924   XBT_DEBUG(" ");
925   host_id = HOST_PEER(peer->id);
926   router_id = ROUTER_PEER(peer->id);
927   link_id_up = LINK_UP_PEER(peer->id);
928   link_id_down = LINK_DOWN_PEER(peer->id);
929
930   link_router = bprintf("%s_link_router", peer->id);
931   link_backbone = bprintf("%s_backbone", peer->id);
932
933   XBT_DEBUG("<host\tid=\"%s\"\tpower=\"%f\"/>", host_id, peer->power);
934   s_sg_platf_host_cbarg_t host;
935   memset(&host, 0, sizeof(host));
936   host.initial_state = SURF_RESOURCE_ON;
937   host.id = host_id;
938   host.power_peak = peer->power;
939   host.power_scale = 1.0;
940   host.power_trace = peer->availability_trace;
941   host.state_trace = peer->state_trace;
942   host.core_amount = 1;
943   host.coord = peer->coord;
944   sg_platf_new_host(&host);
945
946
947   XBT_DEBUG("<router id=\"%s\"\tcoordinates=\"%s\"/>", router_id, peer->coord);
948   s_sg_platf_router_cbarg_t router;
949   memset(&router, 0, sizeof(router));
950   router.id = router_id;
951   router.coord = peer->coord;
952   sg_platf_new_router(&router);
953
954   XBT_DEBUG("<link\tid=\"%s\"\tbw=\"%f\"\tlat=\"%f\"/>", link_id_up,
955             peer->bw_in, peer->lat);
956   s_sg_platf_link_cbarg_t link;
957   memset(&link, 0, sizeof(link));
958   link.state = SURF_RESOURCE_ON;
959   link.policy = SURF_LINK_SHARED;
960   link.id = link_id_up;
961   link.bandwidth = peer->bw_in;
962   link.latency = peer->lat;
963   sg_platf_new_link(&link);
964
965   // FIXME: dealing with full duplex is not the role of this piece of code, I'd say [Mt]
966   // Instead, it should be created fullduplex, and the models will do what's needed in this case
967   XBT_DEBUG("<link\tid=\"%s\"\tbw=\"%f\"\tlat=\"%f\"/>", link_id_down,
968             peer->bw_out, peer->lat);
969   link.id = link_id_down;
970   sg_platf_new_link(&link);
971
972   XBT_DEBUG(" ");
973
974   // begin here
975   XBT_DEBUG("<route\tsrc=\"%s\"\tdst=\"%s\"", host_id, router_id);
976   XBT_DEBUG("symmetrical=\"NO\">");
977   SURFXML_BUFFER_SET(route_src, host_id);
978   SURFXML_BUFFER_SET(route_dst, router_id);
979   A_surfxml_route_symmetrical = A_surfxml_route_symmetrical_NO;
980   SURFXML_START_TAG(route);
981
982   XBT_DEBUG("<link_ctn\tid=\"%s\"/>", link_id_up);
983   SURFXML_BUFFER_SET(link_ctn_id, link_id_up);
984   A_surfxml_link_ctn_direction = A_surfxml_link_ctn_direction_NONE;
985   SURFXML_START_TAG(link_ctn);
986   SURFXML_END_TAG(link_ctn);
987
988   XBT_DEBUG("</route>");
989   SURFXML_END_TAG(route);
990
991   //Opposite Route
992   XBT_DEBUG("<route\tsrc=\"%s\"\tdst=\"%s\"", router_id, host_id);
993   XBT_DEBUG("symmetrical=\"NO\">");
994   SURFXML_BUFFER_SET(route_src, router_id);
995   SURFXML_BUFFER_SET(route_dst, host_id);
996   A_surfxml_route_symmetrical = A_surfxml_route_symmetrical_NO;
997   SURFXML_START_TAG(route);
998
999   XBT_DEBUG("<link_ctn\tid=\"%s\"/>", link_id_down);
1000   SURFXML_BUFFER_SET(link_ctn_id, link_id_down);
1001   A_surfxml_link_ctn_direction = A_surfxml_link_ctn_direction_NONE;
1002   SURFXML_START_TAG(link_ctn);
1003   SURFXML_END_TAG(link_ctn);
1004
1005   XBT_DEBUG("</route>");
1006   SURFXML_END_TAG(route);
1007
1008   XBT_DEBUG("</AS>");
1009   sg_platf_new_AS_end();
1010   XBT_DEBUG(" ");
1011
1012   //xbt_dynar_free(&tab_elements_num);
1013   free(host_id);
1014   free(router_id);
1015   free(link_router);
1016   free(link_backbone);
1017   free(link_id_up);
1018   free(link_id_down);
1019   surfxml_bufferstack_pop(1);
1020 }
1021
1022 static void routing_parse_Srandom(void)
1023 {
1024   double mean, std, min, max, seed;
1025   char *random_id = A_surfxml_random_id;
1026   char *random_radical = A_surfxml_random_radical;
1027   char *rd_name = NULL;
1028   char *rd_value;
1029   mean = surf_parse_get_double(A_surfxml_random_mean);
1030   std = surf_parse_get_double(A_surfxml_random_std_deviation);
1031   min = surf_parse_get_double(A_surfxml_random_min);
1032   max = surf_parse_get_double(A_surfxml_random_max);
1033   seed = surf_parse_get_double(A_surfxml_random_seed);
1034
1035   double res = 0;
1036   int i = 0;
1037   random_data_t random = xbt_new0(s_random_data_t, 1);
1038   char *tmpbuf;
1039
1040   xbt_dynar_t radical_elements;
1041   unsigned int iter;
1042   char *groups;
1043   int start, end;
1044   xbt_dynar_t radical_ends;
1045
1046   random->generator = A_surfxml_random_generator;
1047   random->seed = seed;
1048   random->min = min;
1049   random->max = max;
1050
1051   /* Check user stupidities */
1052   if (max < min)
1053     THROWF(arg_error, 0, "random->max < random->min (%f < %f)", max, min);
1054   if (mean < min)
1055     THROWF(arg_error, 0, "random->mean < random->min (%f < %f)", mean, min);
1056   if (mean > max)
1057     THROWF(arg_error, 0, "random->mean > random->max (%f > %f)", mean, max);
1058
1059   /* normalize the mean and standard deviation before storing */
1060   random->mean = (mean - min) / (max - min);
1061   random->std = std / (max - min);
1062
1063   if (random->mean * (1 - random->mean) < random->std * random->std)
1064     THROWF(arg_error, 0, "Invalid mean and standard deviation (%f and %f)",
1065            random->mean, random->std);
1066
1067   XBT_DEBUG
1068       ("id = '%s' min = '%f' max = '%f' mean = '%f' std_deviatinon = '%f' generator = '%d' seed = '%ld' radical = '%s'",
1069        random_id, random->min, random->max, random->mean, random->std,
1070        random->generator, random->seed, random_radical);
1071
1072   if (!random_value)
1073     random_value = xbt_dict_new();
1074
1075   if (!strcmp(random_radical, "")) {
1076     res = random_generate(random);
1077     rd_value = bprintf("%f", res);
1078     xbt_dict_set(random_value, random_id, rd_value, free);
1079   } else {
1080     radical_elements = xbt_str_split(random_radical, ",");
1081     xbt_dynar_foreach(radical_elements, iter, groups) {
1082       radical_ends = xbt_str_split(groups, "-");
1083       switch (xbt_dynar_length(radical_ends)) {
1084       case 1:
1085         xbt_assert(!xbt_dict_get_or_null(random_value, random_id),
1086                    "Custom Random '%s' already exists !", random_id);
1087         res = random_generate(random);
1088         tmpbuf =
1089             bprintf("%s%d", random_id,
1090                     atoi(xbt_dynar_getfirst_as(radical_ends, char *)));
1091         xbt_dict_set(random_value, tmpbuf, bprintf("%f", res), free);
1092         xbt_free(tmpbuf);
1093         break;
1094
1095       case 2:
1096         start = surf_parse_get_int(xbt_dynar_get_as(radical_ends, 0, char *));
1097         end = surf_parse_get_int(xbt_dynar_get_as(radical_ends, 1, char *));
1098         for (i = start; i <= end; i++) {
1099           xbt_assert(!xbt_dict_get_or_null(random_value, random_id),
1100                      "Custom Random '%s' already exists !", bprintf("%s%d",
1101                                                                     random_id,
1102                                                                     i));
1103           res = random_generate(random);
1104           tmpbuf = bprintf("%s%d", random_id, i);
1105           xbt_dict_set(random_value, tmpbuf, bprintf("%f", res), free);
1106           xbt_free(tmpbuf);
1107         }
1108         break;
1109       default:
1110         XBT_CRITICAL("Malformed radical");
1111         break;
1112       }
1113       res = random_generate(random);
1114       rd_name = bprintf("%s_router", random_id);
1115       rd_value = bprintf("%f", res);
1116       xbt_dict_set(random_value, rd_name, rd_value, free);
1117
1118       xbt_dynar_free(&radical_ends);
1119     }
1120     free(rd_name);
1121     xbt_dynar_free(&radical_elements);
1122   }
1123 }
1124
1125 void routing_register_callbacks()
1126 {
1127   sg_platf_host_add_cb(parse_S_host);
1128   sg_platf_router_add_cb(parse_S_router);
1129
1130   surfxml_add_callback(STag_surfxml_random_cb_list, &routing_parse_Srandom);
1131
1132   surfxml_add_callback(STag_surfxml_route_cb_list, &routing_parse_S_route);
1133   surfxml_add_callback(STag_surfxml_ASroute_cb_list, &routing_parse_S_ASroute);
1134   surfxml_add_callback(STag_surfxml_bypassRoute_cb_list,
1135                        &routing_parse_S_bypassRoute);
1136
1137   surfxml_add_callback(ETag_surfxml_link_ctn_cb_list, &routing_parse_link_ctn);
1138
1139   surfxml_add_callback(ETag_surfxml_route_cb_list, &routing_parse_E_route);
1140   surfxml_add_callback(ETag_surfxml_ASroute_cb_list, &routing_parse_E_ASroute);
1141   surfxml_add_callback(ETag_surfxml_bypassRoute_cb_list,
1142                        &routing_parse_E_bypassRoute);
1143
1144   sg_platf_cluster_add_cb(routing_parse_cluster);
1145
1146   sg_platf_peer_add_cb(routing_parse_peer);
1147   sg_platf_postparse_add_cb(routing_parse_postparse);
1148
1149 #ifdef HAVE_TRACING
1150   instr_routing_define_callbacks();
1151 #endif
1152 }
1153
1154 /**
1155  * \brief Recursive function for finalize
1156  *
1157  * \param rc the source host name
1158  *
1159  * This fuction is call by "finalize". It allow to finalize the
1160  * AS or routing components. It delete all the structures.
1161  */
1162 static void finalize_rec(AS_t as) {
1163   xbt_dict_cursor_t cursor = NULL;
1164   char *key;
1165   AS_t elem;
1166
1167   xbt_dict_foreach(as->routing_sons, cursor, key, elem) {
1168     finalize_rec(elem);
1169   }
1170
1171   as->finalize(as);
1172 }
1173
1174 /** \brief Frees all memory allocated by the routing module */
1175 void routing_exit(void) {
1176   if (!global_routing)
1177     return;
1178   finalize_rec(global_routing->root);
1179   xbt_free(global_routing);
1180 }