Logo AND Algorithmique Numérique Distribuée

Public GIT Repository
Merge branch 'master' of github.com:mquinson/simgrid
[simgrid.git] / src / surf / surf_routing.cpp
1 /* Copyright (c) 2009-2011, 2013-2015. The SimGrid Team.
2  * All rights reserved.                                                     */
3
4 /* This program is free software; you can redistribute it and/or modify it
5  * under the terms of the license (GNU LGPL) which comes with this package. */
6
7 #include "surf_routing.hpp"
8 #include "surf_routing_cluster.hpp"
9
10 #include "simgrid/sg_config.h"
11 #include "storage_interface.hpp"
12
13 #include "src/surf/surf_routing_cluster_torus.hpp"
14 #include "src/surf/surf_routing_cluster_fat_tree.hpp"
15 #include "src/surf/surf_routing_dijkstra.hpp"
16 #include "src/surf/surf_routing_floyd.hpp"
17 #include "src/surf/surf_routing_full.hpp"
18 #include "src/surf/surf_routing_vivaldi.hpp"
19 #include "src/surf/xml/platf.hpp" // FIXME: move that back to the parsing area
20
21 #include <vector>
22
23 XBT_LOG_NEW_DEFAULT_SUBCATEGORY(surf_route, surf, "Routing part of surf");
24
25 namespace simgrid {
26 namespace surf {
27
28   /* Callbacks */
29   simgrid::xbt::signal<void(simgrid::surf::NetCard*)> netcardCreatedCallbacks;
30   simgrid::xbt::signal<void(simgrid::surf::As*)> asCreatedCallbacks;
31
32   As::As(const char*name)
33   : name_(xbt_strdup(name))
34   {}
35   As::~As()
36   {
37     xbt_dict_free(&sons_);
38     xbt_dynar_free(&vertices_);
39     xbt_dynar_free(&upDownLinks);
40     if (nullptr != bypassRoutes_)
41       for (auto &kv : *bypassRoutes_)
42         delete kv.second;
43     delete bypassRoutes_;
44     xbt_free(name_);
45     delete netcard_;
46   }
47   void As::Seal()
48   {
49     sealed_ = true;
50   }
51
52   xbt_dynar_t As::getOneLinkRoutes() {
53     return NULL;
54   }
55
56   int As::addComponent(NetCard *elm) {
57     XBT_DEBUG("Load component \"%s\"", elm->name());
58     xbt_dynar_push_as(vertices_, NetCard*, elm);
59     return xbt_dynar_length(vertices_)-1;
60   }
61
62   void As::addRoute(sg_platf_route_cbarg_t /*route*/){
63     xbt_die("AS %s does not accept new routes (wrong class).",name_);
64   }
65
66   std::vector<Link*> *As::getBypassRoute(NetCard *src, NetCard *dst)
67   {
68     // If never set a bypass route return NULL without any further computations
69     XBT_DEBUG("generic_get_bypassroute from %s to %s", src->name(), dst->name());
70     if (bypassRoutes_ == nullptr)
71       return nullptr;
72
73     std::vector<Link*> *bypassedRoute = nullptr;
74
75     if(dst->containingAS() == this && src->containingAS() == this ){
76       char *route_name = bprintf("%s#%s", src->name(), dst->name());
77       if (bypassRoutes_->find(route_name) != bypassRoutes_->end()) {
78         bypassedRoute = bypassRoutes_->at(route_name);
79         XBT_DEBUG("Found a bypass route with %zu links",bypassedRoute->size());
80       }
81       free(route_name);
82       return bypassedRoute;
83     }
84
85     int index_src, index_dst;
86     As **current_src = NULL;
87     As **current_dst = NULL;
88
89     As *src_as = src->containingAS();
90     As *dst_as = dst->containingAS();
91
92     /* (2) find the path to the root routing component */
93     xbt_dynar_t path_src = xbt_dynar_new(sizeof(As*), NULL);
94     As *current = src_as;
95     while (current != NULL) {
96       xbt_dynar_push(path_src, &current);
97       current = current->father_;
98     }
99     xbt_dynar_t path_dst = xbt_dynar_new(sizeof(As*), NULL);
100     current = dst_as;
101     while (current != NULL) {
102       xbt_dynar_push(path_dst, &current);
103       current = current->father_;
104     }
105
106     /* (3) find the common father */
107     index_src = path_src->used - 1;
108     index_dst = path_dst->used - 1;
109     current_src = (As **) xbt_dynar_get_ptr(path_src, index_src);
110     current_dst = (As **) xbt_dynar_get_ptr(path_dst, index_dst);
111     while (index_src >= 0 && index_dst >= 0 && *current_src == *current_dst) {
112       xbt_dynar_pop_ptr(path_src);
113       xbt_dynar_pop_ptr(path_dst);
114       index_src--;
115       index_dst--;
116       current_src = (As **) xbt_dynar_get_ptr(path_src, index_src);
117       current_dst = (As **) xbt_dynar_get_ptr(path_dst, index_dst);
118     }
119
120     int max_index_src = path_src->used - 1;
121     int max_index_dst = path_dst->used - 1;
122
123     int max_index = std::max(max_index_src, max_index_dst);
124
125     for (int max = 0; max <= max_index; max++) {
126       for (int i = 0; i < max; i++) {
127         if (i <= max_index_src && max <= max_index_dst) {
128           char *route_name = bprintf("%s#%s",
129               (*(As **) (xbt_dynar_get_ptr(path_src, i)))->name_,
130               (*(As **) (xbt_dynar_get_ptr(path_dst, max)))->name_);
131           if (bypassRoutes_->find(route_name) != bypassRoutes_->end())
132             bypassedRoute = bypassRoutes_->at(route_name);
133           xbt_free(route_name);
134         }
135         if (bypassedRoute)
136           break;
137         if (max <= max_index_src && i <= max_index_dst) {
138           char *route_name = bprintf("%s#%s",
139               (*(As **) (xbt_dynar_get_ptr(path_src, max)))->name_,
140               (*(As **) (xbt_dynar_get_ptr(path_dst, i)))->name_);
141           if (bypassRoutes_->find(route_name) != bypassRoutes_->end())
142             bypassedRoute = bypassRoutes_->at(route_name);
143           xbt_free(route_name);
144         }
145         if (bypassedRoute)
146           break;
147       }
148
149       if (bypassedRoute)
150         break;
151
152       if (max <= max_index_src && max <= max_index_dst) {
153         char *route_name = bprintf("%s#%s",
154             (*(As **) (xbt_dynar_get_ptr(path_src, max)))->name_,
155             (*(As **) (xbt_dynar_get_ptr(path_dst, max)))->name_);
156
157         if (bypassRoutes_->find(route_name) != bypassRoutes_->end())
158           bypassedRoute = bypassRoutes_->at(route_name);
159         xbt_free(route_name);
160       }
161       if (bypassedRoute)
162         break;
163     }
164
165     xbt_dynar_free(&path_src);
166     xbt_dynar_free(&path_dst);
167
168     return bypassedRoute;
169   }
170
171   void As::addBypassRoute(sg_platf_route_cbarg_t e_route){
172     const char *src = e_route->src;
173     const char *dst = e_route->dst;
174
175     if(bypassRoutes_ == nullptr)
176       bypassRoutes_ = new std::map<std::string, std::vector<Link*>*>();
177
178     char *route_name = bprintf("%s#%s", src, dst);
179
180     /* Argument validity checks */
181     if (e_route->gw_dst) {
182       XBT_DEBUG("Load bypassASroute from %s@%s to %s@%s",
183           src, e_route->gw_src->name(), dst, e_route->gw_dst->name());
184       xbt_assert(!e_route->link_list->empty(), "Bypass route between %s@%s and %s@%s cannot be empty.",
185           src, e_route->gw_src->name(), dst, e_route->gw_dst->name());
186       xbt_assert(bypassRoutes_->find(route_name) == bypassRoutes_->end(),
187           "The bypass route between %s@%s and %s@%s already exists.",
188           src, e_route->gw_src->name(), dst, e_route->gw_dst->name());
189     } else {
190       XBT_DEBUG("Load bypassRoute from %s to %s", src, dst);
191       xbt_assert(!e_route->link_list->empty(),                            "Bypass route between %s and %s cannot be empty.",    src, dst);
192       xbt_assert(bypassRoutes_->find(route_name) == bypassRoutes_->end(), "The bypass route between %s and %s already exists.", src, dst);
193     }
194
195     /* Build a copy that will be stored in the dict */
196     std::vector<Link*> *newRoute = new std::vector<Link*>();
197     for (auto link: *e_route->link_list)
198       newRoute->push_back(link);
199
200     /* Store it */
201     bypassRoutes_->insert({route_name, newRoute});
202     xbt_free(route_name);
203   }
204
205 }} // namespace simgrid::surf
206
207 /**
208  * @ingroup SURF_build_api
209  * @brief A library containing all known hosts
210  */
211 xbt_dict_t host_list;
212
213 int COORD_HOST_LEVEL=0;         //Coordinates level
214
215 int MSG_FILE_LEVEL;             //Msg file level
216
217 int SIMIX_STORAGE_LEVEL;        //Simix storage level
218 int MSG_STORAGE_LEVEL;          //Msg storage level
219
220 xbt_lib_t as_router_lib;
221 int ROUTING_ASR_LEVEL;          //Routing level
222 int COORD_ASR_LEVEL;            //Coordinates level
223 int NS3_ASR_LEVEL;              //host node for ns3
224 int ROUTING_PROP_ASR_LEVEL;     //Where the properties are stored
225
226 /** @brief Retrieve a netcard from its name
227  *
228  * Netcards are the thing that connect host or routers to the network
229  */
230 simgrid::surf::NetCard *sg_netcard_by_name_or_null(const char *name)
231 {
232   sg_host_t h = sg_host_by_name(name);
233   simgrid::surf::NetCard *netcard = h==NULL ? NULL: h->pimpl_netcard;
234   if (!netcard)
235     netcard = (simgrid::surf::NetCard*) xbt_lib_get_or_null(as_router_lib, name, ROUTING_ASR_LEVEL);
236   return netcard;
237 }
238
239 /* Global vars */
240 simgrid::surf::RoutingPlatf *routing_platf = NULL;
241
242
243 /** The current AS in the parsing */
244 static simgrid::surf::As *current_routing = NULL;
245 simgrid::surf::As* routing_get_current()
246 {
247   return current_routing;
248 }
249
250 /** @brief Add a link connecting an host to the rest of its AS (which must be cluster or vivaldi) */
251 void sg_platf_new_hostlink(sg_platf_host_link_cbarg_t netcard_arg)
252 {
253   simgrid::surf::NetCard *netcard = sg_host_by_name(netcard_arg->id)->pimpl_netcard;
254   xbt_assert(netcard, "Host '%s' not found!", netcard_arg->id);
255   xbt_assert(dynamic_cast<simgrid::surf::AsCluster*>(current_routing) ||
256              dynamic_cast<simgrid::surf::AsVivaldi*>(current_routing),
257       "Only hosts from Cluster and Vivaldi ASes can get a host_link.");
258
259   s_surf_parsing_link_up_down_t link_up_down;
260   link_up_down.link_up = Link::byName(netcard_arg->link_up);
261   link_up_down.link_down = Link::byName(netcard_arg->link_down);
262
263   xbt_assert(link_up_down.link_up, "Link '%s' not found!",netcard_arg->link_up);
264   xbt_assert(link_up_down.link_down, "Link '%s' not found!",netcard_arg->link_down);
265
266   // If dynar is is greater than netcard id and if the host_link is already defined
267   if((int)xbt_dynar_length(current_routing->upDownLinks) > netcard->id() &&
268       xbt_dynar_get_as(current_routing->upDownLinks, netcard->id(), void*))
269   surf_parse_error("Host_link for '%s' is already defined!",netcard_arg->id);
270
271   XBT_DEBUG("Push Host_link for host '%s' to position %d", netcard->name(), netcard->id());
272   xbt_dynar_set_as(current_routing->upDownLinks, netcard->id(), s_surf_parsing_link_up_down_t, link_up_down);
273 }
274
275 void sg_platf_new_trace(sg_platf_trace_cbarg_t trace)
276 {
277   tmgr_trace_t tmgr_trace;
278   if (!trace->file || strcmp(trace->file, "") != 0) {
279     tmgr_trace = tmgr_trace_new_from_file(trace->file);
280   } else {
281     xbt_assert(strcmp(trace->pc_data, ""),
282         "Trace '%s' must have either a content, or point to a file on disk.",trace->id);
283     tmgr_trace = tmgr_trace_new_from_string(trace->id, trace->pc_data, trace->periodicity);
284   }
285   xbt_dict_set(traces_set_list, trace->id, (void *) tmgr_trace, NULL);
286 }
287
288 /**
289  * \brief Make a new routing component to the platform
290  *
291  * Add a new autonomous system to the platform. Any elements (such as host,
292  * router or sub-AS) added after this call and before the corresponding call
293  * to sg_platf_new_AS_close() will be added to this AS.
294  *
295  * Once this function was called, the configuration concerning the used
296  * models cannot be changed anymore.
297  *
298  * @param AS_id name of this autonomous system. Must be unique in the platform
299  * @param wanted_routing_type one of Full, Floyd, Dijkstra or similar. Full list in the variable routing_models, in src/surf/surf_routing.c
300  */
301 void routing_AS_begin(sg_platf_AS_cbarg_t AS)
302 {
303   XBT_DEBUG("routing_AS_begin");
304
305   xbt_assert(nullptr == xbt_lib_get_or_null(as_router_lib, AS->id, ROUTING_ASR_LEVEL),
306       "Refusing to create a second AS called \"%s\".", AS->id);
307
308   _sg_cfg_init_status = 2; /* HACK: direct access to the global controlling the level of configuration to prevent
309                             * any further config now that we created some real content */
310
311
312   /* search the routing model */
313   simgrid::surf::As *new_as = NULL;
314   switch(AS->routing){
315     case A_surfxml_AS_routing_Cluster:        new_as = new simgrid::surf::AsCluster(AS->id);        break;
316     case A_surfxml_AS_routing_ClusterTorus:   new_as = new simgrid::surf::AsClusterTorus(AS->id);   break;
317     case A_surfxml_AS_routing_ClusterFatTree: new_as = new simgrid::surf::AsClusterFatTree(AS->id); break;
318     case A_surfxml_AS_routing_Dijkstra:       new_as = new simgrid::surf::AsDijkstra(AS->id, 0);    break;
319     case A_surfxml_AS_routing_DijkstraCache:  new_as = new simgrid::surf::AsDijkstra(AS->id, 1);    break;
320     case A_surfxml_AS_routing_Floyd:          new_as = new simgrid::surf::AsFloyd(AS->id);          break;
321     case A_surfxml_AS_routing_Full:           new_as = new simgrid::surf::AsFull(AS->id);           break;
322     case A_surfxml_AS_routing_None:           new_as = new simgrid::surf::AsNone(AS->id);           break;
323     case A_surfxml_AS_routing_Vivaldi:        new_as = new simgrid::surf::AsVivaldi(AS->id);        break;
324     default:                                  xbt_die("Not a valid model!");                        break;
325   }
326
327   /* make a new routing component */
328   simgrid::surf::NetCard *netcard = new simgrid::surf::NetCardImpl(new_as->name_, SURF_NETWORK_ELEMENT_AS, current_routing);
329
330   if (current_routing == NULL && routing_platf->root_ == NULL) {
331     /* it is the first one */
332     new_as->father_ = NULL;
333     routing_platf->root_ = new_as;
334     netcard->setId(-1);
335   } else if (current_routing != NULL && routing_platf->root_ != NULL) {
336
337     xbt_assert(!xbt_dict_get_or_null(current_routing->sons_, AS->id),
338                "The AS \"%s\" already exists", AS->id);
339     /* it is a part of the tree */
340     new_as->father_ = current_routing;
341     /* set the father behavior */
342     if (current_routing->hierarchy_ == SURF_ROUTING_NULL)
343       current_routing->hierarchy_ = SURF_ROUTING_RECURSIVE;
344     /* add to the sons dictionary */
345     xbt_dict_set(current_routing->sons_, AS->id,
346                  (void *) new_as, NULL);
347     /* add to the father element list */
348     netcard->setId(current_routing->addComponent(netcard));
349   } else {
350     THROWF(arg_error, 0, "All defined components must belong to a AS");
351   }
352
353   xbt_lib_set(as_router_lib, netcard->name(), ROUTING_ASR_LEVEL, (void *) netcard);
354   XBT_DEBUG("Having set name '%s' id '%d'", new_as->name_, netcard->id());
355
356   /* set the new current component of the tree */
357   current_routing = new_as;
358   current_routing->netcard_ = netcard;
359
360   simgrid::surf::netcardCreatedCallbacks(netcard);
361   simgrid::surf::asCreatedCallbacks(new_as);
362 }
363
364 /**
365  * \brief Specify that the current description of AS is finished
366  *
367  * Once you've declared all the content of your AS, you have to close
368  * it with this call. Your AS is not usable until you call this function.
369  *
370  * @fixme: this call is not as robust as wanted: bad things WILL happen
371  * if you call it twice for the same AS, or if you forget calling it, or
372  * even if you add stuff to a closed AS
373  *
374  */
375 void routing_AS_end()
376 {
377   xbt_assert(current_routing, "Cannot seal the current AS: none under construction");
378   current_routing->Seal();
379   current_routing = current_routing->father_;
380 }
381
382 /* Aux Business methods */
383
384 /**
385  * \brief Get the AS father and the first elements of the chain
386  *
387  * \param src the source host name
388  * \param dst the destination host name
389  *
390  * Get the common father of the to processing units, and the first different
391  * father in the chain
392  */
393 static void elements_father(sg_netcard_t src, sg_netcard_t dst,
394                             AS_t * res_father,
395                             AS_t * res_src,
396                             AS_t * res_dst)
397 {
398   xbt_assert(src && dst, "bad parameters for \"elements_father\" method");
399 #define ROUTING_HIERARCHY_MAXDEPTH 16     /* increase if it is not enough */
400   simgrid::surf::As *path_src[ROUTING_HIERARCHY_MAXDEPTH];
401   simgrid::surf::As *path_dst[ROUTING_HIERARCHY_MAXDEPTH];
402   int index_src = 0;
403   int index_dst = 0;
404   simgrid::surf::As *current_src;
405   simgrid::surf::As *current_dst;
406   simgrid::surf::As *father;
407
408   /* (1) find the path to root of src and dst*/
409   simgrid::surf::As *src_as = src->containingAS();
410   simgrid::surf::As *dst_as = dst->containingAS();
411
412   xbt_assert(src_as, "Host %s must be in an AS", src->name());
413   xbt_assert(dst_as, "Host %s must be in an AS", dst->name());
414
415   /* (2) find the path to the root routing component */
416   for (simgrid::surf::As *current = src_as; current != NULL; current = current->father_) {
417     if (index_src >= ROUTING_HIERARCHY_MAXDEPTH)
418       xbt_die("ROUTING_HIERARCHY_MAXDEPTH should be increased for element %s", src->name());
419     path_src[index_src++] = current;
420   }
421   for (simgrid::surf::As *current = dst_as; current != NULL; current = current->father_) {
422     if (index_dst >= ROUTING_HIERARCHY_MAXDEPTH)
423       xbt_die("ROUTING_HIERARCHY_MAXDEPTH should be increased for path_dst");
424     path_dst[index_dst++] = current;
425   }
426
427   /* (3) find the common father */
428   do {
429     current_src = path_src[--index_src];
430     current_dst = path_dst[--index_dst];
431   } while (index_src > 0 && index_dst > 0 && current_src == current_dst);
432
433   /* (4) they are not in the same routing component, make the path */
434   if (current_src == current_dst)
435     father = current_src;
436   else
437     father = path_src[index_src + 1];
438
439   /* (5) result generation */
440   *res_father = father;         /* first the common father of src and dst */
441   *res_src = current_src;       /* second the first different father of src */
442   *res_dst = current_dst;       /* three  the first different father of dst */
443
444 #undef ROUTING_HIERARCHY_MAXDEPTH
445 }
446
447 /**
448  * \brief Recursive function for get_route_and_latency
449  *
450  * \param src the source host name
451  * \param dst the destination host name
452  * \param *route the route where the links are stored. It is either NULL or a ready to use dynar
453  * \param *latency the latency, if needed
454  */
455 static void _get_route_and_latency(simgrid::surf::NetCard *src, simgrid::surf::NetCard *dst,
456     std::vector<Link*> * links, double *latency)
457 {
458   s_sg_platf_route_cbarg_t route = SG_PLATF_ROUTE_INITIALIZER;
459   memset(&route,0,sizeof(route));
460
461   xbt_assert(src && dst, "bad parameters for \"_get_route_latency\" method");
462   XBT_DEBUG("Solve route/latency  \"%s\" to \"%s\"", src->name(), dst->name());
463
464   /* Find how src and dst are interconnected */
465   simgrid::surf::As *common_father, *src_father, *dst_father;
466   elements_father(src, dst, &common_father, &src_father, &dst_father);
467   XBT_DEBUG("elements_father: common father '%s' src_father '%s' dst_father '%s'",
468       common_father->name_, src_father->name_, dst_father->name_);
469
470   /* Check whether a direct bypass is defined. If so, use it and bail out */
471   std::vector<Link*> *bypassed_route = common_father->getBypassRoute(src, dst);
472   if (nullptr != bypassed_route) {
473     for (Link *link : *bypassed_route) {
474       links->push_back(link);
475       if (latency)
476         *latency += link->getLatency();
477     }
478     return;
479   }
480
481   /* If src and dst are in the same AS, life is good */
482   if (src_father == dst_father) {       /* SURF_ROUTING_BASE */
483     route.link_list = links;
484     common_father->getRouteAndLatency(src, dst, &route, latency);
485     return;
486   }
487
488   /* Not in the same AS, no bypass. We'll have to find our path between the ASes recursively*/
489
490   route.link_list = new std::vector<Link*>();
491
492   common_father->getRouteAndLatency(src_father->netcard_, dst_father->netcard_, &route, latency);
493   xbt_assert((route.gw_src != NULL) && (route.gw_dst != NULL),
494       "bad gateways for route from \"%s\" to \"%s\"", src->name(), dst->name());
495
496   /* If source gateway is not our source, we have to recursively find our way up to this point */
497   if (src != route.gw_src)
498     _get_route_and_latency(src, route.gw_src, links, latency);
499   for (auto link: *route.link_list)
500     links->push_back(link);
501
502   /* If dest gateway is not our destination, we have to recursively find our way from this point */
503   if (route.gw_dst != dst)
504     _get_route_and_latency(route.gw_dst, dst, links, latency);
505
506 }
507
508 namespace simgrid {
509 namespace surf {
510
511 /**
512  * \brief Find a route between hosts
513  *
514  * \param src the network_element_t for src host
515  * \param dst the network_element_t for dst host
516  * \param route where to store the list of links.
517  *              If *route=NULL, create a short lived dynar. Else, fill the provided dynar
518  * \param latency where to store the latency experienced on the path (or NULL if not interested)
519  *                It is the caller responsability to initialize latency to 0 (we add to provided route)
520  * \pre route!=NULL
521  *
522  * walk through the routing components tree and find a route between hosts
523  * by calling each "get_route" function in each routing component.
524  */
525 void RoutingPlatf::getRouteAndLatency(NetCard *src, NetCard *dst, std::vector<Link*> * route, double *latency)
526 {
527   XBT_DEBUG("getRouteAndLatency from %s to %s", src->name(), dst->name());
528
529   _get_route_and_latency(src, dst, route, latency);
530 }
531
532 static xbt_dynar_t _recursiveGetOneLinkRoutes(As *rc)
533 {
534   xbt_dynar_t ret = xbt_dynar_new(sizeof(Onelink*), xbt_free_f);
535
536   //adding my one link routes
537   xbt_dynar_t onelink_mine = rc->getOneLinkRoutes();
538   if (onelink_mine)
539     xbt_dynar_merge(&ret,&onelink_mine);
540
541   //recursing
542   char *key;
543   xbt_dict_cursor_t cursor = NULL;
544   AS_t rc_child;
545   xbt_dict_foreach(rc->sons_, cursor, key, rc_child) {
546     xbt_dynar_t onelink_child = _recursiveGetOneLinkRoutes(rc_child);
547     if (onelink_child)
548       xbt_dynar_merge(&ret,&onelink_child);
549   }
550   return ret;
551 }
552
553 xbt_dynar_t RoutingPlatf::getOneLinkRoutes(){
554   return _recursiveGetOneLinkRoutes(root_);
555 }
556
557 }
558 }
559
560 /** @brief create the root AS */
561 void routing_model_create(Link *loopback)
562 {
563   routing_platf = new simgrid::surf::RoutingPlatf(loopback);
564 }
565
566 /* ************************************************************************** */
567 /* ************************* GENERIC PARSE FUNCTIONS ************************ */
568
569 void routing_cluster_add_backbone(simgrid::surf::Link* bb) {
570   simgrid::surf::AsCluster *cluster = dynamic_cast<simgrid::surf::AsCluster*>(current_routing);
571
572   xbt_assert(cluster, "Only hosts from Cluster can get a backbone.");
573   xbt_assert(nullptr == cluster->backbone_, "Cluster %s already has a backbone link!", cluster->name_);
574
575   cluster->backbone_ = bb;
576   XBT_DEBUG("Add a backbone to AS '%s'", current_routing->name_);
577 }
578
579 void sg_platf_new_cabinet(sg_platf_cabinet_cbarg_t cabinet)
580 {
581   int start, end, i;
582   char *groups , *host_id , *link_id = NULL;
583   unsigned int iter;
584   xbt_dynar_t radical_elements;
585   xbt_dynar_t radical_ends;
586
587   //Make all hosts
588   radical_elements = xbt_str_split(cabinet->radical, ",");
589   xbt_dynar_foreach(radical_elements, iter, groups) {
590
591     radical_ends = xbt_str_split(groups, "-");
592     start = surf_parse_get_int(xbt_dynar_get_as(radical_ends, 0, char *));
593
594     switch (xbt_dynar_length(radical_ends)) {
595     case 1:
596       end = start;
597       break;
598     case 2:
599       end = surf_parse_get_int(xbt_dynar_get_as(radical_ends, 1, char *));
600       break;
601     default:
602       surf_parse_error("Malformed radical");
603       break;
604     }
605     s_sg_platf_host_cbarg_t host = SG_PLATF_HOST_INITIALIZER;
606     memset(&host, 0, sizeof(host));
607     host.pstate        = 0;
608     host.core_amount   = 1;
609
610     s_sg_platf_link_cbarg_t link = SG_PLATF_LINK_INITIALIZER;
611     memset(&link, 0, sizeof(link));
612     link.policy    = SURF_LINK_FULLDUPLEX;
613     link.latency   = cabinet->lat;
614     link.bandwidth = cabinet->bw;
615
616     s_sg_platf_host_link_cbarg_t host_link = SG_PLATF_HOST_LINK_INITIALIZER;
617     memset(&host_link, 0, sizeof(host_link));
618
619     for (i = start; i <= end; i++) {
620       host_id                      = bprintf("%s%d%s",cabinet->prefix,i,cabinet->suffix);
621       link_id                      = bprintf("link_%s%d%s",cabinet->prefix,i,cabinet->suffix);
622       host.id                      = host_id;
623       link.id                      = link_id;
624       host.speed_peak = xbt_dynar_new(sizeof(double), NULL);
625       xbt_dynar_push(host.speed_peak,&cabinet->speed);
626       sg_platf_new_host(&host);
627       xbt_dynar_free(&host.speed_peak);
628       sg_platf_new_link(&link);
629
630       char* link_up       = bprintf("%s_UP",link_id);
631       char* link_down     = bprintf("%s_DOWN",link_id);
632       host_link.id        = host_id;
633       host_link.link_up   = link_up;
634       host_link.link_down = link_down;
635       sg_platf_new_hostlink(&host_link);
636
637       free(host_id);
638       free(link_id);
639       free(link_up);
640       free(link_down);
641     }
642
643     xbt_dynar_free(&radical_ends);
644   }
645   xbt_dynar_free(&radical_elements);
646 }
647
648 void sg_platf_new_peer(sg_platf_peer_cbarg_t peer)
649 {
650   using simgrid::surf::NetCard;
651   using simgrid::surf::AsCluster;
652
653   char *host_id = NULL;
654   char *link_id = NULL;
655   char *router_id = NULL;
656
657   XBT_DEBUG(" ");
658   host_id = bprintf("peer_%s", peer->id);
659   link_id = bprintf("link_%s", peer->id);
660   router_id = bprintf("router_%s", peer->id);
661
662   XBT_DEBUG("<AS id=\"%s\"\trouting=\"Cluster\">", peer->id);
663   s_sg_platf_AS_cbarg_t AS = SG_PLATF_AS_INITIALIZER;
664   AS.id                    = peer->id;
665   AS.routing               = A_surfxml_AS_routing_Cluster;
666   sg_platf_new_AS_begin(&AS);
667
668   XBT_DEBUG("<host\tid=\"%s\"\tpower=\"%f\"/>", host_id, peer->speed);
669   s_sg_platf_host_cbarg_t host = SG_PLATF_HOST_INITIALIZER;
670   memset(&host, 0, sizeof(host));
671   host.id = host_id;
672
673   host.speed_peak = xbt_dynar_new(sizeof(double), NULL);
674   xbt_dynar_push(host.speed_peak,&peer->speed);
675   host.pstate = 0;
676   //host.power_peak = peer->power;
677   host.speed_trace = peer->availability_trace;
678   host.state_trace = peer->state_trace;
679   host.core_amount = 1;
680   sg_platf_new_host(&host);
681   xbt_dynar_free(&host.speed_peak);
682
683   s_sg_platf_link_cbarg_t link = SG_PLATF_LINK_INITIALIZER;
684   memset(&link, 0, sizeof(link));
685   link.policy  = SURF_LINK_SHARED;
686   link.latency = peer->lat;
687
688   char* link_up = bprintf("%s_UP",link_id);
689   XBT_DEBUG("<link\tid=\"%s\"\tbw=\"%f\"\tlat=\"%f\"/>", link_up,
690             peer->bw_out, peer->lat);
691   link.id = link_up;
692   link.bandwidth = peer->bw_out;
693   sg_platf_new_link(&link);
694
695   char* link_down = bprintf("%s_DOWN",link_id);
696   XBT_DEBUG("<link\tid=\"%s\"\tbw=\"%f\"\tlat=\"%f\"/>", link_down,
697             peer->bw_in, peer->lat);
698   link.id = link_down;
699   link.bandwidth = peer->bw_in;
700   sg_platf_new_link(&link);
701
702   XBT_DEBUG("<host_link\tid=\"%s\"\tup=\"%s\"\tdown=\"%s\" />", host_id,link_up,link_down);
703   s_sg_platf_host_link_cbarg_t host_link = SG_PLATF_HOST_LINK_INITIALIZER;
704   memset(&host_link, 0, sizeof(host_link));
705   host_link.id        = host_id;
706   host_link.link_up   = link_up;
707   host_link.link_down = link_down;
708   sg_platf_new_hostlink(&host_link);
709
710   XBT_DEBUG("<router id=\"%s\"/>", router_id);
711   s_sg_platf_router_cbarg_t router = SG_PLATF_ROUTER_INITIALIZER;
712   memset(&router, 0, sizeof(router));
713   router.id = router_id;
714   router.coord = peer->coord;
715   sg_platf_new_router(&router);
716   static_cast<AsCluster*>(current_routing)->router_ = static_cast<NetCard*>(xbt_lib_get_or_null(as_router_lib, router.id, ROUTING_ASR_LEVEL));
717
718   XBT_DEBUG("</AS>");
719   sg_platf_new_AS_end();
720   XBT_DEBUG(" ");
721
722   //xbt_dynar_free(&tab_elements_num);
723   free(router_id);
724   free(host_id);
725   free(link_id);
726   free(link_up);
727   free(link_down);
728 }
729
730 // static void routing_parse_Srandom(void)
731 // {
732 //   double mean, std, min, max, seed;
733 //   char *random_id = A_surfxml_random_id;
734 //   char *random_radical = A_surfxml_random_radical;
735 //   char *rd_name = NULL;
736 //   char *rd_value;
737 //   mean = surf_parse_get_double(A_surfxml_random_mean);
738 //   std = surf_parse_get_double(A_surfxml_random_std___deviation);
739 //   min = surf_parse_get_double(A_surfxml_random_min);
740 //   max = surf_parse_get_double(A_surfxml_random_max);
741 //   seed = surf_parse_get_double(A_surfxml_random_seed);
742
743 //   double res = 0;
744 //   int i = 0;
745 //   random_data_t random = xbt_new0(s_random_data_t, 1);
746 //   char *tmpbuf;
747
748 //   xbt_dynar_t radical_elements;
749 //   unsigned int iter;
750 //   char *groups;
751 //   int start, end;
752 //   xbt_dynar_t radical_ends;
753
754 //   switch (A_surfxml_random_generator) {
755 //   case AU_surfxml_random_generator:
756 //   case A_surfxml_random_generator_NONE:
757 //     random->generator = NONE;
758 //     break;
759 //   case A_surfxml_random_generator_DRAND48:
760 //     random->generator = DRAND48;
761 //     break;
762 //   case A_surfxml_random_generator_RAND:
763 //     random->generator = RAND;
764 //     break;
765 //   case A_surfxml_random_generator_RNGSTREAM:
766 //     random->generator = RNGSTREAM;
767 //     break;
768 //   default:
769 //     surf_parse_error("Invalid random generator");
770 //     break;
771 //   }
772 //   random->seed = seed;
773 //   random->min = min;
774 //   random->max = max;
775
776 //   /* Check user stupidities */
777 //   if (max < min)
778 //     THROWF(arg_error, 0, "random->max < random->min (%f < %f)", max, min);
779 //   if (mean < min)
780 //     THROWF(arg_error, 0, "random->mean < random->min (%f < %f)", mean, min);
781 //   if (mean > max)
782 //     THROWF(arg_error, 0, "random->mean > random->max (%f > %f)", mean, max);
783
784 //   /* normalize the mean and standard deviation before storing */
785 //   random->mean = (mean - min) / (max - min);
786 //   random->std = std / (max - min);
787
788 //   if (random->mean * (1 - random->mean) < random->std * random->std)
789 //     THROWF(arg_error, 0, "Invalid mean and standard deviation (%f and %f)",
790 //            random->mean, random->std);
791
792 //   XBT_DEBUG
793 //       ("id = '%s' min = '%f' max = '%f' mean = '%f' std_deviatinon = '%f' generator = '%d' seed = '%ld' radical = '%s'",
794 //        random_id, random->min, random->max, random->mean, random->std,
795 //        (int)random->generator, random->seed, random_radical);
796
797 //   if (!random_value)
798 //     random_value = xbt_dict_new_homogeneous(free);
799
800 //   if (!strcmp(random_radical, "")) {
801 //     res = random_generate(random);
802 //     rd_value = bprintf("%f", res);
803 //     xbt_dict_set(random_value, random_id, rd_value, NULL);
804 //   } else {
805 //     radical_elements = xbt_str_split(random_radical, ",");
806 //     xbt_dynar_foreach(radical_elements, iter, groups) {
807 //       radical_ends = xbt_str_split(groups, "-");
808 //       switch (xbt_dynar_length(radical_ends)) {
809 //       case 1:
810 //         xbt_assert(!xbt_dict_get_or_null(random_value, random_id),
811 //                    "Custom Random '%s' already exists !", random_id);
812 //         res = random_generate(random);
813 //         tmpbuf =
814 //             bprintf("%s%d", random_id,
815 //                     atoi(xbt_dynar_getfirst_as(radical_ends, char *)));
816 //         xbt_dict_set(random_value, tmpbuf, bprintf("%f", res), NULL);
817 //         xbt_free(tmpbuf);
818 //         break;
819
820 //       case 2:
821 //         start = surf_parse_get_int(xbt_dynar_get_as(radical_ends, 0, char *));
822 //         end = surf_parse_get_int(xbt_dynar_get_as(radical_ends, 1, char *));
823 //         for (i = start; i <= end; i++) {
824 //           xbt_assert(!xbt_dict_get_or_null(random_value, random_id),
825 //                      "Custom Random '%s' already exists !", bprintf("%s%d",
826 //                                                                     random_id,
827 //                                                                     i));
828 //           res = random_generate(random);
829 //           tmpbuf = bprintf("%s%d", random_id, i);
830 //           xbt_dict_set(random_value, tmpbuf, bprintf("%f", res), NULL);
831 //           xbt_free(tmpbuf);
832 //         }
833 //         break;
834 //       default:
835 //         XBT_CRITICAL("Malformed radical");
836 //         break;
837 //       }
838 //       res = random_generate(random);
839 //       rd_name = bprintf("%s_router", random_id);
840 //       rd_value = bprintf("%f", res);
841 //       xbt_dict_set(random_value, rd_name, rd_value, NULL);
842
843 //       xbt_dynar_free(&radical_ends);
844 //     }
845 //     free(rd_name);
846 //     xbt_dynar_free(&radical_elements);
847 //   }
848 // }
849
850 static void check_disk_attachment()
851 {
852   xbt_lib_cursor_t cursor;
853   char *key;
854   void **data;
855   simgrid::surf::NetCard *host_elm;
856   xbt_lib_foreach(storage_lib, cursor, key, data) {
857     if(xbt_lib_get_level(xbt_lib_get_elm_or_null(storage_lib, key), SURF_STORAGE_LEVEL) != NULL) {
858     simgrid::surf::Storage *storage = static_cast<simgrid::surf::Storage*>(xbt_lib_get_level(xbt_lib_get_elm_or_null(storage_lib, key), SURF_STORAGE_LEVEL));
859     host_elm = sg_netcard_by_name_or_null(storage->p_attach);
860     if(!host_elm)
861       surf_parse_error("Unable to attach storage %s: host %s doesn't exist.", storage->getName(), storage->p_attach);
862     }
863   }
864 }
865
866 void routing_register_callbacks()
867 {
868   simgrid::surf::on_postparse.connect(check_disk_attachment);
869
870   instr_routing_define_callbacks();
871 }
872
873 /**
874  * \brief Recursive function for finalize
875  *
876  * \param rc the source host name
877  *
878  * This fuction is call by "finalize". It allow to finalize the
879  * AS or routing components. It delete all the structures.
880  */
881 static void finalize_rec(simgrid::surf::As *as) {
882   xbt_dict_cursor_t cursor = NULL;
883   char *key;
884   AS_t elem;
885
886   xbt_dict_foreach(as->sons_, cursor, key, elem) {
887     finalize_rec(elem);
888   }
889
890   delete as;;
891 }
892
893 /** \brief Frees all memory allocated by the routing module */
894 void routing_exit(void) {
895   delete routing_platf;
896 }
897
898 namespace simgrid {
899 namespace surf {
900
901   RoutingPlatf::RoutingPlatf(Link *loopback)
902   : loopback_(loopback)
903   {
904   }
905   RoutingPlatf::~RoutingPlatf()
906   {
907     xbt_dynar_free(&lastRoute_);
908     finalize_rec(root_);
909   }
910
911 }
912 }
913
914 AS_t surf_AS_get_routing_root() {
915   return routing_platf->root_;
916 }
917
918 const char *surf_AS_get_name(simgrid::surf::As *as) {
919   return as->name_;
920 }
921
922 static simgrid::surf::As *surf_AS_recursive_get_by_name(
923   simgrid::surf::As *current, const char * name)
924 {
925   xbt_dict_cursor_t cursor = NULL;
926   char *key;
927   AS_t elem;
928   simgrid::surf::As *tmp = NULL;
929
930   if(!strcmp(current->name_, name))
931     return current;
932
933   xbt_dict_foreach(current->sons_, cursor, key, elem) {
934     tmp = surf_AS_recursive_get_by_name(elem, name);
935     if(tmp != NULL ) {
936         break;
937     }
938   }
939   return tmp;
940 }
941
942 simgrid::surf::As *surf_AS_get_by_name(const char * name)
943 {
944   simgrid::surf::As *as = surf_AS_recursive_get_by_name(routing_platf->root_, name);
945   if(as == NULL)
946     XBT_WARN("Impossible to find an AS with name %s, please check your input", name);
947   return as;
948 }
949
950 xbt_dict_t surf_AS_get_routing_sons(simgrid::surf::As *as)
951 {
952   return as->sons_;
953 }
954
955 xbt_dynar_t surf_AS_get_hosts(simgrid::surf::As *as)
956 {
957   xbt_dynar_t elms = as->vertices_;
958   int count = xbt_dynar_length(elms);
959   xbt_dynar_t res =  xbt_dynar_new(sizeof(sg_host_t), NULL);
960   for (int index = 0; index < count; index++) {
961      sg_netcard_t relm =
962       xbt_dynar_get_as(elms, index, simgrid::surf::NetCard*);
963      sg_host_t delm = simgrid::s4u::Host::by_name_or_null(relm->name());
964      if (delm!=NULL) {
965        xbt_dynar_push(res, &delm);
966      }
967   }
968   return res;
969 }
970
971 void surf_AS_get_graph(AS_t as, xbt_graph_t graph, xbt_dict_t nodes, xbt_dict_t edges) {
972   as->getGraph(graph, nodes, edges);
973 }