src/instr/instr_private.h

   1 /* Copyright (c) 2010-2017. The SimGrid Team. All rights reserved.          */
   2
   3 /* This program is free software; you can redistribute it and/or modify it
   4  * under the terms of the license (GNU LGPL) which comes with this package. */
   5
   6 #ifndef INSTR_PRIVATE_H_
   7 #define INSTR_PRIVATE_H_
   8
   9 #include <xbt/base.h>
  10
  11 #include "instr/instr_interface.h"
  12 #include "simgrid/instr.h"
  13 #include "simgrid_config.h"
  14 #include "src/internal_config.h"
  15 #include <set>
  16
  17 SG_BEGIN_DECL()
  18
  19 /* Need to define function drand48 for Windows */
  20 /* FIXME: use _drand48() defined in src/surf/random_mgr.c instead */
  21 #ifdef _WIN32
  22 #  define drand48() (rand()/(RAND_MAX + 1.0))
  23 #endif
  24
  25 #define INSTR_DEFAULT_STR_SIZE 500
  26
  27 #include "xbt/graph.h"
  28 #include "xbt/dict.h"
  29
  30 typedef enum {
  31   PAJE_DefineContainerType,
  32   PAJE_DefineVariableType,
  33   PAJE_DefineStateType,
  34   PAJE_DefineEventType,
  35   PAJE_DefineLinkType,
  36   PAJE_DefineEntityValue,
  37   PAJE_CreateContainer,
  38   PAJE_DestroyContainer,
  39   PAJE_SetVariable,
  40   PAJE_AddVariable,
  41   PAJE_SubVariable,
  42   PAJE_SetState,
  43   PAJE_PushState,
  44   PAJE_PopState,
  45   PAJE_ResetState,
  46   PAJE_StartLink,
  47   PAJE_EndLink,
  48   PAJE_NewEvent
  49 } e_event_type;
  50
  51 typedef enum {
  52   TYPE_VARIABLE,
  53   TYPE_LINK,
  54   TYPE_CONTAINER,
  55   TYPE_STATE,
  56   TYPE_EVENT
  57 } e_entity_types;
  58
  59 //--------------------------------------------------
  60
  61 class ess_type {
  62   public:
  63   char *id;
  64   char *name;
  65   char *color;
  66 };
  67
  68 class s_type;
  69 typedef s_type *type_t;
  70 class s_type : public ess_type {
  71   public:
  72   e_entity_types kind;
  73   s_type *father;
  74   xbt_dict_t children;
  75   xbt_dict_t values; //valid for all types except variable and container
  76   s_type (const char *typeNameBuff, const char *key, const char *color, e_entity_types kind, type_t father);
  77   static type_t s_type_get_or_null (const char *name, type_t father);
  78 };
  79
  80 //--------------------------------------------------
  81 class value : public ess_type{
  82 public:
  83   type_t father;
  84   value* ret;
  85   value(const char* name, const char* color, type_t father);
  86   ~value();
  87   static value* get_or_new(const char* name, const char* color, type_t father);
  88   static value* get(const char* name, type_t father);
  89 };
  90
  91
  92 //--------------------------------------------------
  93 typedef enum {
  94   INSTR_HOST,
  95   INSTR_LINK,
  96   INSTR_ROUTER,
  97   INSTR_AS,
  98   INSTR_SMPI,
  99   INSTR_MSG_VM,
 100   INSTR_MSG_PROCESS,
 101   INSTR_MSG_TASK
 102 } e_container_types;
 103
 104 //--------------------------------------------------
 105 class s_container;
 106 typedef s_container *container_t;
 107
 108 class s_container {
 109   public:
 110   sg_netpoint_t netpoint;
 111   char *name;     /* Unique name of this container */
 112   char *id;       /* Unique id of this container */
 113   type_t type;    /* Type of this container */
 114   int level;      /* Level in the hierarchy, root level is 0 */
 115   e_container_types kind; /* This container is of what kind */
 116   s_container *father;
 117   xbt_dict_t children;
 118 };
 119
 120 //--------------------------------------------------
 121 class PajeEvent {
 122   public:
 123   double timestamp;
 124   e_event_type event_type;
 125   virtual void print() = 0;
 126   void *data;
 127   virtual ~PajeEvent();
 128 };
 129
 130 //--------------------------------------------------
 131
 132 class DefineVariableTypeEvent : public PajeEvent
 133 {
 134   public:
 135   type_t type;
 136    DefineVariableTypeEvent(type_t type);
 137    void print() override;
 138 };
 139 //--------------------------------------------------
 140
 141 class DefineStateTypeEvent : public PajeEvent  {
 142   type_t type;
 143   public:
 144   DefineStateTypeEvent(type_t type);
 145   void print() override;
 146 };
 147
 148
 149 class SetVariableEvent : public PajeEvent  {
 150   private:
 151   container_t container;
 152   type_t type;
 153   double value;
 154   public:
 155   SetVariableEvent (double timestamp, container_t container, type_t type, double value);
 156   void print() override;
 157 };
 158
 159
 160 class AddVariableEvent:public PajeEvent {
 161   private:
 162   container_t container;
 163   type_t type;
 164   double value;
 165   public:
 166   AddVariableEvent (double timestamp, container_t container, type_t type, double value);
 167   void print() override;
 168 };
 169
 170 //--------------------------------------------------
 171
 172
 173 class SubVariableEvent : public PajeEvent  {
 174   private:
 175   container_t container;
 176   type_t type;
 177   double value;
 178   public:
 179   SubVariableEvent(double timestamp, container_t container, type_t type, double value);
 180   void print() override;
 181 };
 182 //--------------------------------------------------
 183
 184 class SetStateEvent : public PajeEvent  {
 185   private:
 186   container_t container;
 187   type_t type;
 188   value* val;
 189   const char* filename;
 190   int linenumber;
 191   public:
 192     SetStateEvent(double timestamp, container_t container, type_t type, value* val);
 193     void print() override;
 194 };
 195
 196
 197 class PushStateEvent : public PajeEvent  {
 198   public:
 199   container_t container;
 200   type_t type;
 201   value* val;
 202   int size;
 203   const char* filename;
 204   int linenumber;
 205   void* extra_;
 206   public:
 207     PushStateEvent(double timestamp, container_t container, type_t type, value* val);
 208     PushStateEvent(double timestamp, container_t container, type_t type, value* val, void* extra);
 209     void print() override;
 210 };
 211
 212 class PopStateEvent : public PajeEvent  {
 213   container_t container;
 214   type_t type;
 215   public:
 216   PopStateEvent (double timestamp, container_t container, type_t type);
 217   void print() override;
 218 };
 219
 220 class ResetStateEvent : public PajeEvent  {
 221   container_t container;
 222   type_t type;
 223   public:
 224   ResetStateEvent (double timestamp, container_t container, type_t type);
 225   void print() override;
 226 };
 227
 228 class StartLinkEvent : public PajeEvent  {
 229   public:
 230   container_t container;
 231   type_t type;
 232   container_t sourceContainer;
 233   char *value;
 234   char *key;
 235   int size;
 236   public:
 237     ~StartLinkEvent();
 238     StartLinkEvent(double timestamp, container_t container, type_t type, container_t sourceContainer, const char* value,
 239                    const char* key);
 240     StartLinkEvent(double timestamp, container_t container, type_t type, container_t sourceContainer, const char* value,
 241                    const char* key, int size);
 242     void print() override;
 243 };
 244
 245 class EndLinkEvent : public PajeEvent  {
 246   container_t container;
 247   type_t type;
 248   container_t destContainer;
 249   char *value;
 250   char *key;
 251   public:
 252   EndLinkEvent (double timestamp, container_t container, type_t type, container_t destContainer,
 253                                   const char *value, const char *key);
 254   ~EndLinkEvent();
 255   void print() override;
 256 };
 257
 258
 259 class NewEvent : public PajeEvent  {
 260   public:
 261   container_t container;
 262   type_t type;
 263   value* val;
 264
 265 public:
 266   NewEvent(double timestamp, container_t container, type_t type, value* val);
 267   void print() override;
 268
 269 };
 270
 271 extern XBT_PRIVATE std::set<std::string> created_categories;
 272 extern XBT_PRIVATE std::set<std::string> declared_marks;
 273 extern XBT_PRIVATE std::set<std::string> user_host_variables;
 274 extern XBT_PRIVATE std::set<std::string> user_vm_variables;
 275 extern XBT_PRIVATE std::set<std::string> user_link_variables;
 276 extern XBT_PRIVATE double TRACE_last_timestamp_to_dump;
 277
 278 /* instr_paje_header.c */
 279 XBT_PRIVATE void TRACE_header(int basic, int size);
 280
 281 /* from paje.c */
 282 XBT_PRIVATE void TRACE_paje_start();
 283 XBT_PRIVATE void TRACE_paje_end();
 284 XBT_PRIVATE void TRACE_paje_dump_buffer (int force);
 285
 286
 287 /* from instr_config.c */
 288 XBT_PRIVATE bool TRACE_needs_platform ();
 289 XBT_PRIVATE bool TRACE_is_enabled();
 290 XBT_PRIVATE bool TRACE_platform();
 291 XBT_PRIVATE bool TRACE_platform_topology();
 292 XBT_PRIVATE bool TRACE_is_configured();
 293 XBT_PRIVATE bool TRACE_categorized ();
 294 XBT_PRIVATE bool TRACE_uncategorized ();
 295 XBT_PRIVATE bool TRACE_msg_process_is_enabled();
 296 XBT_PRIVATE bool TRACE_msg_vm_is_enabled();
 297 XBT_PRIVATE bool TRACE_buffer ();
 298 XBT_PRIVATE bool TRACE_disable_link();
 299 XBT_PRIVATE bool TRACE_disable_speed();
 300 XBT_PRIVATE bool TRACE_onelink_only ();
 301 XBT_PRIVATE bool TRACE_disable_destroy ();
 302 XBT_PRIVATE bool TRACE_basic ();
 303 XBT_PRIVATE bool TRACE_display_sizes ();
 304 XBT_PRIVATE char *TRACE_get_comment ();
 305 XBT_PRIVATE char *TRACE_get_comment_file ();
 306 XBT_PRIVATE int TRACE_precision ();
 307 XBT_PRIVATE char *TRACE_get_filename();
 308 XBT_PRIVATE char *TRACE_get_viva_uncat_conf ();
 309 XBT_PRIVATE char *TRACE_get_viva_cat_conf ();
 310 XBT_PRIVATE void TRACE_generate_viva_uncat_conf ();
 311 XBT_PRIVATE void TRACE_generate_viva_cat_conf ();
 312 XBT_PRIVATE void instr_pause_tracing ();
 313 XBT_PRIVATE void instr_resume_tracing ();
 314
 315 /* Public functions used in SMPI */
 316 XBT_PUBLIC(bool) TRACE_smpi_is_enabled();
 317 XBT_PUBLIC(bool) TRACE_smpi_is_grouped();
 318 XBT_PUBLIC(bool) TRACE_smpi_is_computing();
 319 XBT_PUBLIC(bool) TRACE_smpi_is_sleeping();
 320 XBT_PUBLIC(bool) TRACE_smpi_view_internals();
 321
 322 /* from resource_utilization.c */
 323 XBT_PRIVATE void TRACE_surf_host_set_utilization(const char *resource, const char *category, double value, double now,
 324                                      double delta);
 325 XBT_PRIVATE void TRACE_surf_link_set_utilization(const char *resource,const char *category, double value, double now,
 326                                      double delta);
 327 XBT_PUBLIC(void) TRACE_surf_resource_utilization_alloc();
 328
 329 /* instr_paje.c */
 330 extern XBT_PRIVATE std::set<std::string> trivaNodeTypes;
 331 extern XBT_PRIVATE std::set<std::string> trivaEdgeTypes;
 332 XBT_PRIVATE long long int instr_new_paje_id ();
 333 XBT_PRIVATE void PJ_container_alloc ();
 334 XBT_PRIVATE void PJ_container_release ();
 335 XBT_PUBLIC(container_t) PJ_container_new (const char *name, e_container_types kind, container_t father);
 336 XBT_PUBLIC(container_t) PJ_container_get (const char *name);
 337 XBT_PUBLIC(container_t) PJ_container_get_or_null (const char *name);
 338 XBT_PUBLIC(container_t) PJ_container_get_root ();
 339 XBT_PUBLIC(void) PJ_container_set_root (container_t root);
 340 XBT_PUBLIC(void) PJ_container_free (container_t container);
 341 XBT_PUBLIC(void) PJ_container_free_all (void);
 342 XBT_PUBLIC(void) PJ_container_remove_from_parent (container_t container);
 343
 344 /* instr_paje_types.c */
 345 XBT_PRIVATE void PJ_type_release ();
 346 XBT_PUBLIC(type_t)  PJ_type_get_root ();
 347 XBT_PRIVATE type_t PJ_type_container_new (const char *name, type_t father);
 348 XBT_PRIVATE type_t PJ_type_event_new (const char *name, type_t father);
 349 type_t PJ_type_link_new (const char *name, type_t father, type_t source, type_t dest);
 350 XBT_PRIVATE XBT_PRIVATE type_t PJ_type_variable_new (const char *name, const char *color, type_t father);
 351 XBT_PRIVATE type_t PJ_type_state_new (const char *name, type_t father);
 352 XBT_PUBLIC(type_t)  PJ_type_get (const char *name, const type_t father);
 353 XBT_PRIVATE XBT_PRIVATE void PJ_type_free (type_t type);
 354
 355 /* instr_config.c */
 356 XBT_PRIVATE void recursiveDestroyType (type_t type);
 357
 358 XBT_PRIVATE void TRACE_TI_start();
 359 XBT_PRIVATE void TRACE_TI_end();
 360
 361 XBT_PRIVATE void TRACE_paje_dump_buffer (int force);
 362 XBT_PRIVATE void dump_comment_file (const char *filename);
 363 XBT_PRIVATE void dump_comment (const char *comment);
 364
 365 struct s_instr_extra_data;
 366 typedef struct s_instr_extra_data *instr_extra_data;
 367
 368 typedef enum{
 369   TRACING_INIT,
 370   TRACING_FINALIZE,
 371   TRACING_COMM_SIZE,
 372   TRACING_COMM_SPLIT,
 373   TRACING_COMM_DUP,
 374   TRACING_SEND,
 375   TRACING_ISEND,
 376   TRACING_SSEND,
 377   TRACING_ISSEND,
 378   TRACING_RECV,
 379   TRACING_IRECV,
 380   TRACING_SENDRECV,
 381   TRACING_TEST,
 382   TRACING_WAIT,
 383   TRACING_WAITALL,
 384   TRACING_WAITANY,
 385   TRACING_BARRIER,
 386   TRACING_BCAST,
 387   TRACING_REDUCE,
 388   TRACING_ALLREDUCE,
 389   TRACING_ALLTOALL,
 390   TRACING_ALLTOALLV,
 391   TRACING_GATHER,
 392   TRACING_GATHERV,
 393   TRACING_SCATTER,
 394   TRACING_SCATTERV,
 395   TRACING_ALLGATHER,
 396   TRACING_ALLGATHERV,
 397   TRACING_REDUCE_SCATTER,
 398   TRACING_COMPUTING,
 399   TRACING_SLEEPING,
 400   TRACING_SCAN,
 401   TRACING_EXSCAN
 402 } e_caller_type ;
 403
 404 typedef struct s_instr_extra_data {
 405   e_caller_type type;
 406   int send_size;
 407   int recv_size;
 408   double comp_size;
 409   double sleep_duration;
 410   int src;
 411   int dst;
 412   int root;
 413   const char* datatype1;
 414   const char* datatype2;
 415   int * sendcounts;
 416   int * recvcounts;
 417   int num_processes;
 418 } s_instr_extra_data_t;
 419
 420 /* Format of TRACING output.
 421  *   - paje is the regular format, that we all know
 422  *   - TI is a trick to reuse the tracing functions to generate a time independent trace during the execution. Such trace can easily be replayed with smpi_replay afterward.
 423  *     This trick should be removed and replaced by some code using the signal that we will create to cleanup the TRACING
 424  */
 425 typedef enum { instr_fmt_paje, instr_fmt_TI } instr_fmt_type_t;
 426 extern instr_fmt_type_t instr_fmt_type;
 427
 428 SG_END_DECL()
 429
 430 void DefineContainerEvent(type_t type);
 431 void LogVariableTypeDefinition(type_t type);
 432 void LogStateTypeDefinition(type_t type);
 433 void LogLinkTypeDefinition(type_t type, type_t source, type_t dest);
 434 void LogEntityValue(value* val);
 435 void LogContainerCreation (container_t container);
 436 void LogContainerDestruction (container_t container);
 437 void LogDefineEventType(type_t type);
 438
 439 #endif