src/xbt/mmalloc/mm_diff.c

   1 /* mm_diff - Memory snapshooting and comparison                             */
   2
   3 /* Copyright (c) 2008-2012. The SimGrid Team. All rights reserved.          */
   4
   5 /* This program is free software; you can redistribute it and/or modify it
   6  * under the terms of the license (GNU LGPL) which comes with this package. */
   7
   8 #include "xbt/ex_interface.h" /* internals of backtrace setup */
   9 #include "xbt/str.h"
  10
  11 XBT_LOG_NEW_DEFAULT_SUBCATEGORY(mm_diff, xbt,
  12                                 "Logging specific to mm_diff in mmalloc");
  13
  14 extern char *xbt_binary_name;
  15
  16 void mmalloc_backtrace_display(xbt_mheap_t mdp, void *ptr){
  17   size_t block = BLOCK(ptr);
  18   int type;
  19   xbt_ex_t e;
  20
  21   if ((char *) ptr < (char *) mdp->heapbase || block > mdp->heapsize) {
  22     fprintf(stderr,"Ouch, this pointer is not mine. I cannot display its backtrace. I refuse it to death!!\n");
  23     abort();
  24   }
  25
  26   type = mdp->heapinfo[block].type;
  27
  28   if (type != 0) {
  29     //fprintf(stderr,"Only full blocks are backtraced for now. Ignoring your request.\n");
  30     return;
  31   }
  32   if (mdp->heapinfo[block].busy_block.bt_size == 0) {
  33     fprintf(stderr,"No backtrace available for that block, sorry.\n");
  34     return;
  35   }
  36
  37   memcpy(&e.bt,&(mdp->heapinfo[block].busy_block.bt),sizeof(void*)*XBT_BACKTRACE_SIZE);
  38   e.used = mdp->heapinfo[block].busy_block.bt_size;
  39
  40   xbt_ex_setup_backtrace(&e);
  41   if (e.used == 0) {
  42     fprintf(stderr, "(backtrace not set)\n");
  43   } else if (e.bt_strings == NULL) {
  44     fprintf(stderr, "(backtrace not ready to be computed. %s)\n",xbt_binary_name?"Dunno why":"xbt_binary_name not setup yet");
  45   } else {
  46     int i;
  47
  48     fprintf(stderr, "Backtrace of where the block %p where malloced (%d frames):\n",ptr,e.used);
  49     for (i = 0; i < e.used; i++)       /* no need to display "xbt_backtrace_display" */{
  50       fprintf(stderr,"%d",i);fflush(NULL);
  51       fprintf(stderr, "---> %s\n", e.bt_strings[i] + 4);
  52     }
  53   }
  54 }
  55
  56
  57 void mmalloc_backtrace_block_display(xbt_mheap_t mdp, size_t block){
  58
  59   int type;
  60   xbt_ex_t e;
  61
  62   type = mdp->heapinfo[block].type;
  63
  64   if (type != 0) {
  65     fprintf(stderr,"Only full blocks are backtraced for now. Ignoring your request.\n");
  66     return;
  67   }
  68   if (mdp->heapinfo[block].busy_block.bt_size == 0) {
  69     fprintf(stderr,"No backtrace available for that block, sorry.\n");
  70     return;
  71   }
  72
  73   memcpy(&e.bt,&(mdp->heapinfo[block].busy_block.bt),sizeof(void*)*XBT_BACKTRACE_SIZE);
  74   e.used = mdp->heapinfo[block].busy_block.bt_size;
  75
  76   xbt_ex_setup_backtrace(&e);
  77   if (e.used == 0) {
  78     fprintf(stderr, "(backtrace not set)\n");
  79   } else if (e.bt_strings == NULL) {
  80     fprintf(stderr, "(backtrace not ready to be computed. %s)\n",xbt_binary_name?"Dunno why":"xbt_binary_name not setup yet");
  81   } else {
  82     int i;
  83
  84     fprintf(stderr, "Backtrace of where the block %zu where malloced (%d frames):\n", block ,e.used);
  85     for (i = 0; i < e.used; i++)       /* no need to display "xbt_backtrace_display" */{
  86       fprintf(stderr,"%d",i);fflush(NULL);
  87       fprintf(stderr, "---> %s\n", e.bt_strings[i] + 4);
  88     }
  89   }
  90 }
  91
  92 void mmalloc_backtrace_fragment_display(xbt_mheap_t mdp, size_t block, size_t frag){
  93
  94   xbt_ex_t e;
  95
  96   memcpy(&e.bt,&(mdp->heapinfo[block].busy_frag.bt[frag]),sizeof(void*)*XBT_BACKTRACE_SIZE);
  97   e.used = XBT_BACKTRACE_SIZE;
  98
  99   xbt_ex_setup_backtrace(&e);
 100   if (e.used == 0) {
 101     fprintf(stderr, "(backtrace not set)\n");
 102   } else if (e.bt_strings == NULL) {
 103     fprintf(stderr, "(backtrace not ready to be computed. %s)\n",xbt_binary_name?"Dunno why":"xbt_binary_name not setup yet");
 104   } else {
 105     int i;
 106
 107     fprintf(stderr, "Backtrace of where the fragment %zu in block %zu where malloced (%d frames):\n", frag, block ,e.used);
 108     for (i = 0; i < e.used; i++)       /* no need to display "xbt_backtrace_display" */{
 109       fprintf(stderr,"%d",i);fflush(NULL);
 110       fprintf(stderr, "---> %s\n", e.bt_strings[i] + 4);
 111     }
 112   }
 113 }
 114
 115 int mmalloc_compare_heap(xbt_mheap_t mdp1, xbt_mheap_t mdp2, void* s_heap, void* r_heap){
 116
 117   if(mdp1 == NULL && mdp2 == NULL){
 118     fprintf(stderr, "Malloc descriptors null\n");
 119     return 0;
 120   }
 121
 122   int errors = mmalloc_compare_mdesc(mdp1, mdp2, s_heap, r_heap);
 123
 124   return (errors > 0);
 125
 126 }
 127
 128 int mmalloc_compare_mdesc(struct mdesc *mdp1, struct mdesc *mdp2, void* s_heap, void* r_heap){
 129
 130   int errors = 0;
 131
 132   /*if(mdp1->headersize != mdp2->headersize){
 133     fprintf(stderr, "Different size of the file header for the mapped files\n");
 134     return 1;
 135   }
 136
 137   if(mdp1->refcount != mdp2->refcount){
 138     fprintf(stderr, "Different number of processes that attached the heap\n");
 139     return 1;
 140   }
 141
 142   if(strcmp(mdp1->magic, mdp2->magic) != 0){
 143     fprintf(stderr,"Different magic number\n");
 144     return 1;
 145   }
 146
 147   if(mdp1->flags != mdp2->flags){
 148     fprintf(stderr,"Different flags\n");
 149     return 1;
 150   }
 151
 152   if(mdp1->heapsize != mdp2->heapsize){
 153     fprintf(stderr,"Different number of info entries\n");
 154     return 1;
 155   }
 156
 157   if(mdp1->heapbase != mdp2->heapbase){
 158     fprintf(stderr,"Different first block of the heap\n");
 159     return 1;
 160   }
 161
 162   if(mdp1->heapindex != mdp2->heapindex){
 163     fprintf(stderr,"Different index for the heap table : %zu - %zu\n", mdp1->heapindex, mdp2->heapindex);
 164     return 1;
 165   }
 166
 167   if(mdp1->base != mdp2->base){
 168     fprintf(stderr,"Different base address of the memory region\n");
 169     return 1;
 170   }
 171
 172   if(mdp1->breakval != mdp2->breakval){
 173     fprintf(stderr,"Different current location in the memory region\n");
 174     return 1;
 175   }
 176
 177   if(mdp1->top != mdp2->top){
 178     fprintf(stderr,"Different end of the current location in the memory region\n");
 179     return 1;
 180   }
 181
 182   if(mdp1->heaplimit != mdp2->heaplimit){
 183     fprintf(stderr,"Different limit of valid info table indices\n");
 184     return 1;
 185   }
 186
 187   if(mdp1->fd != mdp2->fd){
 188     fprintf(stderr,"Different file descriptor for the file to which this malloc heap is mapped\n");
 189     return 1;
 190   }
 191
 192   if(mdp1->version != mdp2->version){
 193     fprintf(stderr,"Different version of the mmalloc package\n");
 194     return 1;
 195     }*/
 196
 197   size_t i, j;
 198   void *addr_block1, *addr_block2, *addr_frag1, *addr_frag2;
 199   size_t frag_size;
 200
 201   i = 0;
 202
 203   int k;
 204   int distance = 0;
 205   int pointer_align;
 206
 207   char *pointed_address1, *pointed_address2;
 208
 209   /* Check busy blocks*/
 210
 211   while(i < mdp1->heapindex){
 212
 213     if(mdp1->heapinfo[i].type != mdp2->heapinfo[i].type){
 214       fprintf(stderr,"Different type of block : %d - %d\n", mdp1->heapinfo[i].type, mdp2->heapinfo[i].type);
 215       errors++;
 216     }
 217
 218     addr_block1 = (char *)mdp1 + sizeof(struct mdesc) + (i * BLOCKSIZE);
 219     addr_block2 = (char *)mdp2 + sizeof(struct mdesc) + (i * BLOCKSIZE);
 220
 221     if(mdp1->heapinfo[i].type == 0){ /* busy large block */
 222
 223       if(mdp1->heapinfo[i].busy_block.size != mdp2->heapinfo[i].busy_block.size){
 224         fprintf(stderr,"Different size of a large cluster : %zu - %zu\n", mdp1->heapinfo[i].busy_block.size, mdp2->heapinfo[i].busy_block.size);
 225         errors++;
 226       }
 227
 228       if(mdp1->heapinfo[i].busy_block.busy_size != mdp2->heapinfo[i].busy_block.busy_size){
 229         fprintf(stderr,"Different busy_size of a large cluster : %zu - %zu\n", mdp1->heapinfo[i].busy_block.busy_size, mdp2->heapinfo[i].busy_block.busy_size);
 230         errors++;
 231       }
 232
 233       //if(memcmp(addr_block1, addr_block2, (mdp1->heapinfo[i].busy_block.size)) != 0){
 234       if(memcmp(addr_block1, addr_block2, (mdp1->heapinfo[i].busy_block.busy_size)) != 0){
 235         fprintf(stderr,"\nDifferent data in large block %zu (size = %zu (in blocks), busy_size = %zu (in bytes))\n", i, mdp1->heapinfo[i].busy_block.size, mdp1->heapinfo[i].busy_block.busy_size);
 236
 237         /* Hamming distance on different blocks */
 238         distance = 0;
 239         //for(k=0;k<mdp1->heapinfo[i].busy_block.size;k++){
 240         for(k=0;k<mdp1->heapinfo[i].busy_block.busy_size;k++){
 241           if(memcmp(((char *)addr_block1) + k, ((char *)addr_block2) + k, 1) != 0){
 242             fprintf(stderr, "Different byte (offset=%d) (%p - %p) in block %zu\n", k, (char *)addr_block1 + k, (char *)addr_block2 + k, i);
 243             distance++;
 244             pointer_align = (k / sizeof(void*)) * sizeof(void*);
 245             pointed_address1 = xbt_strdup(get_addr_memory_map(*((void **)((char *)addr_block1 + pointer_align)), s_heap, r_heap));
 246             pointed_address2 = xbt_strdup(get_addr_memory_map(*((void **)((char *)addr_block2 + pointer_align)), s_heap, r_heap));
 247             fprintf(stderr, "Pointed address : %p (in %s) - %p (in %s)\n", *((void **)((char *)addr_block1 + pointer_align)), pointed_address1, *((void **)((char *)addr_block2 + pointer_align)), pointed_address2);
 248             if((strcmp(pointed_address1, pointed_address2) == 0) && (strcmp(pointed_address1, "std_heap") == 0)){
 249               /* FIXME : compare value pointed thanks to DWARF */
 250             }
 251           }
 252         }
 253
 254         fprintf(stderr, "Hamming distance between blocks : %d\n", distance);
 255
 256         mmalloc_backtrace_block_display(mdp1, i);
 257         mmalloc_backtrace_block_display(mdp2, i);
 258         errors++;
 259       }
 260
 261       i = i + mdp1->heapinfo[i].busy_block.size + 1;
 262
 263     }else{
 264
 265       if(mdp1->heapinfo[i].type > 0){ /* busy fragmented block */
 266
 267         if(mdp1->heapinfo[i].type != mdp2->heapinfo[i].type){
 268           fprintf(stderr,"Different size of fragments in fragmented block %zu : %d - %d\n", i, mdp1->heapinfo[i].type, mdp2->heapinfo[i].type);
 269           errors++;
 270         }
 271
 272         if(mdp1->heapinfo[i].busy_frag.nfree != mdp2->heapinfo[i].busy_frag.nfree){
 273           fprintf(stderr,"Different free fragments in fragmented block %zu : %zu - %zu\n", i, mdp1->heapinfo[i].busy_frag.nfree, mdp2->heapinfo[i].busy_frag.nfree);
 274           errors++;
 275         }
 276
 277         if(mdp1->heapinfo[i].busy_frag.first != mdp2->heapinfo[i].busy_frag.first){
 278           fprintf(stderr,"Different busy_size of a large cluster : %zu - %zu\n", mdp1->heapinfo[i].busy_block.busy_size, mdp2->heapinfo[i].busy_block.busy_size);
 279           errors++;
 280         }
 281
 282         frag_size = pow(2, mdp1->heapinfo[i].type);
 283
 284         for(j=0; j< (BLOCKSIZE/frag_size); j++){
 285
 286           if(mdp1->heapinfo[i].busy_frag.frag_size[j] != mdp2->heapinfo[i].busy_frag.frag_size[j]){
 287             fprintf(stderr,"Different busy_size for fragment %zu in block %zu : %hu - %hu\n", j, i, mdp1->heapinfo[i].busy_frag.frag_size[j], mdp2->heapinfo[i].busy_frag.frag_size[j]);
 288             errors++;
 289           }
 290
 291           if(mdp1->heapinfo[i].busy_frag.frag_size[j] > 0){
 292
 293             addr_frag1 = (char *)addr_block1 + (j * frag_size);
 294             addr_frag2 = (char *)addr_block2 + (j * frag_size);
 295
 296             //if(memcmp(addr_frag1, addr_frag2, frag_size) != 0){
 297             if(memcmp(addr_frag1, addr_frag2, mdp1->heapinfo[i].busy_frag.frag_size[j]) != 0){
 298               fprintf(stderr,"\nDifferent data in fragment %zu (size = %zu, size used = %hu) in block %zu \n", j, frag_size, mdp1->heapinfo[i].busy_frag.frag_size[j], i);
 299
 300               /* Hamming distance on different blocks */
 301               distance = 0;
 302               //for(k=0;k<frag_size;k++){
 303               for(k=0;k<mdp1->heapinfo[i].busy_frag.frag_size[j];k++){
 304                 if(memcmp(((char *)addr_frag1) + k, ((char *)addr_frag2) + k, 1) != 0){
 305                   fprintf(stderr, "Different byte (offset=%d) (%p - %p) in fragment %zu in block %zu\n", k, (char *)addr_frag1 + k, (char *)addr_frag2 + k, j, i);
 306                   distance++;
 307                   pointer_align = (k / sizeof(void*)) * sizeof(void*);
 308                   pointed_address1 = xbt_strdup(get_addr_memory_map(*((void **)((char *)addr_frag1 + pointer_align)), s_heap, r_heap));
 309                   pointed_address2 = xbt_strdup(get_addr_memory_map(*((void **)((char *)addr_frag2 + pointer_align)), s_heap, r_heap));
 310                   fprintf(stderr, "Pointed address : %p (in %s) - %p (in %s)\n", *((void **)((char *)addr_frag1 + pointer_align)), pointed_address1, *((void **)((char *)addr_frag2 + pointer_align)), pointed_address2);
 311                   if((strcmp(pointed_address1, pointed_address2) == 0) && (strcmp(pointed_address1, "std_heap") == 0)){
 312                     /* FIXME : compare value pointed thanks to DWARF */
 313                   }
 314                 }
 315               }
 316
 317               fprintf(stderr, "Hamming distance between fragments : %d\n", distance);
 318
 319               mmalloc_backtrace_fragment_display(mdp1, i, j);
 320               mmalloc_backtrace_fragment_display(mdp2, i, j);
 321               errors++;
 322             }
 323
 324           }
 325         }
 326
 327         i++;
 328
 329       }else{ /* free block */
 330
 331         i++;
 332
 333       }
 334
 335     }
 336
 337   }
 338
 339
 340   return (errors);
 341 }
 342
 343
 344 const char* get_addr_memory_map(void *addr, void* s_heap, void* r_heap){
 345
 346   FILE *fp;                     /* File pointer to process's proc maps file */
 347   char *line = NULL;            /* Temporal storage for each line that is readed */
 348   ssize_t read;                 /* Number of bytes readed */
 349   size_t n = 0;                 /* Amount of bytes to read by getline */
 350
 351   fp = fopen("/proc/self/maps", "r");
 352
 353   if(fp == NULL)
 354     perror("fopen failed");
 355
 356   if(addr == NULL){
 357     fclose(fp);
 358     return "nil";
 359   }
 360
 361   xbt_dynar_t lfields = NULL;
 362   xbt_dynar_t start_end  = NULL;
 363   void *start_addr;
 364   void *end_addr;
 365
 366   while ((read = getline(&line, &n, fp)) != -1) {
 367
 368     xbt_str_trim(line, NULL);
 369     xbt_str_strip_spaces(line);
 370     lfields = xbt_str_split(line,NULL);
 371
 372     start_end = xbt_str_split(xbt_dynar_get_as(lfields, 0, char*), "-");
 373     start_addr = (void *) strtoul(xbt_dynar_get_as(start_end, 0, char*), NULL, 16);
 374     end_addr = (void *) strtoul(xbt_dynar_get_as(start_end, 1, char*), NULL, 16);
 375
 376     if((addr > start_addr) && ( addr < end_addr)){
 377       free(line);
 378       fclose(fp);
 379       if(start_addr == s_heap)
 380         return "std_heap";
 381       if(start_addr == r_heap)
 382         return "raw_heap";
 383       if(xbt_dynar_length(lfields) == 6)
 384         return xbt_dynar_get_as(lfields, xbt_dynar_length(lfields) - 1, char*);
 385       else
 386         return "Anonymous";
 387     }
 388
 389   }
 390
 391   free(line);
 392   fclose(fp);
 393   return "Unknown area";
 394
 395 }
 396
 397 void mmalloc_display_info_heap(xbt_mheap_t h){
 398
 399 }
 400
 401
 402