src/xbt/mmalloc/mm_diff.c

   1 /* mm_diff - Memory snapshooting and comparison                             */
   2
   3 /* Copyright (c) 2008-2012. The SimGrid Team. All rights reserved.          */
   4
   5 /* This program is free software; you can redistribute it and/or modify it
   6  * under the terms of the license (GNU LGPL) which comes with this package. */
   7
   8 #include "xbt/ex_interface.h" /* internals of backtrace setup */
   9 #include "xbt/str.h"
  10 #include "mc/mc.h"
  11
  12 XBT_LOG_NEW_DEFAULT_SUBCATEGORY(mm_diff, xbt,
  13                                 "Logging specific to mm_diff in mmalloc");
  14
  15 extern char *xbt_binary_name;
  16
  17 void mmalloc_backtrace_display(xbt_mheap_t mdp, void *ptr){
  18   size_t block = BLOCK(ptr);
  19   int type;
  20   xbt_ex_t e;
  21
  22   if ((char *) ptr < (char *) mdp->heapbase || block > mdp->heapsize) {
  23     fprintf(stderr,"Ouch, this pointer is not mine. I cannot display its backtrace. I refuse it to death!!\n");
  24     abort();
  25   }
  26
  27   type = mdp->heapinfo[block].type;
  28
  29   if (type != 0) {
  30     //fprintf(stderr,"Only full blocks are backtraced for now. Ignoring your request.\n");
  31     return;
  32   }
  33   if (mdp->heapinfo[block].busy_block.bt_size == 0) {
  34     fprintf(stderr,"No backtrace available for that block, sorry.\n");
  35     return;
  36   }
  37
  38   memcpy(&e.bt,&(mdp->heapinfo[block].busy_block.bt),sizeof(void*)*XBT_BACKTRACE_SIZE);
  39   e.used = mdp->heapinfo[block].busy_block.bt_size;
  40
  41   xbt_ex_setup_backtrace(&e);
  42   if (e.used == 0) {
  43     fprintf(stderr, "(backtrace not set)\n");
  44   } else if (e.bt_strings == NULL) {
  45     fprintf(stderr, "(backtrace not ready to be computed. %s)\n",xbt_binary_name?"Dunno why":"xbt_binary_name not setup yet");
  46   } else {
  47     int i;
  48
  49     fprintf(stderr, "Backtrace of where the block %p was malloced (%d frames):\n",ptr,e.used);
  50     for (i = 0; i < e.used; i++)       /* no need to display "xbt_backtrace_display" */{
  51       fprintf(stderr,"%d",i);fflush(NULL);
  52       fprintf(stderr, "---> %s\n", e.bt_strings[i] + 4);
  53     }
  54   }
  55 }
  56
  57
  58 void mmalloc_backtrace_block_display(xbt_mheap_t mdp, size_t block){
  59
  60   int type;
  61   xbt_ex_t e;
  62
  63   type = mdp->heapinfo[block].type;
  64
  65   if (type != 0) {
  66     fprintf(stderr,"Only full blocks are backtraced for now. Ignoring your request.\n");
  67     return;
  68   }
  69   if (mdp->heapinfo[block].busy_block.bt_size == 0) {
  70     fprintf(stderr,"No backtrace available for that block, sorry.\n");
  71     return;
  72   }
  73
  74   memcpy(&e.bt,&(mdp->heapinfo[block].busy_block.bt),sizeof(void*)*XBT_BACKTRACE_SIZE);
  75   e.used = mdp->heapinfo[block].busy_block.bt_size;
  76
  77   xbt_ex_setup_backtrace(&e);
  78   if (e.used == 0) {
  79     fprintf(stderr, "(backtrace not set)\n");
  80   } else if (e.bt_strings == NULL) {
  81     fprintf(stderr, "(backtrace not ready to be computed. %s)\n",xbt_binary_name?"Dunno why":"xbt_binary_name not setup yet");
  82   } else {
  83     int i;
  84
  85     fprintf(stderr, "Backtrace of where the block %zu was malloced (%d frames):\n", block ,e.used);
  86     for (i = 0; i < e.used; i++)       /* no need to display "xbt_backtrace_display" */{
  87       fprintf(stderr,"%d",i);fflush(NULL);
  88       fprintf(stderr, "---> %s\n", e.bt_strings[i] + 4);
  89     }
  90   }
  91 }
  92
  93 void mmalloc_backtrace_fragment_display(xbt_mheap_t mdp, size_t block, size_t frag){
  94
  95   xbt_ex_t e;
  96
  97   memcpy(&e.bt,&(mdp->heapinfo[block].busy_frag.bt[frag]),sizeof(void*)*XBT_BACKTRACE_SIZE);
  98   e.used = XBT_BACKTRACE_SIZE;
  99
 100   xbt_ex_setup_backtrace(&e);
 101   if (e.used == 0) {
 102     fprintf(stderr, "(backtrace not set)\n");
 103   } else if (e.bt_strings == NULL) {
 104     fprintf(stderr, "(backtrace not ready to be computed. %s)\n",xbt_binary_name?"Dunno why":"xbt_binary_name not setup yet");
 105   } else {
 106     int i;
 107
 108     fprintf(stderr, "Backtrace of where the fragment %zu in block %zu was malloced (%d frames):\n", frag, block ,e.used);
 109     for (i = 0; i < e.used; i++)       /* no need to display "xbt_backtrace_display" */{
 110       fprintf(stderr,"%d",i);fflush(NULL);
 111       fprintf(stderr, "---> %s\n", e.bt_strings[i] + 4);
 112     }
 113   }
 114 }
 115
 116 int mmalloc_compare_heap(xbt_mheap_t mdp1, xbt_mheap_t mdp2){
 117
 118   if(mdp1 == NULL && mdp2 == NULL){
 119     fprintf(stderr, "Malloc descriptors null\n");
 120     return 0;
 121   }
 122
 123   int errors = mmalloc_compare_mdesc(mdp1, mdp2);
 124
 125   return (errors > 0);
 126
 127 }
 128
 129 int mmalloc_compare_mdesc(struct mdesc *mdp1, struct mdesc *mdp2){
 130
 131   int errors = 0;
 132
 133   if(mdp1->heaplimit != mdp2->heaplimit){
 134     fprintf(stderr,"Different limit of valid info table indices\n");
 135     return 1;
 136   }
 137
 138   void* s_heap = (char *)mmalloc_get_current_heap() - STD_HEAP_SIZE - getpagesize();
 139
 140   void *heapbase1 = (char *)mdp1 + BLOCKSIZE;
 141   void *heapbase2 = (char *)mdp2 + BLOCKSIZE;
 142
 143   size_t i, j;
 144   void *addr_block1, *addr_block2, *addr_frag1, *addr_frag2;
 145   size_t frag_size;
 146
 147   i = 1;
 148
 149   int k;
 150   int distance = 0;
 151   int total_distance = 0;
 152
 153   int pointer_align;
 154   void *address_pointed1, *address_pointed2;
 155
 156   int block_pointed1, block_pointed2, frag_pointed1, frag_pointed2;
 157   void *addr_block_pointed1, *addr_block_pointed2;
 158
 159   /* Check busy blocks*/
 160
 161   while(i < mdp1->heaplimit){
 162
 163     if(mdp1->heapinfo[i].type != mdp2->heapinfo[i].type){
 164       fprintf(stderr,"Different type of block : %d - %d\n", mdp1->heapinfo[i].type, mdp2->heapinfo[i].type);
 165       errors++;
 166     }
 167
 168     /* Get address of block i in each heap */
 169     addr_block1 = ((void*) (((ADDR2UINT(i)) - 1) * BLOCKSIZE + (char*)heapbase1));
 170     addr_block2 = ((void*) (((ADDR2UINT(i)) - 1) * BLOCKSIZE + (char*)heapbase2));
 171
 172     if(mdp1->heapinfo[i].type == 0){ /* busy large block */
 173
 174       if(mdp1->heapinfo[i].busy_block.size != mdp2->heapinfo[i].busy_block.size){
 175         fprintf(stderr,"Different size of a large cluster : %zu - %zu\n", mdp1->heapinfo[i].busy_block.size, mdp2->heapinfo[i].busy_block.size);
 176         fflush(NULL);
 177         errors++;
 178       }
 179
 180       if(mdp1->heapinfo[i].busy_block.busy_size != mdp2->heapinfo[i].busy_block.busy_size){
 181         fprintf(stderr,"Different busy_size of a large cluster : %zu - %zu\n", mdp1->heapinfo[i].busy_block.busy_size, mdp2->heapinfo[i].busy_block.busy_size);
 182         fflush(NULL);
 183         errors++;
 184       }
 185
 186       /* Hamming distance on different blocks */
 187       distance = 0;
 188
 189
 190       for(k=0;k<mdp1->heapinfo[i].busy_block.busy_size;k++){
 191
 192         if(memcmp(((char *)addr_block1) + k, ((char *)addr_block2) + k, 1) != 0){
 193
 194           fprintf(stderr, "Different byte (offset=%d) (%p - %p) in block %zu\n", k, (char *)addr_block1 + k, (char *)addr_block2 + k, i); fflush(NULL);
 195
 196           /* Check if pointer difference */
 197           pointer_align = (k >> sizeof(void*)) * sizeof(void*);
 198           address_pointed1 = *((void **)((char *)addr_block1 + pointer_align));
 199           address_pointed2 = *((void **)((char *)addr_block2 + pointer_align));
 200
 201           fprintf(stderr, "Addresses pointed : %p - %p\n", address_pointed1, address_pointed2);
 202
 203           block_pointed1 = ((char*)address_pointed1 - (char*)((struct mdesc*)s_heap)->heapbase) / BLOCKSIZE + 1;
 204           block_pointed2 = ((char*)address_pointed2 - (char*)((struct mdesc*)s_heap)->heapbase) / BLOCKSIZE + 1;
 205
 206           fprintf(stderr, "Blocks pointed : %d - %d\n", block_pointed1, block_pointed2);
 207
 208           if((char *) address_pointed1 < (char*)((struct mdesc*)s_heap)->heapbase || block_pointed1 > mdp1->heapsize || block_pointed1 < 1 || (char *) address_pointed2 < (char*)((struct mdesc*)s_heap)->heapbase || block_pointed2 > mdp2->heapsize || block_pointed2 < 1) {
 209             fprintf(stderr, "Unknown pointer ! \n");
 210             fflush(NULL);
 211             distance++;
 212             continue;
 213           }
 214
 215           addr_block_pointed1 = ((void*) (((ADDR2UINT((size_t)block_pointed1)) - 1) * BLOCKSIZE + (char*)heapbase1));
 216           addr_block_pointed2 = ((void*) (((ADDR2UINT((size_t)block_pointed2)) - 1) * BLOCKSIZE + (char*)heapbase2));
 217
 218           if(mdp1->heapinfo[block_pointed1].type == mdp2->heapinfo[block_pointed2].type){
 219
 220             if(mdp1->heapinfo[block_pointed1].type == 0){ // Large block
 221
 222               if(mdp1->heapinfo[block_pointed1].busy_block.busy_size == mdp2->heapinfo[block_pointed2].busy_block.busy_size){
 223
 224                 if(memcmp(addr_block_pointed1, addr_block_pointed2, mdp1->heapinfo[block_pointed1].busy_block.busy_size) != 0){
 225                   distance++;
 226                 }else{
 227                   fprintf(stderr, "False difference detected\n");
 228                 }
 229
 230               }else{
 231                 distance++;
 232               }
 233
 234             }else{ // Fragmented block
 235
 236               frag_pointed1 = ((uintptr_t) (ADDR2UINT (address_pointed1) % (BLOCKSIZE))) >> mdp1->heapinfo[i].type;
 237               frag_pointed2 = ((uintptr_t) (ADDR2UINT (address_pointed2) % (BLOCKSIZE))) >> mdp1->heapinfo[i].type;
 238
 239               fprintf(stderr, "Fragments pointed : %d - %d\n", frag_pointed1, frag_pointed2);
 240
 241               if((frag_pointed1 < 0) || (frag_pointed1 > (BLOCKSIZE / pow( 2, mdp1->heapinfo[block_pointed1].type))) || (frag_pointed2 < 0) || (frag_pointed2 > (BLOCKSIZE / pow( 2, mdp1->heapinfo[block_pointed1].type)))){
 242                 fprintf(stderr, "Unknown pointer ! \n");
 243                 fflush(NULL);
 244                 distance++;
 245                 continue;
 246               }
 247
 248               fprintf(stderr, "Size used in fragments pointed : %d - %d\n", mdp1->heapinfo[block_pointed1].busy_frag.frag_size[frag_pointed1], mdp2->heapinfo[block_pointed2].busy_frag.frag_size[frag_pointed2]);
 249
 250               if(mdp1->heapinfo[block_pointed1].busy_frag.frag_size[frag_pointed1] == mdp2->heapinfo[block_pointed2].busy_frag.frag_size[frag_pointed2]){
 251
 252                 if(memcmp(addr_block_pointed1, addr_block_pointed2, mdp1->heapinfo[block_pointed1].busy_frag.frag_size[frag_pointed1]) != 0){
 253                   distance++;
 254                 }else{
 255                   fprintf(stderr, "False difference detected\n");
 256                 }
 257
 258               }else{
 259                 distance ++;
 260               }
 261             }
 262
 263           }else{
 264             fprintf(stderr, "Pointers on blocks with different types \n");
 265             distance++;
 266           }
 267         }
 268
 269       }
 270
 271
 272       if(distance>0){
 273         fprintf(stderr,"\nDifferent data in large block %zu (size = %zu (in blocks), busy_size = %zu (in bytes))\n", i, mdp1->heapinfo[i].busy_block.size, mdp1->heapinfo[i].busy_block.busy_size);
 274         fflush(NULL);
 275         fprintf(stderr, "Hamming distance between blocks : %d\n", distance);
 276         mmalloc_backtrace_block_display(mdp1, i);
 277         mmalloc_backtrace_block_display(mdp2, i);
 278         fprintf(stderr, "\n");
 279         errors++;
 280         total_distance += distance;
 281       }
 282
 283       i++;
 284
 285     }else{
 286
 287       if(mdp1->heapinfo[i].type > 0){ /* busy fragmented block */
 288
 289         if(mdp1->heapinfo[i].type != mdp2->heapinfo[i].type){
 290           fprintf(stderr,"Different size of fragments in fragmented block %zu : %d - %d\n", i, mdp1->heapinfo[i].type, mdp2->heapinfo[i].type); fflush(NULL);
 291           errors++;
 292         }
 293
 294         if(mdp1->heapinfo[i].busy_frag.nfree != mdp2->heapinfo[i].busy_frag.nfree){
 295           fprintf(stderr,"Different free fragments in fragmented block %zu : %zu - %zu\n", i, mdp1->heapinfo[i].busy_frag.nfree, mdp2->heapinfo[i].busy_frag.nfree); fflush(NULL);
 296           errors++;
 297         }
 298
 299         if(mdp1->heapinfo[i].busy_frag.first != mdp2->heapinfo[i].busy_frag.first){
 300           fprintf(stderr,"Different busy_size of a large cluster : %zu - %zu\n", mdp1->heapinfo[i].busy_block.busy_size, mdp2->heapinfo[i].busy_block.busy_size); fflush(NULL);
 301           errors++;
 302         }
 303
 304         frag_size = pow(2, mdp1->heapinfo[i].type);
 305
 306         for(j=0; j< (BLOCKSIZE/frag_size); j++){
 307
 308           if(mdp1->heapinfo[i].busy_frag.frag_size[j] != mdp2->heapinfo[i].busy_frag.frag_size[j]){
 309             fprintf(stderr,"Different busy_size for fragment %zu in block %zu : %hu - %hu\n", j, i, mdp1->heapinfo[i].busy_frag.frag_size[j], mdp2->heapinfo[i].busy_frag.frag_size[j]); fflush(NULL);
 310             errors++;
 311           }
 312
 313           if(mdp1->heapinfo[i].busy_frag.frag_size[j] > 0){
 314
 315             addr_frag1 = (char *)addr_block1 + (j * frag_size);
 316             addr_frag2 = (char *)addr_block2 + (j * frag_size);
 317
 318             /* Hamming distance on different blocks */
 319             distance = 0;
 320
 321             for(k=0;k<mdp1->heapinfo[i].busy_frag.frag_size[j];k++){
 322
 323               if(memcmp(((char *)addr_frag1) + k, ((char *)addr_frag2) + k, 1) != 0){
 324
 325                 fprintf(stderr, "Different byte (offset=%d) (%p - %p) in fragment %zu in block %zu\n", k, (char *)addr_frag1 + k, (char *)addr_frag2 + k, j, i); fflush(NULL);
 326
 327                 pointer_align = (k / sizeof(void*)) * sizeof(void*);
 328                 address_pointed1 = *((void **)((char *)addr_frag1 + pointer_align));
 329                 address_pointed2 = *((void **)((char *)addr_frag2 + pointer_align));
 330
 331                 fprintf(stderr, "Addresses pointed : %p - %p\n", address_pointed1, address_pointed2);
 332
 333                 block_pointed1 = ((char*)address_pointed1 - (char*)((struct mdesc*)s_heap)->heapbase) / BLOCKSIZE + 1;
 334                 block_pointed2 = ((char*)address_pointed2 - (char*)((struct mdesc*)s_heap)->heapbase) / BLOCKSIZE + 1;
 335
 336                 fprintf(stderr, "Blocks pointed : %d - %d\n", block_pointed1, block_pointed2);
 337
 338                 if((char *) address_pointed1 < (char*)((struct mdesc*)s_heap)->heapbase || block_pointed1 > mdp1->heapsize || block_pointed1 < 1 || (char *) address_pointed2 < (char*)((struct mdesc*)s_heap)->heapbase || block_pointed2 > mdp2->heapsize || block_pointed2 < 1) {
 339                   fprintf(stderr, "Unknown pointer ! \n");
 340                   fflush(NULL);
 341                   distance++;
 342                   continue;
 343                 }
 344
 345                 addr_block_pointed1 = ((void*) (((ADDR2UINT((size_t)block_pointed1)) - 1) * BLOCKSIZE + (char*)heapbase1));
 346                 addr_block_pointed2 = ((void*) (((ADDR2UINT((size_t)block_pointed2)) - 1) * BLOCKSIZE + (char*)heapbase2));
 347
 348                 if(mdp1->heapinfo[block_pointed1].type == mdp2->heapinfo[block_pointed2].type){
 349
 350                   if(mdp1->heapinfo[block_pointed1].type == 0){ // Large block
 351
 352                     if(mdp1->heapinfo[block_pointed1].busy_block.busy_size == mdp2->heapinfo[block_pointed2].busy_block.busy_size){
 353
 354                       if(memcmp(addr_block_pointed1, addr_block_pointed2, mdp1->heapinfo[block_pointed1].busy_block.busy_size) != 0){
 355                         distance++;
 356                       }else{
 357                         fprintf(stderr, "False difference detected\n");
 358                       }
 359
 360                     }else{
 361                       distance++;
 362                     }
 363
 364                   }else{ // Fragmented block
 365
 366                     frag_pointed1 = ((uintptr_t) (ADDR2UINT (address_pointed1) % (BLOCKSIZE))) >> mdp1->heapinfo[i].type;
 367                     frag_pointed2 = ((uintptr_t) (ADDR2UINT (address_pointed2) % (BLOCKSIZE))) >> mdp1->heapinfo[i].type;
 368
 369                     fprintf(stderr, "Fragments pointed : %d - %d\n", frag_pointed1, frag_pointed2);
 370
 371                     if((frag_pointed1 < 0) || (frag_pointed1 > (BLOCKSIZE / pow( 2, mdp1->heapinfo[block_pointed1].type))) || (frag_pointed2 < 0) || (frag_pointed2 > (BLOCKSIZE / pow( 2, mdp1->heapinfo[block_pointed1].type)))){
 372                        fprintf(stderr, "Unknown pointer ! \n");
 373                        fflush(NULL);
 374                        distance++;
 375                        continue;
 376                     }
 377
 378                     fprintf(stderr, "Size used in fragments pointed : %d - %d\n", mdp1->heapinfo[block_pointed1].busy_frag.frag_size[frag_pointed1], mdp2->heapinfo[block_pointed2].busy_frag.frag_size[frag_pointed2]);
 379
 380                     if(mdp1->heapinfo[block_pointed1].busy_frag.frag_size[frag_pointed1] == mdp2->heapinfo[block_pointed2].busy_frag.frag_size[frag_pointed2]){
 381
 382                       if(memcmp(addr_block_pointed1, addr_block_pointed2, mdp1->heapinfo[block_pointed1].busy_frag.frag_size[frag_pointed1]) != 0){
 383                         distance++;
 384                       }else{
 385                         fprintf(stderr, "False difference detected\n");
 386                       }
 387
 388                     }else{
 389                       distance ++;
 390                     }
 391                   }
 392
 393                 }else{
 394                   fprintf(stderr, "Pointers on blocks with different types \n");
 395                   distance++;
 396                 }
 397               }
 398
 399             }
 400
 401             if(distance > 0){
 402               fprintf(stderr,"\nDifferent data in fragment %zu (size = %zu, size used = %hu) in block %zu \n", j, frag_size, mdp1->heapinfo[i].busy_frag.frag_size[j], i);
 403               fprintf(stderr, "Hamming distance between fragments : %d\n", distance);
 404               mmalloc_backtrace_fragment_display(mdp1, i, j);
 405               mmalloc_backtrace_fragment_display(mdp2, i, j);
 406               fprintf(stderr, "\n");
 407               errors++;
 408               total_distance += distance;
 409
 410             }
 411
 412           }
 413         }
 414
 415         i++;
 416
 417       }else{ /* free block */
 418
 419         i++;
 420
 421       }
 422
 423     }
 424
 425   }
 426
 427
 428   fprintf(stderr, "Hamming distance between heap regions : %d\n", total_distance);
 429
 430   return (errors);
 431 }
 432
 433
 434 /* void *get_end_addr_heap(void *heap){ */
 435
 436 /*   FILE *fp;                     /\* File pointer to process's proc maps file *\/ */
 437 /*   char *line = NULL;            /\* Temporal storage for each line that is readed *\/ */
 438 /*   ssize_t read;                 /\* Number of bytes readed *\/ */
 439 /*   size_t n = 0;                 /\* Amount of bytes to read by getline *\/ */
 440
 441 /*   fp = fopen("/proc/self/maps", "r"); */
 442
 443 /*   if(fp == NULL) */
 444 /*     perror("fopen failed"); */
 445
 446
 447 /*   xbt_dynar_t lfields = NULL; */
 448 /*   xbt_dynar_t start_end  = NULL; */
 449 /*   void *start_addr; */
 450 /*   void *end_addr; */
 451
 452 /*   while ((read = getline(&line, &n, fp)) != -1) { */
 453
 454 /*     xbt_str_trim(line, NULL); */
 455 /*     xbt_str_strip_spaces(line); */
 456 /*     lfields = xbt_str_split(line,NULL); */
 457
 458 /*     start_end = xbt_str_split(xbt_dynar_get_as(lfields, 0, char*), "-"); */
 459 /*     start_addr = (void *) strtoul(xbt_dynar_get_as(start_end, 0, char*), NULL, 16); */
 460 /*     end_addr = (void *) strtoul(xbt_dynar_get_as(start_end, 1, char*), NULL, 16); */
 461
 462 /*     if(start_addr == heap){ */
 463 /*       free(line); */
 464 /*       fclose(fp); */
 465 /*       xbt_dynar_reset(lfields); */
 466 /*       xbt_free(lfields); */
 467 /*       xbt_dynar_reset(start_end); */
 468 /*       xbt_free(start_end); */
 469 /*       return end_addr; */
 470 /*     } */
 471
 472 /*   } */
 473
 474 /*   xbt_dynar_reset(lfields); */
 475 /*   xbt_free(lfields); */
 476 /*   xbt_dynar_reset(start_end); */
 477 /*   xbt_free(start_end); */
 478 /*   free(line); */
 479 /*   fclose(fp); */
 480 /*   return NULL; */
 481
 482
 483 /* } */
 484
 485
 486 void mmalloc_display_info_heap(xbt_mheap_t h){
 487
 488 }
 489
 490
 491