src/mc/mc_compare.c

   1 /* Copyright (c) 2008-2012 Da SimGrid Team. All rights reserved.            */
   2
   3 /* This program is free software; you can redistribute it and/or modify it
   4  * under the terms of the license (GNU LGPL) which comes with this package. */
   5
   6 #include "mc_private.h"
   7
   8 #include "xbt/mmalloc.h"
   9
  10 XBT_LOG_NEW_DEFAULT_SUBCATEGORY(mc_compare, mc,
  11                                 "Logging specific to mc_compare");
  12
  13 static int data_program_region_compare(void *d1, void *d2, size_t size);
  14 static int data_libsimgrid_region_compare(void *d1, void *d2, size_t size);
  15 static int heap_region_compare(void *d1, void *d2, size_t size);
  16
  17 static int compare_stack(stack_region_t s1, stack_region_t s2, void *sp1, void *sp2, void *heap1, void *heap2, xbt_dynar_t equals);
  18 static int is_heap_equality(xbt_dynar_t equals, void *a1, void *a2);
  19 static size_t ignore(void *address);
  20
  21 static void stack_region_free(stack_region_t s);
  22 static void heap_equality_free(heap_equality_t e);
  23
  24 static int compare_local_variables(char *s1, char *s2, xbt_dynar_t heap_equals);
  25
  26 static size_t ignore(void *address){
  27   unsigned int cursor = 0;
  28   int start = 0;
  29   int end = xbt_dynar_length(mc_comparison_ignore) - 1;
  30   mc_ignore_region_t region;
  31
  32   while(start <= end){
  33     cursor = (start + end) / 2;
  34     region = (mc_ignore_region_t)xbt_dynar_get_as(mc_comparison_ignore, cursor, mc_ignore_region_t);
  35     if(region->address == address)
  36       return region->size;
  37     if(region->address < address)
  38       start = cursor + 1;
  39     if(region->address > address)
  40       end = cursor - 1;
  41   }
  42
  43   return 0;
  44 }
  45
  46 static int data_program_region_compare(void *d1, void *d2, size_t size){
  47   int distance = 0;
  48   size_t i = 0;
  49   int pointer_align;
  50   void *addr_pointed1 = NULL, *addr_pointed2 = NULL;
  51
  52   for(i=0; i<size; i++){
  53     if(memcmp(((char *)d1) + i, ((char *)d2) + i, 1) != 0){
  54       pointer_align = (i / sizeof(void*)) * sizeof(void*);
  55       addr_pointed1 = *((void **)((char *)d1 + pointer_align));
  56       addr_pointed2 = *((void **)((char *)d2 + pointer_align));
  57       if((addr_pointed1 > start_plt_binary && addr_pointed1 < end_plt_binary) || (addr_pointed2 > start_plt_binary && addr_pointed2 < end_plt_binary)){
  58         continue;
  59       }else{
  60         XBT_DEBUG("Different byte (offset=%zu) (%p - %p) in data program region", i, (char *)d1 + i, (char *)d2 + i);
  61         distance++;
  62       }
  63     }
  64   }
  65
  66   XBT_INFO("Hamming distance between data program regions : %d", distance);
  67
  68   return distance;
  69 }
  70
  71 static int data_libsimgrid_region_compare(void *d1, void *d2, size_t size){
  72   int distance = 0;
  73   size_t i = 0, ignore_size = 0;
  74   int pointer_align;
  75   void *addr_pointed1 = NULL, *addr_pointed2 = NULL;
  76
  77   for(i=0; i<size; i++){
  78     if(memcmp(((char *)d1) + i, ((char *)d2) + i, 1) != 0){
  79       if((ignore_size = ignore((char *)start_data_libsimgrid+i)) > 0){
  80         i = i + ignore_size;
  81         continue;
  82       }
  83       pointer_align = (i / sizeof(void*)) * sizeof(void*);
  84       addr_pointed1 = *((void **)((char *)d1 + pointer_align));
  85       addr_pointed2 = *((void **)((char *)d2 + pointer_align));
  86       if((addr_pointed1 > start_plt_libsimgrid && addr_pointed1 < end_plt_libsimgrid) || (addr_pointed2 > start_plt_libsimgrid && addr_pointed2 < end_plt_libsimgrid)){
  87         continue;
  88       }else if(addr_pointed1 >= raw_heap && addr_pointed1 <= end_raw_heap && addr_pointed2 >= raw_heap && addr_pointed2 <= end_raw_heap){
  89         continue;
  90       }else{
  91         XBT_DEBUG("Different byte (offset=%zu) (%p - %p) in data libsimgrid region", i, (char *)d1 + i, (char *)d2 + i);
  92         XBT_DEBUG("Addresses pointed : %p - %p\n", addr_pointed1, addr_pointed2);
  93         distance++;
  94       }
  95     }
  96   }
  97
  98   XBT_INFO("Hamming distance between data libsimgrid regions : %d", distance); fflush(NULL);
  99
 100   return distance;
 101 }
 102
 103 static int heap_region_compare(void *d1, void *d2, size_t size){
 104
 105   int distance = 0;
 106   size_t i = 0;
 107
 108   for(i=0; i<size; i++){
 109     if(memcmp(((char *)d1) + i, ((char *)d2) + i, 1) != 0){
 110       XBT_DEBUG("Different byte (offset=%zu) (%p - %p) in heap region", i, (char *)d1 + i, (char *)d2 + i);
 111       distance++;
 112     }
 113   }
 114
 115   XBT_INFO("Hamming distance between heap regions : %d (total size : %zu)", distance, size);
 116
 117   return distance;
 118 }
 119
 120 static void stack_region_free(stack_region_t s){
 121   if(s){
 122     xbt_free(s->process_name);
 123     xbt_free(s);
 124   }
 125 }
 126
 127 void stack_region_free_voidp(void *s){
 128   stack_region_free((stack_region_t) * (void **) s);
 129 }
 130
 131 static void heap_equality_free(heap_equality_t e){
 132   if(e){
 133     xbt_free(e);
 134   }
 135 }
 136
 137 void heap_equality_free_voidp(void *e){
 138   heap_equality_free((heap_equality_t) * (void **) e);
 139 }
 140
 141 int snapshot_compare(mc_snapshot_t s1, mc_snapshot_t s2){
 142
 143   raw_mem_set = (mmalloc_get_current_heap() == raw_heap);
 144
 145   MC_SET_RAW_MEM;
 146
 147   int errors = 0, i;
 148   xbt_dynar_t stacks1 = xbt_dynar_new(sizeof(stack_region_t), stack_region_free_voidp);
 149   xbt_dynar_t stacks2 = xbt_dynar_new(sizeof(stack_region_t), stack_region_free_voidp);
 150   xbt_dynar_t equals = xbt_dynar_new(sizeof(heap_equality_t), heap_equality_free_voidp);
 151
 152   void *heap1 = NULL, *heap2 = NULL;
 153
 154   if(s1->num_reg != s2->num_reg){
 155     XBT_DEBUG("Different num_reg (s1 = %u, s2 = %u)", s1->num_reg, s2->num_reg);
 156     return 1;
 157   }
 158
 159   for(i=0 ; i< s1->num_reg ; i++){
 160
 161     if(s1->regions[i]->type != s2->regions[i]->type){
 162       XBT_DEBUG("Different type of region");
 163       errors++;
 164     }
 165
 166     switch(s1->regions[i]->type){
 167     case 0 :
 168       /* Compare heapregion */
 169       if(s1->regions[i]->size != s2->regions[i]->size){
 170         XBT_DEBUG("Different size of heap (s1 = %zu, s2 = %zu)", s1->regions[i]->size, s2->regions[i]->size);
 171         xbt_dynar_free(&stacks1);
 172         xbt_dynar_free(&stacks2);
 173         xbt_dynar_free(&equals);
 174         if(!raw_mem_set)
 175           MC_UNSET_RAW_MEM;
 176         return 1;
 177       }
 178       if(s1->regions[i]->start_addr != s2->regions[i]->start_addr){
 179         XBT_DEBUG("Different start addr of heap (s1 = %p, s2 = %p)", s1->regions[i]->start_addr, s2->regions[i]->start_addr);
 180         xbt_dynar_free(&stacks1);
 181         xbt_dynar_free(&stacks2);
 182         xbt_dynar_free(&equals);
 183         if(!raw_mem_set)
 184           MC_UNSET_RAW_MEM;
 185         return 1;
 186       }
 187       if(mmalloc_compare_heap((xbt_mheap_t)s1->regions[i]->data, (xbt_mheap_t)s2->regions[i]->data, &stacks1, &stacks2, &equals)){
 188         XBT_INFO("Different heap (mmalloc_compare)");
 189         xbt_dynar_free(&stacks1);
 190         xbt_dynar_free(&stacks2);
 191         xbt_dynar_free(&equals);
 192         if(!raw_mem_set)
 193           MC_UNSET_RAW_MEM;
 194         return 1;
 195       }
 196       heap1 = s1->regions[i]->data;
 197       heap2 = s2->regions[i]->data;
 198       break;
 199     case 1 :
 200       /* Compare data libsimgrid region */
 201       if(s1->regions[i]->size != s2->regions[i]->size){
 202         XBT_DEBUG("Different size of libsimgrid (data) (s1 = %zu, s2 = %zu)", s1->regions[i]->size, s2->regions[i]->size);
 203         xbt_dynar_free(&stacks1);
 204         xbt_dynar_free(&stacks2);
 205         xbt_dynar_free(&equals);
 206         if(!raw_mem_set)
 207           MC_UNSET_RAW_MEM;
 208         return 1;
 209       }
 210       if(s1->regions[i]->start_addr != s2->regions[i]->start_addr){
 211         XBT_DEBUG("Different start addr of libsimgrid (data) (s1 = %p, s2 = %p)", s1->regions[i]->start_addr, s2->regions[i]->start_addr);
 212         xbt_dynar_free(&stacks1);
 213         xbt_dynar_free(&stacks2);
 214         xbt_dynar_free(&equals);
 215         if(!raw_mem_set)
 216           MC_UNSET_RAW_MEM;
 217         return 1;
 218       }
 219       if(data_libsimgrid_region_compare(s1->regions[i]->data, s2->regions[i]->data, s1->regions[i]->size) != 0){
 220         XBT_INFO("Different memcmp for data in libsimgrid");
 221         xbt_dynar_free(&stacks1);
 222         xbt_dynar_free(&stacks2);
 223         xbt_dynar_free(&equals);
 224         if(!raw_mem_set)
 225           MC_UNSET_RAW_MEM;
 226         return 1;
 227       }
 228       break;
 229
 230     case 2 :
 231       /* Compare data program region */
 232       if(s1->regions[i]->size != s2->regions[i]->size){
 233         XBT_DEBUG("Different size of data program (s1 = %zu, s2 = %zu)", s1->regions[i]->size, s2->regions[i]->size);
 234         xbt_dynar_free(&stacks1);
 235         xbt_dynar_free(&stacks2);
 236         xbt_dynar_free(&equals);
 237         if(!raw_mem_set)
 238           MC_UNSET_RAW_MEM;
 239         return 1;
 240       }
 241       if(s1->regions[i]->start_addr != s2->regions[i]->start_addr){
 242         XBT_DEBUG("Different start addr of data program (s1 = %p, s2 = %p)", s1->regions[i]->start_addr, s2->regions[i]->start_addr);
 243         xbt_dynar_free(&stacks1);
 244         xbt_dynar_free(&stacks2);
 245         xbt_dynar_free(&equals);
 246         if(!raw_mem_set)
 247           MC_UNSET_RAW_MEM;
 248         return 1;
 249       }
 250       if(data_program_region_compare(s1->regions[i]->data, s2->regions[i]->data, s1->regions[i]->size) != 0){
 251         XBT_INFO("Different memcmp for data in program");
 252         xbt_dynar_free(&stacks1);
 253         xbt_dynar_free(&stacks2);
 254         xbt_dynar_free(&equals);
 255         if(!raw_mem_set)
 256           MC_UNSET_RAW_MEM;
 257         return 1;
 258       }
 259       break;
 260
 261     }
 262
 263   }
 264
 265   /* Stacks comparison */
 266   unsigned int cursor = 0;
 267   stack_region_t stack_region1, stack_region2;
 268   void *sp1, *sp2;
 269   int diff = 0, diff_local = 0;
 270
 271   while(cursor < xbt_dynar_length(stacks1)){
 272     XBT_DEBUG("Stack %d", cursor + 1);
 273     stack_region1 = (stack_region_t)(xbt_dynar_get_as(stacks1, cursor, stack_region_t));
 274     stack_region2 = (stack_region_t)(xbt_dynar_get_as(stacks2, cursor, stack_region_t));
 275     sp1 = ((mc_snapshot_stack_t)xbt_dynar_get_as(s1->stacks, cursor, mc_snapshot_stack_t))->stack_pointer;
 276     sp2 = ((mc_snapshot_stack_t)xbt_dynar_get_as(s2->stacks, cursor, mc_snapshot_stack_t))->stack_pointer;
 277     diff = compare_stack(stack_region1, stack_region2, sp1, sp2, heap1, heap2, equals);
 278
 279     if(diff >0){
 280       diff_local = compare_local_variables(((mc_snapshot_stack_t)xbt_dynar_get_as(s1->stacks, cursor, mc_snapshot_stack_t))->local_variables->data, ((mc_snapshot_stack_t)xbt_dynar_get_as(s2->stacks, cursor, mc_snapshot_stack_t))->local_variables->data, equals);
 281       if(diff_local > 0){
 282         XBT_INFO("Different local variables between stacks");
 283         xbt_dynar_free(&stacks1);
 284         xbt_dynar_free(&stacks2);
 285         xbt_dynar_free(&equals);
 286         if(!raw_mem_set)
 287           MC_UNSET_RAW_MEM;
 288         return 1;
 289       }else{
 290         XBT_INFO("Local variables are equals in stack %d", cursor + 1);
 291       }
 292     }else{
 293       XBT_INFO("Hamming distance between stacks : %d", diff);
 294     }
 295     cursor++;
 296   }
 297
 298   xbt_dynar_free(&stacks1);
 299   xbt_dynar_free(&stacks2);
 300   xbt_dynar_free(&equals);
 301   if(!raw_mem_set)
 302     MC_UNSET_RAW_MEM;
 303   return 0;
 304
 305 }
 306
 307 static int compare_local_variables(char *s1, char *s2, xbt_dynar_t heap_equals){
 308
 309   xbt_dynar_t tokens1 = xbt_str_split(s1, NULL);
 310   xbt_dynar_t tokens2 = xbt_str_split(s2, NULL);
 311
 312   xbt_dynar_t s_tokens1, s_tokens2;
 313   unsigned int cursor = 0;
 314   void *addr1, *addr2;
 315
 316   int diff = 0;
 317
 318   while(cursor < xbt_dynar_length(tokens1)){
 319     s_tokens1 = xbt_str_split(xbt_dynar_get_as(tokens1, cursor, char *), "=");
 320     s_tokens2 = xbt_str_split(xbt_dynar_get_as(tokens2, cursor, char *), "=");
 321     if(xbt_dynar_length(s_tokens1) > 1 && xbt_dynar_length(s_tokens2) > 1){
 322       if(strcmp(xbt_dynar_get_as(s_tokens1, 1, char *), xbt_dynar_get_as(s_tokens2, 1, char *)) != 0){
 323         addr1 = (void *) strtoul(xbt_dynar_get_as(s_tokens1, 1, char *), NULL, 16);
 324         addr2 = (void *) strtoul(xbt_dynar_get_as(s_tokens2, 1, char *), NULL, 16);
 325         if(is_heap_equality(heap_equals, addr1, addr2) == 0){
 326           XBT_INFO("Variable %s is different between stacks : %s - %s", xbt_dynar_get_as(s_tokens1, 0, char *), xbt_dynar_get_as(s_tokens1, 1, char *), xbt_dynar_get_as(s_tokens2, 1, char *));
 327           diff++;
 328         }
 329       }
 330     }
 331     xbt_dynar_free(&s_tokens1);
 332     xbt_dynar_free(&s_tokens2);
 333     cursor++;
 334   }
 335
 336   xbt_dynar_free(&tokens1);
 337   xbt_dynar_free(&tokens2);
 338   return diff;
 339
 340 }
 341
 342 static int is_heap_equality(xbt_dynar_t equals, void *a1, void *a2){
 343
 344   unsigned int cursor = 0;
 345   int start = 0;
 346   int end = xbt_dynar_length(equals) - 1;
 347   heap_equality_t current_equality;
 348
 349   while(start <= end){
 350     cursor = (start + end) / 2;
 351     current_equality = (heap_equality_t)xbt_dynar_get_as(equals, cursor, heap_equality_t);
 352     if(current_equality->address1 == a1){
 353       if(current_equality->address2 == a2)
 354         return 1;
 355       if(current_equality->address2 < a2)
 356         start = cursor + 1;
 357       if(current_equality->address2 > a2)
 358         end = cursor - 1;
 359     }
 360     if(current_equality->address1 < a1)
 361       start = cursor + 1;
 362     if(current_equality->address1 > a1)
 363       end = cursor - 1;
 364   }
 365
 366   return 0;
 367
 368 }
 369
 370
 371 static int compare_stack(stack_region_t s1, stack_region_t s2, void *sp1, void *sp2, void *heap1, void *heap2, xbt_dynar_t equals){
 372
 373   size_t k = 0, nb_diff = 0;
 374   size_t size_used1 = s1->size - ((char*)sp1 - (char*)s1->address);
 375   size_t size_used2 = s2->size - ((char*)sp2 - (char*)s2->address);
 376
 377   int pointer_align;
 378   void *addr_pointed1 = NULL, *addr_pointed2 = NULL;
 379
 380   if(size_used1 == size_used2){
 381
 382     while(k < size_used1){
 383       if(memcmp((char *)s1->address + s1->size - k, (char *)s2->address + s2->size - k, 1) != 0){
 384         pointer_align = ((size_used1 - k) / sizeof(void*)) * sizeof(void*);
 385         addr_pointed1 = *((void **)(((char*)s1->address + (s1->size - size_used1)) + pointer_align));
 386         addr_pointed2 = *((void **)(((char*)s2->address + (s2->size - size_used2)) + pointer_align));
 387         if(is_heap_equality(equals, addr_pointed1, addr_pointed2) == 0){
 388           if((addr_pointed1 > std_heap) && (addr_pointed1 < (void *)((char *)std_heap + STD_HEAP_SIZE)) && (addr_pointed2 > std_heap) && (addr_pointed2 < (void *)((char *)std_heap + STD_HEAP_SIZE))){
 389             if(is_free_area(addr_pointed1, (xbt_mheap_t)heap1) == 0 || is_free_area(addr_pointed2, (xbt_mheap_t)heap2) == 0){
 390               //XBT_INFO("Difference at offset %zu (%p - %p)", k, (char *)s1->address + s1->size - k, (char *)s2->address + s2->size - k);
 391               nb_diff++;
 392             }
 393           }else{
 394             //XBT_INFO("Difference at offset %zu (%p - %p)", k, (char *)s1->address + s1->size - k, (char *)s2->address + s2->size - k);
 395             nb_diff++;
 396           }
 397         }
 398       }
 399       k++;
 400     }
 401
 402   }else{
 403     XBT_INFO("Different size used between stacks");
 404     return 1;
 405   }
 406
 407   return nb_diff;
 408 }
 409
 410 int MC_compare_snapshots(void *s1, void *s2){
 411
 412   return simcall_mc_compare_snapshots(s1, s2);
 413
 414 }