Logo AND Algorithmique Numérique Distribuée

Public GIT Repository
The mutex is useless when mallocators are disabled.
[simgrid.git] / src / xbt / mmalloc / mm_diff.c
1 /* mm_diff - Memory snapshooting and comparison                             */
2
3 /* Copyright (c) 2008-2012. The SimGrid Team. All rights reserved.          */
4
5 /* This program is free software; you can redistribute it and/or modify it
6  * under the terms of the license (GNU LGPL) which comes with this package. */
7
8 #include "xbt/ex_interface.h" /* internals of backtrace setup */
9
10 XBT_LOG_NEW_DEFAULT_SUBCATEGORY(mm_diff, xbt,
11                                 "Logging specific to mm_diff in mmalloc");
12
13 extern char *xbt_binary_name;
14
15 void mmalloc_backtrace_display(xbt_mheap_t mdp, void *ptr){
16   size_t block = BLOCK(ptr);
17   int type;
18   xbt_ex_t e;
19
20   if ((char *) ptr < (char *) mdp->heapbase || block > mdp->heapsize) {
21     fprintf(stderr,"Ouch, this pointer is not mine. I cannot display its backtrace. I refuse it to death!!\n");
22     abort();
23   }
24
25   type = mdp->heapinfo[block].type;
26
27   if (type != 0) {
28     //fprintf(stderr,"Only full blocks are backtraced for now. Ignoring your request.\n");
29     return;
30   }
31   if (mdp->heapinfo[block].busy_block.bt_size == 0) {
32     fprintf(stderr,"No backtrace available for that block, sorry.\n");
33     return;
34   }
35
36   memcpy(&e.bt,&(mdp->heapinfo[block].busy_block.bt),sizeof(void*)*XBT_BACKTRACE_SIZE);
37   e.used = mdp->heapinfo[block].busy_block.bt_size;
38
39   xbt_ex_setup_backtrace(&e);
40   if (e.used == 0) {
41     fprintf(stderr, "(backtrace not set)\n");
42   } else if (e.bt_strings == NULL) {
43     fprintf(stderr, "(backtrace not ready to be computed. %s)\n",xbt_binary_name?"Dunno why":"xbt_binary_name not setup yet");
44   } else {
45     int i;
46
47     fprintf(stderr, "Backtrace of where the block %p where malloced (%d frames):\n",ptr,e.used);
48     for (i = 0; i < e.used; i++)       /* no need to display "xbt_backtrace_display" */{
49       fprintf(stderr,"%d",i);fflush(NULL);
50       fprintf(stderr, "---> %s\n", e.bt_strings[i] + 4);
51     }
52   }
53 }
54
55
56 void mmalloc_backtrace_block_display(xbt_mheap_t mdp, size_t block){
57
58   int type;
59   xbt_ex_t e;
60
61   type = mdp->heapinfo[block].type;
62
63   if (type != 0) {
64     fprintf(stderr,"Only full blocks are backtraced for now. Ignoring your request.\n");
65     return;
66   }
67   if (mdp->heapinfo[block].busy_block.bt_size == 0) {
68     fprintf(stderr,"No backtrace available for that block, sorry.\n");
69     return;
70   }
71
72   memcpy(&e.bt,&(mdp->heapinfo[block].busy_block.bt),sizeof(void*)*XBT_BACKTRACE_SIZE);
73   e.used = mdp->heapinfo[block].busy_block.bt_size;
74
75   xbt_ex_setup_backtrace(&e);
76   if (e.used == 0) {
77     fprintf(stderr, "(backtrace not set)\n");
78   } else if (e.bt_strings == NULL) {
79     fprintf(stderr, "(backtrace not ready to be computed. %s)\n",xbt_binary_name?"Dunno why":"xbt_binary_name not setup yet");
80   } else {
81     int i;
82
83     fprintf(stderr, "Backtrace of where the block %zu where malloced (%d frames):\n", block ,e.used);
84     for (i = 0; i < e.used; i++)       /* no need to display "xbt_backtrace_display" */{
85       fprintf(stderr,"%d",i);fflush(NULL);
86       fprintf(stderr, "---> %s\n", e.bt_strings[i] + 4);
87     }
88   }
89 }
90
91 void mmalloc_backtrace_fragment_display(xbt_mheap_t mdp, size_t block, size_t frag){
92   
93   xbt_ex_t e;
94
95   memcpy(&e.bt,&(mdp->heapinfo[block].busy_frag.bt[frag]),sizeof(void*)*XBT_BACKTRACE_SIZE);
96   e.used = XBT_BACKTRACE_SIZE;
97
98   xbt_ex_setup_backtrace(&e);
99   if (e.used == 0) {
100     fprintf(stderr, "(backtrace not set)\n");
101   } else if (e.bt_strings == NULL) {
102     fprintf(stderr, "(backtrace not ready to be computed. %s)\n",xbt_binary_name?"Dunno why":"xbt_binary_name not setup yet");
103   } else {
104     int i;
105
106     fprintf(stderr, "Backtrace of where the fragment %zu in block %zu where malloced (%d frames):\n", frag, block ,e.used);
107     for (i = 0; i < e.used; i++)       /* no need to display "xbt_backtrace_display" */{
108       fprintf(stderr,"%d",i);fflush(NULL);
109       fprintf(stderr, "---> %s\n", e.bt_strings[i] + 4);
110     }
111   }
112 }
113
114 int mmalloc_compare_heap(xbt_mheap_t mdp1, xbt_mheap_t mdp2, void* s_heap, void* r_heap){
115
116   if(mdp1 == NULL && mdp2 == NULL){
117     fprintf(stderr, "Malloc descriptors null\n");
118     return 0;
119   }
120
121   int errors = mmalloc_compare_mdesc(mdp1, mdp2, s_heap, r_heap);
122
123   return (errors > 0);
124
125 }
126
127 int mmalloc_compare_mdesc(struct mdesc *mdp1, struct mdesc *mdp2, void* s_heap, void* r_heap){
128
129   int errors = 0;
130
131   /*if(mdp1->headersize != mdp2->headersize){
132     fprintf(stderr, "Different size of the file header for the mapped files\n");
133     return 1;
134   }
135
136   if(mdp1->refcount != mdp2->refcount){
137     fprintf(stderr, "Different number of processes that attached the heap\n");
138     return 1;
139   }
140
141   if(strcmp(mdp1->magic, mdp2->magic) != 0){
142     fprintf(stderr,"Different magic number\n");
143     return 1;
144   }
145
146   if(mdp1->flags != mdp2->flags){
147     fprintf(stderr,"Different flags\n");  
148     return 1;
149   }
150
151   if(mdp1->heapsize != mdp2->heapsize){
152     fprintf(stderr,"Different number of info entries\n");
153     return 1;
154   }  
155
156   if(mdp1->heapbase != mdp2->heapbase){
157     fprintf(stderr,"Different first block of the heap\n");
158     return 1;
159   }
160
161   if(mdp1->heapindex != mdp2->heapindex){
162     fprintf(stderr,"Different index for the heap table : %zu - %zu\n", mdp1->heapindex, mdp2->heapindex);
163     return 1;
164   }
165
166   if(mdp1->base != mdp2->base){
167     fprintf(stderr,"Different base address of the memory region\n");
168     return 1;
169   }
170
171   if(mdp1->breakval != mdp2->breakval){
172     fprintf(stderr,"Different current location in the memory region\n");
173     return 1;
174   }
175
176   if(mdp1->top != mdp2->top){
177     fprintf(stderr,"Different end of the current location in the memory region\n");
178     return 1;
179   }
180
181   if(mdp1->heaplimit != mdp2->heaplimit){
182     fprintf(stderr,"Different limit of valid info table indices\n");
183     return 1;
184   }
185
186   if(mdp1->fd != mdp2->fd){
187     fprintf(stderr,"Different file descriptor for the file to which this malloc heap is mapped\n");
188     return 1;
189   }
190
191   if(mdp1->version != mdp2->version){
192     fprintf(stderr,"Different version of the mmalloc package\n");
193     return 1;
194     }*/
195
196
197   size_t i, j;
198   void *addr_block1, *addr_block2, *addr_frag1, *addr_frag2;
199   size_t frag_size;
200
201   i = 0;
202
203   int k;
204   int distance = 0;
205   int pointer_align;
206
207   /* Check busy blocks*/
208
209   while(i < mdp1->heapindex){
210
211     if(mdp1->heapinfo[i].type != mdp2->heapinfo[i].type){
212       fprintf(stderr,"Different type of block : %d - %d\n", mdp1->heapinfo[i].type, mdp2->heapinfo[i].type);
213       errors++;
214     }
215
216     addr_block1 = (char *)mdp1 + sizeof(struct mdesc) + (i * BLOCKSIZE);
217     addr_block2 = (char *)mdp2 + sizeof(struct mdesc) + (i * BLOCKSIZE);
218
219     if(mdp1->heapinfo[i].type == 0){ /* busy large block */
220
221       if(mdp1->heapinfo[i].busy_block.size != mdp2->heapinfo[i].busy_block.size){
222         fprintf(stderr,"Different size of a large cluster : %zu - %zu\n", mdp1->heapinfo[i].busy_block.size, mdp2->heapinfo[i].busy_block.size);
223         errors++;
224       } 
225
226       if(mdp1->heapinfo[i].busy_block.busy_size != mdp2->heapinfo[i].busy_block.busy_size){
227         fprintf(stderr,"Different busy_size of a large cluster : %zu - %zu\n", mdp1->heapinfo[i].busy_block.busy_size, mdp2->heapinfo[i].busy_block.busy_size);
228         errors++;
229       } 
230
231       if(memcmp(addr_block1, addr_block2, (mdp1->heapinfo[i].busy_block.busy_size)) != 0){
232         fprintf(stderr,"\nDifferent data in large block %zu (size = %zu (in blocks), busy_size = %zu (in bytes))\n", i, mdp1->heapinfo[i].busy_block.size, mdp1->heapinfo[i].busy_block.busy_size);
233
234         /* Hamming distance on different blocks */
235         distance = 0;
236         for(k=0;k<mdp1->heapinfo[i].busy_block.busy_size;k++){
237           if(memcmp(((char *)addr_block1) + k, ((char *)addr_block2) + k, 1) != 0){
238             fprintf(stderr, "Different byte (offset=%d) (%p - %p) in block %zu\n", k, (char *)addr_block1 + k, (char *)addr_block2 + k, i); 
239             distance++;
240             pointer_align = (k / sizeof(void*)) * sizeof(void*); 
241             fprintf(stderr, "Pointed address : %p (in %s) - %p (in %s)\n", *((void **)((char *)addr_block1 + pointer_align)), get_addr_memory_map(*((void **)((char *)addr_block1 + pointer_align)), s_heap, r_heap), *((void **)((char *)addr_block2 + pointer_align)),get_addr_memory_map(*((void **)((char *)addr_block2 + pointer_align)), s_heap, r_heap) );
242           }
243         }
244
245         fprintf(stderr, "Hamming distance between blocks : %d\n", distance);
246
247         mmalloc_backtrace_block_display(mdp1, i);
248         mmalloc_backtrace_block_display(mdp2, i);
249         errors++;
250       }
251
252    
253       i = i + mdp1->heapinfo[i].busy_block.size;
254
255     }else{
256       
257       if(mdp1->heapinfo[i].type > 0){ /* busy fragmented block */
258
259         if(mdp1->heapinfo[i].type != mdp2->heapinfo[i].type){
260           fprintf(stderr,"Different size of fragments in fragmented block %zu : %d - %d\n", i, mdp1->heapinfo[i].type, mdp2->heapinfo[i].type);
261           errors++;
262         }
263
264         if(mdp1->heapinfo[i].busy_frag.nfree != mdp2->heapinfo[i].busy_frag.nfree){
265           fprintf(stderr,"Different free fragments in fragmented block %zu : %zu - %zu\n", i, mdp1->heapinfo[i].busy_frag.nfree, mdp2->heapinfo[i].busy_frag.nfree);
266           errors++;
267         } 
268         
269         if(mdp1->heapinfo[i].busy_frag.first != mdp2->heapinfo[i].busy_frag.first){
270           fprintf(stderr,"Different busy_size of a large cluster : %zu - %zu\n", mdp1->heapinfo[i].busy_block.busy_size, mdp2->heapinfo[i].busy_block.busy_size);
271           errors++;
272         } 
273
274         frag_size = pow(2, mdp1->heapinfo[i].type);
275
276         for(j=0; j< (BLOCKSIZE/frag_size); j++){
277
278           if(mdp1->heapinfo[i].busy_frag.frag_size[j] != mdp2->heapinfo[i].busy_frag.frag_size[j]){
279             fprintf(stderr,"Different busy_size for fragment %zu in block %zu : %hu - %hu\n", j, i, mdp1->heapinfo[i].busy_frag.frag_size[j], mdp2->heapinfo[i].busy_frag.frag_size[j]);
280             errors++;
281           }
282
283           if(mdp1->heapinfo[i].busy_frag.frag_size[j] > 0){
284             
285             addr_frag1 = (char *)addr_block1 + (j * frag_size);
286             addr_frag2 = (char *)addr_block2 + (j * frag_size);
287
288
289             if(memcmp(addr_frag1, addr_frag2, mdp1->heapinfo[i].busy_frag.frag_size[j]) != 0){
290               fprintf(stderr,"\nDifferent data in fragment %zu (size = %zu, size used = %hu) in block %zu \n", j, frag_size, mdp1->heapinfo[i].busy_frag.frag_size[j], i);
291
292               /* Hamming distance on different blocks */
293               distance = 0;
294               for(k=0;k<mdp1->heapinfo[i].busy_frag.frag_size[j];k++){
295                 if(memcmp(((char *)addr_frag1) + k, ((char *)addr_frag2) + k, 1) != 0){
296                   fprintf(stderr, "Different byte (offset=%d) (%p - %p) in fragment %zu in block %zu\n", k, (char *)addr_frag1 + k, (char *)addr_frag2 + k, j, i); 
297                   distance++;
298                   pointer_align = (k / sizeof(void*)) * sizeof(void*);
299                   fprintf(stderr, "Pointed address : %p (in %s) - %p (in %s)\n", *((void **)((char *)addr_frag1 + pointer_align)), get_addr_memory_map(*((void **)((char *)addr_frag1 + pointer_align)), s_heap, r_heap), *((void **)((char *)addr_frag2 + pointer_align)), get_addr_memory_map(*((void **)((char *)addr_frag2 + pointer_align)), s_heap, r_heap));
300                 }
301               }
302
303               fprintf(stderr, "Hamming distance between fragments : %d\n", distance);
304
305               mmalloc_backtrace_fragment_display(mdp1, i, j);
306               mmalloc_backtrace_fragment_display(mdp2, i, j);
307               errors++;
308             }
309
310           }
311         }
312
313         i++;
314
315       }else{ /* free block */
316
317         i++;
318
319       }
320       
321     }
322
323   }
324
325
326   return (errors);
327 }
328
329
330 const char* get_addr_memory_map(void *addr, void* s_heap, void* r_heap){
331
332   FILE *fp;                     /* File pointer to process's proc maps file */
333   char *line = NULL;            /* Temporal storage for each line that is readed */
334   ssize_t read;                 /* Number of bytes readed */
335   size_t n = 0;                 /* Amount of bytes to read by getline */
336
337   fp = fopen("/proc/self/maps", "r");
338   
339   if(fp == NULL)
340     perror("fopen failed");
341
342   if(addr == NULL)
343     return "nil";
344
345   char *lfields[6], *start, *end, *endptr;
346   int i;
347   void *start_addr;
348   void *end_addr;
349
350   while ((read = getline(&line, &n, fp)) != -1) {
351
352     line[read - 1] = '\0';
353
354     lfields[0] = strtok(line, " ");
355
356     for (i = 1; i < 6 && lfields[i - 1] != NULL; i++) {
357       lfields[i] = strtok(NULL, " ");
358     }
359
360     start = strtok(lfields[0], "-");
361     start_addr = (void *) strtoul(start, &endptr, 16); 
362    
363     if(start_addr == s_heap)
364       lfields[5] = strdup("std_heap");
365     if(start_addr == r_heap)
366       lfields[5] = strdup("raw_heap");
367     end = strtok(NULL, "-");
368     end_addr = (void *) strtoul(end, &endptr, 16); 
369    
370     if((addr > start_addr) && ( addr < end_addr)){
371       free(line);
372       fclose(fp);
373       if(lfields[5] != NULL){
374         return lfields[5];
375       }else{
376         return "Anonymous";
377       }
378     }
379     
380   }
381
382   return "Unknown area";
383
384 }
385
386 void mmalloc_display_info_heap(xbt_mheap_t h){
387
388 }
389
390
391