src/xbt/backtrace_linux.cpp

   1 /* backtrace_linux - backtrace displaying on linux platform                 */
   2 /* This file is included by ex.cpp on need (have execinfo.h, popen & addrline)*/
   3
   4 /* Copyright (c) 2008-2017. The SimGrid Team. All rights reserved.          */
   5
   6 /* This program is free software; you can redistribute it and/or modify it
   7  * under the terms of the license (GNU LGPL) which comes with this package. */
   8
   9 #include <cerrno>
  10 #include <cstring>
  11 #include <fstream>
  12 #include <sstream>
  13 #include <string>
  14 #include <vector>
  15
  16 #include <boost/algorithm/string.hpp>
  17
  18 #include <unistd.h>
  19 #include <execinfo.h>
  20 #include <sys/stat.h>
  21
  22 /* This file is to be included in ex.cpp, so the following headers are not mandatory, but it's to make sure that eclipse see them too */
  23 #include <xbt/string.hpp>
  24 #include <xbt/backtrace.hpp>
  25 #include "xbt/ex.h"
  26 #include "xbt/log.h"
  27 #include "xbt/module.h"         /* xbt_binary_name */
  28 #include "src/xbt_modinter.h"       /* backtrace initialization headers */
  29 #if SIMGRID_HAVE_MC
  30 #define UNW_LOCAL_ONLY
  31 #include <libunwind.h>
  32 #endif
  33 /* end of "useless" inclusions */
  34
  35 extern char **environ;          /* the environment, as specified by the opengroup */
  36
  37 #include <unwind.h>
  38 struct trace_arg {
  39   void** array;
  40   int cnt;
  41   int size;
  42 };
  43
  44 static _Unwind_Reason_Code backtrace_helper(_Unwind_Context* ctx, void* a)
  45 {
  46   trace_arg* arg = static_cast<trace_arg*>(a);
  47
  48   /* We are first called with address in the __backtrace function.
  49      Skip it.  */
  50   if (arg->cnt != -1)
  51     {
  52       arg->array[arg->cnt] = (void *) _Unwind_GetIP(ctx);
  53
  54       /* Check whether we make any progress.  */
  55       if (arg->cnt > 0 && arg->array[arg->cnt - 1] == arg->array[arg->cnt])
  56         return _URC_END_OF_STACK;
  57     }
  58   if (++arg->cnt == arg->size)
  59     return _URC_END_OF_STACK;
  60   return _URC_NO_REASON;
  61 }
  62
  63 /** @brief reimplementation of glibc backtrace based directly on gcc library, without implicit malloc
  64  *
  65  * See http://people.irisa.fr/Martin.Quinson/blog/2012/0208/system_programming_fun_in_SimGrid/
  66  * for the motivation behind this function
  67  * */
  68
  69 int xbt_backtrace_no_malloc(void **array, int size) {
  70   int i = 0;
  71   for(i=0; i < size; i++)
  72     array[i] = nullptr;
  73
  74   struct trace_arg arg;
  75   arg .array = array;
  76   arg.size = size;
  77   arg.cnt = -1;
  78
  79   if (size >= 1)
  80     _Unwind_Backtrace(backtrace_helper, &arg);
  81
  82   /* _Unwind_Backtrace on IA-64 seems to put nullptr address above
  83      _start.  Fix it up here.  */
  84   if (arg.cnt > 1 && arg.array[arg.cnt - 1] == nullptr)
  85     --arg.cnt;
  86   return arg.cnt != -1 ? arg.cnt : 0;
  87 }
  88
  89 size_t xbt_backtrace_current(xbt_backtrace_location_t* loc, std::size_t count)
  90 {
  91   std::size_t used = backtrace(loc, count);
  92   if (used == 0) {
  93     std::fprintf(stderr, "The backtrace() function failed, which probably means that the memory is exhausted\n.");
  94     std::fprintf(stderr, "Bailing out now since there is nothing I can do without a decent amount of memory\n.");
  95     std::fprintf(stderr, "Please go fix the memleaks\n");
  96     std::exit(1);
  97   }
  98   return used;
  99 }
 100
 101 namespace simgrid {
 102 namespace xbt {
 103
 104 /** Find the path of the binary file from the name found in argv */
 105 static std::string get_binary_path()
 106 {
 107   struct stat stat_buf;
 108
 109   if (xbt_binary_name == nullptr)
 110     return "";
 111
 112   // We found it, we are happy:
 113   if (stat(xbt_binary_name, &stat_buf) == 0)
 114     return xbt_binary_name;
 115
 116   // Not found, look in the PATH:
 117   char* path = getenv("PATH");
 118   if (path == nullptr)
 119     return "";
 120   XBT_DEBUG("Looking in the PATH: %s\n", path);
 121   std::vector<std::string> path_list;
 122   // TODO, on Windows, this is ";"
 123   boost::split(path_list, path, boost::is_any_of(":"));
 124   for (std::string const& path_item : path_list) {
 125     std::string binary_name = simgrid::xbt::string_printf(
 126       "%s/%s", path_item.c_str(), xbt_binary_name);
 127     bool found = (stat(binary_name.c_str(), &stat_buf) == 0);
 128     XBT_DEBUG("Looked in the PATH for the binary. %s %s",
 129       found ? "Found" : "Not found",
 130       binary_name.c_str());
 131     if (found)
 132       return binary_name;
 133   }
 134
 135   // Not found at all:
 136   return "";
 137 }
 138
 139 //FIXME: This code could be greatly improved/simplifyied with
 140 //   http://cairo.sourcearchive.com/documentation/1.9.4/backtrace-symbols_8c-source.html
 141 std::vector<std::string> resolveBacktrace(
 142   xbt_backtrace_location_t const* loc, std::size_t count)
 143 {
 144   std::vector<std::string> result;
 145
 146   if (count == 0)
 147     return result;
 148
 149   if (xbt_binary_name == nullptr)
 150     XBT_WARN("XBT not initialized, the backtrace will not be resolved.");
 151
 152   // Drop the first one:
 153   loc++; count--;
 154
 155   char** backtrace_syms = backtrace_symbols(loc, count);
 156   std::string binary_name = get_binary_path();
 157
 158   if (binary_name.empty()) {
 159     for (std::size_t i = 0; i < count; i++)
 160       result.push_back(simgrid::xbt::string_printf("%p", loc[i]));
 161     return result;
 162   }
 163
 164   // Create the system command for add2line:
 165   std::ostringstream stream;
 166   stream << ADDR2LINE << " -f -e " << binary_name << ' ';
 167   std::vector<std::string> addrs(count);
 168   for (std::size_t i = 0; i < count; i++) {
 169     /* retrieve this address */
 170     XBT_DEBUG("Retrieving address number %zu from '%s'", i, backtrace_syms[i]);
 171     char buff[256];
 172     snprintf(buff, 256, "%s", strchr(backtrace_syms[i], '[') + 1);
 173     char* p = strchr(buff, ']');
 174     *p = '\0';
 175     if (strcmp(buff, "(nil)"))
 176       addrs[i] = buff;
 177     else
 178       addrs[i] = "0x0";
 179     XBT_DEBUG("Set up a new address: %zu, '%s'", i, addrs[i].c_str());
 180     /* Add it to the command line args */
 181     stream << addrs[i] << ' ';
 182   }
 183   std::string cmd = stream.str();
 184
 185   /* size (in char) of pointers on this arch */
 186   int addr_len = addrs[0].size();
 187
 188   XBT_VERB("Fire a first command: '%s'", cmd.c_str());
 189   FILE* pipe = popen(cmd.c_str(), "r");
 190   if (not pipe) {
 191     xbt_die("Cannot fork addr2line to display the backtrace");
 192   }
 193
 194   /* To read the output of addr2line */
 195   char line_func[1024];
 196   char line_pos[1024];
 197   for (std::size_t i = 0; i < count; i++) {
 198     XBT_DEBUG("Looking for symbol %zu, addr = '%s'", i, addrs[i].c_str());
 199     if (fgets(line_func, 1024, pipe)) {
 200       line_func[strlen(line_func) - 1] = '\0';
 201     } else {
 202       XBT_VERB("Cannot run fgets to look for symbol %zu, addr %s", i, addrs[i].c_str());
 203       strncpy(line_func, "???",3);
 204     }
 205     if (fgets(line_pos, 1024, pipe)) {
 206       line_pos[strlen(line_pos) - 1] = '\0';
 207     } else {
 208       XBT_VERB("Cannot run fgets to look for symbol %zu, addr %s", i, addrs[i].c_str());
 209       strncpy(line_pos, backtrace_syms[i],1024);
 210     }
 211
 212     if (strcmp("??", line_func) != 0) {
 213       auto name = simgrid::xbt::demangle(line_func);
 214       XBT_DEBUG("Found static symbol %s at %s", name.get(), line_pos);
 215       result.push_back(simgrid::xbt::string_printf(
 216         "%s at %s, %p", name.get(), line_pos, loc[i]
 217       ));
 218     } else {
 219       /* Damn. The symbol is in a dynamic library. Let's get wild */
 220
 221       unsigned long int offset = 0;
 222       int found = 0;
 223
 224       /* let's look for the offset of this library in our addressing space */
 225       std::string maps_name = std::string("/proc/") + std::to_string(getpid()) + "/maps";
 226       std::ifstream maps(maps_name);
 227       if (not maps) {
 228         XBT_CRITICAL("open(\"%s\") failed: %s", maps_name.c_str(), strerror(errno));
 229         continue;
 230       }
 231       size_t pos;
 232       unsigned long int addr = std::stoul(addrs[i], &pos, 16);
 233       if (pos != addrs[i].length()) {
 234         XBT_CRITICAL("Cannot parse backtrace address '%s' (addr=%#lx)", addrs[i].c_str(), addr);
 235       }
 236       XBT_DEBUG("addr=%s (as string) =%#lx (as number)", addrs[i].c_str(), addr);
 237
 238       while (not found) {
 239         unsigned long int first;
 240         unsigned long int last;
 241
 242         std::string maps_buff;
 243         if (not std::getline(maps, maps_buff))
 244           break;
 245         if (i == 0) {
 246           XBT_DEBUG("map line: %s", maps_buff.c_str());
 247         }
 248         first = std::stoul(maps_buff, &pos, 16);
 249         maps_buff.erase(0, pos + 1);
 250         last = std::stoul(maps_buff, nullptr, 16);
 251         if (first < addr && addr < last) {
 252           offset = first;
 253           found = 1;
 254         }
 255         if (found) {
 256           XBT_DEBUG("%#lx in [%#lx-%#lx]", addr, first, last);
 257           XBT_DEBUG("Symbol found, map lines not further displayed (even if looking for next ones)");
 258         }
 259       }
 260       maps.close();
 261       addrs[i].clear();
 262
 263       if (not found) {
 264         XBT_VERB("Problem while reading the maps file. Following backtrace will be mangled.");
 265         XBT_DEBUG("No dynamic. Static symbol: %s", backtrace_syms[i]);
 266         result.push_back(simgrid::xbt::string_printf("?? (%s)", backtrace_syms[i]));
 267         continue;
 268       }
 269
 270       /* Ok, Found the offset of the maps line containing the searched symbol.
 271          We now need to substract this from the address we got from backtrace.
 272        */
 273
 274       addrs[i] = simgrid::xbt::string_printf("0x%0*lx", addr_len - 2, addr - offset);
 275       XBT_DEBUG("offset=%#lx new addr=%s", offset, addrs[i].c_str());
 276
 277       /* Got it. We have our new address. Let's get the library path and we are set */
 278       std::string p(backtrace_syms[i]);
 279       if (p[0] == '[') {
 280         /* library path not displayed in the map file either... */
 281         snprintf(line_func, 3, "??");
 282       } else {
 283         size_t p2 = p.find_first_of("( ");
 284         if (p2 != std::string::npos)
 285           p.erase(p2);
 286
 287         /* Here we go, fire an addr2line up */
 288         std::string subcmd = std::string(ADDR2LINE) + " -f -e " + p + " " + addrs[i];
 289         XBT_VERB("Fire a new command: '%s'", subcmd.c_str());
 290         FILE* subpipe = popen(subcmd.c_str(), "r");
 291         if (not subpipe) {
 292           xbt_die("Cannot fork addr2line to display the backtrace");
 293         }
 294         if (fgets(line_func, 1024, subpipe)) {
 295           line_func[strlen(line_func) - 1] = '\0';
 296         } else {
 297           XBT_VERB("Cannot read result of subcommand %s", subcmd.c_str());
 298           strncpy(line_func, "???",3);
 299         }
 300         if (fgets(line_pos, 1024, subpipe)) {
 301           line_pos[strlen(line_pos) - 1] = '\0';
 302         } else {
 303           XBT_VERB("Cannot read result of subcommand %s", subcmd.c_str());
 304           strncpy(line_pos, backtrace_syms[i],1024);
 305         }
 306         pclose(subpipe);
 307       }
 308
 309       /* check whether the trick worked */
 310       if (strcmp("??", line_func)) {
 311         auto name = simgrid::xbt::demangle(line_func);
 312         XBT_DEBUG("Found dynamic symbol %s at %s", name.get(), line_pos);
 313         result.push_back(simgrid::xbt::string_printf(
 314           "%s at %s, %p", name.get(), line_pos, loc[i]));
 315       } else {
 316         /* damn, nothing to do here. Let's print the raw address */
 317         XBT_DEBUG("Dynamic symbol not found. Raw address = %s", backtrace_syms[i]);
 318         result.push_back(simgrid::xbt::string_printf(
 319           "?? at %s", backtrace_syms[i]));
 320       }
 321     }
 322     addrs[i].clear();
 323
 324     /* Mask the bottom of the stack */
 325     const char* const breakers[] = {
 326         "main",
 327         "_ZN7simgrid6kernel7context13ThreadContext7wrapperE", // simgrid::kernel::context::ThreadContext::wrapper
 328         "_ZN7simgrid6kernel7context8UContext7wrapperE"        // simgrid::kernel::context::UContext::wrapper
 329     };
 330     bool do_break = false;
 331     for (const char* b : breakers) {
 332       if (strncmp(b, line_func, strlen(b)) == 0) {
 333         do_break = true;
 334         break;
 335       }
 336     }
 337     if (do_break)
 338       break;
 339   }
 340   pclose(pipe);
 341   free(backtrace_syms);
 342   return result;
 343 }
 344
 345 }
 346 }
 347
 348 #if SIMGRID_HAVE_MC
 349 int xbt_libunwind_backtrace(void** bt, int size){
 350   for (int i = 0; i < size; i++)
 351     bt[i] = nullptr;
 352
 353   unw_cursor_t c;
 354   unw_context_t uc;
 355
 356   unw_getcontext (&uc);
 357   unw_init_local (&c, &uc);
 358
 359   unw_step(&c);
 360
 361   int i;
 362   for (i = 0; unw_step(&c) >= 0 && i < size; i++) {
 363     unw_word_t ip;
 364     unw_get_reg(&c, UNW_REG_IP, &ip);
 365     bt[i] = (void*)(long)ip;
 366   }
 367
 368   return i;
 369 }
 370 #endif