[mc] Remote access to process name

[mc] Read host name from remote process

[mc] Cross-process access to smx_process and simcall

Process and host names are not handled yet.

[mc] Use MC_process_is_enabled instead of MC_request_is_enabled

This is consistent with other similar loops.

[mc] Do not use strerror(), not thread-safe

[mc] Remote support for MC_deadlock_check() using MC_MESSAGE_DEADLOCK_CHECK IPC message

Merge master into mc-process

[mc] Make an option for file descriptor snapshot (off by default)

This option is currently not supported in client/server mode.

[mc] Mark some issues as fixed

model-checker : intermediate backtracking enabled if _sg_mc_checkpoint > 0

[mc] Server side symbol evaluation

This is currently only handled for symbols represented as variables
(opposed to symbols represented as callbacks): in order to evaluate
the callback we will have to ask the MCed to evaluate the callback for
us and send us the result back.

model-checker : memory leak

[mc] Register symbols as pointers in the examples

[mc] Extend xbt_propositional_symbols

Add support for:

 * general callbacks with a `void*` argument (the `data` field);

 * as an optimisation, a simple pointer to a variable can be passed in
   the `data` field (this can be used in order to enable the MCer to
   fetch the data directly from the MCed memory without trigerring a
   MCed-side callback);

 * a callback function used to free the `data` field.

[mc] Cleanup heap switching code

model-checker : revalidate tesh

model-checker : cosmetics

model-checker : non-recursive liveness algorithm

model-checker : intermediate backtracking with model-check/checkpoint cfg flag

model-checker : communications determinism with visited state equality reduction

[mc] Add MCer handling for MC_MESSAGE_IGNORE_HEAP and MC_MESSAGE_UNIGNORE_HEAP

(wip) Move the MCed public API in the same file

[mc] New message for stack_area

[mc] Flag global variables in mc_ignore as belonging to the MCer

[mc] Communicate MC_remove_ignore_heap to the remote model-checker

[mc] Do not call malloc_no_memset in mc_snapshot

The main code should not called mmalloc/mmfree/mmrealloc directly
because it will fail in client/server mode: the server does not have
separate heap and will choke on this.

Replace mmalloc_no_memset with malloc_no_memset which does the right
thing:

  * either call mmalloc_no_memset;

  * or call malloc.

[mc] Implement remote support for MC_ignore

[mc] Move mc_model_checker in its own .c file

[mc] Communication of heap_area_to_ignore to the remote MCer

[mc] Define one struct per MC message type

New property: watt_off to denote the disipation when the host is off

[mc] Move MC_init_pid outside of mc_server

[mc] Remove some functions in mc_server

[mc] Basic infrastructure for a real model-checker process

The model checker process communicates with the model-checked
application using socket (and wait). Currently it waits for the MCed
process initialisation and fetch its system state, DWARF information,
etc but does not do anything else.

The previous (standalone) mode is currently used by default. The new
behaviour is triggered with the SIMGRID_MC_MODE=server
environment. The idea is to keep the standalone version at least as
long as the new version is not stable/working.

cosmetics in example and revalidate all energy examples

partially fix the energy public API (massive renames ongoing)

Fix energy plugin wrt idle time

- Count the last idle period when the host is destroyed
- More informative debug messages in the plugin
- More informative messages in the example (to make computations
  manually enforcable)

Enable C++11

[mc] Remove useless code in ~DWARF test

[mc] Remote unwinding support

The contexts are still read directly from the current process memory
however.

fix a test by hardcoding the used machines

I changed the platform recently to test properties with clusters

rename the property used by the energy plugin for clarity

reduce the amount of cruft loaded in the jarfile (don't include doxygen sources)

oops, remove verbose debug output

even more informative error message

more informative (?) error message

test that the hosts get the cluster's properties

properly pass the cluster's properties to the created hosts

more informative error message in some obscure error settings

cosmetics in comments

[mc] Make a copy of the libunwind context when snapshoting the stacks

The libunwind cursors used in `mc_snapshot_stack_t` were referencing
the real/live libunwind contexts: this is wrong because those contexts
change with the simulated application. Instead, we need to take a copy
of the context.

Modified error messages when creating CPUs for more verbosity.

As 0 may be assumed as the default powerPeak value (if no value specified),
the error message should point out that the power attribute may have been
forgotten. This was added in this commit.

more verbose output following a weird crash on my laptop

Updated lua README file to reflect current state of SG

- File small_platform.xml was moved to a different location
- Added full example for execution; without it, it doesn't work.

[mc] Add some comments

[mc] Create a separate simgrid-mc program

We create a separate program for the model-checker. The goal is that
this program will:

  - prepare the environment for the child/main process (environment
    variables, maybe LD_PRELOAD a library, pass file descriptors);

  - hold all the model-checker state;

  - communicate with the child process;

  - handle some part of the snapshoting/restoration logic;

  - handle the state comparison logic.

Currently it only enables the custom heap in the child process.

[mc] Remove remaining bits on hardcoded object list

Merge branch 'master' of scm.gforge.inria.fr:/gitroot/simgrid/simgrid

Fixed cmake/doxygen errors on old systems.

cmake 2.8.7 on Ubuntu 12.04 LTS does not support the
DOXYGEN_VERSION variable, hence documentation can never be
built as this variable is required.

The added code checks whether the DOXYGEN_EXECUTABLE
is set and executes doxygen --version itself; hence
making this variable available.

Tested on Ubuntu 12.04 LTS.

Change order of initialization.
If the cpumodel is constructed before msg init is called, a log message is sent without proper init
This meant undefined behavior, and in one particular case the wrong locale being selected, the message used a comma as a separator instead of a dot.
There was a big hint in the comment just before : "do not do anything before the msg.init call !"

Change include order for smpi tests/examples to avoid conflicts
This include folder is the one where our mpi.h file lives.
This file is provided by various other libraries.
When another simgrid include folder contains another mpi.h file from another library, build is broken
This trouble was seen on a freebsd system with graphviz installed, which added an include path in /usr/local/include, where there was a mpi.h file from mpich
This commit forces the one from smpi to be the first and only mpi.h file examples/tests do use

avoid breaking with recent freebsd that implement this flag (as the comment said)
This should help other bsds as well

kepler->luna

Ensure that MSG_host_self() works from maestro context

[mc] Add some FIXMEs for cross-process support

[mc] Cross-process support for MC_ignore

[mc] Implements privatization support for MC_process_read

This is currently needed for cross-process MC in order to read the
heap state.

[mc] Abstract the process and a snapshot types with a address_space superclass

Add a `address_space`, superclass of `process` and  `snapshot`.

In order to do this, the contract of MC_process_read and
MC_snapshot_read has been uniformized:

  * the order of arguments has been harmonized;

  * a new flag MC_ADDRESS_SPACE_READ_FLAGS_LAZY is used to avoid copy
    when the data is in the current memory;

  * MC_NO_PROCESS_INDEX has been renamed into MC_PROCESS_INDEX_MISSING;

  * MC_ANY_PROCESS_INDEX has been renamed into MC_PROCESS_INDEX_ANY;

  * MC_PROCESS_INDEX_DISABLED is used to access the raw address space
    (without privatisation support);

  * `const void*` is used instead of `void*` when it possible.

Soem cleanup things are still to be done:

 * remove special NULL handling;

 * add support for SMPI privatization in the process object.

[mc] More comments for mc_dwarf_execute_expression()

Give some basic explanation about the DWARF operations.

[mc] Add more information about mc_dwarf_register_to_libunwind()

avoid word being recognized as special by doxygen

typos

update doc about privatization .. \nThis was not updated yet. The option was documented in options.doc, so this my be a duplication of information

fix tesh

requalify teshes for vm migration

update changelog

doc update for new appenders

Patch by F.Chaix : add two "new" log appender methods : split and roll
split will create new files when a specified size is reached
roll will overwrite the file when this size is reached
example syntax is : --log=root.appender:splitfile:10000:myfilename_%.txt

The % is a wildcard that will be replaced by the number of the file. If no % is present, it will be at the end

[mc] Support for reading heap state from another process

more documentation about the simcall mechanism

[mc] Fix error handling in MC_process{read,write}

[mc] Access memory from another process

The goal is to be able to move MC in a separate process which should
be more robust and easier to develop:

 * avoid using two heaps (which is combersome);

 * avoid weird interactions bewteen the MC and the application;

 * use optimisation for the whole MC process;

 * avoid the stack-cleaner for the whole MC process.

The functions MC_process_read and MC_process_write are defined to
abstract memory access:

 * when the target process is the current processs, they call
   `memcpy`;

 * otherwise they call `read` or `write` on `/proc/$pid/mem` (on newer
   kernels, `process_vm_readv` and `process_vm_writev`) could be used.

A lot of bits are missing such as:

 * access to `std_heap` is currently not process-aware (the current
   process is used);

 * access to SIMIX layer from MC;

 * communcation/synchronisation between the processes;

 * …

Limitations:

 * for the per-page/chunked snapshot the current implementation uses
   an extra copy (and one syscall per page), we can do better than
   this.

(try to) avoid looping forever, temporarily.

This value was 10 before, and was set to 3 recently, but weirdly this caused vm migration simulations to loop forever.
It works with an infinite timeout, but the message is lost with a few values (1,2 ,3, 6, 9 were tested and failed, other ones up to 13 at least do succeed), while succeeding with other ones (after a few hundred timeouts, so this seems to be working)
So if an MSG expert sees this and can find the problem here ..

Test should still fail with this patch, but just because teshes were not requalified yet

Fix windows build (this is now used from the java library)

fix dot output with file descriptor checkpoint/restore

Put a 300 seconds timeout on each test with ctest
This should really be enough (the default was 1500...)

Fix build
Some vm tests are still broken and some are looping, they need to be fixed

[mc] Enable the custom mm malloc only in MC

We can do better in the future: we can avoid using the main mm malloc
in many cases even for MC.

[mm] Allow to disable the mm based `malloc` at runtime

The goal is to enable the mm based `malloc` only when needed and fall
back to the (more efficient) builtin/next implementation when it is
not needed:

  * run instrospection-less jobs without it;

  * whene the MC and the application are in different processes, the
    MC will be able to run with the standard `malloc` and the
    application will use mm.

As malloc is needed very early in the application initialisation, an
environment variable is used to change the behaviour.

[mc] Remove redundant typedefs

Clang complains about typedef redefinitions in pre-C11 mode.

[mc] Optimise most of XBT

bashism -- (fix https://bugs.debian.org/cgi-bin/bugreport.cgi?bug=772329 )

Merge branch 'master' of git+ssh://scm.gforge.inria.fr//gitroot/simgrid/simgrid

[mc] Optimise all the MC compilation units

[mc] Multiple .so support for region snapshots

The region snapshoting logic can handle a variable number of .so
files:

 * add more informations to the snapshot regions,

    * the type (heap, library/executable);

    * the correspoding library/executable;

    * the type of storage (dense/flat, chunked/sparse or privatised)
      and the type-specific variables are defined in an enum
      (variant/tagged enum).

 * SMPI privatisation snapshot regions are stored as children of a
   parent snapshot region

Limitation:

 * we might want to use a more modular/extensible approach OO for the
   snapshot region storage type instead of variant-based approach;

 * SMPI can currently only handle privatisation for the local
   variables of the executable so this is only supported in the MC as
   well for this reason but otherwise the MC is ready to support the
   SMPI privatisation of libraries.

Fixed return values for several MPI_WIN functions

(statements had to be wrapped in else-clauses)

Merge branch 'master' of git+ssh://scm.gforge.inria.fr//gitroot/simgrid/simgrid

Few temporary debug messages - adrien

Add a mutex to lock access to the SMPI mailboxes when a message is posted
Should avoid race condition, while keeping isolation from SIMIX

Revert "Avoid using simcalls here, as by descheduling the process, we could misplace some messages in mailboxes, and end up deadlocking."

This reverts commit 63ba498484d4fcfc706be1e514d7fedbc6c9f4be.