docs/source/app_msg.rst

   1 .. _MSG_doc:
   2
   3 The MSG Interface (legacy interface)
   4 ####################################
   5
   6 .. warning::
   7
   8    MSG used to be the main API of SimGrid 3, but we are currently in
   9    the process of releasing SimGrid 4. So MSG is frozen and will
  10    probably never evolve. If you are starting a new project, you
  11    should consider S4U instead. Note that the support for MSG will not
  12    be removed from SimGrid before 2020 at least.
  13
  14 MSG is a simple API to write algorithms organized with Concurrent
  15 Sequential Processes (CSP) that interact by exchanging messages. It
  16 constitutes a convenient simplification of the reality of distributed
  17 systems. It can be used to build rather realistic simulations, but
  18 remains simple to use: most unpleasant technical elements can be
  19 abstracted away rather easily.
  20
  21 C API reference
  22 ***************
  23
  24 Main MSG Functions
  25 ==================
  26
  27 The basic workflow is the following:
  28
  29  - Initialize the library with :c:macro:`MSG_init`
  30  - Create a platform (usually by parsing a file with :cpp:func:`MSG_create_environment`)
  31  - Register the functions that your processes are supposed to run with
  32    :cpp:func:`MSG_function_register` (and maybe :cpp:func:`MSG_function_register_default`)
  33  - Launch your processes from a deployment file with :cpp:func:`MSG_launch_application`
  34  - Run the simulation with :cpp:func:`MSG_main`
  35
  36 .. doxygenenum:: msg_error_t
  37
  38 .. doxygenfunction:: MSG_config
  39 .. doxygenfunction:: MSG_create_environment
  40 .. doxygenfunction:: MSG_function_register
  41 .. doxygenfunction:: MSG_function_register_default
  42 .. doxygenfunction:: MSG_get_clock
  43 .. doxygenfunction:: MSG_get_sent_msg
  44 .. doxygendefine:: MSG_init
  45 .. doxygenfunction:: MSG_launch_application
  46 .. doxygenfunction:: MSG_main
  47 .. doxygenfunction:: MSG_set_function
  48
  49 Process Management
  50 ==================
  51
  52 This describes the process structure :cpp:type:`msg_process_t` and the functions for managing it.
  53
  54 .. doxygentypedef:: msg_process_t
  55 .. doxygenfunction:: MSG_process_attach
  56 .. doxygenfunction:: MSG_process_auto_restart_set
  57 .. doxygenfunction:: MSG_process_create
  58 .. doxygenfunction:: MSG_process_create_with_arguments
  59 .. doxygenfunction:: MSG_process_create_with_environment
  60 .. doxygenfunction:: MSG_process_daemonize
  61 .. doxygenfunction:: MSG_process_detach
  62 .. doxygenfunction:: MSG_processes_as_dynar
  63 .. doxygenfunction:: MSG_process_from_PID
  64 .. doxygenfunction:: MSG_process_get_data
  65 .. doxygenfunction:: MSG_process_get_host
  66 .. doxygenfunction:: MSG_process_get_name
  67 .. doxygenfunction:: MSG_process_get_number
  68 .. doxygenfunction:: MSG_process_get_PID
  69 .. doxygenfunction:: MSG_process_get_PPID
  70 .. doxygenfunction:: MSG_process_get_properties
  71 .. doxygenfunction:: MSG_process_get_property_value
  72 .. doxygenfunction:: MSG_process_is_suspended
  73 .. doxygenfunction:: MSG_process_join
  74 .. doxygenfunction:: MSG_process_kill
  75 .. doxygenfunction:: MSG_process_killall
  76 .. doxygenfunction:: MSG_process_migrate
  77 .. doxygenfunction:: MSG_process_on_exit
  78 .. doxygenfunction:: MSG_process_ref
  79 .. doxygenfunction:: MSG_process_restart
  80 .. doxygenfunction:: MSG_process_resume
  81 .. doxygenfunction:: MSG_process_self
  82 .. doxygenfunction:: MSG_process_self_name
  83 .. doxygenfunction:: MSG_process_self_PID
  84 .. doxygenfunction:: MSG_process_self_PPID
  85 .. doxygenfunction:: MSG_process_set_data
  86 .. doxygenfunction:: MSG_process_set_data_cleanup
  87 .. doxygenfunction:: MSG_process_set_kill_time
  88 .. doxygenfunction:: MSG_process_sleep
  89 .. doxygenfunction:: MSG_process_suspend
  90 .. doxygenfunction:: MSG_process_unref
  91 .. doxygenfunction:: MSG_process_yield
  92
  93 Host Management
  94 ===============
  95
  96 .. doxygentypedef:: msg_host_t
  97 .. doxygenfunction:: MSG_host_by_name
  98 .. doxygenfunction:: MSG_get_host_by_name
  99 .. doxygenfunction:: MSG_get_host_number
 100 .. doxygenfunction:: MSG_host_get_attached_storage_lists
 101 .. doxygenfunction:: MSG_host_get_core_number
 102 .. doxygenfunction:: MSG_host_get_data
 103 .. doxygenfunction:: MSG_host_get_mounted_storage_list
 104 .. doxygenfunction:: MSG_host_get_name
 105 .. doxygenfunction:: MSG_host_get_nb_pstates
 106 .. doxygenfunction:: MSG_host_get_load
 107 .. doxygenfunction:: MSG_host_get_power_peak_at
 108 .. doxygenfunction:: MSG_host_get_process_list
 109 .. doxygenfunction:: MSG_host_get_properties
 110 .. doxygenfunction:: MSG_host_get_property_value
 111 .. doxygenfunction:: MSG_host_get_pstate
 112 .. doxygenfunction:: MSG_host_get_speed
 113 .. doxygenfunction:: MSG_host_is_on
 114 .. doxygenfunction:: MSG_host_off
 115 .. doxygenfunction:: MSG_host_on
 116 .. doxygenfunction:: MSG_hosts_as_dynar
 117 .. doxygenfunction:: MSG_host_self
 118 .. doxygenfunction:: MSG_host_set_data
 119 .. doxygenfunction:: MSG_host_set_property_value
 120 .. doxygenfunction:: MSG_host_set_pstate
 121
 122 Task Management
 123 ===============
 124
 125 Task structure of MSG :cpp:type:`msg_task_t` and associated functions.
 126
 127 .. doxygentypedef:: msg_task_t
 128 .. doxygendefine:: MSG_TASK_UNINITIALIZED
 129
 130 .. doxygenfunction:: MSG_parallel_task_create
 131 .. doxygenfunction:: MSG_parallel_task_execute
 132 .. doxygenfunction:: MSG_parallel_task_execute_with_timeout
 133 .. doxygenfunction:: MSG_task_cancel
 134 .. doxygenfunction:: MSG_task_create
 135 .. doxygenfunction:: MSG_task_destroy
 136 .. doxygenfunction:: MSG_task_dsend
 137 .. doxygenfunction:: MSG_task_dsend_bounded
 138 .. doxygenfunction:: MSG_task_execute
 139 .. doxygenfunction:: MSG_task_get_bytes_amount
 140 .. doxygenfunction:: MSG_task_get_category
 141 .. doxygenfunction:: MSG_task_get_data
 142 .. doxygenfunction:: MSG_task_get_flops_amount
 143 .. doxygenfunction:: MSG_task_get_name
 144 .. doxygenfunction:: MSG_task_get_remaining_communication
 145 .. doxygenfunction:: MSG_task_get_remaining_work_ratio
 146 .. doxygenfunction:: MSG_task_get_sender
 147 .. doxygenfunction:: MSG_task_get_source
 148 .. doxygenfunction:: MSG_task_irecv
 149 .. doxygenfunction:: MSG_task_irecv_bounded
 150 .. doxygenfunction:: MSG_task_isend
 151 .. doxygenfunction:: MSG_task_isend_bounded
 152 .. doxygenfunction:: MSG_task_listen
 153 .. doxygenfunction:: MSG_task_listen_from
 154 .. doxygenfunction:: MSG_task_receive
 155 .. doxygenfunction:: MSG_task_receive_bounded
 156 .. doxygenfunction:: MSG_task_receive_with_timeout
 157 .. doxygenfunction:: MSG_task_receive_with_timeout_bounded
 158 .. doxygendefine:: MSG_task_recv
 159 .. doxygendefine:: MSG_task_recv_bounded
 160 .. doxygenfunction:: MSG_task_send
 161 .. doxygenfunction:: MSG_task_send_bounded
 162 .. doxygenfunction:: MSG_task_send_with_timeout
 163 .. doxygenfunction:: MSG_task_send_with_timeout_bounded
 164 .. doxygenfunction:: MSG_task_set_bound
 165 .. doxygenfunction:: MSG_task_set_bytes_amount
 166 .. doxygenfunction:: MSG_task_set_category
 167 .. doxygenfunction:: MSG_task_set_data
 168 .. doxygenfunction:: MSG_task_set_flops_amount
 169 .. doxygenfunction:: MSG_task_set_name
 170 .. doxygenfunction:: MSG_task_set_priority
 171
 172
 173 Mailbox Management
 174 ==================
 175
 176 .. doxygenfunction:: MSG_mailbox_set_async
 177
 178 Communications
 179 ==============
 180
 181 .. doxygentypedef:: msg_comm_t
 182
 183 .. doxygenfunction:: MSG_comm_destroy
 184 .. doxygenfunction:: MSG_comm_get_status
 185 .. doxygenfunction:: MSG_comm_get_task
 186 .. doxygenfunction:: MSG_comm_test
 187 .. doxygenfunction:: MSG_comm_testany
 188 .. doxygenfunction:: MSG_comm_wait
 189 .. doxygenfunction:: MSG_comm_waitall
 190 .. doxygenfunction:: MSG_comm_waitany
 191
 192 Explicit Synchronization
 193 ========================
 194
 195 Explicit synchronization mechanisms: semaphores (:cpp:type:`msg_sem_t`) and friends.
 196
 197 In some situations, these things are very helpful to synchronize processes without message exchanges.
 198
 199 Barriers
 200 --------
 201
 202 .. doxygentypedef:: msg_bar_t
 203 .. doxygenfunction:: MSG_barrier_destroy
 204 .. doxygenfunction:: MSG_barrier_init
 205 .. doxygenfunction:: MSG_barrier_wait
 206
 207 Semaphores
 208 ----------
 209
 210 .. doxygentypedef:: msg_sem_t
 211 .. doxygenfunction:: MSG_sem_acquire
 212 .. doxygenfunction:: MSG_sem_acquire_timeout
 213 .. doxygenfunction:: MSG_sem_destroy
 214 .. doxygenfunction:: MSG_sem_get_capacity
 215 .. doxygenfunction:: MSG_sem_init
 216 .. doxygenfunction:: MSG_sem_release
 217 .. doxygenfunction:: MSG_sem_would_block
 218
 219 Virtual Machines
 220 ================
 221
 222 This interface mimics IaaS clouds.
 223 With it, you can create virtual machines to put your processes
 224 into, and interact directly with the VMs to manage groups of
 225 processes.
 226
 227 .. doxygentypedef:: msg_vm_t
 228 .. doxygenfunction:: MSG_vm_create_core
 229 .. doxygenfunction:: MSG_vm_create_multicore
 230 .. doxygenfunction:: MSG_vm_destroy
 231 .. doxygenfunction:: MSG_vm_get_name
 232 .. doxygenfunction:: MSG_vm_get_pm
 233 .. doxygenfunction:: MSG_vm_get_ramsize
 234 .. doxygenfunction:: MSG_vm_is_created
 235 .. doxygenfunction:: MSG_vm_is_running
 236 .. doxygenfunction:: MSG_vm_is_suspended
 237 .. doxygenfunction:: MSG_vm_resume
 238 .. doxygenfunction:: MSG_vm_set_bound
 239 .. doxygenfunction:: MSG_vm_set_ramsize
 240 .. doxygenfunction:: MSG_vm_shutdown
 241 .. doxygenfunction:: MSG_vm_start
 242 .. doxygenfunction:: MSG_vm_suspend
 243
 244 Storage Management
 245 ==================
 246 Storage structure of MSG (:cpp:type:`msg_storage_t`) and associated functions, inspired from POSIX.
 247
 248 .. doxygentypedef:: msg_storage_t
 249 .. doxygenfunction:: MSG_storage_get_by_name
 250 .. doxygenfunction:: MSG_storage_get_data
 251 .. doxygenfunction:: MSG_storage_get_host
 252 .. doxygenfunction:: MSG_storage_get_name
 253 .. doxygenfunction:: MSG_storage_get_properties
 254 .. doxygenfunction:: MSG_storage_get_property_value
 255 .. doxygenfunction:: MSG_storage_read
 256 .. doxygenfunction:: MSG_storages_as_dynar
 257 .. doxygenfunction:: MSG_storage_set_data
 258 .. doxygenfunction:: MSG_storage_set_property_value
 259 .. doxygenfunction:: MSG_storage_write
 260
 261 NetZone Management
 262 ==================
 263 Network Zone (:cpp:class:`msg_file_t`) and associated functions.
 264
 265 .. doxygentypedef:: msg_netzone_t
 266 .. doxygenfunction:: MSG_zone_get_by_name
 267 .. doxygenfunction:: MSG_zone_get_hosts
 268 .. doxygenfunction:: MSG_zone_get_name
 269 .. doxygenfunction:: MSG_zone_get_property_value
 270 .. doxygenfunction:: MSG_zone_get_root
 271 .. doxygenfunction:: MSG_zone_get_sons
 272 .. doxygenfunction:: MSG_zone_set_property_value
 273
 274 Java bindings
 275 *************
 276
 277 This section describes jMSG, the Java API to Simgrid. This API mimicks
 278 :ref:`MSG <MSG_doc>`, which is a simple yet somehow realistic interface.
 279 The full reference documentation is provided at the end of this page.
 280
 281 Most of the documentation of the :ref:`MSG API <MSG_doc>` in C applies
 282 directly to the Java bindings (any divergence is seen as a bug that we
 283 should fix). MSG structures are mapped to Java objects as expected,
 284 and the MSG functions are methods in these objects.
 285
 286 Installing the Java bindings
 287 ============================
 288
 289 The easiest is to use a :ref:`precompiled jarfile <install_java_precompiled>`,
 290 but some people may prefer to :ref:`compile it from the sources <install_src>`.
 291
 292
 293 Using the Java bindings
 294 =======================
 295
 296 In most cases, you can use the SimGrid bindings as if it was a Java
 297 library:
 298
 299 .. code-block:: shell
 300
 301    $ javac -classpath .:path/to/simgrid.jar your/java/Code.java
 302    $ java -classpath .:path/to/simgrid.jar your.java.Code the/parameter/to/your/code
 303
 304 For example:
 305
 306 .. code-block:: shell
 307
 308    $ cd examples/deprecated/java
 309    $ java -classpath ../../simgrid.jar:. .:../../simgrid.jar app.pingpong.Main ../platforms/platform.xml
 310
 311 Any SimGrid simulation (java or not) is usually constituted of several
 312 kind of actors or processes (classes extending @c Msg.Process) that
 313 are deployed over the hosts of the virtual platform. So, your code
 314 should declare these actors, plus a Main class in charge of deploying
 315 your actors on the platform. Please refer to the examples for details.
 316
 317 Troubleshooting
 318 ===============
 319
 320 Actually, these bindings are not only implemented in Java. They do use
 321 the C implementation of SimGrid. This should be transparent as this
 322 library is directly included in the ``simgrid.jar`` file but things can
 323 still go wrong is several ways.
 324
 325 Error: library simgrid not found
 326 --------------------------------
 327
 328 This means that the JVM fails to load the native library. If you use a
 329 precompiled jarfile, please report this bug.
 330
 331 If you built it yourself, you can try to use an installed version of
 332 the library instead of the one included in the jar. For that, add the
 333 path to the native library into the ``LD_LIBRARY_PATH`` variable (or in
 334 the ``DYLD_LIBRARY_PATH`` on macOS).
 335
 336 pthread_create failed
 337 ---------------------
 338
 339 You reached the amount of threads that can be run on your system. Try
 340 increasing the thread limits of your operating system.
 341
 342 Other errors
 343 ------------
 344
 345 When using jMSG, your program can crash for 3 main reasons:
 346
 347 - Your Java part is not good: you'll have a good old java exception thrown,
 348   and hence you should be able to correct it by yourself.
 349 - Our java part is not good: you'll also have a java exception thrown, but
 350   we have real doubts this can happen, since the java part is only a JNI
 351   binding. The other option is that it crashed because you used incorrectly
 352   the MSG API, so this means also you should have an MSGException. It means
 353   you should read carefully MSG samples and/or documentation.
 354 - Something has crashed in the C part. Okay, here comes the tricky
 355   thing. It happens mainly for 2 reasons:
 356
 357   - When something goes wrong in your simulation, sometimes the C part stops
 358     because you used SimGrid incorrectly, and JNI bindings are not fond of that.
 359     It means that you'll have something that looks ugly, but you should be able
 360     to identify what's going wrong in your code by carefully reading the whole
 361     error message
 362   - It may happen that the problem comes directly from SimGrid: in this case,
 363     the error should be uglier. In that case, you may submit a bug directly to
 364     SimGrid.
 365
 366 API Reference
 367 =============
 368
 369 Package org.simgrid.msg
 370 -----------------------
 371
 372 .. java:package:: org.simgrid.msg
 373
 374 .. toctree::
 375    :maxdepth: 1
 376
 377    Class org.simgrid.msg.As <java/org/simgrid/msg/As>
 378    Class org.simgrid.msg.Comm <java/org/simgrid/msg/Comm>
 379    Class org.simgrid.msg.File <java/org/simgrid/msg/File>
 380    Class org.simgrid.msg.Host <java/org/simgrid/msg/Host>
 381    Class org.simgrid.msg.HostFailureException <java/org/simgrid/msg/HostFailureException>
 382    Class org.simgrid.msg.HostNotFoundException <java/org/simgrid/msg/HostNotFoundException>
 383    Class org.simgrid.msg.JniException <java/org/simgrid/msg/JniException>
 384    Class org.simgrid.msg.Msg <java/org/simgrid/msg/Msg>
 385    Class org.simgrid.msg.MsgException <java/org/simgrid/msg/MsgException>
 386    Class org.simgrid.msg.Mutex <java/org/simgrid/msg/Mutex>
 387    Class org.simgrid.msg.Process <java/org/simgrid/msg/Process>
 388    Class org.simgrid.msg.ProcessKilledError <java/org/simgrid/msg/ProcessKilledError>
 389    Class org.simgrid.msg.ProcessNotFoundException <java/org/simgrid/msg/ProcessNotFoundException>
 390    Class org.simgrid.msg.Semaphore <java/org/simgrid/msg/Semaphore>
 391    Class org.simgrid.msg.Storage <java/org/simgrid/msg/Storage>
 392    Class org.simgrid.msg.StorageNotFoundException <java/org/simgrid/msg/StorageNotFoundException>
 393    Class org.simgrid.msg.Task <java/org/simgrid/msg/Task>
 394    Class org.simgrid.msg.TaskCancelledException <java/org/simgrid/msg/TaskCancelledException>
 395    Class org.simgrid.msg.TimeoutException <java/org/simgrid/msg/TimeoutException>
 396    Class org.simgrid.msg.TransferFailureException <java/org/simgrid/msg/TransferFailureException>
 397    Class org.simgrid.msg.VM <java/org/simgrid/msg/VM>