Logo AND Algorithmique Numérique Distribuée

Public GIT Repository
Make JniException a runtime exception, nobody wants to survive this
[simgrid.git] / ChangeLog
1 SimGrid (3.3.5-svn) unstable; urgency=low
2
3  SimDag:
4   * Kill the useless "rate" argument of SD_task_get_execution_time()
5     Everyone used to provide -1 as a value, it was not used, and the
6     semantic of a possible use wasn't even clear.
7  Java Bindings: Various Cleanups
8   * Remove put/get: no need to export deprecated interface in Java
9     Use send/receive instead.
10   * Cleanup the examples and add a README per directory
11   * Remove example autoDestination (that's the only way to go now)
12   * Remove example explicitDestination (was a plain copy of basic)  
13   * Make JniException a runtime exception, so that there is no need to
14     declare the fact that you may encounter such a beast. I guess that
15     nobody will ever want to survive such error.
16
17  -- Da SimGrid team <simgrid-devel@lists.gforge.inria.fr>
18
19
20 SimGrid (3.3.4) stable; urgency=low
21
22  The "Desktop Grid needs love too" release (also called Xmas release).
23
24  Models improvements:
25  * Major speedup in the maxmin system solving by using lazy evaluation
26    Instead of solving completely the maxmin system at each iteration, 
27      only invalidate (and recompute) the modified parts. 
28    This new feature is enabled in default models but you can try to
29      turn it on with "--cfg:maxmin-selective-update=1" for other models.
30  * Cas01 IMproved as default CPU model
31    This CPU model is the same Cas01 model, but it uses the
32      maxmin-selective-update flag and a heap structure to manage
33      actions on SURF kernel. 
34    It reduces the complexity to find the next action to finish and,
35      consequently, it's faster than the old Cas01.
36    This is the new default CPU model (Cas01).   
37  * Rename the old Cas01 model to Cas01_fullupdate
38    Keep the old cpu model Cas01 with the new name of Cas01_fullupdate.
39    Use "--cfg=cpu_model:Cas01_fullupdate" to use the old default CPU model.
40  * CpuTI (CPU Trace Integration)
41    A new CPU model whose objective is simulate faster when using
42      availability trace files. 
43    Instead of using a full featured, over engineered maxmin system for
44      CPU modeling, this model does the pre-integration of traces files
45      to calculate the amount of CPU power available, and so, executes
46      faster than the old CPU models. 
47    Use "--cfg=cpu_model:CpuTI" to change to this CPU model.
48  * Use LV08 as default network model since it gives better accuracy
49     for small messages and shouldn't change things for big ones.
50    Use --cfg=network_model:CM02 to get the previous behavior.
51    
52    
53          ******************************************
54          *DO NOT MIX 3.3.4 RESULTS WITH OLDER ONES* 
55          ******************************************
56    * The new CPU model may changes simulations!
57      The point is that events occurring at the exact same timestamp
58         are not scheduled in the same order with the old and new 
59         version. This may be enough to completely change the execution
60         of simulations in some cases. 
61    * The new network model will change simulations!
62      This new model is more realistic than the previous one, so you
63        should consider redoing your old experiments with this model.
64      Sorry for the inconvenience.
65      
66  Build System:
67  * Introduce the supernovae compilation mode
68    When compiled that way, the whole SimGrid (or almost) is put in a
69      single compilation unit and compiled in one shoot. 
70   This is to help gcc which has difficulties to inline stuff from one
71      file into another.
72   The speedup seem to be above 15%, althrough more tests are needed on
73      amd64 to confirm that gain.
74
75  MSG:
76  * Port of MSG's mailbox on top of SIMIX network
77    The put/get mechanism was greatly simplified on the way.
78
79  SIMIX:
80  * New SIMIX network module. Provides:
81    - Mailbox: rendez-vous mecanism to find with who you want to speak
82    - Synchronous send/recv: easier and hopefully faster since the
83      logic is handled in the maestro process directly now
84    - Asynchronous send/recv: you dreamt of it? It's here now
85      Too bad that nobody cared enough to propagate the change to MSG.
86  * Add semaphores as SIMIX synchronization mechanism.
87    
88  SimDag:
89  * new function SD_daxload(char*) to load a DAX file 
90    (see http://vtcpc.isi.edu/pegasus/index.php/WorkflowGenerator)
91  * Introduce typed tasks. Specify its kind and cost at creation. 
92    At scheduling, just give where it should be placed, and the cost
93    for each involved resource is automatically computed.
94    Existing constructors so far (more to come of course):
95     - SD_task_create_comm_e2e() for end-to-end communication
96     - SD_task_create_comp_seq() for sequential computation
97    Use SD_task_schedulev() / SD_task_schedulel() to schedule them.
98  * new function SD_task_dump() for debuging display
99  * new function SD_task_dotty(task,FILE*) writing to file the info
100    about the task in dotty format
101  * SD_task_dependency_exists() can now cope with having one of its
102    arguments NULL. If so, it tests whether the other argument has any 
103    dependency.
104  * Add getters on list of preceding/following tasks:
105     SD_task_get_parents(task) and SD_task_get_children(task)
106  * Add getters on amount of workstations and list:
107     SD_task_get_workstation_count(t) and SD_task_get_workstation_list(t)
108  * Add getter on task kind: SD_task_get_kind(task)
109  * Update the start_time and finish_time of tasks on completion/failure
110  * Bugfix: Remove task from state swags when destroyed
111  
112  GRAS:
113  * New function: void gras_cpu_burn(double flops) -- a simple CPU burner
114
115  XBT:
116  * New function: xbt_dynar_dopar(dynar,fun) to map a function over the
117    dynar with one separate thread per value of the dynar.
118  * Change the prototype of xbt_thread_create(), sorry. 
119    Added a boolean parameter indicating whether we want to join this
120    thread (used in SG only for now)
121  * Implement xbt_thread_join and xbt_thread_yield in SG also.
122    
123  Bug fixes:
124  * GTNetS wrappers should now be usable again (and betterly tested too)
125  * Fix a major regression from 3.2 where the timeout provided to
126    MSG_task_put_with_timeout() was used as absolute time before which
127    the comm should be done.
128  * Start to fix the <cluster> tag. 
129    - Internal links should be good now (beside of the loopback, which
130      use the private link instead)
131    - paths to the external world is still rather broken
132    - the <route:multi> tag is just broken. Actually that's brain-dead.
133      We need sth like <route:multi src="myCluster" dst="$*-${myCluster}">
134      to make it less stupid
135    ** Check your platform with teshsuite/simdag/platforms/flatifier **
136  * Fix a source-level compatibility glitch from 3.2: after defining
137    MSG_USE_DEPRECATED, you can use the old name
138    MSG_task_put_with_time_out() for MSG_task_put_with_timeout()
139  * Allow to compile from the SVN with automake 1.11
140  * Fix some problems when using the "start_time" tag in deployment XMLs.
141  * Fix #8569: XBT/synchro.h has redundant declarations
142  * Fix #8563: MSG return values and exceptions
143    Introduce a MSG_TIMEOUT_FAILURE return code and use it consistently.
144  * Integrate patch #8636: Obey DESTDIR when installing documentation.
145    Thanks to Robson Peixoto.
146  * Fix a vicious bug in dictionaries inducing that some elements were
147    not freed on xbt_dict_free()
148
149  Portability report of this version:
150   * Main portability targets:
151     - linux (ubuntu (804/810/910) /debian (4/5/testing) /fedora (core11)) 
152       on (amd64/i386/ia64)
153     - mac leopard on i386
154     Known problems: http://cdash.inria.fr/CDash/index.php?project=Simgrid
155      but nothing critical.
156   * Other platforms: windows, AIX and others were not tested for this release
157   
158  Timing report of this version:
159   * Lazy evaluation brings arbitrary speedup (ie, speedup depending on
160     scenario parameters). From 8h to a few seconds in desktop grid settings.
161   * Supernovae brings about 25% speedup on i386.
162
163  -- Da SimGrid team <simgrid-devel@lists.gforge.inria.fr> Thu, 24 Dec 2009 19:07:39 +0100
164
165 SimGrid (3.3.3) stable; urgency=low
166
167  The "Need for Speed" release.
168  
169  The timings done to validate the 3.3.2 were faulty. 
170  Instead of being 5% faster, it was 15% slower (compared to 3.3.1).
171    
172  The problem was a conversion from a manually handled vector to
173    xbt_dynar_t on the critical path. 
174  xbt_dynar_foreach calls functions, inducing stack management crap.
175
176  We inlined these functions and xbt_dynar_foreach is now breath taking.
177  We also inlined xbt_swag_belong on the way.
178
179  Here are some approximate speedup measurements (on master/slaves
180   simulations lasting between 10s and 20s each):
181    3.3.1                   -> 3.3.2: about same performance
182    3.3.2                   -> 3.3.3: 40% speedup
183    3.3.1                   -> 3.3.3: 40% speedup
184    3.3.1 with inline patch -> 3.3.3: 30% speedup
185    
186  Our reading is that the refactoring which occurred in 3.3.2 made us
187   suffer much more from the xbt_dynar_foreach low performance, but
188   once we solved this, this refactoring proved to be very performance
189   effective. From the 40% speedup, somehow, 10% are due to the
190   inlining and 30% to the refactoring.
191
192  That's a pitty that gcc cannot inline functions placed in other files
193   alone. We have to choose between:
194   - break the encapsulation (by putting private data structures and
195     accessors in headers files to help gcc)
196   - live with low performance 
197   - switch to a decent compiler such as icc (not quite possible).
198
199  -- Da SimGrid team <simgrid-devel@lists.gforge.inria.fr> Thu, 20 Aug 2009 21:21:33 +0200
200
201 SimGrid (3.3.2) stable; urgency=low
202
203  The "Simplicity does not preceed complexity, but follows it" release.
204
205  The main contributors of this release were (lexical order):
206    Silas De Munck, Stéphane Genaud, Martin Quinson, Cristian Rosa.
207        
208  SURF: 
209   * Extract the routing logic into its own object.
210     (was dupplicated in network.c and workstation_LV07.c;
211      Allows to implement other ways of storing that info)
212     => kill now useless network_card concept
213     - Use dynar to represent routes (instead of void** + int*)
214     - kill link_set (use surf_network_model->resource_set instead)
215     - Add a command-line option to choose the routing schema to use
216     - Add three new models: 
217       * Floyd (shortest path computed at initialization)
218       * Dijikstra (shortest path recomputed all the time)
219       * Cached Dijikstra (shortest path computed on need)
220       All these models where contributed by Silas De Munck, and are
221       described in his ICCS09 paper.
222
223   * Simplify model declaration
224     (less redirections, less function to write when defining a model)
225     - Factorize stuff between models:
226       - model_init/exit
227       - Set of resources:
228         surf_model_resource_set(model)
229         surf_model_resource_by_name(model, name)
230     - Unify the types of models in s_surf_model_t (using an union)
231     - Embeed fields of common_public directly into s_surf_model_t
232     - Rename model methods:
233       action_free ~> action_unref
234       action_change_state ~> action_state_set
235       action_get_state    ~> action_state_get
236     - Change model methods into functions :
237       (model)->common_public->action_use  ~> surf_action_ref
238       
239   * Implement a generic resource; use it as ancestor to specific ones
240     (allows to kill duplicated code in models)
241     Drawback: timer command don't need no name nor properties;
242               workstation_CLM03 don't need no properties
243     (but I guess we can live with those few bytes wasted)
244     
245   * Improve the action object model
246     - implement a constructor avoiding dupplicated code about field
247       initialization in generic_action part.
248       
249   * Kill the SDP model: it has an external dependency, is deprecated
250     in flavor of modern lmm models, and didn't compile since a while
251  
252  SIMIX:
253   * Relocation of the context module from XBT to SIMIX.
254     (the context were decoupled from the simix processes, duplicating a lot of code)
255     => a lot of code was factorized
256     - less overhead is introduced during scheduling
257     - simpler API for the context factory
258     - the logic for process creation,destruction and manipulation was simplified
259   * Simplification of the s_smx_process_t data structure.
260     => accesing the simix level data associated to a process is faster now, 
261        and the code is a lot more readable.
262        
263  SMPI:
264   * Implement some more MPI primitives: 
265     MPI_Bcast, MPI_Waitany, MPI_Waitall, MPI_Reduce, MPI_Allreduce, MPI_Scatter, MPI_Sendrecv, MPI_Alltoall
266     -implementation: Bcast: flat or 2-ary tree (default), 
267                      Barrier: 4-ary tree,
268                      Reduce: flat tree
269                      Allreduce: Reduce then Bcast
270                      Alltoall: "basic_linear" if data per proc < 3Kb, "otherwise pairwise". 
271                                Not yet implemented: "Bruck" for data per proc < 200b and comm size > 12
272                      Alltoallv: flat tree, like ompi
273                      Scatter: flat tree
274   * Add support for optimized collectives (Bcast is now binomial by default)
275   * Port smpirun and smpicc to OS X
276
277  SimDag:
278   * Kill SD_link_get_properties: hard to maintain and makes very little sense
279     Shout out if you used it.
280     
281  GRAS:
282   * Display the list of still queued messages in SG mode when existing
283     the process.
284
285  XBT:
286   * Add xbt_set_get_by_name_or_null() [Silas De Munck]
287   * Add xbt_graph_node_get_outedges() [Silas De Munck]
288   * Add xbt_str_from_file(FILE*)
289   * Add xbt_dict_get_key achieving a linear reverse search
290   * Remove the context module 
291
292  Portability report of this version:
293   * Main portability targets:
294     - Linux(debian)/x86/context   
295     - Linux(debian)/x86/pthreads 
296     - Linux(debian)/amd64/context 
297     - Linux(debian)/amd64/pthreads
298     On these, we still have the eratic breakages of gras/pmm and 
299       amok/saturate_sg reported in previous version. We still think
300       that the tests are the cause of the fault, not the tested code.
301       
302     - Mac OSX Leopard/x86/context
303     Still false negative in tesh autotesting.
304     Smpi still fails, but this time because readlink does not accept -f
305     Everything seems to work properly beside of that.
306     
307   * Exotic platforms:
308     - AIX version 5.3 (only tested contexts this time)
309       Smpi still fails there because mktemp is not installed. 
310       Everything seems to work properly beside of that.
311     - OpenSolaris 11
312       I managed to compile it for the first time, but several breakages.
313       Won't delay the release for this exotic platform.
314     
315   * Windows: it's still lagging behind. If you want to help, please
316     stand up.
317
318  Timing report of this version:
319   This version seem to be more than 5% faster than 3.3.1 (on linux
320     64bits with contextes). The gain is less than expected, we are
321     investigating this for next release.
322
323  -- Da SimGrid team <simgrid-devel@lists.gforge.inria.fr> Wed, 19 Aug 2009 17:07:12 +0200
324
325 SimGrid (3.3.1) stable; urgency=low
326
327  OVERALL CHANGES:
328   * Implement a --cfg-help to show existing configuration variables
329   * Build chain do not require doxygen in maintainer mode
330
331  GRAS:
332   * fix a bug on struct sizeof computation, which prevented the
333     exchange of arrays of structs in some conditions
334     - added a regression test about this in datadesc_usage
335   * Allow the exchange of 0-long dynamic vectors.
336     - for that, use -1 as indicator of dynamic size instead of 0
337     - This implied to change any size from unsigned long to long,
338       reducing a bit communication abilities, but I guess that with
339       64bits being quite common, this is more than enough.
340     - This also induce a protocol change, thus bumping network protocol
341       version from 0 to 1 (if we have external users, we have to get
342       clean on that point too ;)
343     - added two regression tests about this in datadesc_usage
344   * Be more verbose when propagating local exceptions
345     This helps debugging.
346   * Display the status of simulated processes when receiving SIGINT in
347     simulation mode
348
349  MSG:
350   * Allow to control the simulation from a trace file.
351     New functions MSG_action_register() and MSG_action_trace_run()
352     The first one allows to associate a function execution to each
353      kind of action while the second one parses a trace file and
354      triggers the corresponding actions within the system.
355     For now, only a toy example is provided in examples/msg/actions
356   * Add an exemple of process migration in examples/msg/migration
357   * Fix a bug in task exchange which broke MSG_task_get_sender()
358     Add a teshsuite regression test for that.
359     [Bug: if MSG_task_get_sender() is called after sender exit,
360      bad things happen]
361   * Fix a bug which prevented suspend/resume to work properly
362   * Display the status of simulated processes when receiving SIGINT
363     This fixes a regression of v3.3. due to the introduction of SIMIX
364   * Bug fixing in failure management:
365     - trace could not start by a failure at time 0
366     - failure during communications were not working
367         
368  SIMIX:
369   * Add SIMIX_process_set_name() to change the name of the current
370     process in the log messages.
371   * Store smx_hosts in a dict since we only retrieve them by name
372   * Move the configuration infrastructure to surf
373
374  SIMDAG:
375   * Move the configuration infrastructure to surf
376
377  SMPI: 
378   * Massive internal cleanups:
379     - Store internal structures on processes instead of hosts (allows
380       to have more than one process per host, in addition of being more 
381       logical)
382     - Cleanup the initialization/finalization process
383     - Kill a whole bunch of unneeded synchronization: 
384       processes run in exclusive manner within the simulator
385     - Move queues from global tables to process data fields
386   * Improve smpirun:
387     - now accept -platform and -hostfile arguments
388     - Pass the right rank value to processes according to the hostfile
389   * Compile the examples by default, and use them as regression tests
390   * Implement MPI_Wtime()
391   * Change the reference speed to a command line option
392   
393  SURF:
394   * TCP_gamma can now be specified as command line option using
395     --cfg=TCP_gamma:10000000.0
396   * Change the --surf-path cmd line option into --cfg=path:
397   
398  XBT:
399   * Also include strbuff from xbt.h public header
400   * xbt_ex_display(): do not free the exception after displaying 
401     This allows to do more with the given exception afterward.
402     Users should call xbt_ex_free() themselves.
403     
404     
405
406  Portability report of this version:
407   * Main portability targets:
408     - Linux(debian)/x86/context   
409     - Linux(debian)/x86/pthreads 
410     - Linux(debian)/amd64/context 
411     - Linux(debian)/amd64/pthreads
412     These targets fail about 1/10 of times on gras/pmm, but we believe
413       that this is because of the test, not because of simgrid.
414     amok/saturate_sg fails even more rarely, and the test may not be
415       the problem.
416       
417     - Mac OSX Leopard/x86/context
418     The test suite still spits tons of errors because some obscure
419       force prevents us from removing the temporary directories
420       arguing that they still contain some metadata I've never heard of.
421     Smpi fails because seq is not installed.
422     Everything seems to work properly beside of that.
423     
424   * Exotic platforms:
425     - AIX version 5.3 (both contexts and pthread)
426       Smpi still fails there because mktemp is not installed. 
427       XML inclusions seems rosty on AIX.
428     
429   * Windows: it's still lagging behind. If you want to help, please
430     stand up.
431
432  -- Da SimGrid team <simgrid-devel@lists.gforge.inria.fr>  Sat, 27 Jun 2009 00:14:30 +0200
433
434 SimGrid (3.3) stable; urgency=high
435
436  OVERALL CHANGES:
437
438   * JAVA BINDINGS for MSG (you dreamt of them? We made them)
439     [Malek Cherier & Mt]
440
441   * Introduce the SIMIX module: factorize code between MSG and GRAS.
442     [Bruno Donassolo]
443   
444     Until now, GRAS were using MSG as an interface to SURF. It was
445     quite difficult because both interface have several differences
446     (MSG channels vs GRAS sockets were the most notable point).
447    
448     This also opens the gate to SMPI (which should occur soon) and speed
449     up simulations by to 40% (even if it were not the main goal).
450   
451     ************************************** 
452     *DO NOT MIX 3.2 RESULTS WITH 3.3 ONES* Simix may changes simulations!
453     **************************************
454     The point is that events occuring at the exact same timestamp are
455     not scheduled in the same order with the old and new version. This
456     may be enough to completely change the execution of simulations in
457     some cases. Sorry for the inconvenience.
458
459   * Cleanup and upgrade the XML format to push further scalability
460     issues (check http://hal.inria.fr/inria-00256883/ for more info)
461
462   * Improve the testing infrastructure with tesh. Now a very large part of
463     the code is tested not only by being run but also by checking that the
464     output match an expected output [Mt].
465
466   * Move on to FleXML v1.7 for the embeeded XML parsers. This version
467     is really less memory-demanding, which should allow you to use
468     larger files in SimGrid [AL].
469     
470   * Inform valgrind about our contextes, so that it becomes usable
471     with the default (and more effecient) version of SimGrid
472     [contributed by Sékou Diakite, many thanks]
473
474  GRAS:
475   * Introduce a listener thread in charge of receiving incomming
476     messages from the network. It allows to overlap communication and
477     computation but most notably, it removes some stupid deadlocks due
478     to the fact that so far, a process could not send and receive at
479     the same time. This made most non trivial communication schema
480     impossible.
481   * Convert the PIDs from long int to int to match the MSG ones (and
482     linux ones too) [Mt]
483   * New function: gras_agent_spawn() to launch a new process on
484     current host. Only working in simulation for now. [Mt]
485   * New function: gras_os_hostport() returning a constant form (ie,
486     not needing to be freed) of "gras_os_hostname():gras_os_myport()"
487
488  XBT:
489   * Make the backtrace of exceptions more human readable [Mt]
490   * New module: xbt/str [Mt]
491     a ton of string utility functions (split, join, printf to a newly
492     allocated buffer, trim, etc)
493   * New module: xbt/hash [Mt]
494     SHA1 hashing algorithm (more to come if needed)
495   * New module: xbt/synchro [Mt]
496     synchronization tools (mutex and conditions) working the same way
497     in simulation and in real life (mainly useful for GRAS, but not
498     only).
499   * New module: xbt/queue [Mt]
500     classical producer/consumer synchronization scheme
501   * xbt_dynar_new_sync() creates a synchronized dynar. All access
502     (using the classical functions will get serialized) [Mt]
503   * Make dictionary internal table dynamic. No need to specify its size
504     anymore; functions xbt_dict_new_ext() and xbt_dict_hashsize_set()
505     thus dropped. [Mt].
506   * Make sure the log channels are organized as a tree under windows
507     (because of ANSI C compatibility issue, any channel were child of
508      root directly) [Mt].
509
510  SURF:
511   * Cleaned many thing in surf and fixed a few bugs [AL].
512   * Add a nice command line configuration mechanism to compose models [AL].
513   * Add a new model for parallel tasks (ptask_L07) that is less buggy than
514     the previous one (KCCFLN05). It relies on something that looks like
515     a max-min sharing mechanism but cannot be written as such. A new solver
516     was thus designed [AL].
517   * Add a new solver to lmm. Based on Lagrange optimization and
518     gradient-based descent, it enables to efficiently maximise systems s.a
519   
520      sum f_i(x_i) s.t Ax<= b  with A_{i,j}>=0 and f_i a concave function.
521
522     This solver enables to propose two new network models for TCP Reno and
523     TCP Vegas based on Low's work. These models still need to be fully
524     tested though [Pedro Velho].
525
526  SIMDAG [AL]:
527   * Bug fix in SD_simulate. Now the time bound given as argument is
528     used.
529   * Use the new parallel task model (ptask_L07) as default.
530   * Use the SURF command line configuration mechanism.
531   * 0-size tasks (for synchronization) should now work.
532
533  -- Da SimGrid team <simgrid-devel@lists.gforge.inria.fr> Sun Apr 12 05:20:36 CEST 2009
534
535 SimGrid (3.2) stable; urgency=high
536
537   OVERALL CHANGES:
538    * Port to windows.
539      We still experience issues on this platform, but we believe that at
540      least MSG is usable.
541
542   GRAS API BREAKAGE (for simplification purpose, sorry):
543    * the gras_msgtype_by_name is not used anymore. Instead of 
544        gras_msg_send(toserver, gras_msgtype_by_name("request"), &request);
545      you can write (and must)
546        gras_msg_send(toserver, "request", &request);
547    - If you still want to pass a gras_msgtype_t to the function (to cache
548      the type and avoid the lookup time), use the gras_msg_send_() variant.
549    - Impacted functions:
550      gras_cb_register, gras_cb_unregister, gras_msg_send, gras_msg_wait,
551      gras_msg_rpccall, gras_msg_rpc_async_call, gras_msg_wait_ext
552    * The callbacks are now expected to return 0 when everything went well
553      (just like the main() function)
554
555   GRAS new features and improvements:
556   * New module mecanism where user code can use per process globals [Mt]
557     This is similar to gras_userdata_*() functions, but for libraries. It
558       factorize some code developped over and over in the examples and AMOK.
559     It has still to be documented and used (only amok/peermanagement is
560       converted for now).
561   * Fix a vicious bug in the TCP buffering mecanism which leaded to message
562     loss when they were small enough to fit into the buffer and sent quickly
563     enough so that they can all get received in one shoot.   
564   * gras_datadesc_by_name and gras_msgtype_by_name: now raise an exception
565     if not found. Use the *_or_null() variant for the old semantic.
566   * In gras_msg_handle, do not discard messages without callback.
567     They are probably messages to be explicitly awaited later (ie, proofs of
568     mis-synchronization in userland since they are sent before being awaited)
569     No big deal usually.
570   * gras_socket_meas_send/recv: semantic changed!
571     The numerical arguments used to be (1) the total amount of data to send
572     and (2) msg_size. This was changed to (1) msg_size and (2) amount of
573     messages. This was need for the fool willing to send more than MAXINT
574     bytes on quite fat pipes.       
575         
576   AMOK:
577   * Do really rename the hostmanagement module to peermanagement. [Mt]
578     Ie, rename functions from amok_hm_* to amok_pm_*. This breaks the API,
579     but this is rather new and this was documented in the module
580     documentation (poor excuses, I admit)
581   * Bandwidth measurement semantic changed! This follows the changes to
582     gras_socket_meas_send/recv explained above.
583     
584   SIMDAG:
585   * A sequential mode has been added to the workstations. When a workstation
586     is in sequential mode, it can execute only one task, and the other tasks
587     are waiting in a FIFO. [Christophe Thiery]
588
589   SURF:
590   * The KCCFLN05 workstation model now handles parallel tasks. It is the
591     model for SIMDAG. [Christophe Thiery]
592   * Bug fix in the maxmin solver: Some values were close to 0 instead of
593     equal to 0, which caused some bad behaviors in
594     saturated_constraint_set_update. I now use a threshold mechanism like in
595     surf. [AL]
596
597   XBT:
598   * When running manually src/testall, you select specific units [Mt]
599     testall is the result of our cunit mecanism, and should replace all
600     the scripty thingy around since bash don't run easily on billware.
601
602   * A mallocator system has been added. [Christophe Thiery]
603     Mallocators allow you to recycle your unused objects instead of freeing them
604     and allocating new ones.
605
606   Documentation update:
607   * FAQ reworking + New FAQs:
608     - "Valgrind spits tons of errors!" [Mt]
609     - "How to repport bugs" [Mt]
610     - "Cross-compiling a Windows DLL of SimGrid from Linux" [Mt]
611     - "What is the difference between MSG, SimDag, and GRAS?" [Mt]
612     - Communication time measurement within MSG [AL]
613     - I experience weird communication times when I change the latency [AL]
614   * GRAS tutorial [Mt]
615     It contains:
616      - an introduction to the framework and to the used communication model
617      - an initiatic tour introducing the most proheminent features:
618        o Part 1: Bases
619          . Lesson 0: Installing GRAS
620          . Lesson 1: Setting up your own project
621        o Part 2: Message passing
622          . Lesson 2: Exchanging simple messages
623          . Lesson 3: Passing arguments to the processes (in SG)
624          . Lesson 4: Attaching callbacks to messages
625          . Lesson 5: Using globals in processes
626          . Lesson 6: Logging informations properly
627          . Lesson 7: Using internal timers
628          . Lesson 8: Handling errors through exceptions
629          . Lesson 9: Exchanging simple data
630          . Lesson 10: Remote Procedure Calling (RPC)
631          . Lesson 11: Explicitely waiting for messages
632          . Recapping of message passing features in GRAS
633      - A HOWTO section containing:
634        o HOWTO design a GRAS application
635        More are due, of course. They will come latter. In the meanwhile, you can 
636        check the examples which are still here.
637
638  -- Da SimGrid team <simgrid-devel@lists.gforge.inria.fr> Fri Mar 16 21:11:46 CET 2007
639
640 SimGrid (3.1) stable; urgency=high
641
642   General:
643   * Port to gcc 4.x   
644     There was a stack corruption somewhere, visible only when optimizing
645     with these versions. [Vince]
646
647   SIMDAG:
648   * This is a NEW module! SimDAG (SD for short) is a revival of the old SG
649     module that enabled to play with Directed Acyclic Graphs. It is built
650     directly on top of SURF and provides an API rather close to the old
651     SG. Some old codes using SG are currently under rewrite to check that
652     all needful functions are provided. [Christophe Thiery]
653         
654   SURF:
655   * Complete rewrite of the KCCFLN05 workstation model. It is now an
656     extension of the classical CLM03 model that gracefully handles
657     failures. This is now the default model for MSG and GRAS. It doesn't
658     handle parallel tasks yet though. [AL]
659   * Bug fix: Weights were not correctly set in the network part. 
660     WARNING: This may have resulted in incorrect results with simulations
661     where there are more than one flow on a given link. [AL]
662
663   SURF, MSG, GRAS:
664   * After a (long ?) discussion on simgrid-devel, we have decided that the
665     convention we had on units was stupid. That is why it has been decided
666     to move from (MBits, MFlops, seconds) to (Bits, Flops, seconds). 
667     WARNING : This means that all previous platform files will not work as
668     such with this version! A warning is issued to ask users to update
669     their files. [AL]
670     A conversion script can be found in the contrib module of the CVS, under
671     the name contrib/platform_generation/surfxml_update.pl [MQ]
672
673   MSG,GRAS:
674   * Bug fix: Processes were started in reverse order, wrt deployment file.
675     WARNING: if your code relies on this bug, please fix it.    [AL]
676   * Bug fix: Add a test in MSG_task_execute to stop whenever a task is
677     being executed on two different locations.                  [AL]
678   * Bug fix: Failures are now better supported thanks to Derrick's tests
679     (there was many failure situations I hadn't thought of and that weren't
680     correctly handled). [AL]
681   * New function: MSG_host_is_avail indicates you whether a given m_host_t
682     is up or down. [AL]
683
684   GRAS:
685   * New! a real RPC mecanism, as it ought to be since too long. [MQ]
686       Exception occurring on server-side are propagated back to client (!).
687       
688     API CHANGE: the callback changed their prototype. Change:
689         int my_handler(gras_socket_t expeditor, void *payload_data) {
690       to:
691         int my_handler(gras_msg_cb_ctx_t ctx  , void *payload_data) {
692           gras_socket_t expeditor=gras_msg_cb_ctx_from(ctx);
693       and you're set.
694   * New! function: gras_msg_handleall to deal with all messages arriving
695       within a given period.
696   * New! function: gras_socket_server_range to get a server socket in a
697     range of port numbers (ease to avoid port number conflicts) [MQ]
698   * New! gras processes display their backtrace when they get a SIGUSR1
699       or when Ctrl-C is pressed. Use Ctrl-C Ctrl-C to exit.
700       Sweet to debug RL processes [MQ]
701
702   AMOK:
703   * Bandwidth module: 
704     - Do not force experiment sizes to be expressed in kb, or it becomes
705       impossible to measure the latency this way (needs one byte-long tests)
706     WARNING: this changes the amok_bw_* function semantic. [MQ]
707     - Implements the link saturation stuff. [MQ]
708   * Peer management module: 
709     New! module factorizing code that we wrote over and over [MQ].
710       
711   XBT:
712   * New module: cunit (my jUnit implementation in ansi C) [MQ]
713     - Test units are placed directly into the library code, they get extracted
714       automatically and placed into the src/testall binary.
715     - Convert most of the XBT tests to this system.
716   * New functions: xbt_dynar_getfirst_as() and xbt_dynar_getlast_as() [MQ]
717   * XML parsing: rewrote parts of flexml to enable multiple xml parsers to
718     live in the same C code. This required to change a little bit the API
719     of surfxml parsing but shouldn't be an issue for end-users. [AL]
720   * New module: sparse graph structure with basic algorithms (this is work
721     in progress and the API is not considered to be frozen yet). [AL]
722   * Display more information on backtraces: source line & function names are
723     now displayed just like valgrind does (rely on addr2line tool) [MQ]
724   * New function: xbt_backtrace_display(). Sweet while debuging [MQ]
725   * Reworked a little bit some #include statements to load only required
726     headers. Some user code that relied on SimGrid to include stdlib or
727     stdio may need to include it by themselves. [AL]
728   * Fixed xbt/log.h. A missing SG_BEGIN_DECL prevented compilation with
729     g++. [AL]
730   * Renamed xbt_host_t into xbt_peer_t since it betterly describes what I
731     meant. This breaks the API of AMOK and of xbt/config. Sorry about this,
732     but I guess that almost nobody used those parts. [MQ]
733
734  -- Da SimGrid team <simgrid-devel@lists.gforge.inria.fr> Fri, 14 Jul 2006 01:32:27 +0200
735
736 SimGrid (3.0.1) stable; urgency=low
737
738   XBT:
739   * Unfortunately, I had missed 5 misnamed functions:
740       xbt_fifo_item_t xbt_fifo_newitem(void);
741       void xbt_fifo_freeitem(xbt_fifo_item_t);
742       xbt_fifo_item_t xbt_fifo_getFirstItem(xbt_fifo_t l);
743       xbt_fifo_item_t xbt_fifo_getNextItem(xbt_fifo_item_t i);
744       xbt_fifo_item_t xbt_fifo_getPrevItem(xbt_fifo_item_t i);
745     They're now deprecated. Please use their new versions:
746       xbt_fifo_item_t xbt_fifo_new_item(void);
747       void xbt_fifo_free_item(xbt_fifo_item_t);
748       xbt_fifo_item_t xbt_fifo_get_first_item(xbt_fifo_t l);
749       xbt_fifo_item_t xbt_fifo_get_next_item(xbt_fifo_item_t i);
750       xbt_fifo_item_t xbt_fifo_get_prev_item(xbt_fifo_item_t i);
751     [AL]
752   * Bugfix: really disconnect fifo items which are remove_item()ed [AL]
753   * Documentation: xbt_log module unmercifully reworked [MQ]
754   * Bugfix: there was a problem with the ending of contexts with 
755     the pthread backend. It caused some weird deadlock or behavior
756     depending on the pthread implementation. [AL]
757   * Bugfix: get the exceptions raised in the simulator repport where
758     and why they come from when they are not catched in time [AL, MQ]
759
760   SURF:
761   * Bugfix: Do repport the error when two non-connected hosts try to
762     exchange data (Thanks to Flavien for stumbling into this one) [AL]
763   
764   SURF:
765   * Add additionnal checkings on communications. Assert that two
766     communicating hosts are connected by a set of links... [AL]
767         
768   MSG:
769   * Add additionnal checkings on channel values in communication [AL]
770   * New: MSG_task_get_source to see on which host a task was generated [HC]
771   * New: int MSG_task_probe_from_host(int channel, m_host_t host): returns
772     the number of tasks waiting to be received on channel and sent
773     by host. [AL]
774   * New: MSG_error_t MSG_task_get_from_host(m_task_t * task, int channel, m_host_t host); 
775     waits for the first task coming from a given host.. [AL]
776         
777   GRAS new functionnalities: [MQ]
778   * Enhance the parsing macro to allow the size of multidimentional objects
779     to be given thru annotations.
780   * New example (and documentation): Matrix Multiplication a la RPC 
781     (as when I was young!) and fix a bunch of bugs found on the way.
782
783   GRAS performance improvements: [MQ]
784   [DataDesc]
785   * Reduce the amount of cbps creation/destruction by making it static to 
786     datadesc_send/recv() and using a (newly created) cbps_reset (based on 
787     dynar_reset ())
788   [Virtu]
789   * Change libdata to a set so that we can search for stuff by ID (and thus 
790     reduce the insane amount of dict lookups)     
791   
792   [Transport]
793   * Actually implement gras_datadesc_copy() so that we don't have to mimick
794     RL communication on top of SG since it's so uneffective. 
795     It may also be used for inter-thread communication in RL, one day. 
796   * Use gras_datadesc_copy() to exchange messages on top of SG 
797     Allows to:
798     - improve message exchange performance on top of SG
799     - deprecate transport_plugin_sg.c:gras_trp_sg_chunk_send() & recv()
800   * Don't exchange on the network the size of the used part of buffer,
801     instead, specify the possible buffer size to read(). 
802     Advantages:
803      - reduces the amount of read/write calls (one pair per exchange)
804      - reduces the amount of exchanged data (the size)
805      - allows to retrieve all arrived data on receiver side, if we don't need
806        it right now (subsequent read will peek the buffer)
807      - allows the receiver to proceed with the begining of the stream before
808        everything is arrived
809      - make it possible to build an iov transport (using readv/writev)
810     Extra difficulty: 
811      - take care of the data with non-stable storage (like stacked data),
812        and bufferize them.
813   * If possible, TCP send uses vector I/O (when writev() is here) 
814      - Don't use it for receive since we send data sizes and data on the
815        same stream, so we wouldn't be able to chain large amount of chunks
816        before having to flush the stuff to read the size.
817   * Rework the transport plugin mecanism to simplify it and reduce the
818     amount of pointer dereferencement when searching for the right function 
819     to use. 
820
821   * I guess that now, we do almost as few system calls as possible while
822     doing as few data copy as possible.
823
824     To improve it further, we could try to send all the sizes first and then
825     all the data (to use iov on receiving size), but it's only a partial
826     solution: when you have 2 dimensional data, the sizes of the second
827     dimension is data of the first dimension, so you need 3 streams.
828
829     I'm not sure the potential performance gains justify the coding burden.
830
831  -- Da SimGrid team <simgrid-devel@lists.gforge.inria.fr>  Fri, 21 Oct 2005 14:42:20 +0200
832
833 SimGrid (3.00) stable; urgency=high
834   
835  SURF:
836   * New! Give the possibility to hijack the surf parser and thus bypass 
837     MSG_create_environment and MSG_launch_application. Have a look at
838     examples/msg/msg_test_surfxml_bypassed.c to see how it can be done.
839         
840  -- Arnaud Legrand <simgrid-devel@lists.gforge.inria.fr>  Sat, 20 Aug 2005 23:25:25 -0700
841
842 SimGrid (2.96) unstable; urgency=low
843
844   AKA SimGrid 3 rc 2.
845   
846   XBT:
847   * New! Exception handling with setjmp or such (code from OSSP ex) [MQ]
848     This deprecates the xbt_error_t mecanisms. 
849     It modifies (simplifies) all XBT and GRAS API.
850     MSG API keeps unchanged (exceptions raised by XBT are catched from 
851      within MSG and masked with existing error handling facilities)
852
853   SURF:
854   * New! Add a FATPIPE model. [AL]
855   * New! Add a parallel task model. [AL]
856   * New! Add automatically a loopback interface (in the default
857     network model) if none was precised.
858
859   MSG
860   * Bugfix: MSG_process_resume now works with the current running process. 
861     [AL]
862   * New! Add MSG_parallel_task_create and MSG_parallel_task_execute. [AL]
863   * Modification of MSG_task_get_compute_duration. Once a task has been
864     processed, the value returned by this function is now equal to 0. [AL]
865   * New! Add double MSG_task_get_remaining_computation(m_task_t task) and
866     MSG_error_t MSG_task_cancel(m_task_t task). Add a state
867     (MSG_TASK_CANCELLED) to MSG_error_t corresponding to the cancelation
868     of a m_task. For now, MSG_task_cancel only works with computation
869     tasks. [AL]
870   * New! Add double MSG_get_host_speed(m_host_t h) that returns the speed
871     of the processor (in Mflop/s) regardless of the current load on the
872     machine. [AL]
873   * API Change: use proper naming convention for MSG_getClock and 
874     MSG_process_isSuspended: MSG_get_clock and MSG_process_is_suspended.
875     [AL]
876   * New! Add void MSG_task_set_priority(m_task_t task, double priority). 
877     This function changes the priority of a computation task. This priority
878     doesn't affect the transfer rate. A priority of 2 will make a task 
879     receive two times more cpu power than the other ones. This function 
880     has been added to suit the needs of Nguyen The Loc and hasn't been that
881     much tested yet. So if it fails, please report it and send me your code. 
882     [AL]
883   * API Change: removed all functions and types that were marked "deprecated" 
884     since many months. Renamed MSG_global_init_args to MSG_global_init.
885
886  -- Da SimGrid team <simgrid-devel@lists.gforge.inria.fr>  Mon,  8 Aug 2005 17:58:47 -0700
887
888 SimGrid (2.95) unstable; urgency=low
889
890   XBT
891   * Steal some nice code to GNU pth to fix context detection and usage [AL]
892   * Cleanup in the xbt_config API; add configuration callbacks. [MQ]
893   * Cleanup in the initialization API: the unused "defaultlog" is dead. [MQ]
894
895   SURF
896   * Bugfix: Allow absolute paths for platform description files [MQ]
897   * Bugfix: do free the variables after use. Leads to drastic performance 
898     improvement [AL] 
899   * Implement max_duration (ie, timeouts) on resources [AL]
900
901   MSG
902   * Implement MSG_config to configure MSG at runtime. xbt_cfg test on a real
903     case ;) [MQ]
904   * Implement MSG_channel_select_from() to help GRAS now that SURF provide
905     the needed support (timeouts) [AL]
906
907   GRAS (new features)
908   * Implement measurement sockets. You can now get the bandwidth between two
909     hosts thanks to AMOK (see below). [MQ]
910   * gras_datadesc_dynar() builds a dynar type descriptor, allowing to send
911     dynar over the network (yeah) [MQ]
912   * Real (even if simplistic) implementation of gras_os_myname() on RL [MQ]
913   * simple/static token-ring example. [Alexandre Colucci and MQ]
914   * Use MSG_channel_select_from() and remove the *slow* hack we had to put
915     in place before [MQ]
916   
917   GRAS (bug fixes)
918   * Differentiate the types "char[22]" and "unsigned char[22]" in automatic
919     type parsing. "short" and "long" modifiers were also ignored; other
920     modifier (such as reference level) are still ignored. [MQ] 
921   * Embeed the buffer size within the buffer itself on SG. [MQ]
922     That way, send() are atomic and cannot get intermixed anymore (at least
923     the ones which are less than 100k; bigger messages still have the issue)
924   * Array size pushed by the field, not by the field type (or each
925     and every long int will push stuff to the cbps) [MQ]
926   * use select() to sleep since it allows to portably sleep less than one
927     second. [MQ]
928
929   GRAS (minor cleanups)
930   * <project>.Makefile.local (generated from gras_stub_generator) |MQ]:
931     - Do clean .o files
932     - Compile with -g
933   * Type Callbacks now receive the gras_datadesc_type_t they work on as argument.
934   * type category 'ignored' killed as it was never used and were difficult
935     to transmit.
936   * whether a type can cycle or not is now a flag, leaving room for more
937     flags (as "ignored", if we feel the need one day ;)
938   * Rename raw sockets to measurement sockets since "raw" has another
939     meaning in networking community. 
940   
941   AMOK 
942   * Advanced Metacomputing Overlay Kit introduction. It is based over GRAS
943     and offers features not belonging to GRAS but that most applications
944     need. One day, it may be a set of plugins loadable at runtime.
945   * New module: bandwidth 
946     bandwidth measurement between arbitrary nodes running this module. [MQ]
947
948  -- Da SimGrid team <simgrid-devel@lists.gforge.inria.fr>  Thu, 30 Jun 2005 16:29:20 -0700
949
950 SimGrid (2.94) unstable; urgency=low
951
952   The first beta release of SimGrid 3 !
953
954   >>>Arnaud<<<
955   (documentation)
956   * Update the main page and the FAQ. Adding references to gforge.
957
958   (gras)
959   * Add a gras_os_getpid function.
960
961   (msg)
962   * Add MSG_task_get_compute_duration() and MSG_task_get_data_size()
963   * Extend the logs so that they also print PID, hostname, date, ... if
964     available.
965   * Convert the MSG example to the use of xbt_logs instead of PRINT_MESSAGE,
966     and kill the old version which were in testsuite/
967   * Rewrite tools/MSG_visualization/colorize.pl for using with logs instead
968     of PRINT_MESSAGE
969
970   (xbt)
971   * Add xbt_os_time(). As the rest of xbt/portability, this is not public
972     for users. Instead, each programming environment (GRAS, MSG,...) use it
973     when needed to provide such a feature to users.
974     Don't shortcut the mecanism or you will also shortcut the virtualization
975     you need on the simulator.
976
977   >>>Martin<<<
978   (infrastructure)
979   * Cleanups in configury with regard to compile optimization/warning flags.
980     Also add -fno-loop-optimize to any powerpc since it's the optimization
981     killing gcc (< 3.4.0).
982   * Doxygen cleanups: move MSG examples, kill the second Doxygen phase
983     needed by MSG examples complications
984   * Borrow configury beautifications from PHP
985
986   (xbt)
987   * Bugfix: XBT_LOG_NEW_DEFAULT_CATEGORY now compiles without compiler
988     warning (thanks loris for stumbling into this one).
989   * Bugfix: stop loading private headers (gras_config.h) from the public
990     ones (xbt/swag.h).
991
992   (gras)
993   * Change SIMGRID_INSTALL_PATH to GRAS_ROOT in Makefiles generated for user.
994   * Rename gras_get_my_fqdn to gras_os_myname and implement it in the simulator
995     RL would imply a DNS resolver, which is *hard* to do in a portable way
996     (and therefore delayed).
997   * Implement a real timer mecanism and use it in timing macros. This allows
998     to avoid rounding errors and get a 0.000005 sec precision in timing
999     macros. While I was at it, various cleanups:
1000      - allow to declare more than one timed section per file (fix a stupid bug)
1001      - move some private declaration to the right place
1002      - merge conditional execution and timing macros into emulation module
1003      - document the module
1004      - make sure the module cleanups its mess on gras_exit
1005   * Documentation improvements:
1006      - (new) how to compile applications using GRAS
1007      - (new) emulation support (timing macros)
1008
1009  -- Da SimGrid team <simgrid-devel@lists.gforge.inria.fr>  Fri, 13 May 2005 10:49:31 +0200
1010
1011 SimGrid (2.93) unstable; urgency=low
1012
1013   Alpha 4 on the path to SimGrid 3 (aka the "neuf-trois" version)
1014
1015   [Arnaud]
1016    - Use Paje properly where used. Still to be sanitized properly.
1017    - Portability fix: Add an implementation of the contexts using pthread
1018
1019   [Martin]
1020   (misc)
1021    - Add xbt_procname(): returns the name of the current process.
1022      Use it to show the current process's name in all logging.
1023   (infrastructure)
1024    - fix detection of older flex version and the reaction, since we do
1025      depend on modern ones (we use lex_destroy)
1026    - Better separation of SG and RL in the libs: remove all simulation code
1027      from libgras. As a result, this lib is now only 200k when stripped.
1028      Some of the xbt modules may also be duplicated (two sets and such) and
1029      should be cleaned/killed before SG3.
1030    - Insist on using xlC on AIX because of weird problems involving gcc there.
1031    - Cleanup the make remote stuff. This is now done by scripts
1032      tools/graspe-{master,slave} (GRAS Platform Expender). This is still
1033      mainly for our private use, but we're working on changing them to user
1034      tools, too.
1035   (gras)
1036    - Bugfix: flush the socket on close only if there is some *output*.
1037    - Bugfix: flush idempotent when there's nothing to send (don't send size=0)
1038   (msg)
1039    - Add MSG_task_get_name. The task names are mainly for debugging purpose,
1040      but anyway.
1041
1042  -- SimGrid team <simgrid2-users@listes.ens-lyon.fr>  Fri,  4 Mar 2005 14:32:37 -0800
1043
1044 SimGrid (2.92) unstable; urgency=low
1045
1046   Alpha 3 on the path to SimGrid 3
1047   
1048   [Arnaud]
1049   (gras)
1050    - New! First try of benchmarking macros.
1051    - New! First try so that gras_stub_generator generate deployment and
1052      remote compilation helpers.
1053   (msg)
1054    - Bugfix: Initialization fix in msg_test.
1055
1056   [Martin]
1057   (surf)
1058    - Bugfix: applied patch to lexer so that it doesn't need a huge heap.
1059   (xbt)
1060    - Bugfix: let dicts work with NULL content (_foreach didn't) and cleanups
1061   (gras)
1062    - API Change: gras_os_sleep to take the amount of seconds as a double.
1063      Accepting an int was error prone since it was the only location where
1064      seconds were coded as such. It leaded to damn rounding errors.
1065    - Bugfix: Hard to belive that timers ever worked before this.
1066
1067  -- SimGrid team <simgrid2-users@listes.ens-lyon.fr>  Wed, 23 Feb 2005 22:09:21 +0100
1068
1069 SimGrid (2.91) unstable; urgency=low
1070
1071   Alpha 2 on the path to SimGrid 3
1072   
1073   [Arnaud]
1074   (surf)
1075    - Bug fix in the lmm_solver.
1076   (msg)
1077    - New! Interface to Paje (see http://www-id.imag.fr/Logiciels/paje/) 
1078      through the function MSG_paje_output.
1079    - New! Introducing two new functions MSG_process_kill() and MSG_process_killall().
1080    - It is possible to bound the rate of a communication in MSG with 
1081      MSG_task_put_bounded() (was already in the previous version but I had forgotten 
1082      to write it in the changelog).
1083    - Bug fix to let GRAS run on top of MSG until we move it directly on top
1084      of the SURF.
1085     
1086   [Martin]
1087   (infrastructure)
1088    - Various cleanups to the autotools stuff
1089    - Begin to move Gras examples to examples/gras/
1090    - Let make distcheck work again (yeah!)
1091   (documentation)
1092    - documentation overhauled using doxygen. 
1093      gtk-doc-tools is dead in SimGrid now.
1094    - Automatically extract all existing logging categories, and add the list
1095      to the documentation (long standing one, to say the less)
1096   (gras)
1097    - Cleanup the known architecture table. Reorder the entries to group what
1098      should be, and use a more consistent naming scheme.
1099      (some of the test dataset are still to be regenerated)
1100    - New! Allow library to register globals on each process just as userdata
1101      does. 
1102       This is implemented using a xbt_dict and not a xbt_set, so we loose the
1103        lookup time (for now).
1104       Use it in msg and trp.
1105       This cleans a lot the internals and helps enforcing privacy of the
1106        headers between the gras components.
1107    - New! Add a timer mechanism, not unlike cron(8) and at(1). 
1108    - Bugfix: gras_os_time was delirious in RL.
1109    - Bugfix: gras_trp_select/RL don't run into the wall when asked to select
1110      onto 0 sockets.
1111    - Reenable GRAS now that it works.
1112
1113  -- Arnaud Legrand <Arnaud.Legrand@imag.fr>  Mon, 14 Feb 2005 14:02:13 -0800
1114
1115 SimGrid (2.90) unstable; urgency=low
1116
1117   Alpha 1 on the path to SimGrid 3
1118
1119   * It is a long time since the last release of SimGrid. I'm sorry about
1120     that but as I had told you, I was rewriting a lot of things. I apologize 
1121     to those who had been reporting bugs to me and that I had not answered. 
1122     If your bug is still in the new version, please tell me. Here is a 
1123     summary of the main changes.
1124
1125   * REVOLUTION 1: The SimGrid project has merged with the GRAS project
1126     lead by Martin Quinson. As a consequence SimGrid gains a lot in
1127     portability, speed, and a lot more but you'll figure it out later. 
1128     SimGrid now comprises 3 different projects : MSG, GRAS and SMPI. 
1129     I wanted to release the new MSG as soon as possible and I have 
1130     broken GRAS, which is the reason why, for now, only MSG is fully 
1131     functional. A laconic description of these projects is available 
1132     in the documentation.
1133   
1134   * REVOLUTION 2: I have removed SG and I am now using a new simulation
1135     kernel optimized for our needs (called SURF but only the developers
1136     should use it). Hence, MSG is now roughly 30 times faster and I think
1137     that by rewriting a little bit MSG, I could event speed it up a little
1138     bit more. Beside the gain in speed, it is also much easier to encode a
1139     new platform model with SURF than it was with SG. More to come...
1140   
1141   * REVOLUTION 3: I have tried to change a little as possible the API of
1142     MSG but a few things really had to disappear. The main differences
1143     with the previous version are :
1144        1) no more m_links_t and the corresponding functions. Platforms are
1145          directly read from a XML description and cannot be hard-coded
1146          anymore. The same format is used for application deployment
1147          description. The new format is described in the documentation. 
1148          Have a look in tools/platform_generation. There is a tiny script 
1149          that converts from the old platform format to the new one. Concerning
1150          the application deployment format, parsing the old one is tricky.  
1151          I think most of you should however be able to convert your files.  If 
1152          it is really an issue, I can write a C code that does the conversion. 
1153          Let me know.
1154        2) the toolbox tbx does not exist anymore. We now have a library
1155           with much more data-structures but without the hash-tables (we have 
1156           dictionaries that are much faster).
1157
1158  -- Arnaud Legrand <Arnaud.Legrand@imag.fr>  Mon, 31 Jan 2005 10:45:53 -0800
1159
1160 *****************************************************************************
1161 * Follows the old GRAS changelog. It does not follow the same syntax, but I *
1162 * don't feel like converting the oldies. (Mt)                                *
1163 *****************************************************************************
1164
1165 2005-01-31 Arnaud
1166   Version 2.90: "the long awaited one"
1167   - Finished rewriting and debugging MSG. Rewrote the documentation.
1168   - disable GRAS for now since it needs to be ported to the newest SG
1169
1170 2004-12-16 Martin
1171   - Finish the port to windows (using mingw32 for cross-compile)
1172
1173 2004-11-28 Arnaud
1174   - Main loop and datastructures of SURF. A cpu resource object is
1175     functional. Surf can thus be used to create cpu's with variable
1176     performance on which you can execute some actions.
1177         
1178 2004-11-15 Martin Quinson
1179   - Port to ARM. Simply added the alignment and size descriptions. Should
1180     work, but the ARM machines are so slow that I didn't had the opportunity
1181     to 'make check' over there yet.
1182
1183 2004-11-15 Arnaud Legrand
1184   - Trace manager now written. It uses a heap structure and is therefore
1185     expected to be efficient. It may however be speeded up (particularly
1186     when many events occur at the same date) by using red and black
1187     trees. One day maybe... 
1188   - Max-min linear system solver written. It uses a sparse matrix
1189     structure taking advantage of its expected use. Most operations are
1190     O(1) and free/calloc are called as few as possible. The computation of
1191     the minimum could however be improved by using a red and black tree
1192     (again ! ;).
1193
1194 2004-11-03 Arnaud Legrand
1195   - Rename every gras_* function that was in xbt/ to its xbt_
1196     counterpart.
1197   - Add a heap and a doubly-linked list to xbt
1198   - Added a dichotomy to the dictionaries. make check works as well before
1199     so I assume that the patch is correct. I do not know however if things
1200     run effectively faster than before now. :)
1201
1202   Inclusion of the SimGrid tree in the GRAS one. The archive is renamed to
1203   SimGrid, and the version number is bumped to 2.x
1204
1205 2004-10-29 Martin Quinson
1206   - Introduction of the remote errors. 
1207     They are the result of a RMI/RPC on the remote machine.
1208     ErrCodes being scalar values, you can't get the host on which those
1209     errors did happen. Extending the error mechanism as in Gnome is possible.
1210     No idea yet whether it is a good idea.
1211     
1212 2004-10-28 Martin Quinson
1213   - Interface revolution: the Starred Structure Eradication.
1214     I used to do typedef struct {} toto_t; and then handle *toto_t.
1215     Arnaud (and Oli) didn't like it, and I surrendered. Now, you have:
1216       - ???_t is a valid type (builded with typedef)
1217       - s_toto_t is a structure (access to fields with .)
1218       - s_toto   is a structure needing 'struct' keyword to be used
1219       - e_toto_t is an enum
1220       -   toto_t is an 'object' (struct*)
1221     Exemple:
1222       typedef struct s_toto {} s_toto_t, *toto_t;
1223       typedef enum {} e_toto_t;
1224     Moreover, only toto_t (and e_toto_t) are public. The rest (mainly
1225      s_toto_t) is private.
1226     
1227   - While I was at it, all gras_<obj>_free() functions want a gras_<obj>_t*
1228     so that it can set the variable to NULL. It was so for dicts and sets,
1229     it changed for dynars.
1230     
1231   - Fix a bunch of memleaks in dict_remove
1232   - Fix a bug in sg/server_socket opening: it failed all the time.
1233
1234 2004-10-07 Martin Quinson
1235   - Speed up dynar lookup operation a bit.
1236   
1237     gras_dynar_get is dead. 
1238     
1239     Now, you can choose between gras_dynar_get_cpy (the old gras_dynar_get
1240     but should be avoided for efficiency reasons) and gras_dynar_get_ptr
1241     (which gives you the address of the stored data).
1242     
1243     gras_dynar_get_as is an helpful macro which allows you to retrieve a
1244     copy of the data using an affectation to do the job and not a memcpy.
1245     
1246     int toto = gras_dynar_get_as(dyn,0,int); rewrites itself to
1247     int toto = *(int*)gras_dynar_get_ptr(dyn,0);
1248     
1249     It does not really speedup the dynar test because they are
1250     setting elements all the time (and look them seldom). But the dict does
1251     far more lookup than setting.
1252
1253     So, this brings the dict_crash test from ~33s to ~25s (200000 elms).
1254
1255 2004-10-05 Martin Quinson
1256   - Allow to (en/dis)able the cycle detection at run time.
1257   
1258     Whether we should check for cycle or not is now a property of each
1259     datatype. When you think there may be some cycle, use datadesc_cycle_set.
1260     datadesc_cycle_unset allow to remove this property when previously set.
1261     
1262     Note that the cycle detection is off by default since it impacts the 
1263     performance. Watch the data you feed GRAS with ;)
1264     
1265     This property is hereditary. Any element embedded in a structure having it
1266     set have it set for the time of this data exchange.
1267     
1268     You should set it both on sender and receiver side. If you don't set it on
1269     sender side, it will enter an endless loop. If you forget on receiver
1270     side, the cycles won't be recreated after communication.
1271     
1272   - Header reorganization.
1273     Kill gras_private.h, each submodule must load the headers it needs.
1274
1275 2004-10-04 Martin Quinson
1276   - Interface revolution: do not try to survive to malloc failure.
1277   
1278     Now, gras_malloc and friends call gras_abort() on failure.
1279     As a conclusion, malloc_error is not a valid error anymore, and all
1280       functions for which it was the only gras_error_t return value are
1281       changed. They now return void, or there result directly. 
1282     This simplify the API a lot.
1283
1284 2004-09-29 Martin Quinson
1285   - Re-enable raw sockets.
1286     Created by gras_socket_{client,server}_ext;
1287     Used with gras_raw_{send,recv}
1288     No select possible.
1289     
1290     It should allow to kill the last bits of gras first version soon.
1291   
1292     This is not completely satisfactory yet (duplicate code with
1293      chunk_{send,recv}; a bit out of the plugin mechanism), but it should
1294      work. 
1295
1296   - Simplify transport plugin (internal) interface by not passing any
1297     argument to _server and _client, but embedding them in the socket
1298     struct directly. 
1299
1300 2004-09-28 Martin Quinson
1301   - Finish the port to AIX.
1302     autoconf was my problem (segfault within the malloc replacement
1303     function. No idea why)
1304         
1305 2004-09-16 Martin Quinson
1306   - Fix some size_t madness on 64bit architectures.
1307   
1308 2004-09-08 Martin Quinson
1309   - Reduce the number of system headers loaded, overload some more system
1310     calls (such as malloc to cast the result of the system one, and work
1311     properly on AIX)
1312   - Fix and reintroduce the config support
1313
1314 2004-09-07 Martin Quinson
1315   - Source code reorganization to allow Arnaud to surf all over there.
1316   - Allow to document the logging categories.
1317   - Remove all uppercase from logging categories and useless cleanup in names.
1318
1319 2004-08-18 Martin Quinson
1320   Version 0.6.2 (protocol not changed; API changed)
1321   - Interface cleanup: gras_msgtype_by_name returns the type (instead of a
1322      gras_error_t), and NULL when not found. Functions expecting a msgtype
1323      as argument (msg_wait; msg_send) deal with NULL argument by providing a
1324      hopefully usefull message.
1325   - Portability to prehistoric sparcs again
1326
1327 2004-08-17 Martin Quinson
1328   Version 0.6.1 (protocol not changed; ABI not changed)
1329   - prealloc some buffers to speed things up
1330
1331 2004-08-11 Martin Quinson
1332   Version 0.6 (protocol not changed; ABI expended)
1333   - The parsing macro can deal with the references, provided that you add
1334     the relevant annotations (using GRAS_ANNOTE(size,field_name))
1335
1336 2004-08-09 Martin Quinson
1337   Version 0.5 (protocol not changed; ABI changed)
1338   - Allow to off turn the cycle detection code in data exchange at
1339     compilation time. It should be at run time, but I'm short of time (and
1340     the config stuff is still broken). That way, we keep dict out of the
1341     critical path, which is good because the performance is poor:
1342      - search not dichotomial yet
1343      - dynar give no way to access their content and memcpy everytime
1344   - In composed data description (struct, ref and so on), stop foolness of
1345     keeping the subtype's ID, but store the type itself. This keeps sets out
1346     of the critical path, which is good since they rely on dynar and
1347     dictionnaries. The only loose of that is that we cannot detect the
1348     redeclaration of a structure/union with another content (but I'm not sure 
1349     the code detected well this error before anyway). We still can detect
1350     the redefinition discrepancy for the other types.
1351   - Use a whole bunch of optimisation flags (plus -fno-strict-aliasing since
1352     it breaks the code because of type-punning used all over the place).
1353     This breaks on all non-gcc architectures (for now).
1354     
1355   All those changes (plus the buffer of last time) allow me to gain 2 order
1356   of magnitude on cruel tests consisting of 800000 array of integers on two
1357   level of a hierarchical structure (200 secondes -> 4 secondes)
1358   
1359   API change:
1360     - the selector of reference must now return the type it points to, not
1361       the ID of this type.
1362
1363 2004-08-06 Martin Quinson
1364   Version 0.4 (protocol changed; ABI not changed)
1365   - Allow to pass --gras-log argument to processes in simulation mode. Really.
1366   - New debugging level: trace (under debug) to see effect of GRAS_IN/OUT
1367   - Implement a buffer transport, and use it by default (it relies on tcp in
1368      real life and on sg in simulation).
1369     That's a bit hackish since I had a new field to the structure to store
1370      its data without interfering with the subtype ones. Inheritance
1371      is tricky in C. And that's a kind of reverse inheritance with one class
1372      derivating two classes. Or maybe a game with java interfaces. Anyway,
1373      that's damn hard in C (at least).
1374     Moreover, I got tired while trying to ensure plugin separation and
1375      genericity in SG mode. MSG wants me to do weird things, so let's go for
1376      cruel hacks (temporarily of course ;).
1377      See comment in transport_private.h:71
1378   - do not include all the _interface headers in private but in the files
1379     which really need them (to cut the compilation time when they are
1380     modified) 
1381
1382 2004-07-26 Martin Quinson
1383   Version 0.3 (protocol not changed; ABI changed)
1384   - Major overhault of the datadesc interface to simplify it:
1385     - shorted the function names:
1386       s/gras_datadesc_declare_struct/gras_datadesc_struct/ and so on
1387     - add a trivial way to push/pop integers into the cbps without malloc.
1388       This allows to make really generic sub_type description, which simply
1389         pop their size of the stack.
1390     - add a function gras_datadesc_ref_pop_arr() which does what users want
1391       most of the time: Declare a dynamic array (which pops its size of the
1392       stack) and declare a reference to it. Poor name, but anyway.
1393     - kill the post-send callback, add a post-receive one
1394     
1395 2004-07-23 Martin Quinson
1396   Version 0.2 (protocol changed; ABI changed)
1397   - add some testing for cpbs in the test cases, and fix some more bugs.
1398     This invalidate again the little64 data file, since I cannot regenerate
1399     it myself.
1400   - remove an awfull optimization in the logging stuff, allowing me to:
1401     - understand it again
1402     - learn gcc how to check that the argument match the provided format
1403     - fix all errors revealed by gcc after that
1404   - internal keys of dict are not \0 terminated. Deal with it properly in
1405     loggings instead of segfaulting when the user want to see the logs :-/
1406
1407 2004-07-22 Martin Quinson
1408   - Fix some stupid bug preventing cbps (callback postit) from working
1409
1410 2004-07-21 Martin Quinson
1411   - Some documentation cleanups
1412   - remove the useless last argument of msgtype_declare
1413   - rename the Virtu functions to fit into the 'os' namespace
1414   - move headers src/include -> src/include/gras/ and stop fooling with 
1415     gras -> . symbolic link
1416   - make distcheck is now successful
1417
1418 2004-07-19 Martin Quinson
1419   Version 0.1.1
1420   - Build shared library also
1421   - Install html doc to the right location
1422   - stop removing maintainer files in make clean
1423   - build tests only on make check
1424   
1425 2004-07-13 Martin Quinson
1426   version 0.1
1427   - No major issue in previous version => change versionning schema
1428   - Re-enable little64 convertion test now that Abdou kindly regenerated the
1429     corresponding dataset.
1430   
1431 2004-07-11 Martin Quinson
1432   version 0.0.4
1433   - Get it working with any kind of structure (we can compute the padding
1434     bytes remotely for all the architectures I have access to)
1435   - Implement the structure parsing macro (still not quite robust/complete)
1436   - Improvement to the remote testing toysuite
1437   
1438 2004-07-10 Martin Quinson
1439  [autoconf mechanism]
1440   - get ride of a bunch of deprecated macros
1441   - actually run the test for two-compliment, not only compile it :-/
1442   - test whether the structures get packed (and bail out if yes. Damn.
1443     Alignment is a serious matter)
1444   - test whether the structures get compacted (but respecting the alignment
1445     constraints of each types)
1446   - test whether the array fields of structures can straddle alignment boundaries
1447  [base]
1448   - Damnit, double are bigger than float (typo in creation of 'double' datadesc)
1449     (took me 2 hours to find that bug, looking at the wrong place)
1450   - Add gras_datadesc_declare_{union,struct}_close(). They must be used
1451     before sending/receiving and are used to compute the offsets of fields
1452   - Given that padding size depend even on compiler options, keep track of
1453     alignment and aligned_size only for the current architecture. Not a big
1454     deal since we send structure fields one after the other (seems
1455     reasonable).    
1456   - Add the datastructure used for IEEE paper by the PBIO guys to the test
1457     program, let it work on linux/gcc/little32. portability todo.
1458
1459 2004-07-08 Martin Quinson
1460   - import and improve remote compilation support from FAST
1461   - make sure make check works on half a dozen of machines out there
1462
1463 2004-07-07 Martin Quinson
1464  Let's say it's version 0.0.3 ;)
1465   - Implement conversions (yuhu!)
1466   - Let it work on solaris (beside conversion, of course)
1467   - Stupid me, using rand() to generate the conversion datatests in not wise.
1468
1469 2004-07-06 Martin Quinson
1470   - Let make dist work, since I'm gonna need it to compile on remote hosts
1471   - Let Tests/datadesc_usage write the architecture on which the file was
1472     generated as first byte.
1473   - Add PowerPC (being also IRIX64), SPARC (also power4) and ALPHA
1474     architecture descriptions. 
1475   - Add datadesc_usage.{i386,ppc,sparc} files being the result of execution
1476     on those architectures.
1477   - Optimization: send/recv array of scalar in one shoot
1478
1479 2004-07-05 Martin Quinson
1480   - YEAH! GRAS/SG and GRAS/RL are both able to run the ping example !
1481   
1482   - Plug a whole bunch of memleaks
1483   - each process now have to call gras_{init,exit}. One day, their log
1484     settings will be separated
1485   - Continue the code factorisation between SG, RL and common in Transport.
1486
1487 2004-07-04 Martin Quinson
1488  [Transport]
1489   - Redistribution between SG and RL. 
1490     We wanna have to accept in SG, so move accepted related parts of RL in
1491     the common part. (more precisely, the dynar of all known sockets is no
1492     more a static in transport.c, but part of the process_data)
1493  [Core/module.c] 
1494  [gras_stub_generator]
1495   - Bug fix: Do call gras_process_init from gras_init (wasnt called in RL).
1496
1497 2004-07-03 Martin Quinson
1498   - Create a new log channel tbx containing dict, set, log, dynar (to shut
1499     them all up in one shot)
1500  [DataDesc]
1501   - Fix the ugly case of reference to dynamic array.
1502   - New (semi-public) function gras_datadesc_size to allow the messaging
1503     layer to malloc the needed space for the buffer.
1504  [Transport]
1505   - gras_socket_close now expect the socket to close (and not its address to
1506     put NULL in it after it). This is because the socket passed to handlers
1507     is one of their argument (=> not writable).
1508  [Messaging]
1509   - propagate the interface cleanup from last week in datadesc, ie remove a
1510     superfluous level of indirection. User pass adress of variable
1511     containing data (both when sending and receiving), and not of a variable
1512     being a pointer to the data. Let's say that I like it better ;)
1513       The price for that is constructs like "int msg=*(int*)payload" in
1514     handlers, but it's a fine price, IMHO.
1515  [examples/ping]
1516   - Let it work in RL (yuhu)
1517
1518 2004-06-21 Martin Quinson
1519  [Transport]
1520    - porting SG plugin and SG select to new standards (works almost).
1521    - plug memleaks and fix bugs around.
1522    
1523  [DataDesc] 
1524    - cleanup the prototype of data recv and force users to specify when they 
1525      want to handle references to objects. Test case working even for cycles.
1526    - plug memleaks. Valgrind is perfectly ok with this.
1527
1528 2004-06-12 Martin Quinson
1529  [Transport] 
1530    - cleanup the separation between plugin and main code in plugin creation 
1531
1532 2004-06-11 Martin Quinson
1533  [Transport]
1534    - Reput hook for raw sockets, needed for BW experiments
1535    - kill a few lines of dead code
1536  [Data description] Interface cleanup
1537    - gras_datadesc_by_name returns the searched type or NULL.
1538      That way, no variable is needed to use a type desc once, which makes
1539       the code clearer.
1540    - gras_datadesc_declare_[struct|union]_append_name is removed. The last
1541       two parameters were strings (field name, type name), leading to
1542       common errors.
1543  [Dicos] Interface cleanup
1544    - gras_dico_retrieve -> gras_dico_get ; gras_dico_insert -> gras_dico_set 
1545      This is consistant with the dynar API.
1546
1547 2004-04-21 Martin Quinson
1548  [Messaging]
1549    - Porting to new standards.
1550  [Data description]
1551    - interface cleanup. 
1552      There is no bag anymore, no need to take extra provision to mask the
1553        pointers behind "ID". 
1554      Better splitup of functions between files create/exchange/convert.
1555        This is still a bit artificial since convert and receive are so
1556        interleaved, but anyway.
1557  [Virtu(process)]
1558    - add a queued message list to procdata (the ones not matching criteria
1559      in msg_wait)
1560    - factorize some more code between SG and RL wrt procdata
1561  [Tests]
1562    - use gras_exit in example to track memleaks
1563    - get rid of gs_example now that GS is properly integrated into gras
1564    - update run_test to integrate the lastest tests (datadesc)
1565  [Logging]
1566    - rename WARNINGn macros to WARNn since it prooved error-prone
1567      
1568 2004-04-19 Martin Quinson
1569  [Data description]
1570    - register init/exit functions within gras module mechanism   
1571    - send/receive function. 
1572    Convertion is not implemented, but short-cutted if not needed.
1573    struct/array elements are sent one by one (instead of block-wise), but
1574      nobody really cares (yet). Get a prototype before optimizing.
1575    - tests (using a file socket) for DD send/receive on:
1576      - base types: int, float
1577      - array: fixed size, string (ie ref to dynamic string)
1578      - structure: homogeneous, heterogeneous
1579      - chained list, graph with cycle
1580    Believe it or not, valgrind is not too unhappy with the results. The
1581     cycle happily segfaults, but the others are ok. And I'm sick of pointers
1582     for now.
1583  [Transport]
1584    [File plugin] 
1585      - Bugfix when using a filename explicitely (instead of '-')
1586
1587 2004-04-09 Martin Quinson
1588  [Transport plugins]
1589    - factorize more code between RL and SG in socket creation
1590    - Complete the implementation and tests of:
1591      o TCP
1592      o file (only in RL, and mainly for debugging)
1593      
1594      I lost 3 days to design a portable address resolver, and then decided
1595        that the prototype mainly have to run on my box.
1596      Addressing portability too early may be like optimizing too early :-/
1597  [Tests]
1598    - use gras_init in the Tests instead of the crappy parse_log_opt 
1599      (the latter function is removed)
1600  [Conditional execution]
1601    - New functions: gras_if_RL/gras_if_SG (basic support for this)
1602  [Code reorganisation]
1603   - Get rid of libgrasutils.a since it makes more trouble than it solves.
1604     Build examples against the RL library, since there is no way to disable
1605     its creation for now.
1606
1607 For information, the beginning of coding on GRAS was back in june
1608 2003. I guess that every line has been rewritten at least twice since
1609 then.