Logo AND Algorithmique Numérique Distribuée

Public GIT Repository
try to initialize the class on demand
[simgrid.git] / src / surf / HostImpl.cpp
1 /* Copyright (c) 2013-2016. The SimGrid Team. All rights reserved.          */
2
3 /* This program is free software; you can redistribute it and/or modify it
4  * under the terms of the license (GNU LGPL) which comes with this package. */
5
6 #include <simgrid/s4u/host.hpp>
7
8 #include "src/simix/smx_private.h"
9 #include "cpu_cas01.hpp"
10 #include "src/surf/HostImpl.hpp"
11 #include "simgrid/sg_config.h"
12
13 #include "network_interface.hpp"
14 #include "virtual_machine.hpp"
15
16 XBT_LOG_NEW_DEFAULT_SUBCATEGORY(surf_host, surf, "Logging specific to the SURF host module");
17
18 simgrid::surf::HostModel *surf_host_model = nullptr;
19
20 /*************
21  * Callbacks *
22  *************/
23
24 namespace simgrid {
25 namespace surf {
26
27 simgrid::xbt::Extension<simgrid::s4u::Host, HostImpl> HostImpl::EXTENSION_ID;
28
29 /*********
30  * Model *
31  *********/
32 HostImpl *HostModel::createHost(const char *name, kernel::routing::NetCard *netElm, Cpu *cpu){
33   xbt_dynar_t storageList = (xbt_dynar_t)xbt_lib_get_or_null(storage_lib, name, ROUTING_STORAGE_HOST_LEVEL);
34
35   HostImpl *host = new simgrid::surf::HostImpl(surf_host_model, name, storageList, cpu);
36   XBT_DEBUG("Create host %s with %ld mounted disks", name, xbt_dynar_length(host->p_storage));
37   return host;
38 }
39
40 /* Each VM has a dummy CPU action on the PM layer. This CPU action works as the
41  * constraint (capacity) of the VM in the PM layer. If the VM does not have any
42  * active task, the dummy CPU action must be deactivated, so that the VM does
43  * not get any CPU share in the PM layer. */
44 void HostModel::adjustWeightOfDummyCpuActions()
45 {
46   /* iterate for all virtual machines */
47   for (VMModel::vm_list_t::iterator iter =
48          VMModel::ws_vms.begin();
49        iter !=  VMModel::ws_vms.end(); ++iter) {
50
51     VirtualMachine *ws_vm = &*iter;
52     Cpu *cpu = ws_vm->p_cpu;
53
54     int is_active = lmm_constraint_used(cpu->getModel()->getMaxminSystem(), cpu->getConstraint());
55
56     if (is_active) {
57       /* some tasks exist on this VM */
58       XBT_DEBUG("set the weight of the dummy CPU action on PM to 1");
59
60       /* FIXME: we should use lmm_update_variable_weight() ? */
61       /* FIXME: If we assign 1.05 and 0.05, the system makes apparently wrong values. */
62       ws_vm->action_->setPriority(1);
63
64     } else {
65       /* no task exits on this VM */
66       XBT_DEBUG("set the weight of the dummy CPU action on PM to 0");
67
68       ws_vm->action_->setPriority(0);
69     }
70   }
71 }
72
73 Action *HostModel::executeParallelTask(int host_nb,
74     sg_host_t *host_list,
75     double *flops_amount,
76     double *bytes_amount,
77     double rate)
78 {
79 #define cost_or_zero(array,pos) ((array)?(array)[pos]:0.0)
80   Action *action =nullptr;
81   if ((host_nb == 1)
82       && (cost_or_zero(bytes_amount, 0) == 0.0)){
83     action = host_list[0]->pimpl_cpu->execution_start(flops_amount[0]);
84   } else if ((host_nb == 1)
85            && (cost_or_zero(flops_amount, 0) == 0.0)) {
86     action = surf_network_model->communicate(host_list[0]->pimpl_netcard,
87                                          host_list[0]->pimpl_netcard,
88                        bytes_amount[0], rate);
89   } else if ((host_nb == 2)
90              && (cost_or_zero(flops_amount, 0) == 0.0)
91              && (cost_or_zero(flops_amount, 1) == 0.0)) {
92     int i,nb = 0;
93     double value = 0.0;
94
95     for (i = 0; i < host_nb * host_nb; i++) {
96       if (cost_or_zero(bytes_amount, i) > 0.0) {
97         nb++;
98         value = cost_or_zero(bytes_amount, i);
99       }
100     }
101     if (nb == 1) {
102       action = surf_network_model->communicate(host_list[0]->pimpl_netcard, host_list[1]->pimpl_netcard, value, rate);
103     } else if (nb == 0) {
104        xbt_die("Cannot have a communication with no flop to exchange in this model. You should consider using the ptask model");
105     } else {       
106        xbt_die("Cannot have a communication that is not a simple point-to-point in this model. You should consider using the ptask model");
107     }
108   } else 
109     xbt_die("This model only accepts one of the following. You should consider using the ptask model for the other cases.\n - execution with one host only and no communication\n - Self-comms with one host only\n - Communications with two hosts and no computation");
110 #undef cost_or_zero
111   xbt_free(host_list);
112   return action;
113 }
114
115 /************
116  * Resource *
117  ************/
118
119
120 void HostImpl::classInit()
121 {
122 }
123
124 HostImpl::HostImpl(simgrid::surf::HostModel *model, const char *name, xbt_dynar_t storage, Cpu *cpu)
125  : Resource(model, name)
126  , PropertyHolder(nullptr)
127  , p_storage(storage), p_cpu(cpu)
128 {
129   if (!EXTENSION_ID.valid())
130     EXTENSION_ID = simgrid::s4u::Host::extension_create<simgrid::surf::HostImpl>();
131   p_params.ramsize = 0;
132 }
133
134 HostImpl::HostImpl(simgrid::surf::HostModel *model, const char *name, lmm_constraint_t constraint,
135                  xbt_dynar_t storage, Cpu *cpu)
136  : Resource(model, name, constraint)
137  , PropertyHolder(nullptr)
138  , p_storage(storage), p_cpu(cpu)
139 {
140   p_params.ramsize = 0;
141 }
142
143 /** @brief use destroy() instead of this destructor */
144 HostImpl::~HostImpl()
145 {
146 }
147
148 void HostImpl::attach(simgrid::s4u::Host* host)
149 {
150   if (piface != nullptr)
151     xbt_die("Already attached to host %s", host->name().c_str());
152   host->extension_set(this);
153   piface = host;
154 }
155
156 bool HostImpl::isOn() const {
157   return p_cpu->isOn();
158 }
159 bool HostImpl::isOff() const {
160   return p_cpu->isOff();
161 }
162 void HostImpl::turnOn(){
163   if (isOff()) {
164     p_cpu->turnOn();
165     simgrid::s4u::Host::onStateChange(*this->piface);
166   }
167 }
168 void HostImpl::turnOff(){
169   if (isOn()) {
170     p_cpu->turnOff();
171     simgrid::s4u::Host::onStateChange(*this->piface);
172   }
173 }
174
175 simgrid::surf::Storage *HostImpl::findStorageOnMountList(const char* mount)
176 {
177   simgrid::surf::Storage *st = nullptr;
178   s_mount_t mnt;
179   unsigned int cursor;
180
181   XBT_DEBUG("Search for storage name '%s' on '%s'", mount, getName());
182   xbt_dynar_foreach(p_storage,cursor,mnt){
183     XBT_DEBUG("See '%s'",mnt.name);
184     if(!strcmp(mount,mnt.name)){
185       st = static_cast<simgrid::surf::Storage*>(mnt.storage);
186       break;
187     }
188   }
189   if(!st)
190     xbt_die("Can't find mount '%s' for '%s'", mount, getName());
191   return st;
192 }
193
194 xbt_dict_t HostImpl::getMountedStorageList()
195 {
196   s_mount_t mnt;
197   unsigned int i;
198   xbt_dict_t storage_list = xbt_dict_new_homogeneous(nullptr);
199   char *storage_name = nullptr;
200
201   xbt_dynar_foreach(p_storage,i,mnt){
202     storage_name = (char *)static_cast<simgrid::surf::Storage*>(mnt.storage)->getName();
203     xbt_dict_set(storage_list,mnt.name,storage_name,nullptr);
204   }
205   return storage_list;
206 }
207
208 xbt_dynar_t HostImpl::getAttachedStorageList()
209 {
210   xbt_lib_cursor_t cursor;
211   char *key;
212   void **data;
213   xbt_dynar_t result = xbt_dynar_new(sizeof(void*), nullptr);
214   xbt_lib_foreach(storage_lib, cursor, key, data) {
215     if(xbt_lib_get_level(xbt_lib_get_elm_or_null(storage_lib, key), SURF_STORAGE_LEVEL) != nullptr) {
216     simgrid::surf::Storage *storage = static_cast<simgrid::surf::Storage*>(xbt_lib_get_level(xbt_lib_get_elm_or_null(storage_lib, key), SURF_STORAGE_LEVEL));
217     if(!strcmp((const char*)storage->attach_,this->getName())){
218       xbt_dynar_push_as(result, void *, (void*)storage->getName());
219     }
220   }
221   }
222   return result;
223 }
224
225 Action *HostImpl::open(const char* fullpath) {
226
227   simgrid::surf::Storage *st = nullptr;
228   s_mount_t mnt;
229   unsigned int cursor;
230   size_t longest_prefix_length = 0;
231   char *path = nullptr;
232   char *file_mount_name = nullptr;
233   char *mount_name = nullptr;
234
235   XBT_DEBUG("Search for storage name for '%s' on '%s'", fullpath, getName());
236   xbt_dynar_foreach(p_storage,cursor,mnt)
237   {
238     XBT_DEBUG("See '%s'",mnt.name);
239     file_mount_name = (char *) xbt_malloc ((strlen(mnt.name)+1));
240     strncpy(file_mount_name,fullpath,strlen(mnt.name)+1);
241     file_mount_name[strlen(mnt.name)] = '\0';
242
243     if(!strcmp(file_mount_name,mnt.name) && strlen(mnt.name)>longest_prefix_length)
244     {/* The current mount name is found in the full path and is bigger than the previous*/
245       longest_prefix_length = strlen(mnt.name);
246       st = static_cast<simgrid::surf::Storage*>(mnt.storage);
247     }
248     free(file_mount_name);
249   }
250   if(longest_prefix_length>0)
251   { /* Mount point found, split fullpath into mount_name and path+filename*/
252   path = (char *) xbt_malloc ((strlen(fullpath)-longest_prefix_length+1));
253   mount_name = (char *) xbt_malloc ((longest_prefix_length+1));
254   strncpy(mount_name, fullpath, longest_prefix_length+1);
255   strncpy(path, fullpath+longest_prefix_length, strlen(fullpath)-longest_prefix_length+1);
256   path[strlen(fullpath)-longest_prefix_length] = '\0';
257   mount_name[longest_prefix_length] = '\0';
258   }
259   else
260     xbt_die("Can't find mount point for '%s' on '%s'", fullpath, getName());
261
262   XBT_DEBUG("OPEN %s on disk '%s'",path, st->getName());
263   Action *action = st->open((const char*)mount_name, (const char*)path);
264   free((char*)path);
265   free((char*)mount_name);
266   return action;
267 }
268
269 Action *HostImpl::close(surf_file_t fd) {
270   simgrid::surf::Storage *st = findStorageOnMountList(fd->mount);
271   XBT_DEBUG("CLOSE %s on disk '%s'",fd->name, st->getName());
272   return st->close(fd);
273 }
274
275 Action *HostImpl::read(surf_file_t fd, sg_size_t size) {
276   simgrid::surf::Storage *st = findStorageOnMountList(fd->mount);
277   XBT_DEBUG("READ %s on disk '%s'",fd->name, st->getName());
278   return st->read(fd, size);
279 }
280
281 Action *HostImpl::write(surf_file_t fd, sg_size_t size) {
282   simgrid::surf::Storage *st = findStorageOnMountList(fd->mount);
283   XBT_DEBUG("WRITE %s on disk '%s'",fd->name, st->getName());
284   return st->write(fd, size);
285 }
286
287 int HostImpl::unlink(surf_file_t fd) {
288   if (!fd){
289     XBT_WARN("No such file descriptor. Impossible to unlink");
290     return -1;
291   } else {
292
293     simgrid::surf::Storage *st = findStorageOnMountList(fd->mount);
294     /* Check if the file is on this storage */
295     if (!xbt_dict_get_or_null(st->content_, fd->name)){
296       XBT_WARN("File %s is not on disk %s. Impossible to unlink", fd->name,
297           st->getName());
298       return -1;
299     } else {
300       XBT_DEBUG("UNLINK %s on disk '%s'",fd->name, st->getName());
301       st->usedSize_ -= fd->size;
302
303       // Remove the file from storage
304       xbt_dict_remove(st->content_, fd->name);
305
306       xbt_free(fd->name);
307       xbt_free(fd->mount);
308       xbt_free(fd);
309       return 0;
310     }
311   }
312 }
313
314 sg_size_t HostImpl::getSize(surf_file_t fd){
315   return fd->size;
316 }
317
318 xbt_dynar_t HostImpl::getInfo( surf_file_t fd)
319 {
320   simgrid::surf::Storage *st = findStorageOnMountList(fd->mount);
321   sg_size_t *psize = xbt_new(sg_size_t, 1);
322   *psize = fd->size;
323   xbt_dynar_t info = xbt_dynar_new(sizeof(void*), nullptr);
324   xbt_dynar_push_as(info, sg_size_t *, psize);
325   xbt_dynar_push_as(info, void *, fd->mount);
326   xbt_dynar_push_as(info, void *, (void *)st->getName());
327   xbt_dynar_push_as(info, void *, st->typeId_);
328   xbt_dynar_push_as(info, void *, st->contentType_);
329
330   return info;
331 }
332
333 sg_size_t HostImpl::fileTell(surf_file_t fd){
334   return fd->current_position;
335 }
336
337 int HostImpl::fileSeek(surf_file_t fd, sg_offset_t offset, int origin){
338
339   switch (origin) {
340   case SEEK_SET:
341     fd->current_position = offset;
342     return 0;
343   case SEEK_CUR:
344     fd->current_position += offset;
345     return 0;
346   case SEEK_END:
347     fd->current_position = fd->size + offset;
348     return 0;
349   default:
350     return -1;
351   }
352 }
353
354 int HostImpl::fileMove(surf_file_t fd, const char* fullpath){
355   /* Check if the new full path is on the same mount point */
356   if(!strncmp((const char*)fd->mount, fullpath, strlen(fd->mount))) {
357     sg_size_t *psize, *new_psize;
358     psize = (sg_size_t*)
359         xbt_dict_get_or_null(findStorageOnMountList(fd->mount)->content_,
360                              fd->name);
361     new_psize = xbt_new(sg_size_t, 1);
362     *new_psize = *psize;
363     if (psize){// src file exists
364       xbt_dict_remove(findStorageOnMountList(fd->mount)->content_, fd->name);
365       char *path = (char *) xbt_malloc ((strlen(fullpath)-strlen(fd->mount)+1));
366       strncpy(path, fullpath+strlen(fd->mount),
367               strlen(fullpath)-strlen(fd->mount)+1);
368       xbt_dict_set(findStorageOnMountList(fd->mount)->content_, path,
369                    new_psize,nullptr);
370       XBT_DEBUG("Move file from %s to %s, size '%llu'",fd->name, fullpath, *psize);
371       free(path);
372       return 0;
373     } else {
374       XBT_WARN("File %s doesn't exist", fd->name);
375       return -1;
376     }
377   } else {
378     XBT_WARN("New full path %s is not on the same mount point: %s. Action has been canceled.",
379              fullpath, fd->mount);
380     return -1;
381   }
382 }
383
384 xbt_dynar_t HostImpl::getVms()
385 {
386   xbt_dynar_t dyn = xbt_dynar_new(sizeof(simgrid::surf::VirtualMachine*), nullptr);
387
388   /* iterate for all virtual machines */
389   for (simgrid::surf::VMModel::vm_list_t::iterator iter =
390          simgrid::surf::VMModel::ws_vms.begin();
391        iter !=  simgrid::surf::VMModel::ws_vms.end(); ++iter) {
392
393     simgrid::surf::VirtualMachine *ws_vm = &*iter;
394     if (this == ws_vm->getPm()->extension(simgrid::surf::HostImpl::EXTENSION_ID))
395       xbt_dynar_push(dyn, &ws_vm);
396   }
397
398   return dyn;
399 }
400
401 void HostImpl::getParams(vm_params_t params)
402 {
403   *params = p_params;
404 }
405
406 void HostImpl::setParams(vm_params_t params)
407 {
408   /* may check something here. */
409   p_params = *params;
410 }
411
412 }}