Logo AND Algorithmique Numérique Distribuée

Public GIT Repository
align namespaces on directories for kernel::routing
[simgrid.git] / src / surf / HostImpl.cpp
1 /* Copyright (c) 2013-2016. The SimGrid Team. All rights reserved.          */
2
3 /* This program is free software; you can redistribute it and/or modify it
4  * under the terms of the license (GNU LGPL) which comes with this package. */
5
6 #include <simgrid/s4u/host.hpp>
7
8 #include "src/simix/smx_private.h"
9 #include "cpu_cas01.hpp"
10 #include "src/surf/HostImpl.hpp"
11 #include "simgrid/sg_config.h"
12
13 #include "network_interface.hpp"
14 #include "virtual_machine.hpp"
15
16 XBT_LOG_NEW_DEFAULT_SUBCATEGORY(surf_host, surf,
17                                 "Logging specific to the SURF host module");
18
19 simgrid::surf::HostModel *surf_host_model = nullptr;
20
21 /*************
22  * Callbacks *
23  *************/
24
25 namespace simgrid {
26 namespace surf {
27
28 simgrid::xbt::Extension<simgrid::s4u::Host, HostImpl> HostImpl::EXTENSION_ID;
29
30 /*********
31  * Model *
32  *********/
33 HostImpl *HostModel::createHost(const char *name, kernel::routing::NetCard *netElm, Cpu *cpu){
34   xbt_dynar_t storageList = (xbt_dynar_t)xbt_lib_get_or_null(storage_lib, name, ROUTING_STORAGE_HOST_LEVEL);
35
36   HostImpl *host = new simgrid::surf::HostImpl(surf_host_model, name, storageList, cpu);
37   XBT_DEBUG("Create host %s with %ld mounted disks", name, xbt_dynar_length(host->p_storage));
38   return host;
39 }
40
41 /* Each VM has a dummy CPU action on the PM layer. This CPU action works as the
42  * constraint (capacity) of the VM in the PM layer. If the VM does not have any
43  * active task, the dummy CPU action must be deactivated, so that the VM does
44  * not get any CPU share in the PM layer. */
45 void HostModel::adjustWeightOfDummyCpuActions()
46 {
47   /* iterate for all virtual machines */
48   for (VMModel::vm_list_t::iterator iter =
49          VMModel::ws_vms.begin();
50        iter !=  VMModel::ws_vms.end(); ++iter) {
51
52     VirtualMachine *ws_vm = &*iter;
53     Cpu *cpu = ws_vm->p_cpu;
54
55     int is_active = lmm_constraint_used(cpu->getModel()->getMaxminSystem(), cpu->getConstraint());
56
57     if (is_active) {
58       /* some tasks exist on this VM */
59       XBT_DEBUG("set the weight of the dummy CPU action on PM to 1");
60
61       /* FIXME: we should use lmm_update_variable_weight() ? */
62       /* FIXME: If we assign 1.05 and 0.05, the system makes apparently wrong values. */
63       ws_vm->action_->setPriority(1);
64
65     } else {
66       /* no task exits on this VM */
67       XBT_DEBUG("set the weight of the dummy CPU action on PM to 0");
68
69       ws_vm->action_->setPriority(0);
70     }
71   }
72 }
73
74 Action *HostModel::executeParallelTask(int host_nb,
75     sg_host_t *host_list,
76     double *flops_amount,
77     double *bytes_amount,
78     double rate)
79 {
80 #define cost_or_zero(array,pos) ((array)?(array)[pos]:0.0)
81   Action *action =nullptr;
82   if ((host_nb == 1)
83       && (cost_or_zero(bytes_amount, 0) == 0.0)){
84     action = host_list[0]->pimpl_cpu->execution_start(flops_amount[0]);
85   } else if ((host_nb == 1)
86            && (cost_or_zero(flops_amount, 0) == 0.0)) {
87     action = surf_network_model->communicate(host_list[0]->pimpl_netcard,
88                                          host_list[0]->pimpl_netcard,
89                        bytes_amount[0], rate);
90   } else if ((host_nb == 2)
91              && (cost_or_zero(flops_amount, 0) == 0.0)
92              && (cost_or_zero(flops_amount, 1) == 0.0)) {
93     int i,nb = 0;
94     double value = 0.0;
95
96     for (i = 0; i < host_nb * host_nb; i++) {
97       if (cost_or_zero(bytes_amount, i) > 0.0) {
98         nb++;
99         value = cost_or_zero(bytes_amount, i);
100       }
101     }
102     if (nb == 1) {
103       action = surf_network_model->communicate(host_list[0]->pimpl_netcard,
104                                                host_list[1]->pimpl_netcard,
105                                                value, rate);
106     } else if (nb == 0) {
107        xbt_die("Cannot have a communication with no flop to exchange in this model. You should consider using the ptask model");
108     } else {       
109        xbt_die("Cannot have a communication that is not a simple point-to-point in this model. You should consider using the ptask model");
110     }
111   } else 
112     xbt_die("This model only accepts one of the following. You should consider using the ptask model for the other cases.\n - execution with one host only and no communication\n - Self-comms with one host only\n - Communications with two hosts and no computation");
113 #undef cost_or_zero
114   xbt_free(host_list);
115   return action;
116 }
117
118 /************
119  * Resource *
120  ************/
121
122
123 void HostImpl::classInit()
124 {
125   if (!EXTENSION_ID.valid()) {
126     EXTENSION_ID = simgrid::s4u::Host::extension_create<simgrid::surf::HostImpl>();
127   }
128 }
129
130 HostImpl::HostImpl(simgrid::surf::HostModel *model, const char *name, xbt_dynar_t storage, Cpu *cpu)
131  : Resource(model, name)
132  , PropertyHolder(nullptr)
133  , p_storage(storage), p_cpu(cpu)
134 {
135   p_params.ramsize = 0;
136 }
137
138 HostImpl::HostImpl(simgrid::surf::HostModel *model, const char *name, lmm_constraint_t constraint,
139                  xbt_dynar_t storage, Cpu *cpu)
140  : Resource(model, name, constraint)
141  , PropertyHolder(nullptr)
142  , p_storage(storage), p_cpu(cpu)
143 {
144   p_params.ramsize = 0;
145 }
146
147 /** @brief use destroy() instead of this destructor */
148 HostImpl::~HostImpl()
149 {
150 }
151
152 void HostImpl::attach(simgrid::s4u::Host* host)
153 {
154   if (piface != nullptr)
155     xbt_die("Already attached to host %s", host->name().c_str());
156   host->extension_set(this);
157   piface = host;
158 }
159
160 bool HostImpl::isOn() const {
161   return p_cpu->isOn();
162 }
163 bool HostImpl::isOff() const {
164   return p_cpu->isOff();
165 }
166 void HostImpl::turnOn(){
167   if (isOff()) {
168     p_cpu->turnOn();
169     simgrid::s4u::Host::onStateChange(*this->piface);
170   }
171 }
172 void HostImpl::turnOff(){
173   if (isOn()) {
174     p_cpu->turnOff();
175     simgrid::s4u::Host::onStateChange(*this->piface);
176   }
177 }
178
179 simgrid::surf::Storage *HostImpl::findStorageOnMountList(const char* mount)
180 {
181   simgrid::surf::Storage *st = nullptr;
182   s_mount_t mnt;
183   unsigned int cursor;
184
185   XBT_DEBUG("Search for storage name '%s' on '%s'", mount, getName());
186   xbt_dynar_foreach(p_storage,cursor,mnt)
187   {
188     XBT_DEBUG("See '%s'",mnt.name);
189     if(!strcmp(mount,mnt.name)){
190       st = static_cast<simgrid::surf::Storage*>(mnt.storage);
191       break;
192     }
193   }
194   if(!st) xbt_die("Can't find mount '%s' for '%s'", mount, getName());
195   return st;
196 }
197
198 xbt_dict_t HostImpl::getMountedStorageList()
199 {
200   s_mount_t mnt;
201   unsigned int i;
202   xbt_dict_t storage_list = xbt_dict_new_homogeneous(nullptr);
203   char *storage_name = nullptr;
204
205   xbt_dynar_foreach(p_storage,i,mnt){
206     storage_name = (char *)static_cast<simgrid::surf::Storage*>(mnt.storage)->getName();
207     xbt_dict_set(storage_list,mnt.name,storage_name,nullptr);
208   }
209   return storage_list;
210 }
211
212 xbt_dynar_t HostImpl::getAttachedStorageList()
213 {
214   xbt_lib_cursor_t cursor;
215   char *key;
216   void **data;
217   xbt_dynar_t result = xbt_dynar_new(sizeof(void*), nullptr);
218   xbt_lib_foreach(storage_lib, cursor, key, data) {
219     if(xbt_lib_get_level(xbt_lib_get_elm_or_null(storage_lib, key), SURF_STORAGE_LEVEL) != nullptr) {
220     simgrid::surf::Storage *storage = static_cast<simgrid::surf::Storage*>(xbt_lib_get_level(xbt_lib_get_elm_or_null(storage_lib, key), SURF_STORAGE_LEVEL));
221     if(!strcmp((const char*)storage->p_attach,this->getName())){
222       xbt_dynar_push_as(result, void *, (void*)storage->getName());
223     }
224   }
225   }
226   return result;
227 }
228
229 Action *HostImpl::open(const char* fullpath) {
230
231   simgrid::surf::Storage *st = nullptr;
232   s_mount_t mnt;
233   unsigned int cursor;
234   size_t longest_prefix_length = 0;
235   char *path = nullptr;
236   char *file_mount_name = nullptr;
237   char *mount_name = nullptr;
238
239   XBT_DEBUG("Search for storage name for '%s' on '%s'", fullpath, getName());
240   xbt_dynar_foreach(p_storage,cursor,mnt)
241   {
242     XBT_DEBUG("See '%s'",mnt.name);
243     file_mount_name = (char *) xbt_malloc ((strlen(mnt.name)+1));
244     strncpy(file_mount_name,fullpath,strlen(mnt.name)+1);
245     file_mount_name[strlen(mnt.name)] = '\0';
246
247     if(!strcmp(file_mount_name,mnt.name) && strlen(mnt.name)>longest_prefix_length)
248     {/* The current mount name is found in the full path and is bigger than the previous*/
249       longest_prefix_length = strlen(mnt.name);
250       st = static_cast<simgrid::surf::Storage*>(mnt.storage);
251     }
252     free(file_mount_name);
253   }
254   if(longest_prefix_length>0)
255   { /* Mount point found, split fullpath into mount_name and path+filename*/
256   path = (char *) xbt_malloc ((strlen(fullpath)-longest_prefix_length+1));
257   mount_name = (char *) xbt_malloc ((longest_prefix_length+1));
258   strncpy(mount_name, fullpath, longest_prefix_length+1);
259   strncpy(path, fullpath+longest_prefix_length, strlen(fullpath)-longest_prefix_length+1);
260   path[strlen(fullpath)-longest_prefix_length] = '\0';
261   mount_name[longest_prefix_length] = '\0';
262   }
263   else
264     xbt_die("Can't find mount point for '%s' on '%s'", fullpath, getName());
265
266   XBT_DEBUG("OPEN %s on disk '%s'",path, st->getName());
267   Action *action = st->open((const char*)mount_name, (const char*)path);
268   free((char*)path);
269   free((char*)mount_name);
270   return action;
271 }
272
273 Action *HostImpl::close(surf_file_t fd) {
274   simgrid::surf::Storage *st = findStorageOnMountList(fd->mount);
275   XBT_DEBUG("CLOSE %s on disk '%s'",fd->name, st->getName());
276   return st->close(fd);
277 }
278
279 Action *HostImpl::read(surf_file_t fd, sg_size_t size) {
280   simgrid::surf::Storage *st = findStorageOnMountList(fd->mount);
281   XBT_DEBUG("READ %s on disk '%s'",fd->name, st->getName());
282   return st->read(fd, size);
283 }
284
285 Action *HostImpl::write(surf_file_t fd, sg_size_t size) {
286   simgrid::surf::Storage *st = findStorageOnMountList(fd->mount);
287   XBT_DEBUG("WRITE %s on disk '%s'",fd->name, st->getName());
288   return st->write(fd, size);
289 }
290
291 int HostImpl::unlink(surf_file_t fd) {
292   if (!fd){
293     XBT_WARN("No such file descriptor. Impossible to unlink");
294     return -1;
295   } else {
296
297     simgrid::surf::Storage *st = findStorageOnMountList(fd->mount);
298     /* Check if the file is on this storage */
299     if (!xbt_dict_get_or_null(st->p_content, fd->name)){
300       XBT_WARN("File %s is not on disk %s. Impossible to unlink", fd->name,
301           st->getName());
302       return -1;
303     } else {
304       XBT_DEBUG("UNLINK %s on disk '%s'",fd->name, st->getName());
305       st->m_usedSize -= fd->size;
306
307       // Remove the file from storage
308       xbt_dict_remove(st->p_content, fd->name);
309
310       xbt_free(fd->name);
311       xbt_free(fd->mount);
312       xbt_free(fd);
313       return 0;
314     }
315   }
316 }
317
318 sg_size_t HostImpl::getSize(surf_file_t fd){
319   return fd->size;
320 }
321
322 xbt_dynar_t HostImpl::getInfo( surf_file_t fd)
323 {
324   simgrid::surf::Storage *st = findStorageOnMountList(fd->mount);
325   sg_size_t *psize = xbt_new(sg_size_t, 1);
326   *psize = fd->size;
327   xbt_dynar_t info = xbt_dynar_new(sizeof(void*), nullptr);
328   xbt_dynar_push_as(info, sg_size_t *, psize);
329   xbt_dynar_push_as(info, void *, fd->mount);
330   xbt_dynar_push_as(info, void *, (void *)st->getName());
331   xbt_dynar_push_as(info, void *, st->p_typeId);
332   xbt_dynar_push_as(info, void *, st->p_contentType);
333
334   return info;
335 }
336
337 sg_size_t HostImpl::fileTell(surf_file_t fd){
338   return fd->current_position;
339 }
340
341 int HostImpl::fileSeek(surf_file_t fd, sg_offset_t offset, int origin){
342
343   switch (origin) {
344   case SEEK_SET:
345     fd->current_position = offset;
346     return 0;
347   case SEEK_CUR:
348     fd->current_position += offset;
349     return 0;
350   case SEEK_END:
351     fd->current_position = fd->size + offset;
352     return 0;
353   default:
354     return -1;
355   }
356 }
357
358 int HostImpl::fileMove(surf_file_t fd, const char* fullpath){
359   /* Check if the new full path is on the same mount point */
360   if(!strncmp((const char*)fd->mount, fullpath, strlen(fd->mount))) {
361     sg_size_t *psize, *new_psize;
362     psize = (sg_size_t*)
363         xbt_dict_get_or_null(findStorageOnMountList(fd->mount)->p_content,
364                              fd->name);
365     new_psize = xbt_new(sg_size_t, 1);
366     *new_psize = *psize;
367     if (psize){// src file exists
368       xbt_dict_remove(findStorageOnMountList(fd->mount)->p_content, fd->name);
369       char *path = (char *) xbt_malloc ((strlen(fullpath)-strlen(fd->mount)+1));
370       strncpy(path, fullpath+strlen(fd->mount),
371               strlen(fullpath)-strlen(fd->mount)+1);
372       xbt_dict_set(findStorageOnMountList(fd->mount)->p_content, path,
373                    new_psize,nullptr);
374       XBT_DEBUG("Move file from %s to %s, size '%llu'",fd->name, fullpath, *psize);
375       free(path);
376       return 0;
377     } else {
378       XBT_WARN("File %s doesn't exist", fd->name);
379       return -1;
380     }
381   } else {
382     XBT_WARN("New full path %s is not on the same mount point: %s. Action has been canceled.",
383              fullpath, fd->mount);
384     return -1;
385   }
386 }
387
388 xbt_dynar_t HostImpl::getVms()
389 {
390   xbt_dynar_t dyn = xbt_dynar_new(sizeof(simgrid::surf::VirtualMachine*), nullptr);
391
392   /* iterate for all virtual machines */
393   for (simgrid::surf::VMModel::vm_list_t::iterator iter =
394          simgrid::surf::VMModel::ws_vms.begin();
395        iter !=  simgrid::surf::VMModel::ws_vms.end(); ++iter) {
396
397     simgrid::surf::VirtualMachine *ws_vm = &*iter;
398     if (this == ws_vm->getPm()->extension(simgrid::surf::HostImpl::EXTENSION_ID))
399       xbt_dynar_push(dyn, &ws_vm);
400   }
401
402   return dyn;
403 }
404
405 void HostImpl::getParams(vm_params_t params)
406 {
407   *params = p_params;
408 }
409
410 void HostImpl::setParams(vm_params_t params)
411 {
412   /* may check something here. */
413   p_params = *params;
414 }
415
416 }}