Logo AND Algorithmique Numérique Distribuée

Public GIT Repository
put the HostImpl as s4u::Host->pimpl instead of as an extension
[simgrid.git] / src / surf / HostImpl.cpp
1 /* Copyright (c) 2013-2016. The SimGrid Team. All rights reserved.          */
2
3 /* This program is free software; you can redistribute it and/or modify it
4  * under the terms of the license (GNU LGPL) which comes with this package. */
5
6 #include <simgrid/s4u/host.hpp>
7
8 #include "src/simix/smx_private.h"
9 #include "cpu_cas01.hpp"
10 #include "src/surf/HostImpl.hpp"
11 #include "simgrid/sg_config.h"
12
13 #include "network_interface.hpp"
14 #include "virtual_machine.hpp"
15
16 XBT_LOG_NEW_DEFAULT_SUBCATEGORY(surf_host, surf, "Logging specific to the SURF host module");
17
18 simgrid::surf::HostModel *surf_host_model = nullptr;
19
20 /*************
21  * Callbacks *
22  *************/
23
24 namespace simgrid {
25 namespace surf {
26
27 /*********
28  * Model *
29  *********/
30
31 /* Each VM has a dummy CPU action on the PM layer. This CPU action works as the
32  * constraint (capacity) of the VM in the PM layer. If the VM does not have any
33  * active task, the dummy CPU action must be deactivated, so that the VM does
34  * not get any CPU share in the PM layer. */
35 void HostModel::adjustWeightOfDummyCpuActions()
36 {
37   /* iterate for all virtual machines */
38   for (VirtualMachine *ws_vm : VirtualMachine::allVms_) {
39
40     Cpu *cpu = ws_vm->cpu_;
41
42     int is_active = lmm_constraint_used(cpu->getModel()->getMaxminSystem(), cpu->getConstraint());
43
44     if (is_active) {
45       /* some tasks exist on this VM */
46       XBT_DEBUG("set the weight of the dummy CPU action on PM to 1");
47
48       /* FIXME: we should use lmm_update_variable_weight() ? */
49       /* FIXME: If we assign 1.05 and 0.05, the system makes apparently wrong values. */
50       ws_vm->action_->setPriority(1);
51
52     } else {
53       /* no task exits on this VM */
54       XBT_DEBUG("set the weight of the dummy CPU action on PM to 0");
55
56       ws_vm->action_->setPriority(0);
57     }
58   }
59 }
60
61 Action* HostModel::executeParallelTask(int host_nb, simgrid::s4u::Host** host_list, double* flops_amount,
62                                        double* bytes_amount, double rate)
63 {
64 #define cost_or_zero(array,pos) ((array)?(array)[pos]:0.0)
65   Action *action =nullptr;
66   if ((host_nb == 1)
67       && (cost_or_zero(bytes_amount, 0) == 0.0)){
68     action = host_list[0]->pimpl_cpu->execution_start(flops_amount[0]);
69   } else if ((host_nb == 1)
70            && (cost_or_zero(flops_amount, 0) == 0.0)) {
71     action = surf_network_model->communicate(host_list[0], host_list[0], bytes_amount[0], rate);
72   } else if ((host_nb == 2)
73              && (cost_or_zero(flops_amount, 0) == 0.0)
74              && (cost_or_zero(flops_amount, 1) == 0.0)) {
75     int i,nb = 0;
76     double value = 0.0;
77
78     for (i = 0; i < host_nb * host_nb; i++) {
79       if (cost_or_zero(bytes_amount, i) > 0.0) {
80         nb++;
81         value = cost_or_zero(bytes_amount, i);
82       }
83     }
84     if (nb == 1) {
85       action = surf_network_model->communicate(host_list[0], host_list[1], value, rate);
86     } else if (nb == 0) {
87        xbt_die("Cannot have a communication with no flop to exchange in this model. You should consider using the ptask model");
88     } else {       
89        xbt_die("Cannot have a communication that is not a simple point-to-point in this model. You should consider using the ptask model");
90     }
91   } else 
92     xbt_die("This model only accepts one of the following. You should consider using the ptask model for the other cases.\n - execution with one host only and no communication\n - Self-comms with one host only\n - Communications with two hosts and no computation");
93 #undef cost_or_zero
94   xbt_free(host_list);
95   return action;
96 }
97
98 /************
99  * Resource *
100  ************/
101 HostImpl::HostImpl(simgrid::surf::HostModel *model, const char *name, xbt_dynar_t storage, Cpu *cpu)
102  : Resource(model, name)
103  , PropertyHolder(nullptr)
104  , storage_(storage), cpu_(cpu)
105 {
106   params_.ramsize = 0;
107 }
108
109 HostImpl::HostImpl(simgrid::surf::HostModel *model, const char *name, lmm_constraint_t constraint,
110                  xbt_dynar_t storage, Cpu *cpu)
111  : Resource(model, name, constraint)
112  , PropertyHolder(nullptr)
113  , storage_(storage), cpu_(cpu)
114 {
115   params_.ramsize = 0;
116 }
117
118 /** @brief use destroy() instead of this destructor */
119 HostImpl::~HostImpl() = default;
120
121 void HostImpl::attach(simgrid::s4u::Host* host)
122 {
123   if (piface_ != nullptr)
124     xbt_die("Already attached to host %s", host->name().c_str());
125   host->pimpl_ = this;
126   piface_ = host;
127 }
128
129 bool HostImpl::isOn() const {
130   return cpu_->isOn();
131 }
132 bool HostImpl::isOff() const {
133   return cpu_->isOff();
134 }
135 void HostImpl::turnOn(){
136   if (isOff()) {
137     cpu_->turnOn();
138     simgrid::s4u::Host::onStateChange(*this->piface_);
139   }
140 }
141 void HostImpl::turnOff(){
142   if (isOn()) {
143     cpu_->turnOff();
144     simgrid::s4u::Host::onStateChange(*this->piface_);
145   }
146 }
147
148 simgrid::surf::Storage *HostImpl::findStorageOnMountList(const char* mount)
149 {
150   simgrid::surf::Storage *st = nullptr;
151   s_mount_t mnt;
152   unsigned int cursor;
153
154   XBT_DEBUG("Search for storage name '%s' on '%s'", mount, getName());
155   xbt_dynar_foreach(storage_,cursor,mnt){
156     XBT_DEBUG("See '%s'",mnt.name);
157     if(!strcmp(mount,mnt.name)){
158       st = static_cast<simgrid::surf::Storage*>(mnt.storage);
159       break;
160     }
161   }
162   if(!st)
163     xbt_die("Can't find mount '%s' for '%s'", mount, getName());
164   return st;
165 }
166
167 xbt_dict_t HostImpl::getMountedStorageList()
168 {
169   s_mount_t mnt;
170   unsigned int i;
171   xbt_dict_t storage_list = xbt_dict_new_homogeneous(nullptr);
172   char *storage_name = nullptr;
173
174   xbt_dynar_foreach(storage_,i,mnt){
175     storage_name = (char *)static_cast<simgrid::surf::Storage*>(mnt.storage)->getName();
176     xbt_dict_set(storage_list,mnt.name,storage_name,nullptr);
177   }
178   return storage_list;
179 }
180
181 xbt_dynar_t HostImpl::getAttachedStorageList()
182 {
183   xbt_lib_cursor_t cursor;
184   char *key;
185   void **data;
186   xbt_dynar_t result = xbt_dynar_new(sizeof(void*), nullptr);
187   xbt_lib_foreach(storage_lib, cursor, key, data) {
188     if(xbt_lib_get_level(xbt_lib_get_elm_or_null(storage_lib, key), SURF_STORAGE_LEVEL) != nullptr) {
189     simgrid::surf::Storage *storage = static_cast<simgrid::surf::Storage*>(xbt_lib_get_level(xbt_lib_get_elm_or_null(storage_lib, key), SURF_STORAGE_LEVEL));
190     if(!strcmp((const char*)storage->attach_,this->getName())){
191       xbt_dynar_push_as(result, void *, (void*)storage->getName());
192     }
193   }
194   }
195   return result;
196 }
197
198 Action *HostImpl::open(const char* fullpath) {
199
200   simgrid::surf::Storage *st = nullptr;
201   s_mount_t mnt;
202   unsigned int cursor;
203   size_t longest_prefix_length = 0;
204   char *path = nullptr;
205   char *file_mount_name = nullptr;
206   char *mount_name = nullptr;
207
208   XBT_DEBUG("Search for storage name for '%s' on '%s'", fullpath, getName());
209   xbt_dynar_foreach(storage_,cursor,mnt)
210   {
211     XBT_DEBUG("See '%s'",mnt.name);
212     file_mount_name = (char *) xbt_malloc ((strlen(mnt.name)+1));
213     strncpy(file_mount_name,fullpath,strlen(mnt.name)+1);
214     file_mount_name[strlen(mnt.name)] = '\0';
215
216     if(!strcmp(file_mount_name,mnt.name) && strlen(mnt.name)>longest_prefix_length)
217     {/* The current mount name is found in the full path and is bigger than the previous*/
218       longest_prefix_length = strlen(mnt.name);
219       st = static_cast<simgrid::surf::Storage*>(mnt.storage);
220     }
221     free(file_mount_name);
222   }
223   if(longest_prefix_length>0)
224   { /* Mount point found, split fullpath into mount_name and path+filename*/
225   path = (char *) xbt_malloc ((strlen(fullpath)-longest_prefix_length+1));
226   mount_name = (char *) xbt_malloc ((longest_prefix_length+1));
227   strncpy(mount_name, fullpath, longest_prefix_length+1);
228   strncpy(path, fullpath+longest_prefix_length, strlen(fullpath)-longest_prefix_length+1);
229   path[strlen(fullpath)-longest_prefix_length] = '\0';
230   mount_name[longest_prefix_length] = '\0';
231   }
232   else
233     xbt_die("Can't find mount point for '%s' on '%s'", fullpath, getName());
234
235   XBT_DEBUG("OPEN %s on disk '%s'",path, st->getName());
236   Action *action = st->open((const char*)mount_name, (const char*)path);
237   free((char*)path);
238   free((char*)mount_name);
239   return action;
240 }
241
242 Action *HostImpl::close(surf_file_t fd) {
243   simgrid::surf::Storage *st = findStorageOnMountList(fd->mount);
244   XBT_DEBUG("CLOSE %s on disk '%s'",fd->name, st->getName());
245   return st->close(fd);
246 }
247
248 Action *HostImpl::read(surf_file_t fd, sg_size_t size) {
249   simgrid::surf::Storage *st = findStorageOnMountList(fd->mount);
250   XBT_DEBUG("READ %s on disk '%s'",fd->name, st->getName());
251   return st->read(fd, size);
252 }
253
254 Action *HostImpl::write(surf_file_t fd, sg_size_t size) {
255   simgrid::surf::Storage *st = findStorageOnMountList(fd->mount);
256   XBT_DEBUG("WRITE %s on disk '%s'",fd->name, st->getName());
257   return st->write(fd, size);
258 }
259
260 int HostImpl::unlink(surf_file_t fd) {
261   if (!fd){
262     XBT_WARN("No such file descriptor. Impossible to unlink");
263     return -1;
264   } else {
265
266     simgrid::surf::Storage *st = findStorageOnMountList(fd->mount);
267     /* Check if the file is on this storage */
268     if (!xbt_dict_get_or_null(st->content_, fd->name)){
269       XBT_WARN("File %s is not on disk %s. Impossible to unlink", fd->name,
270           st->getName());
271       return -1;
272     } else {
273       XBT_DEBUG("UNLINK %s on disk '%s'",fd->name, st->getName());
274       st->usedSize_ -= fd->size;
275
276       // Remove the file from storage
277       xbt_dict_remove(st->content_, fd->name);
278
279       xbt_free(fd->name);
280       xbt_free(fd->mount);
281       xbt_free(fd);
282       return 0;
283     }
284   }
285 }
286
287 sg_size_t HostImpl::getSize(surf_file_t fd){
288   return fd->size;
289 }
290
291 xbt_dynar_t HostImpl::getInfo( surf_file_t fd)
292 {
293   simgrid::surf::Storage *st = findStorageOnMountList(fd->mount);
294   sg_size_t *psize = xbt_new(sg_size_t, 1);
295   *psize = fd->size;
296   xbt_dynar_t info = xbt_dynar_new(sizeof(void*), nullptr);
297   xbt_dynar_push_as(info, sg_size_t *, psize);
298   xbt_dynar_push_as(info, void *, fd->mount);
299   xbt_dynar_push_as(info, void *, (void *)st->getName());
300   xbt_dynar_push_as(info, void *, st->typeId_);
301   xbt_dynar_push_as(info, void *, st->contentType_);
302
303   return info;
304 }
305
306 sg_size_t HostImpl::fileTell(surf_file_t fd){
307   return fd->current_position;
308 }
309
310 int HostImpl::fileSeek(surf_file_t fd, sg_offset_t offset, int origin){
311
312   switch (origin) {
313   case SEEK_SET:
314     fd->current_position = offset;
315     return 0;
316   case SEEK_CUR:
317     fd->current_position += offset;
318     return 0;
319   case SEEK_END:
320     fd->current_position = fd->size + offset;
321     return 0;
322   default:
323     return -1;
324   }
325 }
326
327 int HostImpl::fileMove(surf_file_t fd, const char* fullpath){
328   /* Check if the new full path is on the same mount point */
329   if(!strncmp((const char*)fd->mount, fullpath, strlen(fd->mount))) {
330     sg_size_t *psize, *new_psize;
331     psize = (sg_size_t*)
332         xbt_dict_get_or_null(findStorageOnMountList(fd->mount)->content_,
333                              fd->name);
334     new_psize = xbt_new(sg_size_t, 1);
335     *new_psize = *psize;
336     if (psize){// src file exists
337       xbt_dict_remove(findStorageOnMountList(fd->mount)->content_, fd->name);
338       char *path = (char *) xbt_malloc ((strlen(fullpath)-strlen(fd->mount)+1));
339       strncpy(path, fullpath+strlen(fd->mount),
340               strlen(fullpath)-strlen(fd->mount)+1);
341       xbt_dict_set(findStorageOnMountList(fd->mount)->content_, path,
342                    new_psize,nullptr);
343       XBT_DEBUG("Move file from %s to %s, size '%llu'",fd->name, fullpath, *psize);
344       free(path);
345       return 0;
346     } else {
347       XBT_WARN("File %s doesn't exist", fd->name);
348       return -1;
349     }
350   } else {
351     XBT_WARN("New full path %s is not on the same mount point: %s. Action has been canceled.",
352              fullpath, fd->mount);
353     return -1;
354   }
355 }
356
357 xbt_dynar_t HostImpl::getVms()
358 {
359   xbt_dynar_t dyn = xbt_dynar_new(sizeof(simgrid::surf::VirtualMachine*), nullptr);
360
361   for (VirtualMachine *ws_vm : VirtualMachine::allVms_) {
362     if (this == ws_vm->getPm()->pimpl_)
363       xbt_dynar_push(dyn, &ws_vm);
364   }
365
366   return dyn;
367 }
368
369 void HostImpl::getParams(vm_params_t params)
370 {
371   *params = params_;
372 }
373
374 void HostImpl::setParams(vm_params_t params)
375 {
376   /* may check something here. */
377   params_ = *params;
378 }
379
380 }}