Logo AND Algorithmique Numérique Distribuée

Public GIT Repository
Merge branch 'master' of scm.gforge.inria.fr:/gitroot/simgrid/simgrid
[simgrid.git] / src / surf / HostImpl.cpp
1 /* Copyright (c) 2013-2016. The SimGrid Team. All rights reserved.          */
2
3 /* This program is free software; you can redistribute it and/or modify it
4  * under the terms of the license (GNU LGPL) which comes with this package. */
5
6 #include "src/plugins/vm/VirtualMachineImpl.hpp"
7 #include <string>
8
9 XBT_LOG_NEW_DEFAULT_SUBCATEGORY(surf_host, surf, "Logging specific to the SURF host module");
10
11 simgrid::surf::HostModel *surf_host_model = nullptr;
12
13 /*************
14  * Callbacks *
15  *************/
16
17 namespace simgrid {
18 namespace surf {
19
20 /*********
21  * Model *
22  *********/
23
24 /* Each VM has a dummy CPU action on the PM layer. This CPU action works as the
25  * constraint (capacity) of the VM in the PM layer. If the VM does not have any
26  * active task, the dummy CPU action must be deactivated, so that the VM does
27  * not get any CPU share in the PM layer. */
28 void HostModel::ignoreEmptyVmInPmLMM()
29 {
30   /* iterate for all virtual machines */
31   for (s4u::VirtualMachine* ws_vm : vm::VirtualMachineImpl::allVms_) {
32     Cpu* cpu = ws_vm->pimpl_cpu;
33     int active_tasks = lmm_constraint_get_variable_amount(cpu->constraint());
34
35     /* The impact of the VM over its PM is the min between its vCPU amount and the amount of tasks it contains */
36     int impact = std::min(active_tasks, ws_vm->pimpl_vm_->coreAmount());
37
38     XBT_INFO("set the weight of the dummy CPU action of VM%p on PM to %d (#tasks: %d)", ws_vm, impact, active_tasks);
39     ws_vm->pimpl_vm_->action_->setPriority(impact);
40   }
41 }
42
43 /* Helper function for executeParallelTask */
44 static inline double has_cost(double* array, int pos)
45 {
46   if (array)
47     return array[pos];
48   else
49     return -1.0;
50 }
51 Action* HostModel::executeParallelTask(int host_nb, simgrid::s4u::Host** host_list, double* flops_amount,
52     double* bytes_amount, double rate)
53 {
54   Action* action = nullptr;
55   if ((host_nb == 1) && (has_cost(bytes_amount, 0) <= 0)) {
56     action = host_list[0]->pimpl_cpu->execution_start(flops_amount[0]);
57   } else if ((host_nb == 1) && (has_cost(flops_amount, 0) <= 0)) {
58     action = surf_network_model->communicate(host_list[0], host_list[0], bytes_amount[0], rate);
59   } else if ((host_nb == 2) && (has_cost(flops_amount, 0) <= 0) && (has_cost(flops_amount, 1) <= 0)) {
60     int nb = 0;
61     double value = 0.0;
62
63     for (int i = 0; i < host_nb * host_nb; i++) {
64       if (has_cost(bytes_amount, i) > 0.0) {
65         nb++;
66         value = has_cost(bytes_amount, i);
67       }
68     }
69     if (nb == 1) {
70       action = surf_network_model->communicate(host_list[0], host_list[1], value, rate);
71     } else if (nb == 0) {
72       xbt_die("Cannot have a communication with no flop to exchange in this model. You should consider using the "
73           "ptask model");
74     } else {
75       xbt_die("Cannot have a communication that is not a simple point-to-point in this model. You should consider "
76           "using the ptask model");
77     }
78   } else
79     xbt_die(
80         "This model only accepts one of the following. You should consider using the ptask model for the other cases.\n"
81         " - execution with one host only and no communication\n"
82         " - Self-comms with one host only\n"
83         " - Communications with two hosts and no computation");
84   xbt_free(host_list);
85   return action;
86 }
87
88 /************
89  * Resource *
90  ************/
91 HostImpl::HostImpl(s4u::Host* host) : piface_(host)
92 {
93   /* The VM wants to reinstall a new HostImpl, but we don't want to leak the previously existing one */
94   delete piface_->pimpl_;
95   piface_->pimpl_ = this;
96 }
97
98 simgrid::surf::StorageImpl* HostImpl::findStorageOnMountList(const char* mount)
99 {
100   XBT_DEBUG("Search for storage name '%s' on '%s'", mount, piface_->cname());
101   if (storage_.find(mount) == storage_.end())
102     xbt_die("Can't find mount '%s' for '%s'", mount, piface_->cname());
103
104   return storage_.at(mount);
105 }
106
107 xbt_dict_t HostImpl::getMountedStorageList()
108 {
109   xbt_dict_t storage_list = xbt_dict_new_homogeneous(nullptr);
110   char* storage_name      = nullptr;
111
112   for (auto mnt : storage_) {
113     storage_name = (char*)mnt.second->cname();
114     xbt_dict_set(storage_list, mnt.first.c_str(), storage_name, nullptr);
115   }
116   return storage_list;
117 }
118
119 void HostImpl::getAttachedStorageList(std::vector<const char*>* storages)
120 {
121   for (auto s : storage_)
122     if (not strcmp(static_cast<const char*>(s.second->attach_), piface_->cname()))
123       storages->push_back(s.second->piface_.name());
124 }
125
126 Action* HostImpl::open(const char* fullpath)
127 {
128   simgrid::surf::StorageImpl* st = nullptr;
129   size_t longest_prefix_length = 0;
130   std::string path;
131   std::string mount_name;
132
133   XBT_DEBUG("Search for storage name for '%s' on '%s'", fullpath, piface_->cname());
134   for (auto mnt : storage_) {
135     XBT_DEBUG("See '%s'", mnt.first.c_str());
136     std::string file_mount_name = std::string(fullpath).substr(0, mnt.first.size());
137
138     if (file_mount_name == mnt.first && mnt.first.length() > longest_prefix_length) {
139       /* The current mount name is found in the full path and is bigger than the previous*/
140       longest_prefix_length = mnt.first.length();
141       st                    = mnt.second;
142     }
143   }
144   if (longest_prefix_length > 0) { /* Mount point found, split fullpath into mount_name and path+filename*/
145     mount_name = std::string(fullpath).substr(0, longest_prefix_length);
146     path       = std::string(fullpath).substr(longest_prefix_length, strlen(fullpath));
147   } else
148     xbt_die("Can't find mount point for '%s' on '%s'", fullpath, piface_->cname());
149
150   XBT_DEBUG("OPEN %s on disk '%s'", path.c_str(), st->cname());
151   Action* action = st->open(mount_name.c_str(), path.c_str());
152   return action;
153 }
154
155 Action* HostImpl::close(surf_file_t fd)
156 {
157   simgrid::surf::StorageImpl* st = findStorageOnMountList(fd->mount);
158   XBT_DEBUG("CLOSE %s on disk '%s'", fd->name, st->cname());
159   return st->close(fd);
160 }
161
162 Action* HostImpl::read(surf_file_t fd, sg_size_t size)
163 {
164   simgrid::surf::StorageImpl* st = findStorageOnMountList(fd->mount);
165   XBT_DEBUG("READ %s on disk '%s'", fd->name, st->cname());
166   return st->read(fd, size);
167 }
168
169 Action* HostImpl::write(surf_file_t fd, sg_size_t size)
170 {
171   simgrid::surf::StorageImpl* st = findStorageOnMountList(fd->mount);
172   XBT_DEBUG("WRITE %s on disk '%s'", fd->name, st->cname());
173   return st->write(fd, size);
174 }
175
176 int HostImpl::unlink(surf_file_t fd)
177 {
178   if (not fd) {
179     XBT_WARN("No such file descriptor. Impossible to unlink");
180     return -1;
181   } else {
182
183     simgrid::surf::StorageImpl* st = findStorageOnMountList(fd->mount);
184     /* Check if the file is on this storage */
185     if (st->content_->find(fd->name) == st->content_->end()) {
186       XBT_WARN("File %s is not on disk %s. Impossible to unlink", fd->name, st->cname());
187       return -1;
188     } else {
189       XBT_DEBUG("UNLINK %s on disk '%s'", fd->name, st->cname());
190       st->usedSize_ -= fd->size;
191
192       // Remove the file from storage
193       sg_size_t* psize = st->content_->at(fd->name);
194       delete psize;
195       st->content_->erase(fd->name);
196
197       xbt_free(fd->name);
198       xbt_free(fd->mount);
199       xbt_free(fd);
200       return 0;
201     }
202   }
203 }
204
205 sg_size_t HostImpl::getSize(surf_file_t fd)
206 {
207   return fd->size;
208 }
209
210 xbt_dynar_t HostImpl::getInfo(surf_file_t fd)
211 {
212   simgrid::surf::StorageImpl* st = findStorageOnMountList(fd->mount);
213   sg_size_t* psize           = xbt_new(sg_size_t, 1);
214   *psize                     = fd->size;
215   xbt_dynar_t info           = xbt_dynar_new(sizeof(void*), nullptr);
216   xbt_dynar_push_as(info, sg_size_t*, psize);
217   xbt_dynar_push_as(info, void*, fd->mount);
218   xbt_dynar_push_as(info, void*, (void*)st->cname());
219   xbt_dynar_push_as(info, void*, st->typeId_);
220
221   return info;
222 }
223
224 sg_size_t HostImpl::fileTell(surf_file_t fd)
225 {
226   return fd->current_position;
227 }
228
229 int HostImpl::fileSeek(surf_file_t fd, sg_offset_t offset, int origin)
230 {
231   switch (origin) {
232   case SEEK_SET:
233     fd->current_position = offset;
234     return 0;
235   case SEEK_CUR:
236     fd->current_position += offset;
237     return 0;
238   case SEEK_END:
239     fd->current_position = fd->size + offset;
240     return 0;
241   default:
242     return -1;
243   }
244 }
245
246 int HostImpl::fileMove(surf_file_t fd, const char* fullpath)
247 {
248   /* Check if the new full path is on the same mount point */
249   if (not strncmp((const char*)fd->mount, fullpath, strlen(fd->mount))) {
250     std::map<std::string, sg_size_t*>* content = findStorageOnMountList(fd->mount)->content_;
251     if (content->find(fd->name) != content->end()) { // src file exists
252       sg_size_t* psize     = content->at(std::string(fd->name));
253       sg_size_t* new_psize = new sg_size_t;
254       *new_psize           = *psize;
255       delete psize;
256       content->erase(fd->name);
257       std::string path = std::string(fullpath).substr(strlen(fd->mount), strlen(fullpath));
258       content->insert({path.c_str(), new_psize});
259       XBT_DEBUG("Move file from %s to %s, size '%llu'", fd->name, fullpath, *psize);
260       return 0;
261     } else {
262       XBT_WARN("File %s doesn't exist", fd->name);
263       return -1;
264     }
265   } else {
266     XBT_WARN("New full path %s is not on the same mount point: %s. Action has been canceled.", fullpath, fd->mount);
267     return -1;
268   }
269 }
270
271 }
272 }