Logo AND Algorithmique Numérique Distribuée

Public GIT Repository
there is now a flush function
[simgrid.git] / src / gras / Transport / transport_plugin_tcp.c
1 /* $Id$ */
2
3 /* tcp trp (transport) - send/receive a bunch of bytes from a tcp socket    */
4
5 /* Authors: Martin Quinson                                                  */
6 /* Copyright (C) 2004 Martin Quinson.                                       */
7
8 /* This program is free software; you can redistribute it and/or modify it
9    under the terms of the license (GNU LGPL) which comes with this package. */
10
11 #include <unistd.h>       /* close() pipe() read() write() */
12 #include <signal.h>       /* close() pipe() read() write() */
13 #include <netinet/in.h>   /* sometimes required for #include <arpa/inet.h> */
14 #include <netinet/tcp.h>  /* TCP_NODELAY */
15 #include <arpa/inet.h>    /* inet_ntoa() */
16 #include <netdb.h>        /* getprotobyname() */
17 #include <sys/time.h>     /* struct timeval */
18 #include <errno.h>        /* errno */
19 #include <sys/wait.h>     /* waitpid() */
20 #include <sys/socket.h>   /* getpeername() socket() */
21 #include <stdlib.h>
22 #include <string.h>       /* memset */
23
24 #include "gras_private.h"
25 #include "transport_private.h"
26
27 GRAS_LOG_NEW_DEFAULT_SUBCATEGORY(trp_tcp,transport);
28
29 /***
30  *** Prototypes 
31  ***/
32 gras_error_t gras_trp_tcp_socket_client(gras_trp_plugin_t *self,
33                                         const char *host,
34                                         unsigned short port,
35                                         /* OUT */ gras_socket_t *sock);
36 gras_error_t gras_trp_tcp_socket_server(gras_trp_plugin_t *self,
37                                         unsigned short port,
38                                         /* OUT */ gras_socket_t *sock);
39 gras_error_t gras_trp_tcp_socket_accept(gras_socket_t  *sock,
40                                         gras_socket_t **dst);
41
42 void         gras_trp_tcp_socket_close(gras_socket_t *sd);
43   
44 gras_error_t gras_trp_tcp_chunk_send(gras_socket_t *sd,
45                                      const char *data,
46                                      long int size);
47
48 gras_error_t gras_trp_tcp_chunk_recv(gras_socket_t *sd,
49                                      char *data,
50                                      long int size);
51
52 void gras_trp_tcp_exit(gras_trp_plugin_t *plug);
53
54
55 static int TcpProtoNumber(void);
56 /***
57  *** Specific plugin part
58  ***/
59
60 typedef struct {
61   fd_set msg_socks;
62   fd_set raw_socks;
63 } gras_trp_tcp_plug_data_t;
64
65 /***
66  *** Specific socket part
67  ***/
68
69 typedef struct {
70   int buffsize;
71 } gras_trp_tcp_sock_data_t;
72
73
74 /***
75  *** Code
76  ***/
77 gras_error_t
78 gras_trp_tcp_setup(gras_trp_plugin_t *plug) {
79
80   gras_trp_tcp_plug_data_t *data = malloc(sizeof(gras_trp_tcp_plug_data_t));
81   if (!data)
82     RAISE_MALLOC;
83
84   FD_ZERO(&(data->msg_socks));
85   FD_ZERO(&(data->raw_socks));
86
87   plug->socket_client = gras_trp_tcp_socket_client;
88   plug->socket_server = gras_trp_tcp_socket_server;
89   plug->socket_accept = gras_trp_tcp_socket_accept;
90   plug->socket_close  = gras_trp_tcp_socket_close;
91
92   plug->chunk_send    = gras_trp_tcp_chunk_send;
93   plug->chunk_recv    = gras_trp_tcp_chunk_recv;
94
95   plug->flush = NULL; /* nothing's cached */
96
97   plug->data = (void*)data;
98   plug->exit = gras_trp_tcp_exit;
99
100   return no_error;
101 }
102
103 void gras_trp_tcp_exit(gras_trp_plugin_t *plug) {
104   DEBUG1("Exit plugin TCP (free %p)", plug->data);
105   free(plug->data);
106 }
107
108 gras_error_t gras_trp_tcp_socket_client(gras_trp_plugin_t *self,
109                                         const char *host,
110                                         unsigned short port,
111                                         /* OUT */ gras_socket_t *sock){
112   
113   struct sockaddr_in addr;
114   struct hostent *he;
115   struct in_addr *haddr;
116
117   sock->incoming = 1; /* TCP sockets are duplex'ed */
118
119   sock->sd = socket (AF_INET, SOCK_STREAM, 0);
120   
121   if (sock->sd < 0) {
122     RAISE1(system_error,
123            "Failed to create socket: %s",
124            strerror (errno));
125   }
126   
127   he = gethostbyname (host);
128   if (he == NULL) {
129     RAISE2(system_error,
130            "Failed to lookup hostname %s: %s",
131            host, strerror (errno));
132   }
133   
134   haddr = ((struct in_addr *) (he->h_addr_list)[0]);
135   
136   memset(&addr, 0, sizeof(struct sockaddr_in));
137   memcpy (&addr.sin_addr, haddr, sizeof(struct in_addr));
138   addr.sin_family = AF_INET;
139   addr.sin_port = htons (port);
140
141   if (connect (sock->sd, (struct sockaddr*) &addr, sizeof (addr)) < 0) {
142     close(sock->sd);
143     RAISE3(system_error,
144            "Failed to connect socket to %s:%d (%s)",
145            host, port, strerror (errno));
146   }
147   
148   return no_error;
149 }
150
151 /**
152  * gras_trp_tcp_socket_server:
153  *
154  * Open a socket used to receive messages.
155  */
156 gras_error_t gras_trp_tcp_socket_server(gras_trp_plugin_t *self,
157                                         unsigned short port,
158                                         /* OUT */ gras_socket_t *sock){
159 //  int size = bufSize * 1024;
160   int on = 1;
161   struct sockaddr_in server;
162
163   gras_trp_tcp_plug_data_t *tcp=(gras_trp_tcp_plug_data_t*)self->data;
164  
165   sock->outgoing  = 1; /* TCP => duplex mode */
166
167   server.sin_port = htons((u_short)port);
168   server.sin_addr.s_addr = INADDR_ANY;
169   server.sin_family = AF_INET;
170   if((sock->sd = socket(AF_INET, SOCK_STREAM, 0)) < 0) {
171     RAISE1(system_error,"socket allocation failed: %s", strerror(errno));
172   }
173
174   (void)setsockopt(sock->sd, SOL_SOCKET, SO_REUSEADDR, 
175                    (char *)&on, sizeof(on));
176    /*
177   (void)setsockopt(sd, SOL_SOCKET, SO_RCVBUF, (char *)&size, sizeof(size));
178   (void)setsockopt(sd, SOL_SOCKET, SO_SNDBUF, (char *)&size, sizeof(size));
179     */
180   if (bind(sock->sd, (struct sockaddr *)&server, sizeof(server)) == -1) {
181     close(sock->sd);
182     RAISE2(system_error,"Cannot bind to port %d: %s",port, strerror(errno));
183   }
184
185   if (listen(sock->sd, 5) < 0) {
186     close(sock->sd);
187     RAISE2(system_error,"Cannot listen to port %d: %s",port,strerror(errno));
188   }
189
190   if (sock->raw)
191     FD_SET(sock->sd, &(tcp->raw_socks));
192   else
193     FD_SET(sock->sd, &(tcp->msg_socks));
194
195   DEBUG2("Openned a server socket on port %d (sock %d)",port,sock->sd);
196   
197   return no_error;
198 }
199
200 gras_error_t
201 gras_trp_tcp_socket_accept(gras_socket_t  *sock,
202                            gras_socket_t **dst) {
203   gras_socket_t *res;
204   gras_error_t errcode;
205   
206   struct sockaddr_in peer_in;
207   socklen_t peer_in_len = sizeof(peer_in);
208
209   int sd;
210   int tmp_errno;
211                         
212   TRY(gras_trp_socket_new(1,&res));
213
214   sd = accept(sock->sd, (struct sockaddr *)&peer_in, &peer_in_len);
215   tmp_errno = errno;
216
217   if(sd == -1) {
218     gras_socket_close(sock);
219     RAISE1(system_error,
220            "Accept failed (%s). Droping server socket.", strerror(tmp_errno));
221   } else {
222     int i = 1;
223     socklen_t s = sizeof(int);
224   
225     if (setsockopt(sd, SOL_SOCKET, SO_KEEPALIVE, (char *)&i, s) 
226         || setsockopt(sd, TcpProtoNumber(), TCP_NODELAY, (char *)&i, s)) {
227       WARN0("setsockopt failed, cannot condition the accepted socket");
228     }
229  
230     /* FIXME: bufSize removed until we can have optionsets 
231        i = ((gras_trp_tcp_sock_specific_t*)sock->specific)->buffsize;
232        if (setsockopt(sd, SOL_SOCKET, SO_RCVBUF, (char *)&i, s)
233        || setsockopt(sd, SOL_SOCKET, SO_SNDBUF, (char *)&i, s)) {
234        WARNING0("setsockopt failed, cannot set buffsize");      
235        }
236     */
237      
238     res->plugin    = sock->plugin;
239     res->incoming  = sock->incoming;
240     res->outgoing  = sock->outgoing;
241     res->accepting = 0;
242     res->sd        = sd;
243     res->port      = -1;
244     res->peer_port = peer_in.sin_port;
245
246     /* FIXME: Lock to protect inet_ntoa */
247     if (((struct sockaddr *)&peer_in)->sa_family != AF_INET) {
248       res->peer_name = strdup("unknown");
249     } else {
250       struct in_addr addrAsInAddr;
251       char *tmp;
252  
253       addrAsInAddr.s_addr = peer_in.sin_addr.s_addr;
254       
255       tmp = inet_ntoa(addrAsInAddr);
256       if (tmp != NULL) {
257         res->peer_name = strdup(tmp);
258       } else {
259         res->peer_name = strdup("unknown");
260       }
261     }
262
263     VERB3("accepted socket %d to %s:%d", sd, res->peer_name,res->peer_port);
264     
265     *dst = res;
266
267     return no_error;
268   }
269 }
270
271 void gras_trp_tcp_socket_close(gras_socket_t *sock){
272   gras_trp_tcp_plug_data_t *tcp;
273   
274   if (!sock) return; /* close only once */
275   tcp=sock->plugin->data;
276
277   DEBUG1("close tcp connection %d", sock->sd);
278
279   /* FIXME: no pipe in GRAS so far  
280   if(!FD_ISSET(sd, &connectedPipes)) {
281     if(shutdown(sd, 2) < 0) {
282       GetNWSLock(&lock);
283       tmp_errno = errno;
284       ReleaseNWSLock(&lock);
285       
286       / * The other side may have beaten us to the reset. * /
287       if ((tmp_errno!=ENOTCONN) && (tmp_errno!=ECONNRESET)) {
288         WARN1("CloseSocket: shutdown error %d\n", tmp_errno);
289       }
290     }
291   } */
292
293   /* forget about the socket */
294   if (sock->raw)
295     FD_CLR(sock->sd, &(tcp->raw_socks));
296   else
297     FD_CLR(sock->sd, &(tcp->msg_socks));
298
299   /* close the socket */
300   if(close(sock->sd) < 0) {
301     WARN3("error while closing tcp socket %d: %d (%s)\n", 
302              sock->sd, errno, strerror(errno));
303   }
304 }
305
306 /**
307  * gras_trp_tcp_chunk_send:
308  *
309  * Send data on a TCP socket
310  */
311 gras_error_t 
312 gras_trp_tcp_chunk_send(gras_socket_t *sock,
313                         const char *data,
314                         long int size) {
315   
316   /* TCP sockets are in duplex mode, don't check direction */
317   gras_assert0(size >= 0, "Cannot send a negative amount of data");
318
319   while (size) {
320     int status = 0;
321     
322     status = write(sock->sd, data, (size_t)size);
323     DEBUG3("write(%d, %p, %ld);", sock->sd, data, size);
324     
325     if (status == -1) {
326       RAISE4(system_error,"write(%d,%p,%ld) failed: %s",
327              sock->sd, data, size,
328              strerror(errno));
329     }
330     
331     if (status) {
332       size  -= status;
333       data  += status;
334     } else {
335       RAISE0(system_error,"file descriptor closed");
336     }
337   }
338
339   return no_error;
340 }
341 /**
342  * gras_trp_tcp_chunk_recv:
343  *
344  * Receive data on a TCP socket.
345  */
346 gras_error_t 
347 gras_trp_tcp_chunk_recv(gras_socket_t *sock,
348                         char *data,
349                         long int size) {
350
351   /* TCP sockets are in duplex mode, don't check direction */
352   gras_assert0(sock, "Cannot recv on an NULL socket");
353   gras_assert0(size >= 0, "Cannot receive a negative amount of data");
354   
355   while (size) {
356     int status = 0;
357     
358     status = read(sock->sd, data, (size_t)size);
359     DEBUG3("read(%d, %p, %ld);", sock->sd, data, size);
360     
361     if (status == -1) {
362       RAISE4(system_error,"read(%d,%p,%d) failed: %s",
363              sock->sd, data, (int)size,
364              strerror(errno));
365     }
366     
367     if (status) {
368       size  -= status;
369       data  += status;
370     } else {
371       RAISE0(system_error,"file descriptor closed");
372     }
373   }
374   
375   return no_error;
376 }
377
378
379 /*
380  * Returns the tcp protocol number from the network protocol data base.
381  *
382  * getprotobyname() is not thread safe. We need to lock it.
383  */
384 static int TcpProtoNumber(void) {
385   struct protoent *fetchedEntry;
386   static int returnValue = 0;
387   
388   if(returnValue == 0) {
389     fetchedEntry = getprotobyname("tcp");
390     gras_assert0(fetchedEntry, "getprotobyname(tcp) gave NULL");
391     returnValue = fetchedEntry->p_proto;
392   }
393   
394   return returnValue;
395 }