Replace most uses of assert by ovs_assert.
[sliver-openvswitch.git] / lib / socket-util.c
1 /*
2  * Copyright (c) 2008, 2009, 2010, 2011, 2012 Nicira, Inc.
3  *
4  * Licensed under the Apache License, Version 2.0 (the "License");
5  * you may not use this file except in compliance with the License.
6  * You may obtain a copy of the License at:
7  *
8  *     http://www.apache.org/licenses/LICENSE-2.0
9  *
10  * Unless required by applicable law or agreed to in writing, software
11  * distributed under the License is distributed on an "AS IS" BASIS,
12  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
13  * See the License for the specific language governing permissions and
14  * limitations under the License.
15  */
16
17 #include <config.h>
18 #include "socket-util.h"
19 #include <arpa/inet.h>
20 #include <errno.h>
21 #include <fcntl.h>
22 #include <net/if.h>
23 #include <netdb.h>
24 #include <poll.h>
25 #include <stddef.h>
26 #include <stdio.h>
27 #include <stdlib.h>
28 #include <string.h>
29 #include <sys/resource.h>
30 #include <sys/socket.h>
31 #include <sys/stat.h>
32 #include <sys/uio.h>
33 #include <sys/un.h>
34 #include <unistd.h>
35 #include "dynamic-string.h"
36 #include "fatal-signal.h"
37 #include "packets.h"
38 #include "poll-loop.h"
39 #include "util.h"
40 #include "vlog.h"
41 #if AF_PACKET && LINUX_DATAPATH
42 #include <linux/if_packet.h>
43 #endif
44 #ifdef HAVE_NETLINK
45 #include "netlink-protocol.h"
46 #include "netlink-socket.h"
47 #endif
48
49 VLOG_DEFINE_THIS_MODULE(socket_util);
50
51 /* #ifdefs make it a pain to maintain code: you have to try to build both ways.
52  * Thus, this file compiles all of the code regardless of the target, by
53  * writing "if (LINUX_DATAPATH)" instead of "#ifdef __linux__". */
54 #ifndef LINUX_DATAPATH
55 #define LINUX_DATAPATH 0
56 #endif
57
58 #ifndef O_DIRECTORY
59 #define O_DIRECTORY 0
60 #endif
61
62 static int getsockopt_int(int fd, int level, int option, const char *optname,
63                           int *valuep);
64
65 /* Sets 'fd' to non-blocking mode.  Returns 0 if successful, otherwise a
66  * positive errno value. */
67 int
68 set_nonblocking(int fd)
69 {
70     int flags = fcntl(fd, F_GETFL, 0);
71     if (flags != -1) {
72         if (fcntl(fd, F_SETFL, flags | O_NONBLOCK) != -1) {
73             return 0;
74         } else {
75             VLOG_ERR("fcntl(F_SETFL) failed: %s", strerror(errno));
76             return errno;
77         }
78     } else {
79         VLOG_ERR("fcntl(F_GETFL) failed: %s", strerror(errno));
80         return errno;
81     }
82 }
83
84 void
85 xset_nonblocking(int fd)
86 {
87     if (set_nonblocking(fd)) {
88         exit(EXIT_FAILURE);
89     }
90 }
91
92 int
93 set_dscp(int fd, uint8_t dscp)
94 {
95     int val;
96
97     if (dscp > 63) {
98         return EINVAL;
99     }
100
101     val = dscp << 2;
102     if (setsockopt(fd, IPPROTO_IP, IP_TOS, &val, sizeof val)) {
103         return errno;
104     }
105
106     return 0;
107 }
108
109 static bool
110 rlim_is_finite(rlim_t limit)
111 {
112     if (limit == RLIM_INFINITY) {
113         return false;
114     }
115
116 #ifdef RLIM_SAVED_CUR           /* FreeBSD 8.0 lacks RLIM_SAVED_CUR. */
117     if (limit == RLIM_SAVED_CUR) {
118         return false;
119     }
120 #endif
121
122 #ifdef RLIM_SAVED_MAX           /* FreeBSD 8.0 lacks RLIM_SAVED_MAX. */
123     if (limit == RLIM_SAVED_MAX) {
124         return false;
125     }
126 #endif
127
128     return true;
129 }
130
131 /* Returns the maximum valid FD value, plus 1. */
132 int
133 get_max_fds(void)
134 {
135     static int max_fds = -1;
136     if (max_fds < 0) {
137         struct rlimit r;
138         if (!getrlimit(RLIMIT_NOFILE, &r) && rlim_is_finite(r.rlim_cur)) {
139             max_fds = r.rlim_cur;
140         } else {
141             VLOG_WARN("failed to obtain fd limit, defaulting to 1024");
142             max_fds = 1024;
143         }
144     }
145     return max_fds;
146 }
147
148 /* Translates 'host_name', which must be a string representation of an IP
149  * address, into a numeric IP address in '*addr'.  Returns 0 if successful,
150  * otherwise a positive errno value. */
151 int
152 lookup_ip(const char *host_name, struct in_addr *addr)
153 {
154     if (!inet_aton(host_name, addr)) {
155         static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
156         VLOG_ERR_RL(&rl, "\"%s\" is not a valid IP address", host_name);
157         return ENOENT;
158     }
159     return 0;
160 }
161
162 /* Translates 'host_name', which must be a string representation of an IPv6
163  * address, into a numeric IPv6 address in '*addr'.  Returns 0 if successful,
164  * otherwise a positive errno value. */
165 int
166 lookup_ipv6(const char *host_name, struct in6_addr *addr)
167 {
168     if (inet_pton(AF_INET6, host_name, addr) != 1) {
169         static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
170         VLOG_ERR_RL(&rl, "\"%s\" is not a valid IPv6 address", host_name);
171         return ENOENT;
172     }
173     return 0;
174 }
175
176 /* Translates 'host_name', which must be a host name or a string representation
177  * of an IP address, into a numeric IP address in '*addr'.  Returns 0 if
178  * successful, otherwise a positive errno value.
179  *
180  * Most Open vSwitch code should not use this because it causes deadlocks:
181  * gethostbyname() sends out a DNS request but that starts a new flow for which
182  * OVS must set up a flow, but it can't because it's waiting for a DNS reply.
183  * The synchronous lookup also delays other activity.  (Of course we can solve
184  * this but it doesn't seem worthwhile quite yet.)  */
185 int
186 lookup_hostname(const char *host_name, struct in_addr *addr)
187 {
188     struct hostent *h;
189
190     if (inet_aton(host_name, addr)) {
191         return 0;
192     }
193
194     h = gethostbyname(host_name);
195     if (h) {
196         *addr = *(struct in_addr *) h->h_addr;
197         return 0;
198     }
199
200     return (h_errno == HOST_NOT_FOUND ? ENOENT
201             : h_errno == TRY_AGAIN ? EAGAIN
202             : h_errno == NO_RECOVERY ? EIO
203             : h_errno == NO_ADDRESS ? ENXIO
204             : EINVAL);
205 }
206
207 int
208 check_connection_completion(int fd)
209 {
210     static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(5, 10);
211     struct pollfd pfd;
212     int retval;
213
214     pfd.fd = fd;
215     pfd.events = POLLOUT;
216     do {
217         retval = poll(&pfd, 1, 0);
218     } while (retval < 0 && errno == EINTR);
219     if (retval == 1) {
220         if (pfd.revents & POLLERR) {
221             ssize_t n = send(fd, "", 1, MSG_DONTWAIT);
222             if (n < 0) {
223                 return errno;
224             } else {
225                 VLOG_ERR_RL(&rl, "poll return POLLERR but send succeeded");
226                 return EPROTO;
227             }
228         }
229         return 0;
230     } else if (retval < 0) {
231         VLOG_ERR_RL(&rl, "poll: %s", strerror(errno));
232         return errno;
233     } else {
234         return EAGAIN;
235     }
236 }
237
238 /* Drain all the data currently in the receive queue of a datagram socket (and
239  * possibly additional data).  There is no way to know how many packets are in
240  * the receive queue, but we do know that the total number of bytes queued does
241  * not exceed the receive buffer size, so we pull packets until none are left
242  * or we've read that many bytes. */
243 int
244 drain_rcvbuf(int fd)
245 {
246     int rcvbuf;
247
248     rcvbuf = get_socket_rcvbuf(fd);
249     if (rcvbuf < 0) {
250         return -rcvbuf;
251     }
252
253     while (rcvbuf > 0) {
254         /* In Linux, specifying MSG_TRUNC in the flags argument causes the
255          * datagram length to be returned, even if that is longer than the
256          * buffer provided.  Thus, we can use a 1-byte buffer to discard the
257          * incoming datagram and still be able to account how many bytes were
258          * removed from the receive buffer.
259          *
260          * On other Unix-like OSes, MSG_TRUNC has no effect in the flags
261          * argument. */
262         char buffer[LINUX_DATAPATH ? 1 : 2048];
263         ssize_t n_bytes = recv(fd, buffer, sizeof buffer,
264                                MSG_TRUNC | MSG_DONTWAIT);
265         if (n_bytes <= 0 || n_bytes >= rcvbuf) {
266             break;
267         }
268         rcvbuf -= n_bytes;
269     }
270     return 0;
271 }
272
273 /* Returns the size of socket 'sock''s receive buffer (SO_RCVBUF), or a
274  * negative errno value if an error occurs. */
275 int
276 get_socket_rcvbuf(int sock)
277 {
278     int rcvbuf;
279     int error;
280
281     error = getsockopt_int(sock, SOL_SOCKET, SO_RCVBUF, "SO_RCVBUF", &rcvbuf);
282     return error ? -error : rcvbuf;
283 }
284
285 /* Reads and discards up to 'n' datagrams from 'fd', stopping as soon as no
286  * more data can be immediately read.  ('fd' should therefore be in
287  * non-blocking mode.)*/
288 void
289 drain_fd(int fd, size_t n_packets)
290 {
291     for (; n_packets > 0; n_packets--) {
292         /* 'buffer' only needs to be 1 byte long in most circumstances.  This
293          * size is defensive against the possibility that we someday want to
294          * use a Linux tap device without TUN_NO_PI, in which case a buffer
295          * smaller than sizeof(struct tun_pi) will give EINVAL on read. */
296         char buffer[128];
297         if (read(fd, buffer, sizeof buffer) <= 0) {
298             break;
299         }
300     }
301 }
302
303 /* Stores in '*un' a sockaddr_un that refers to file 'name'.  Stores in
304  * '*un_len' the size of the sockaddr_un. */
305 static void
306 make_sockaddr_un__(const char *name, struct sockaddr_un *un, socklen_t *un_len)
307 {
308     un->sun_family = AF_UNIX;
309     ovs_strzcpy(un->sun_path, name, sizeof un->sun_path);
310     *un_len = (offsetof(struct sockaddr_un, sun_path)
311                 + strlen (un->sun_path) + 1);
312 }
313
314 /* Stores in '*un' a sockaddr_un that refers to file 'name'.  Stores in
315  * '*un_len' the size of the sockaddr_un.
316  *
317  * Returns 0 on success, otherwise a positive errno value.  On success,
318  * '*dirfdp' is either -1 or a nonnegative file descriptor that the caller
319  * should close after using '*un' to bind or connect.  On failure, '*dirfdp' is
320  * -1. */
321 static int
322 make_sockaddr_un(const char *name, struct sockaddr_un *un, socklen_t *un_len,
323                  int *dirfdp)
324 {
325     enum { MAX_UN_LEN = sizeof un->sun_path - 1 };
326
327     *dirfdp = -1;
328     if (strlen(name) > MAX_UN_LEN) {
329         static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 1);
330
331         if (LINUX_DATAPATH) {
332             /* 'name' is too long to fit in a sockaddr_un, but we have a
333              * workaround for that on Linux: shorten it by opening a file
334              * descriptor for the directory part of the name and indirecting
335              * through /proc/self/fd/<dirfd>/<basename>. */
336             char *dir, *base;
337             char *short_name;
338             int dirfd;
339
340             dir = dir_name(name);
341             base = base_name(name);
342
343             dirfd = open(dir, O_DIRECTORY | O_RDONLY);
344             if (dirfd < 0) {
345                 free(base);
346                 free(dir);
347                 return errno;
348             }
349
350             short_name = xasprintf("/proc/self/fd/%d/%s", dirfd, base);
351             free(dir);
352             free(base);
353
354             if (strlen(short_name) <= MAX_UN_LEN) {
355                 make_sockaddr_un__(short_name, un, un_len);
356                 free(short_name);
357                 *dirfdp = dirfd;
358                 return 0;
359             }
360             free(short_name);
361             close(dirfd);
362
363             VLOG_WARN_RL(&rl, "Unix socket name %s is longer than maximum "
364                          "%d bytes (even shortened)", name, MAX_UN_LEN);
365         } else {
366             /* 'name' is too long and we have no workaround. */
367             VLOG_WARN_RL(&rl, "Unix socket name %s is longer than maximum "
368                          "%d bytes", name, MAX_UN_LEN);
369         }
370
371         return ENAMETOOLONG;
372     } else {
373         make_sockaddr_un__(name, un, un_len);
374         return 0;
375     }
376 }
377
378 /* Binds Unix domain socket 'fd' to a file with permissions 0700. */
379 static int
380 bind_unix_socket(int fd, struct sockaddr *sun, socklen_t sun_len)
381 {
382     /* According to _Unix Network Programming_, umask should affect bind(). */
383     mode_t old_umask = umask(0077);
384     int error = bind(fd, sun, sun_len) ? errno : 0;
385     umask(old_umask);
386     return error;
387 }
388
389 /* Creates a Unix domain socket in the given 'style' (either SOCK_DGRAM or
390  * SOCK_STREAM) that is bound to '*bind_path' (if 'bind_path' is non-null) and
391  * connected to '*connect_path' (if 'connect_path' is non-null).  If 'nonblock'
392  * is true, the socket is made non-blocking.
393  *
394  * Returns the socket's fd if successful, otherwise a negative errno value. */
395 int
396 make_unix_socket(int style, bool nonblock,
397                  const char *bind_path, const char *connect_path)
398 {
399     int error;
400     int fd;
401
402     fd = socket(PF_UNIX, style, 0);
403     if (fd < 0) {
404         return -errno;
405     }
406
407     /* Set nonblocking mode right away, if we want it.  This prevents blocking
408      * in connect(), if connect_path != NULL.  (In turn, that's a corner case:
409      * it will only happen if style is SOCK_STREAM or SOCK_SEQPACKET, and only
410      * if a backlog of un-accepted connections has built up in the kernel.)  */
411     if (nonblock) {
412         int flags = fcntl(fd, F_GETFL, 0);
413         if (flags == -1) {
414             error = errno;
415             goto error;
416         }
417         if (fcntl(fd, F_SETFL, flags | O_NONBLOCK) == -1) {
418             error = errno;
419             goto error;
420         }
421     }
422
423     if (bind_path) {
424         struct sockaddr_un un;
425         socklen_t un_len;
426         int dirfd;
427
428         if (unlink(bind_path) && errno != ENOENT) {
429             VLOG_WARN("unlinking \"%s\": %s\n", bind_path, strerror(errno));
430         }
431         fatal_signal_add_file_to_unlink(bind_path);
432
433         error = make_sockaddr_un(bind_path, &un, &un_len, &dirfd);
434         if (!error) {
435             error = bind_unix_socket(fd, (struct sockaddr *) &un, un_len);
436         }
437         if (dirfd >= 0) {
438             close(dirfd);
439         }
440         if (error) {
441             goto error;
442         }
443     }
444
445     if (connect_path) {
446         struct sockaddr_un un;
447         socklen_t un_len;
448         int dirfd;
449
450         error = make_sockaddr_un(connect_path, &un, &un_len, &dirfd);
451         if (!error
452             && connect(fd, (struct sockaddr*) &un, un_len)
453             && errno != EINPROGRESS) {
454             error = errno;
455         }
456         if (dirfd >= 0) {
457             close(dirfd);
458         }
459         if (error) {
460             goto error;
461         }
462     }
463
464     return fd;
465
466 error:
467     if (error == EAGAIN) {
468         error = EPROTO;
469     }
470     if (bind_path) {
471         fatal_signal_unlink_file_now(bind_path);
472     }
473     close(fd);
474     return -error;
475 }
476
477 int
478 get_unix_name_len(socklen_t sun_len)
479 {
480     return (sun_len >= offsetof(struct sockaddr_un, sun_path)
481             ? sun_len - offsetof(struct sockaddr_un, sun_path)
482             : 0);
483 }
484
485 ovs_be32
486 guess_netmask(ovs_be32 ip_)
487 {
488     uint32_t ip = ntohl(ip_);
489     return ((ip >> 31) == 0 ? htonl(0xff000000)   /* Class A */
490             : (ip >> 30) == 2 ? htonl(0xffff0000) /* Class B */
491             : (ip >> 29) == 6 ? htonl(0xffffff00) /* Class C */
492             : htonl(0));                          /* ??? */
493 }
494
495 /* Parses 'target', which should be a string in the format "<host>[:<port>]".
496  * <host> is required.  If 'default_port' is nonzero then <port> is optional
497  * and defaults to 'default_port'.
498  *
499  * On success, returns true and stores the parsed remote address into '*sinp'.
500  * On failure, logs an error, stores zeros into '*sinp', and returns false. */
501 bool
502 inet_parse_active(const char *target_, uint16_t default_port,
503                   struct sockaddr_in *sinp)
504 {
505     char *target = xstrdup(target_);
506     char *save_ptr = NULL;
507     const char *host_name;
508     const char *port_string;
509     bool ok = false;
510
511     /* Defaults. */
512     sinp->sin_family = AF_INET;
513     sinp->sin_port = htons(default_port);
514
515     /* Tokenize. */
516     host_name = strtok_r(target, ":", &save_ptr);
517     port_string = strtok_r(NULL, ":", &save_ptr);
518     if (!host_name) {
519         VLOG_ERR("%s: bad peer name format", target_);
520         goto exit;
521     }
522
523     /* Look up IP, port. */
524     if (lookup_ip(host_name, &sinp->sin_addr)) {
525         goto exit;
526     }
527     if (port_string && atoi(port_string)) {
528         sinp->sin_port = htons(atoi(port_string));
529     } else if (!default_port) {
530         VLOG_ERR("%s: port number must be specified", target_);
531         goto exit;
532     }
533
534     ok = true;
535
536 exit:
537     if (!ok) {
538         memset(sinp, 0, sizeof *sinp);
539     }
540     free(target);
541     return ok;
542 }
543
544 /* Opens a non-blocking IPv4 socket of the specified 'style' and connects to
545  * 'target', which should be a string in the format "<host>[:<port>]".  <host>
546  * is required.  If 'default_port' is nonzero then <port> is optional and
547  * defaults to 'default_port'.
548  *
549  * 'style' should be SOCK_STREAM (for TCP) or SOCK_DGRAM (for UDP).
550  *
551  * On success, returns 0 (indicating connection complete) or EAGAIN (indicating
552  * connection in progress), in which case the new file descriptor is stored
553  * into '*fdp'.  On failure, returns a positive errno value other than EAGAIN
554  * and stores -1 into '*fdp'.
555  *
556  * If 'sinp' is non-null, then on success the target address is stored into
557  * '*sinp'.
558  *
559  * 'dscp' becomes the DSCP bits in the IP headers for the new connection.  It
560  * should be in the range [0, 63] and will automatically be shifted to the
561  * appropriately place in the IP tos field. */
562 int
563 inet_open_active(int style, const char *target, uint16_t default_port,
564                  struct sockaddr_in *sinp, int *fdp, uint8_t dscp)
565 {
566     struct sockaddr_in sin;
567     int fd = -1;
568     int error;
569
570     /* Parse. */
571     if (!inet_parse_active(target, default_port, &sin)) {
572         error = EAFNOSUPPORT;
573         goto exit;
574     }
575
576     /* Create non-blocking socket. */
577     fd = socket(AF_INET, style, 0);
578     if (fd < 0) {
579         VLOG_ERR("%s: socket: %s", target, strerror(errno));
580         error = errno;
581         goto exit;
582     }
583     error = set_nonblocking(fd);
584     if (error) {
585         goto exit;
586     }
587
588     /* The dscp bits must be configured before connect() to ensure that the TOS
589      * field is set during the connection establishment.  If set after
590      * connect(), the handshake SYN frames will be sent with a TOS of 0. */
591     error = set_dscp(fd, dscp);
592     if (error) {
593         VLOG_ERR("%s: socket: %s", target, strerror(error));
594         goto exit;
595     }
596
597     /* Connect. */
598     error = connect(fd, (struct sockaddr *) &sin, sizeof sin) == 0 ? 0 : errno;
599     if (error == EINPROGRESS) {
600         error = EAGAIN;
601     }
602
603 exit:
604     if (!error || error == EAGAIN) {
605         if (sinp) {
606             *sinp = sin;
607         }
608     } else if (fd >= 0) {
609         close(fd);
610         fd = -1;
611     }
612     *fdp = fd;
613     return error;
614 }
615
616 /* Parses 'target', which should be a string in the format "[<port>][:<ip>]":
617  *
618  *      - If 'default_port' is -1, then <port> is required.  Otherwise, if
619  *        <port> is omitted, then 'default_port' is used instead.
620  *
621  *      - If <port> (or 'default_port', if used) is 0, then no port is bound
622  *        and the TCP/IP stack will select a port.
623  *
624  *      - If <ip> is omitted then the IP address is wildcarded.
625  *
626  * If successful, stores the address into '*sinp' and returns true; otherwise
627  * zeros '*sinp' and returns false. */
628 bool
629 inet_parse_passive(const char *target_, int default_port,
630                    struct sockaddr_in *sinp)
631 {
632     char *target = xstrdup(target_);
633     char *string_ptr = target;
634     const char *host_name;
635     const char *port_string;
636     bool ok = false;
637     int port;
638
639     /* Address defaults. */
640     memset(sinp, 0, sizeof *sinp);
641     sinp->sin_family = AF_INET;
642     sinp->sin_addr.s_addr = htonl(INADDR_ANY);
643     sinp->sin_port = htons(default_port);
644
645     /* Parse optional port number. */
646     port_string = strsep(&string_ptr, ":");
647     if (port_string && str_to_int(port_string, 10, &port)) {
648         sinp->sin_port = htons(port);
649     } else if (default_port < 0) {
650         VLOG_ERR("%s: port number must be specified", target_);
651         goto exit;
652     }
653
654     /* Parse optional bind IP. */
655     host_name = strsep(&string_ptr, ":");
656     if (host_name && host_name[0] && lookup_ip(host_name, &sinp->sin_addr)) {
657         goto exit;
658     }
659
660     ok = true;
661
662 exit:
663     if (!ok) {
664         memset(sinp, 0, sizeof *sinp);
665     }
666     free(target);
667     return ok;
668 }
669
670
671 /* Opens a non-blocking IPv4 socket of the specified 'style', binds to
672  * 'target', and listens for incoming connections.  Parses 'target' in the same
673  * way was inet_parse_passive().
674  *
675  * 'style' should be SOCK_STREAM (for TCP) or SOCK_DGRAM (for UDP).
676  *
677  * For TCP, the socket will have SO_REUSEADDR turned on.
678  *
679  * On success, returns a non-negative file descriptor.  On failure, returns a
680  * negative errno value.
681  *
682  * If 'sinp' is non-null, then on success the bound address is stored into
683  * '*sinp'.
684  *
685  * 'dscp' becomes the DSCP bits in the IP headers for the new connection.  It
686  * should be in the range [0, 63] and will automatically be shifted to the
687  * appropriately place in the IP tos field. */
688 int
689 inet_open_passive(int style, const char *target, int default_port,
690                   struct sockaddr_in *sinp, uint8_t dscp)
691 {
692     struct sockaddr_in sin;
693     int fd = 0, error;
694     unsigned int yes = 1;
695
696     if (!inet_parse_passive(target, default_port, &sin)) {
697         return -EAFNOSUPPORT;
698     }
699
700     /* Create non-blocking socket, set SO_REUSEADDR. */
701     fd = socket(AF_INET, style, 0);
702     if (fd < 0) {
703         error = errno;
704         VLOG_ERR("%s: socket: %s", target, strerror(error));
705         return -error;
706     }
707     error = set_nonblocking(fd);
708     if (error) {
709         goto error;
710     }
711     if (style == SOCK_STREAM
712         && setsockopt(fd, SOL_SOCKET, SO_REUSEADDR, &yes, sizeof yes) < 0) {
713         error = errno;
714         VLOG_ERR("%s: setsockopt(SO_REUSEADDR): %s", target, strerror(error));
715         goto error;
716     }
717
718     /* Bind. */
719     if (bind(fd, (struct sockaddr *) &sin, sizeof sin) < 0) {
720         error = errno;
721         VLOG_ERR("%s: bind: %s", target, strerror(error));
722         goto error;
723     }
724
725     /* The dscp bits must be configured before connect() to ensure that the TOS
726      * field is set during the connection establishment.  If set after
727      * connect(), the handshake SYN frames will be sent with a TOS of 0. */
728     error = set_dscp(fd, dscp);
729     if (error) {
730         VLOG_ERR("%s: socket: %s", target, strerror(error));
731         goto error;
732     }
733
734     /* Listen. */
735     if (style == SOCK_STREAM && listen(fd, 10) < 0) {
736         error = errno;
737         VLOG_ERR("%s: listen: %s", target, strerror(error));
738         goto error;
739     }
740
741     if (sinp) {
742         socklen_t sin_len = sizeof sin;
743         if (getsockname(fd, (struct sockaddr *) &sin, &sin_len) < 0){
744             error = errno;
745             VLOG_ERR("%s: getsockname: %s", target, strerror(error));
746             goto error;
747         }
748         if (sin.sin_family != AF_INET || sin_len != sizeof sin) {
749             error = EAFNOSUPPORT;
750             VLOG_ERR("%s: getsockname: invalid socket name", target);
751             goto error;
752         }
753         *sinp = sin;
754     }
755
756     return fd;
757
758 error:
759     close(fd);
760     return -error;
761 }
762
763 /* Returns a readable and writable fd for /dev/null, if successful, otherwise
764  * a negative errno value.  The caller must not close the returned fd (because
765  * the same fd will be handed out to subsequent callers). */
766 int
767 get_null_fd(void)
768 {
769     static int null_fd = -1;
770     if (null_fd < 0) {
771         null_fd = open("/dev/null", O_RDWR);
772         if (null_fd < 0) {
773             int error = errno;
774             VLOG_ERR("could not open /dev/null: %s", strerror(error));
775             return -error;
776         }
777     }
778     return null_fd;
779 }
780
781 int
782 read_fully(int fd, void *p_, size_t size, size_t *bytes_read)
783 {
784     uint8_t *p = p_;
785
786     *bytes_read = 0;
787     while (size > 0) {
788         ssize_t retval = read(fd, p, size);
789         if (retval > 0) {
790             *bytes_read += retval;
791             size -= retval;
792             p += retval;
793         } else if (retval == 0) {
794             return EOF;
795         } else if (errno != EINTR) {
796             return errno;
797         }
798     }
799     return 0;
800 }
801
802 int
803 write_fully(int fd, const void *p_, size_t size, size_t *bytes_written)
804 {
805     const uint8_t *p = p_;
806
807     *bytes_written = 0;
808     while (size > 0) {
809         ssize_t retval = write(fd, p, size);
810         if (retval > 0) {
811             *bytes_written += retval;
812             size -= retval;
813             p += retval;
814         } else if (retval == 0) {
815             VLOG_WARN("write returned 0");
816             return EPROTO;
817         } else if (errno != EINTR) {
818             return errno;
819         }
820     }
821     return 0;
822 }
823
824 /* Given file name 'file_name', fsyncs the directory in which it is contained.
825  * Returns 0 if successful, otherwise a positive errno value. */
826 int
827 fsync_parent_dir(const char *file_name)
828 {
829     int error = 0;
830     char *dir;
831     int fd;
832
833     dir = dir_name(file_name);
834     fd = open(dir, O_RDONLY);
835     if (fd >= 0) {
836         if (fsync(fd)) {
837             if (errno == EINVAL || errno == EROFS) {
838                 /* This directory does not support synchronization.  Not
839                  * really an error. */
840             } else {
841                 error = errno;
842                 VLOG_ERR("%s: fsync failed (%s)", dir, strerror(error));
843             }
844         }
845         close(fd);
846     } else {
847         error = errno;
848         VLOG_ERR("%s: open failed (%s)", dir, strerror(error));
849     }
850     free(dir);
851
852     return error;
853 }
854
855 /* Obtains the modification time of the file named 'file_name' to the greatest
856  * supported precision.  If successful, stores the mtime in '*mtime' and
857  * returns 0.  On error, returns a positive errno value and stores zeros in
858  * '*mtime'. */
859 int
860 get_mtime(const char *file_name, struct timespec *mtime)
861 {
862     struct stat s;
863
864     if (!stat(file_name, &s)) {
865         mtime->tv_sec = s.st_mtime;
866
867 #if HAVE_STRUCT_STAT_ST_MTIM_TV_NSEC
868         mtime->tv_nsec = s.st_mtim.tv_nsec;
869 #elif HAVE_STRUCT_STAT_ST_MTIMENSEC
870         mtime->tv_nsec = s.st_mtimensec;
871 #else
872         mtime->tv_nsec = 0;
873 #endif
874
875         return 0;
876     } else {
877         mtime->tv_sec = mtime->tv_nsec = 0;
878         return errno;
879     }
880 }
881
882 void
883 xpipe(int fds[2])
884 {
885     if (pipe(fds)) {
886         VLOG_FATAL("failed to create pipe (%s)", strerror(errno));
887     }
888 }
889
890 void
891 xpipe_nonblocking(int fds[2])
892 {
893     xpipe(fds);
894     xset_nonblocking(fds[0]);
895     xset_nonblocking(fds[1]);
896 }
897
898 void
899 xsocketpair(int domain, int type, int protocol, int fds[2])
900 {
901     if (socketpair(domain, type, protocol, fds)) {
902         VLOG_FATAL("failed to create socketpair (%s)", strerror(errno));
903     }
904 }
905
906 static int
907 getsockopt_int(int fd, int level, int option, const char *optname, int *valuep)
908 {
909     static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(5, 10);
910     socklen_t len;
911     int value;
912     int error;
913
914     len = sizeof value;
915     if (getsockopt(fd, level, option, &value, &len)) {
916         error = errno;
917         VLOG_ERR_RL(&rl, "getsockopt(%s): %s", optname, strerror(error));
918     } else if (len != sizeof value) {
919         error = EINVAL;
920         VLOG_ERR_RL(&rl, "getsockopt(%s): value is %u bytes (expected %zu)",
921                     optname, (unsigned int) len, sizeof value);
922     } else {
923         error = 0;
924     }
925
926     *valuep = error ? 0 : value;
927     return error;
928 }
929
930 static void
931 describe_sockaddr(struct ds *string, int fd,
932                   int (*getaddr)(int, struct sockaddr *, socklen_t *))
933 {
934     struct sockaddr_storage ss;
935     socklen_t len = sizeof ss;
936
937     if (!getaddr(fd, (struct sockaddr *) &ss, &len)) {
938         if (ss.ss_family == AF_INET) {
939             struct sockaddr_in sin;
940
941             memcpy(&sin, &ss, sizeof sin);
942             ds_put_format(string, IP_FMT":%"PRIu16,
943                           IP_ARGS(sin.sin_addr.s_addr), ntohs(sin.sin_port));
944         } else if (ss.ss_family == AF_UNIX) {
945             struct sockaddr_un sun;
946             const char *null;
947             size_t maxlen;
948
949             memcpy(&sun, &ss, sizeof sun);
950             maxlen = len - offsetof(struct sockaddr_un, sun_path);
951             null = memchr(sun.sun_path, '\0', maxlen);
952             ds_put_buffer(string, sun.sun_path,
953                           null ? null - sun.sun_path : maxlen);
954         }
955 #ifdef HAVE_NETLINK
956         else if (ss.ss_family == AF_NETLINK) {
957             int protocol;
958
959 /* SO_PROTOCOL was introduced in 2.6.32.  Support it regardless of the version
960  * of the Linux kernel headers in use at build time. */
961 #ifndef SO_PROTOCOL
962 #define SO_PROTOCOL 38
963 #endif
964
965             if (!getsockopt_int(fd, SOL_SOCKET, SO_PROTOCOL, "SO_PROTOCOL",
966                                 &protocol)) {
967                 switch (protocol) {
968                 case NETLINK_ROUTE:
969                     ds_put_cstr(string, "NETLINK_ROUTE");
970                     break;
971
972                 case NETLINK_GENERIC:
973                     ds_put_cstr(string, "NETLINK_GENERIC");
974                     break;
975
976                 default:
977                     ds_put_format(string, "AF_NETLINK family %d", protocol);
978                     break;
979                 }
980             } else {
981                 ds_put_cstr(string, "AF_NETLINK");
982             }
983         }
984 #endif
985 #if AF_PACKET && LINUX_DATAPATH
986         else if (ss.ss_family == AF_PACKET) {
987             struct sockaddr_ll sll;
988
989             memcpy(&sll, &ss, sizeof sll);
990             ds_put_cstr(string, "AF_PACKET");
991             if (sll.sll_ifindex) {
992                 char name[IFNAMSIZ];
993
994                 if (if_indextoname(sll.sll_ifindex, name)) {
995                     ds_put_format(string, "(%s)", name);
996                 } else {
997                     ds_put_format(string, "(ifindex=%d)", sll.sll_ifindex);
998                 }
999             }
1000             if (sll.sll_protocol) {
1001                 ds_put_format(string, "(protocol=0x%"PRIu16")",
1002                               ntohs(sll.sll_protocol));
1003             }
1004         }
1005 #endif
1006         else if (ss.ss_family == AF_UNSPEC) {
1007             ds_put_cstr(string, "AF_UNSPEC");
1008         } else {
1009             ds_put_format(string, "AF_%d", (int) ss.ss_family);
1010         }
1011     }
1012 }
1013
1014
1015 #ifdef LINUX_DATAPATH
1016 static void
1017 put_fd_filename(struct ds *string, int fd)
1018 {
1019     char buf[1024];
1020     char *linkname;
1021     int n;
1022
1023     linkname = xasprintf("/proc/self/fd/%d", fd);
1024     n = readlink(linkname, buf, sizeof buf);
1025     if (n > 0) {
1026         ds_put_char(string, ' ');
1027         ds_put_buffer(string, buf, n);
1028         if (n > sizeof buf) {
1029             ds_put_cstr(string, "...");
1030         }
1031     }
1032     free(linkname);
1033 }
1034 #endif
1035
1036 /* Returns a malloc()'d string describing 'fd', for use in logging. */
1037 char *
1038 describe_fd(int fd)
1039 {
1040     struct ds string;
1041     struct stat s;
1042
1043     ds_init(&string);
1044     if (fstat(fd, &s)) {
1045         ds_put_format(&string, "fstat failed (%s)", strerror(errno));
1046     } else if (S_ISSOCK(s.st_mode)) {
1047         describe_sockaddr(&string, fd, getsockname);
1048         ds_put_cstr(&string, "<->");
1049         describe_sockaddr(&string, fd, getpeername);
1050     } else {
1051         ds_put_cstr(&string, (isatty(fd) ? "tty"
1052                               : S_ISDIR(s.st_mode) ? "directory"
1053                               : S_ISCHR(s.st_mode) ? "character device"
1054                               : S_ISBLK(s.st_mode) ? "block device"
1055                               : S_ISREG(s.st_mode) ? "file"
1056                               : S_ISFIFO(s.st_mode) ? "FIFO"
1057                               : S_ISLNK(s.st_mode) ? "symbolic link"
1058                               : "unknown"));
1059 #ifdef LINUX_DATAPATH
1060         put_fd_filename(&string, fd);
1061 #endif
1062     }
1063     return ds_steal_cstr(&string);
1064 }
1065
1066 /* Returns the total of the 'iov_len' members of the 'n_iovs' in 'iovs'.
1067  * The caller must ensure that the total does not exceed SIZE_MAX. */
1068 size_t
1069 iovec_len(const struct iovec iovs[], size_t n_iovs)
1070 {
1071     size_t len = 0;
1072     size_t i;
1073
1074     for (i = 0; i < n_iovs; i++) {
1075         len += iovs[i].iov_len;
1076     }
1077     return len;
1078 }
1079
1080 /* Returns true if all of the 'n_iovs' iovecs in 'iovs' have length zero. */
1081 bool
1082 iovec_is_empty(const struct iovec iovs[], size_t n_iovs)
1083 {
1084     size_t i;
1085
1086     for (i = 0; i < n_iovs; i++) {
1087         if (iovs[i].iov_len) {
1088             return false;
1089         }
1090     }
1091     return true;
1092 }
1093
1094 /* Sends the 'n_iovs' iovecs of data in 'iovs' and the 'n_fds' file descriptors
1095  * in 'fds' on Unix domain socket 'sock'.  Returns the number of bytes
1096  * successfully sent or -1 if an error occurred.  On error, sets errno
1097  * appropriately.  */
1098 int
1099 send_iovec_and_fds(int sock,
1100                    const struct iovec *iovs, size_t n_iovs,
1101                    const int fds[], size_t n_fds)
1102 {
1103     ovs_assert(sock >= 0);
1104     if (n_fds > 0) {
1105         union {
1106             struct cmsghdr cm;
1107             char control[CMSG_SPACE(SOUTIL_MAX_FDS * sizeof *fds)];
1108         } cmsg;
1109         struct msghdr msg;
1110
1111         ovs_assert(!iovec_is_empty(iovs, n_iovs));
1112         ovs_assert(n_fds <= SOUTIL_MAX_FDS);
1113
1114         memset(&cmsg, 0, sizeof cmsg);
1115         cmsg.cm.cmsg_len = CMSG_LEN(n_fds * sizeof *fds);
1116         cmsg.cm.cmsg_level = SOL_SOCKET;
1117         cmsg.cm.cmsg_type = SCM_RIGHTS;
1118         memcpy(CMSG_DATA(&cmsg.cm), fds, n_fds * sizeof *fds);
1119
1120         msg.msg_name = NULL;
1121         msg.msg_namelen = 0;
1122         msg.msg_iov = CONST_CAST(struct iovec *, iovs);
1123         msg.msg_iovlen = n_iovs;
1124         msg.msg_control = &cmsg.cm;
1125         msg.msg_controllen = CMSG_SPACE(n_fds * sizeof *fds);
1126         msg.msg_flags = 0;
1127
1128         return sendmsg(sock, &msg, 0);
1129     } else {
1130         return writev(sock, iovs, n_iovs);
1131     }
1132 }
1133
1134 /* Sends the 'n_iovs' iovecs of data in 'iovs' and the 'n_fds' file descriptors
1135  * in 'fds' on Unix domain socket 'sock'.  If 'skip_bytes' is nonzero, then the
1136  * first 'skip_bytes' of data in the iovecs are not sent, and none of the file
1137  * descriptors are sent.  The function continues to retry sending until an
1138  * error (other than EINTR) occurs or all the data and fds are sent.
1139  *
1140  * Returns 0 if all the data and fds were successfully sent, otherwise a
1141  * positive errno value.  Regardless of success, stores the number of bytes
1142  * sent (always at least 'skip_bytes') in '*bytes_sent'.  (If at least one byte
1143  * is sent, then all the fds have been sent.)
1144  *
1145  * 'skip_bytes' must be less than or equal to iovec_len(iovs, n_iovs). */
1146 int
1147 send_iovec_and_fds_fully(int sock,
1148                          const struct iovec iovs[], size_t n_iovs,
1149                          const int fds[], size_t n_fds,
1150                          size_t skip_bytes, size_t *bytes_sent)
1151 {
1152     *bytes_sent = 0;
1153     while (n_iovs > 0) {
1154         int retval;
1155
1156         if (skip_bytes) {
1157             retval = skip_bytes;
1158             skip_bytes = 0;
1159         } else if (!*bytes_sent) {
1160             retval = send_iovec_and_fds(sock, iovs, n_iovs, fds, n_fds);
1161         } else {
1162             retval = writev(sock, iovs, n_iovs);
1163         }
1164
1165         if (retval > 0) {
1166             *bytes_sent += retval;
1167             while (retval > 0) {
1168                 const uint8_t *base = iovs->iov_base;
1169                 size_t len = iovs->iov_len;
1170
1171                 if (retval < len) {
1172                     size_t sent;
1173                     int error;
1174
1175                     error = write_fully(sock, base + retval, len - retval,
1176                                         &sent);
1177                     *bytes_sent += sent;
1178                     retval += sent;
1179                     if (error) {
1180                         return error;
1181                     }
1182                 }
1183                 retval -= len;
1184                 iovs++;
1185                 n_iovs--;
1186             }
1187         } else if (retval == 0) {
1188             if (iovec_is_empty(iovs, n_iovs)) {
1189                 break;
1190             }
1191             VLOG_WARN("send returned 0");
1192             return EPROTO;
1193         } else if (errno != EINTR) {
1194             return errno;
1195         }
1196     }
1197
1198     return 0;
1199 }
1200
1201 /* Sends the 'n_iovs' iovecs of data in 'iovs' and the 'n_fds' file descriptors
1202  * in 'fds' on Unix domain socket 'sock'.  The function continues to retry
1203  * sending until an error (other than EAGAIN or EINTR) occurs or all the data
1204  * and fds are sent.  Upon EAGAIN, the function blocks until the socket is
1205  * ready for more data.
1206  *
1207  * Returns 0 if all the data and fds were successfully sent, otherwise a
1208  * positive errno value. */
1209 int
1210 send_iovec_and_fds_fully_block(int sock,
1211                                const struct iovec iovs[], size_t n_iovs,
1212                                const int fds[], size_t n_fds)
1213 {
1214     size_t sent = 0;
1215
1216     for (;;) {
1217         int error;
1218
1219         error = send_iovec_and_fds_fully(sock, iovs, n_iovs,
1220                                          fds, n_fds, sent, &sent);
1221         if (error != EAGAIN) {
1222             return error;
1223         }
1224         poll_fd_wait(sock, POLLOUT);
1225         poll_block();
1226     }
1227 }
1228
1229 /* Attempts to receive from Unix domain socket 'sock' up to 'size' bytes of
1230  * data into 'data' and up to SOUTIL_MAX_FDS file descriptors into 'fds'.
1231  *
1232  *      - Upon success, returns the number of bytes of data copied into 'data'
1233  *        and stores the number of received file descriptors into '*n_fdsp'.
1234  *
1235  *      - On failure, returns a negative errno value and stores 0 in
1236  *        '*n_fdsp'.
1237  *
1238  *      - On EOF, returns 0 and stores 0 in '*n_fdsp'. */
1239 int
1240 recv_data_and_fds(int sock,
1241                   void *data, size_t size,
1242                   int fds[SOUTIL_MAX_FDS], size_t *n_fdsp)
1243 {
1244     union {
1245         struct cmsghdr cm;
1246         char control[CMSG_SPACE(SOUTIL_MAX_FDS * sizeof *fds)];
1247     } cmsg;
1248     struct msghdr msg;
1249     int retval;
1250     struct cmsghdr *p;
1251     size_t i;
1252
1253     *n_fdsp = 0;
1254
1255     do {
1256         struct iovec iov;
1257
1258         iov.iov_base = data;
1259         iov.iov_len = size;
1260
1261         msg.msg_name = NULL;
1262         msg.msg_namelen = 0;
1263         msg.msg_iov = &iov;
1264         msg.msg_iovlen = 1;
1265         msg.msg_control = &cmsg.cm;
1266         msg.msg_controllen = sizeof cmsg.control;
1267         msg.msg_flags = 0;
1268
1269         retval = recvmsg(sock, &msg, 0);
1270     } while (retval < 0 && errno == EINTR);
1271     if (retval <= 0) {
1272         return retval < 0 ? -errno : 0;
1273     }
1274
1275     for (p = CMSG_FIRSTHDR(&msg); p; p = CMSG_NXTHDR(&msg, p)) {
1276         if (p->cmsg_level != SOL_SOCKET || p->cmsg_type != SCM_RIGHTS) {
1277             VLOG_ERR("unexpected control message %d:%d",
1278                      p->cmsg_level, p->cmsg_type);
1279             goto error;
1280         } else if (*n_fdsp) {
1281             VLOG_ERR("multiple SCM_RIGHTS received");
1282             goto error;
1283         } else {
1284             size_t n_fds = (p->cmsg_len - CMSG_LEN(0)) / sizeof *fds;
1285             const int *fds_data = (const int *) CMSG_DATA(p);
1286
1287             ovs_assert(n_fds > 0);
1288             if (n_fds > SOUTIL_MAX_FDS) {
1289                 VLOG_ERR("%zu fds received but only %d supported",
1290                          n_fds, SOUTIL_MAX_FDS);
1291                 for (i = 0; i < n_fds; i++) {
1292                     close(fds_data[i]);
1293                 }
1294                 goto error;
1295             }
1296
1297             *n_fdsp = n_fds;
1298             memcpy(fds, fds_data, n_fds * sizeof *fds);
1299         }
1300     }
1301
1302     return retval;
1303
1304 error:
1305     for (i = 0; i < *n_fdsp; i++) {
1306         close(fds[i]);
1307     }
1308     *n_fdsp = 0;
1309     return EPROTO;
1310 }