bridge: Correctly omit unsupported interface statistics from database.
[sliver-openvswitch.git] / vswitchd / bridge.c
1 /* Copyright (c) 2008, 2009, 2010, 2011, 2012, 2013 Nicira, Inc.
2  *
3  * Licensed under the Apache License, Version 2.0 (the "License");
4  * you may not use this file except in compliance with the License.
5  * You may obtain a copy of the License at:
6  *
7  *     http://www.apache.org/licenses/LICENSE-2.0
8  *
9  * Unless required by applicable law or agreed to in writing, software
10  * distributed under the License is distributed on an "AS IS" BASIS,
11  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
12  * See the License for the specific language governing permissions and
13  * limitations under the License.
14  */
15
16 #include <config.h>
17 #include "bridge.h"
18 #include <errno.h>
19 #include <inttypes.h>
20 #include <stdlib.h>
21 #include "bitmap.h"
22 #include "bond.h"
23 #include "cfm.h"
24 #include "coverage.h"
25 #include "daemon.h"
26 #include "dirs.h"
27 #include "dynamic-string.h"
28 #include "hash.h"
29 #include "hmap.h"
30 #include "hmapx.h"
31 #include "jsonrpc.h"
32 #include "lacp.h"
33 #include "list.h"
34 #include "mac-learning.h"
35 #include "meta-flow.h"
36 #include "netdev.h"
37 #include "ofp-print.h"
38 #include "ofp-util.h"
39 #include "ofpbuf.h"
40 #include "ofproto/ofproto.h"
41 #include "poll-loop.h"
42 #include "sha1.h"
43 #include "shash.h"
44 #include "smap.h"
45 #include "socket-util.h"
46 #include "stream.h"
47 #include "stream-ssl.h"
48 #include "sset.h"
49 #include "system-stats.h"
50 #include "timeval.h"
51 #include "util.h"
52 #include "unixctl.h"
53 #include "vlandev.h"
54 #include "lib/vswitch-idl.h"
55 #include "xenserver.h"
56 #include "vlog.h"
57 #include "sflow_api.h"
58 #include "vlan-bitmap.h"
59
60 VLOG_DEFINE_THIS_MODULE(bridge);
61
62 COVERAGE_DEFINE(bridge_reconfigure);
63
64 /* Configuration of an uninstantiated iface. */
65 struct if_cfg {
66     struct hmap_node hmap_node;         /* Node in bridge's if_cfg_todo. */
67     const struct ovsrec_interface *cfg; /* Interface record. */
68     const struct ovsrec_port *parent;   /* Parent port record. */
69     int64_t ofport;                     /* Requested OpenFlow port number. */
70 };
71
72 /* OpenFlow port slated for removal from ofproto. */
73 struct ofpp_garbage {
74     struct list list_node;      /* Node in bridge's ofpp_garbage. */
75     uint16_t ofp_port;          /* Port to be deleted. */
76 };
77
78 struct iface {
79     /* These members are always valid. */
80     struct list port_elem;      /* Element in struct port's "ifaces" list. */
81     struct hmap_node name_node; /* In struct bridge's "iface_by_name" hmap. */
82     struct port *port;          /* Containing port. */
83     char *name;                 /* Host network device name. */
84
85     /* These members are valid only after bridge_reconfigure() causes them to
86      * be initialized. */
87     struct hmap_node ofp_port_node; /* In struct bridge's "ifaces" hmap. */
88     int ofp_port;               /* OpenFlow port number, -1 if unknown. */
89     struct netdev *netdev;      /* Network device. */
90     const char *type;           /* Usually same as cfg->type. */
91     const struct ovsrec_interface *cfg;
92 };
93
94 struct mirror {
95     struct uuid uuid;           /* UUID of this "mirror" record in database. */
96     struct hmap_node hmap_node; /* In struct bridge's "mirrors" hmap. */
97     struct bridge *bridge;
98     char *name;
99     const struct ovsrec_mirror *cfg;
100 };
101
102 struct port {
103     struct hmap_node hmap_node; /* Element in struct bridge's "ports" hmap. */
104     struct bridge *bridge;
105     char *name;
106
107     const struct ovsrec_port *cfg;
108
109     /* An ordinary bridge port has 1 interface.
110      * A bridge port for bonding has at least 2 interfaces. */
111     struct list ifaces;         /* List of "struct iface"s. */
112 };
113
114 struct bridge {
115     struct hmap_node node;      /* In 'all_bridges'. */
116     char *name;                 /* User-specified arbitrary name. */
117     char *type;                 /* Datapath type. */
118     uint8_t ea[ETH_ADDR_LEN];   /* Bridge Ethernet Address. */
119     uint8_t default_ea[ETH_ADDR_LEN]; /* Default MAC. */
120     const struct ovsrec_bridge *cfg;
121
122     /* OpenFlow switch processing. */
123     struct ofproto *ofproto;    /* OpenFlow switch. */
124
125     /* Bridge ports. */
126     struct hmap ports;          /* "struct port"s indexed by name. */
127     struct hmap ifaces;         /* "struct iface"s indexed by ofp_port. */
128     struct hmap iface_by_name;  /* "struct iface"s indexed by name. */
129
130     struct list ofpp_garbage;   /* "struct ofpp_garbage" slated for removal. */
131     struct hmap if_cfg_todo;    /* "struct if_cfg"s slated for creation.
132                                    Indexed on 'cfg->name'. */
133
134     /* Port mirroring. */
135     struct hmap mirrors;        /* "struct mirror" indexed by UUID. */
136
137     /* Synthetic local port if necessary. */
138     struct ovsrec_port synth_local_port;
139     struct ovsrec_interface synth_local_iface;
140     struct ovsrec_interface *synth_local_ifacep;
141 };
142
143 /* All bridges, indexed by name. */
144 static struct hmap all_bridges = HMAP_INITIALIZER(&all_bridges);
145
146 /* OVSDB IDL used to obtain configuration. */
147 static struct ovsdb_idl *idl;
148
149 /* We want to complete daemonization, fully detaching from our parent process,
150  * only after we have completed our initial configuration, committed our state
151  * to the database, and received confirmation back from the database server
152  * that it applied the commit.  This allows our parent process to know that,
153  * post-detach, ephemeral fields such as datapath-id and ofport are very likely
154  * to have already been filled in.  (It is only "very likely" rather than
155  * certain because there is always a slim possibility that the transaction will
156  * fail or that some other client has added new bridges, ports, etc. while
157  * ovs-vswitchd was configuring using an old configuration.)
158  *
159  * We only need to do this once for our initial configuration at startup, so
160  * 'initial_config_done' tracks whether we've already done it.  While we are
161  * waiting for a response to our commit, 'daemonize_txn' tracks the transaction
162  * itself and is otherwise NULL. */
163 static bool initial_config_done;
164 static struct ovsdb_idl_txn *daemonize_txn;
165
166 /* Most recently processed IDL sequence number. */
167 static unsigned int idl_seqno;
168
169 /* Each time this timer expires, the bridge fetches interface and mirror
170  * statistics and pushes them into the database. */
171 #define IFACE_STATS_INTERVAL (5 * 1000) /* In milliseconds. */
172 static long long int iface_stats_timer = LLONG_MIN;
173
174 /* In some datapaths, creating and destroying OpenFlow ports can be extremely
175  * expensive.  This can cause bridge_reconfigure() to take a long time during
176  * which no other work can be done.  To deal with this problem, we limit port
177  * adds and deletions to a window of OFP_PORT_ACTION_WINDOW milliseconds per
178  * call to bridge_reconfigure().  If there is more work to do after the limit
179  * is reached, 'need_reconfigure', is flagged and it's done on the next loop.
180  * This allows the rest of the code to catch up on important things like
181  * forwarding packets. */
182 #define OFP_PORT_ACTION_WINDOW 10
183 static bool reconfiguring = false;
184
185 static void add_del_bridges(const struct ovsrec_open_vswitch *);
186 static void bridge_update_ofprotos(void);
187 static void bridge_create(const struct ovsrec_bridge *);
188 static void bridge_destroy(struct bridge *);
189 static struct bridge *bridge_lookup(const char *name);
190 static unixctl_cb_func bridge_unixctl_dump_flows;
191 static unixctl_cb_func bridge_unixctl_reconnect;
192 static size_t bridge_get_controllers(const struct bridge *br,
193                                      struct ovsrec_controller ***controllersp);
194 static void bridge_add_del_ports(struct bridge *,
195                                  const unsigned long int *splinter_vlans);
196 static void bridge_refresh_ofp_port(struct bridge *);
197 static void bridge_configure_datapath_id(struct bridge *);
198 static void bridge_configure_flow_eviction_threshold(struct bridge *);
199 static void bridge_configure_netflow(struct bridge *);
200 static void bridge_configure_forward_bpdu(struct bridge *);
201 static void bridge_configure_mac_table(struct bridge *);
202 static void bridge_configure_sflow(struct bridge *, int *sflow_bridge_number);
203 static void bridge_configure_ipfix(struct bridge *);
204 static void bridge_configure_stp(struct bridge *);
205 static void bridge_configure_tables(struct bridge *);
206 static void bridge_configure_dp_desc(struct bridge *);
207 static void bridge_configure_remotes(struct bridge *,
208                                      const struct sockaddr_in *managers,
209                                      size_t n_managers);
210 static void bridge_pick_local_hw_addr(struct bridge *,
211                                       uint8_t ea[ETH_ADDR_LEN],
212                                       struct iface **hw_addr_iface);
213 static uint64_t bridge_pick_datapath_id(struct bridge *,
214                                         const uint8_t bridge_ea[ETH_ADDR_LEN],
215                                         struct iface *hw_addr_iface);
216 static void bridge_queue_if_cfg(struct bridge *,
217                                 const struct ovsrec_interface *,
218                                 const struct ovsrec_port *);
219 static uint64_t dpid_from_hash(const void *, size_t nbytes);
220 static bool bridge_has_bond_fake_iface(const struct bridge *,
221                                        const char *name);
222 static bool port_is_bond_fake_iface(const struct port *);
223
224 static unixctl_cb_func qos_unixctl_show;
225
226 static struct port *port_create(struct bridge *, const struct ovsrec_port *);
227 static void port_del_ifaces(struct port *);
228 static void port_destroy(struct port *);
229 static struct port *port_lookup(const struct bridge *, const char *name);
230 static void port_configure(struct port *);
231 static struct lacp_settings *port_configure_lacp(struct port *,
232                                                  struct lacp_settings *);
233 static void port_configure_bond(struct port *, struct bond_settings *);
234 static bool port_is_synthetic(const struct port *);
235
236 static void reconfigure_system_stats(const struct ovsrec_open_vswitch *);
237 static void run_system_stats(void);
238
239 static void bridge_configure_mirrors(struct bridge *);
240 static struct mirror *mirror_create(struct bridge *,
241                                     const struct ovsrec_mirror *);
242 static void mirror_destroy(struct mirror *);
243 static bool mirror_configure(struct mirror *);
244 static void mirror_refresh_stats(struct mirror *);
245
246 static void iface_configure_lacp(struct iface *, struct lacp_slave_settings *);
247 static bool iface_create(struct bridge *, struct if_cfg *, int ofp_port);
248 static bool iface_is_internal(const struct ovsrec_interface *iface,
249                               const struct ovsrec_bridge *br);
250 static const char *iface_get_type(const struct ovsrec_interface *,
251                                   const struct ovsrec_bridge *);
252 static void iface_destroy(struct iface *);
253 static struct iface *iface_lookup(const struct bridge *, const char *name);
254 static struct iface *iface_find(const char *name);
255 static struct if_cfg *if_cfg_lookup(const struct bridge *, const char *name);
256 static struct iface *iface_from_ofp_port(const struct bridge *,
257                                          uint16_t ofp_port);
258 static void iface_set_mac(struct iface *);
259 static void iface_set_ofport(const struct ovsrec_interface *, int64_t ofport);
260 static void iface_clear_db_record(const struct ovsrec_interface *if_cfg);
261 static void iface_configure_qos(struct iface *, const struct ovsrec_qos *);
262 static void iface_configure_cfm(struct iface *);
263 static void iface_refresh_cfm_stats(struct iface *);
264 static void iface_refresh_stats(struct iface *);
265 static void iface_refresh_status(struct iface *);
266 static bool iface_is_synthetic(const struct iface *);
267 static int64_t iface_pick_ofport(const struct ovsrec_interface *);
268
269 /* Linux VLAN device support (e.g. "eth0.10" for VLAN 10.)
270  *
271  * This is deprecated.  It is only for compatibility with broken device drivers
272  * in old versions of Linux that do not properly support VLANs when VLAN
273  * devices are not used.  When broken device drivers are no longer in
274  * widespread use, we will delete these interfaces. */
275
276 /* True if VLAN splinters are enabled on any interface, false otherwise.*/
277 static bool vlan_splinters_enabled_anywhere;
278
279 static bool vlan_splinters_is_enabled(const struct ovsrec_interface *);
280 static unsigned long int *collect_splinter_vlans(
281     const struct ovsrec_open_vswitch *);
282 static void configure_splinter_port(struct port *);
283 static void add_vlan_splinter_ports(struct bridge *,
284                                     const unsigned long int *splinter_vlans,
285                                     struct shash *ports);
286
287 static void
288 bridge_init_ofproto(const struct ovsrec_open_vswitch *cfg)
289 {
290     struct shash iface_hints;
291     static bool initialized = false;
292     int i;
293
294     if (initialized) {
295         return;
296     }
297
298     shash_init(&iface_hints);
299
300     if (cfg) {
301         for (i = 0; i < cfg->n_bridges; i++) {
302             const struct ovsrec_bridge *br_cfg = cfg->bridges[i];
303             int j;
304
305             for (j = 0; j < br_cfg->n_ports; j++) {
306                 struct ovsrec_port *port_cfg = br_cfg->ports[j];
307                 int k;
308
309                 for (k = 0; k < port_cfg->n_interfaces; k++) {
310                     struct ovsrec_interface *if_cfg = port_cfg->interfaces[k];
311                     struct iface_hint *iface_hint;
312
313                     iface_hint = xmalloc(sizeof *iface_hint);
314                     iface_hint->br_name = br_cfg->name;
315                     iface_hint->br_type = br_cfg->datapath_type;
316                     iface_hint->ofp_port = iface_pick_ofport(if_cfg);
317
318                     shash_add(&iface_hints, if_cfg->name, iface_hint);
319                 }
320             }
321         }
322     }
323
324     ofproto_init(&iface_hints);
325
326     shash_destroy_free_data(&iface_hints);
327     initialized = true;
328 }
329 \f
330 /* Public functions. */
331
332 /* Initializes the bridge module, configuring it to obtain its configuration
333  * from an OVSDB server accessed over 'remote', which should be a string in a
334  * form acceptable to ovsdb_idl_create(). */
335 void
336 bridge_init(const char *remote)
337 {
338     /* Create connection to database. */
339     idl = ovsdb_idl_create(remote, &ovsrec_idl_class, true, true);
340     idl_seqno = ovsdb_idl_get_seqno(idl);
341     ovsdb_idl_set_lock(idl, "ovs_vswitchd");
342     ovsdb_idl_verify_write_only(idl);
343
344     ovsdb_idl_omit_alert(idl, &ovsrec_open_vswitch_col_cur_cfg);
345     ovsdb_idl_omit_alert(idl, &ovsrec_open_vswitch_col_statistics);
346     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_external_ids);
347     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_ovs_version);
348     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_db_version);
349     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_system_type);
350     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_system_version);
351
352     ovsdb_idl_omit_alert(idl, &ovsrec_bridge_col_datapath_id);
353     ovsdb_idl_omit_alert(idl, &ovsrec_bridge_col_status);
354     ovsdb_idl_omit(idl, &ovsrec_bridge_col_external_ids);
355
356     ovsdb_idl_omit_alert(idl, &ovsrec_port_col_status);
357     ovsdb_idl_omit_alert(idl, &ovsrec_port_col_statistics);
358     ovsdb_idl_omit(idl, &ovsrec_port_col_external_ids);
359     ovsdb_idl_omit(idl, &ovsrec_port_col_fake_bridge);
360
361     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_admin_state);
362     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_duplex);
363     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_link_speed);
364     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_link_state);
365     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_link_resets);
366     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_mac_in_use);
367     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_mtu);
368     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_ofport);
369     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_statistics);
370     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_status);
371     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_fault);
372     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_fault_status);
373     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_remote_mpids);
374     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_health);
375     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_remote_opstate);
376     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_lacp_current);
377     ovsdb_idl_omit(idl, &ovsrec_interface_col_external_ids);
378
379     ovsdb_idl_omit_alert(idl, &ovsrec_controller_col_is_connected);
380     ovsdb_idl_omit_alert(idl, &ovsrec_controller_col_role);
381     ovsdb_idl_omit_alert(idl, &ovsrec_controller_col_status);
382     ovsdb_idl_omit(idl, &ovsrec_controller_col_external_ids);
383
384     ovsdb_idl_omit(idl, &ovsrec_qos_col_external_ids);
385
386     ovsdb_idl_omit(idl, &ovsrec_queue_col_external_ids);
387
388     ovsdb_idl_omit(idl, &ovsrec_mirror_col_external_ids);
389     ovsdb_idl_omit_alert(idl, &ovsrec_mirror_col_statistics);
390
391     ovsdb_idl_omit(idl, &ovsrec_netflow_col_external_ids);
392     ovsdb_idl_omit(idl, &ovsrec_sflow_col_external_ids);
393     ovsdb_idl_omit(idl, &ovsrec_ipfix_col_external_ids);
394     ovsdb_idl_omit(idl, &ovsrec_flow_sample_collector_set_col_external_ids);
395
396     ovsdb_idl_omit(idl, &ovsrec_manager_col_external_ids);
397     ovsdb_idl_omit(idl, &ovsrec_manager_col_inactivity_probe);
398     ovsdb_idl_omit(idl, &ovsrec_manager_col_is_connected);
399     ovsdb_idl_omit(idl, &ovsrec_manager_col_max_backoff);
400     ovsdb_idl_omit(idl, &ovsrec_manager_col_status);
401
402     ovsdb_idl_omit(idl, &ovsrec_ssl_col_external_ids);
403
404     /* Register unixctl commands. */
405     unixctl_command_register("qos/show", "interface", 1, 1,
406                              qos_unixctl_show, NULL);
407     unixctl_command_register("bridge/dump-flows", "bridge", 1, 1,
408                              bridge_unixctl_dump_flows, NULL);
409     unixctl_command_register("bridge/reconnect", "[bridge]", 0, 1,
410                              bridge_unixctl_reconnect, NULL);
411     lacp_init();
412     bond_init();
413     cfm_init();
414     stp_init();
415 }
416
417 void
418 bridge_exit(void)
419 {
420     struct bridge *br, *next_br;
421
422     HMAP_FOR_EACH_SAFE (br, next_br, node, &all_bridges) {
423         bridge_destroy(br);
424     }
425     ovsdb_idl_destroy(idl);
426 }
427
428 /* Looks at the list of managers in 'ovs_cfg' and extracts their remote IP
429  * addresses and ports into '*managersp' and '*n_managersp'.  The caller is
430  * responsible for freeing '*managersp' (with free()).
431  *
432  * You may be asking yourself "why does ovs-vswitchd care?", because
433  * ovsdb-server is responsible for connecting to the managers, and ovs-vswitchd
434  * should not be and in fact is not directly involved in that.  But
435  * ovs-vswitchd needs to make sure that ovsdb-server can reach the managers, so
436  * it has to tell in-band control where the managers are to enable that.
437  * (Thus, only managers connected in-band are collected.)
438  */
439 static void
440 collect_in_band_managers(const struct ovsrec_open_vswitch *ovs_cfg,
441                          struct sockaddr_in **managersp, size_t *n_managersp)
442 {
443     struct sockaddr_in *managers = NULL;
444     size_t n_managers = 0;
445     struct sset targets;
446     size_t i;
447
448     /* Collect all of the potential targets from the "targets" columns of the
449      * rows pointed to by "manager_options", excluding any that are
450      * out-of-band. */
451     sset_init(&targets);
452     for (i = 0; i < ovs_cfg->n_manager_options; i++) {
453         struct ovsrec_manager *m = ovs_cfg->manager_options[i];
454
455         if (m->connection_mode && !strcmp(m->connection_mode, "out-of-band")) {
456             sset_find_and_delete(&targets, m->target);
457         } else {
458             sset_add(&targets, m->target);
459         }
460     }
461
462     /* Now extract the targets' IP addresses. */
463     if (!sset_is_empty(&targets)) {
464         const char *target;
465
466         managers = xmalloc(sset_count(&targets) * sizeof *managers);
467         SSET_FOR_EACH (target, &targets) {
468             struct sockaddr_in *sin = &managers[n_managers];
469
470             if (stream_parse_target_with_default_ports(target,
471                                                        JSONRPC_TCP_PORT,
472                                                        JSONRPC_SSL_PORT,
473                                                        sin)) {
474                 n_managers++;
475             }
476         }
477     }
478     sset_destroy(&targets);
479
480     *managersp = managers;
481     *n_managersp = n_managers;
482 }
483
484 static void
485 bridge_reconfigure(const struct ovsrec_open_vswitch *ovs_cfg)
486 {
487     unsigned long int *splinter_vlans;
488     struct bridge *br;
489
490     COVERAGE_INC(bridge_reconfigure);
491
492     ovs_assert(!reconfiguring);
493     reconfiguring = true;
494
495     /* Destroy "struct bridge"s, "struct port"s, and "struct iface"s according
496      * to 'ovs_cfg' while update the "if_cfg_queue", with only very minimal
497      * configuration otherwise.
498      *
499      * This is mostly an update to bridge data structures. Nothing is pushed
500      * down to ofproto or lower layers. */
501     add_del_bridges(ovs_cfg);
502     splinter_vlans = collect_splinter_vlans(ovs_cfg);
503     HMAP_FOR_EACH (br, node, &all_bridges) {
504         bridge_add_del_ports(br, splinter_vlans);
505     }
506     free(splinter_vlans);
507
508     /* Delete datapaths that are no longer configured, and create ones which
509      * don't exist but should. */
510     bridge_update_ofprotos();
511
512     /* Make sure each "struct iface" has a correct ofp_port in its ofproto. */
513     HMAP_FOR_EACH (br, node, &all_bridges) {
514         bridge_refresh_ofp_port(br);
515     }
516
517     /* Clear database records for "if_cfg"s which haven't been instantiated. */
518     HMAP_FOR_EACH (br, node, &all_bridges) {
519         struct if_cfg *if_cfg;
520
521         HMAP_FOR_EACH (if_cfg, hmap_node, &br->if_cfg_todo) {
522             iface_clear_db_record(if_cfg->cfg);
523         }
524     }
525
526     reconfigure_system_stats(ovs_cfg);
527 }
528
529 static bool
530 bridge_reconfigure_ofp(void)
531 {
532     long long int deadline;
533     struct bridge *br;
534
535     time_refresh();
536     deadline = time_msec() + OFP_PORT_ACTION_WINDOW;
537
538     /* The kernel will reject any attempt to add a given port to a datapath if
539      * that port already belongs to a different datapath, so we must do all
540      * port deletions before any port additions. */
541     HMAP_FOR_EACH (br, node, &all_bridges) {
542         struct ofpp_garbage *garbage, *next;
543
544         LIST_FOR_EACH_SAFE (garbage, next, list_node, &br->ofpp_garbage) {
545             /* It's a bit dangerous to call bridge_run_fast() here as ofproto's
546              * internal datastructures may not be consistent.  Eventually, when
547              * port additions and deletions are cheaper, these calls should be
548              * removed. */
549             bridge_run_fast();
550             ofproto_port_del(br->ofproto, garbage->ofp_port);
551             list_remove(&garbage->list_node);
552             free(garbage);
553
554             time_refresh();
555             if (time_msec() >= deadline) {
556                 return false;
557             }
558             bridge_run_fast();
559         }
560     }
561
562     HMAP_FOR_EACH (br, node, &all_bridges) {
563         struct if_cfg *if_cfg, *next;
564
565         HMAP_FOR_EACH_SAFE (if_cfg, next, hmap_node, &br->if_cfg_todo) {
566             iface_create(br, if_cfg, -1);
567             time_refresh();
568             if (time_msec() >= deadline) {
569                 return false;
570             }
571         }
572     }
573
574     return true;
575 }
576
577 static bool
578 bridge_reconfigure_continue(const struct ovsrec_open_vswitch *ovs_cfg)
579 {
580     struct sockaddr_in *managers;
581     int sflow_bridge_number;
582     size_t n_managers;
583     struct bridge *br;
584     bool done;
585
586     ovs_assert(reconfiguring);
587     done = bridge_reconfigure_ofp();
588
589     /* Complete the configuration. */
590     sflow_bridge_number = 0;
591     collect_in_band_managers(ovs_cfg, &managers, &n_managers);
592     HMAP_FOR_EACH (br, node, &all_bridges) {
593         struct port *port;
594
595         /* We need the datapath ID early to allow LACP ports to use it as the
596          * default system ID. */
597         bridge_configure_datapath_id(br);
598
599         HMAP_FOR_EACH (port, hmap_node, &br->ports) {
600             struct iface *iface;
601
602             port_configure(port);
603
604             LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
605                 iface_configure_cfm(iface);
606                 iface_configure_qos(iface, port->cfg->qos);
607                 iface_set_mac(iface);
608             }
609         }
610         bridge_configure_mirrors(br);
611         bridge_configure_flow_eviction_threshold(br);
612         bridge_configure_forward_bpdu(br);
613         bridge_configure_mac_table(br);
614         bridge_configure_remotes(br, managers, n_managers);
615         bridge_configure_netflow(br);
616         bridge_configure_sflow(br, &sflow_bridge_number);
617         bridge_configure_ipfix(br);
618         bridge_configure_stp(br);
619         bridge_configure_tables(br);
620         bridge_configure_dp_desc(br);
621     }
622     free(managers);
623
624     return done;
625 }
626
627 /* Delete ofprotos which aren't configured or have the wrong type.  Create
628  * ofprotos which don't exist but need to. */
629 static void
630 bridge_update_ofprotos(void)
631 {
632     struct bridge *br, *next;
633     struct sset names;
634     struct sset types;
635     const char *type;
636
637     /* Delete ofprotos with no bridge or with the wrong type. */
638     sset_init(&names);
639     sset_init(&types);
640     ofproto_enumerate_types(&types);
641     SSET_FOR_EACH (type, &types) {
642         const char *name;
643
644         ofproto_enumerate_names(type, &names);
645         SSET_FOR_EACH (name, &names) {
646             br = bridge_lookup(name);
647             if (!br || strcmp(type, br->type)) {
648                 ofproto_delete(name, type);
649             }
650         }
651     }
652     sset_destroy(&names);
653     sset_destroy(&types);
654
655     /* Add ofprotos for bridges which don't have one yet. */
656     HMAP_FOR_EACH_SAFE (br, next, node, &all_bridges) {
657         struct bridge *br2;
658         int error;
659
660         if (br->ofproto) {
661             continue;
662         }
663
664         /* Remove ports from any datapath with the same name as 'br'.  If we
665          * don't do this, creating 'br''s ofproto will fail because a port with
666          * the same name as its local port already exists. */
667         HMAP_FOR_EACH (br2, node, &all_bridges) {
668             struct ofproto_port ofproto_port;
669
670             if (!br2->ofproto) {
671                 continue;
672             }
673
674             if (!ofproto_port_query_by_name(br2->ofproto, br->name,
675                                             &ofproto_port)) {
676                 error = ofproto_port_del(br2->ofproto, ofproto_port.ofp_port);
677                 if (error) {
678                     VLOG_ERR("failed to delete port %s: %s", ofproto_port.name,
679                              strerror(error));
680                 }
681                 ofproto_port_destroy(&ofproto_port);
682             }
683         }
684
685         error = ofproto_create(br->name, br->type, &br->ofproto);
686         if (error) {
687             VLOG_ERR("failed to create bridge %s: %s", br->name,
688                      strerror(error));
689             bridge_destroy(br);
690         }
691     }
692 }
693
694 static void
695 port_configure(struct port *port)
696 {
697     const struct ovsrec_port *cfg = port->cfg;
698     struct bond_settings bond_settings;
699     struct lacp_settings lacp_settings;
700     struct ofproto_bundle_settings s;
701     struct iface *iface;
702
703     if (cfg->vlan_mode && !strcmp(cfg->vlan_mode, "splinter")) {
704         configure_splinter_port(port);
705         return;
706     }
707
708     /* Get name. */
709     s.name = port->name;
710
711     /* Get slaves. */
712     s.n_slaves = 0;
713     s.slaves = xmalloc(list_size(&port->ifaces) * sizeof *s.slaves);
714     LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
715         s.slaves[s.n_slaves++] = iface->ofp_port;
716     }
717
718     /* Get VLAN tag. */
719     s.vlan = -1;
720     if (cfg->tag && *cfg->tag >= 0 && *cfg->tag <= 4095) {
721         s.vlan = *cfg->tag;
722     }
723
724     /* Get VLAN trunks. */
725     s.trunks = NULL;
726     if (cfg->n_trunks) {
727         s.trunks = vlan_bitmap_from_array(cfg->trunks, cfg->n_trunks);
728     }
729
730     /* Get VLAN mode. */
731     if (cfg->vlan_mode) {
732         if (!strcmp(cfg->vlan_mode, "access")) {
733             s.vlan_mode = PORT_VLAN_ACCESS;
734         } else if (!strcmp(cfg->vlan_mode, "trunk")) {
735             s.vlan_mode = PORT_VLAN_TRUNK;
736         } else if (!strcmp(cfg->vlan_mode, "native-tagged")) {
737             s.vlan_mode = PORT_VLAN_NATIVE_TAGGED;
738         } else if (!strcmp(cfg->vlan_mode, "native-untagged")) {
739             s.vlan_mode = PORT_VLAN_NATIVE_UNTAGGED;
740         } else {
741             /* This "can't happen" because ovsdb-server should prevent it. */
742             VLOG_ERR("unknown VLAN mode %s", cfg->vlan_mode);
743             s.vlan_mode = PORT_VLAN_TRUNK;
744         }
745     } else {
746         if (s.vlan >= 0) {
747             s.vlan_mode = PORT_VLAN_ACCESS;
748             if (cfg->n_trunks) {
749                 VLOG_ERR("port %s: ignoring trunks in favor of implicit vlan",
750                          port->name);
751             }
752         } else {
753             s.vlan_mode = PORT_VLAN_TRUNK;
754         }
755     }
756     s.use_priority_tags = smap_get_bool(&cfg->other_config, "priority-tags",
757                                         false);
758
759     /* Get LACP settings. */
760     s.lacp = port_configure_lacp(port, &lacp_settings);
761     if (s.lacp) {
762         size_t i = 0;
763
764         s.lacp_slaves = xmalloc(s.n_slaves * sizeof *s.lacp_slaves);
765         LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
766             iface_configure_lacp(iface, &s.lacp_slaves[i++]);
767         }
768     } else {
769         s.lacp_slaves = NULL;
770     }
771
772     /* Get bond settings. */
773     if (s.n_slaves > 1) {
774         s.bond = &bond_settings;
775         port_configure_bond(port, &bond_settings);
776     } else {
777         s.bond = NULL;
778         LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
779             netdev_set_miimon_interval(iface->netdev, 0);
780         }
781     }
782
783     /* Register. */
784     ofproto_bundle_register(port->bridge->ofproto, port, &s);
785
786     /* Clean up. */
787     free(s.slaves);
788     free(s.trunks);
789     free(s.lacp_slaves);
790 }
791
792 /* Pick local port hardware address and datapath ID for 'br'. */
793 static void
794 bridge_configure_datapath_id(struct bridge *br)
795 {
796     uint8_t ea[ETH_ADDR_LEN];
797     uint64_t dpid;
798     struct iface *local_iface;
799     struct iface *hw_addr_iface;
800     char *dpid_string;
801
802     bridge_pick_local_hw_addr(br, ea, &hw_addr_iface);
803     local_iface = iface_from_ofp_port(br, OFPP_LOCAL);
804     if (local_iface) {
805         int error = netdev_set_etheraddr(local_iface->netdev, ea);
806         if (error) {
807             static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
808             VLOG_ERR_RL(&rl, "bridge %s: failed to set bridge "
809                         "Ethernet address: %s",
810                         br->name, strerror(error));
811         }
812     }
813     memcpy(br->ea, ea, ETH_ADDR_LEN);
814
815     dpid = bridge_pick_datapath_id(br, ea, hw_addr_iface);
816     if (dpid != ofproto_get_datapath_id(br->ofproto)) {
817         VLOG_INFO("bridge %s: using datapath ID %016"PRIx64, br->name, dpid);
818         ofproto_set_datapath_id(br->ofproto, dpid);
819     }
820
821     dpid_string = xasprintf("%016"PRIx64, dpid);
822     ovsrec_bridge_set_datapath_id(br->cfg, dpid_string);
823     free(dpid_string);
824 }
825
826 /* Returns a bitmap of "enum ofputil_protocol"s that are allowed for use with
827  * 'br'. */
828 static uint32_t
829 bridge_get_allowed_versions(struct bridge *br)
830 {
831     if (!br->cfg->n_protocols)
832         return 0;
833
834     return ofputil_versions_from_strings(br->cfg->protocols,
835                                          br->cfg->n_protocols);
836 }
837
838 /* Set NetFlow configuration on 'br'. */
839 static void
840 bridge_configure_netflow(struct bridge *br)
841 {
842     struct ovsrec_netflow *cfg = br->cfg->netflow;
843     struct netflow_options opts;
844
845     if (!cfg) {
846         ofproto_set_netflow(br->ofproto, NULL);
847         return;
848     }
849
850     memset(&opts, 0, sizeof opts);
851
852     /* Get default NetFlow configuration from datapath.
853      * Apply overrides from 'cfg'. */
854     ofproto_get_netflow_ids(br->ofproto, &opts.engine_type, &opts.engine_id);
855     if (cfg->engine_type) {
856         opts.engine_type = *cfg->engine_type;
857     }
858     if (cfg->engine_id) {
859         opts.engine_id = *cfg->engine_id;
860     }
861
862     /* Configure active timeout interval. */
863     opts.active_timeout = cfg->active_timeout;
864     if (!opts.active_timeout) {
865         opts.active_timeout = -1;
866     } else if (opts.active_timeout < 0) {
867         VLOG_WARN("bridge %s: active timeout interval set to negative "
868                   "value, using default instead (%d seconds)", br->name,
869                   NF_ACTIVE_TIMEOUT_DEFAULT);
870         opts.active_timeout = -1;
871     }
872
873     /* Add engine ID to interface number to disambiguate bridgs? */
874     opts.add_id_to_iface = cfg->add_id_to_interface;
875     if (opts.add_id_to_iface) {
876         if (opts.engine_id > 0x7f) {
877             VLOG_WARN("bridge %s: NetFlow port mangling may conflict with "
878                       "another vswitch, choose an engine id less than 128",
879                       br->name);
880         }
881         if (hmap_count(&br->ports) > 508) {
882             VLOG_WARN("bridge %s: NetFlow port mangling will conflict with "
883                       "another port when more than 508 ports are used",
884                       br->name);
885         }
886     }
887
888     /* Collectors. */
889     sset_init(&opts.collectors);
890     sset_add_array(&opts.collectors, cfg->targets, cfg->n_targets);
891
892     /* Configure. */
893     if (ofproto_set_netflow(br->ofproto, &opts)) {
894         VLOG_ERR("bridge %s: problem setting netflow collectors", br->name);
895     }
896     sset_destroy(&opts.collectors);
897 }
898
899 /* Set sFlow configuration on 'br'. */
900 static void
901 bridge_configure_sflow(struct bridge *br, int *sflow_bridge_number)
902 {
903     const struct ovsrec_sflow *cfg = br->cfg->sflow;
904     struct ovsrec_controller **controllers;
905     struct ofproto_sflow_options oso;
906     size_t n_controllers;
907     size_t i;
908
909     if (!cfg) {
910         ofproto_set_sflow(br->ofproto, NULL);
911         return;
912     }
913
914     memset(&oso, 0, sizeof oso);
915
916     sset_init(&oso.targets);
917     sset_add_array(&oso.targets, cfg->targets, cfg->n_targets);
918
919     oso.sampling_rate = SFL_DEFAULT_SAMPLING_RATE;
920     if (cfg->sampling) {
921         oso.sampling_rate = *cfg->sampling;
922     }
923
924     oso.polling_interval = SFL_DEFAULT_POLLING_INTERVAL;
925     if (cfg->polling) {
926         oso.polling_interval = *cfg->polling;
927     }
928
929     oso.header_len = SFL_DEFAULT_HEADER_SIZE;
930     if (cfg->header) {
931         oso.header_len = *cfg->header;
932     }
933
934     oso.sub_id = (*sflow_bridge_number)++;
935     oso.agent_device = cfg->agent;
936
937     oso.control_ip = NULL;
938     n_controllers = bridge_get_controllers(br, &controllers);
939     for (i = 0; i < n_controllers; i++) {
940         if (controllers[i]->local_ip) {
941             oso.control_ip = controllers[i]->local_ip;
942             break;
943         }
944     }
945     ofproto_set_sflow(br->ofproto, &oso);
946
947     sset_destroy(&oso.targets);
948 }
949
950 /* Set IPFIX configuration on 'br'. */
951 static void
952 bridge_configure_ipfix(struct bridge *br)
953 {
954     const struct ovsrec_ipfix *be_cfg = br->cfg->ipfix;
955     const struct ovsrec_flow_sample_collector_set *fe_cfg;
956     struct ofproto_ipfix_bridge_exporter_options be_opts;
957     struct ofproto_ipfix_flow_exporter_options *fe_opts = NULL;
958     size_t n_fe_opts = 0;
959
960     OVSREC_FLOW_SAMPLE_COLLECTOR_SET_FOR_EACH(fe_cfg, idl) {
961         if (fe_cfg->bridge == br->cfg) {
962             n_fe_opts++;
963         }
964     }
965
966     if (!be_cfg && n_fe_opts == 0) {
967         ofproto_set_ipfix(br->ofproto, NULL, NULL, 0);
968         return;
969     }
970
971     if (be_cfg) {
972         memset(&be_opts, 0, sizeof be_opts);
973
974         sset_init(&be_opts.targets);
975         sset_add_array(&be_opts.targets, be_cfg->targets, be_cfg->n_targets);
976
977         if (be_cfg->sampling) {
978             be_opts.sampling_rate = *be_cfg->sampling;
979         } else {
980             be_opts.sampling_rate = SFL_DEFAULT_SAMPLING_RATE;
981         }
982         if (be_cfg->obs_domain_id) {
983             be_opts.obs_domain_id = *be_cfg->obs_domain_id;
984         }
985         if (be_cfg->obs_point_id) {
986             be_opts.obs_point_id = *be_cfg->obs_point_id;
987         }
988     }
989
990     if (n_fe_opts > 0) {
991         struct ofproto_ipfix_flow_exporter_options *opts;
992         fe_opts = xcalloc(n_fe_opts, sizeof *fe_opts);
993         opts = fe_opts;
994         OVSREC_FLOW_SAMPLE_COLLECTOR_SET_FOR_EACH(fe_cfg, idl) {
995             if (fe_cfg->bridge == br->cfg) {
996                 opts->collector_set_id = fe_cfg->id;
997                 sset_init(&opts->targets);
998                 sset_add_array(&opts->targets, fe_cfg->ipfix->targets,
999                                fe_cfg->ipfix->n_targets);
1000                 opts++;
1001             }
1002         }
1003     }
1004
1005     ofproto_set_ipfix(br->ofproto, be_cfg ? &be_opts : NULL, fe_opts,
1006                       n_fe_opts);
1007
1008     if (be_cfg) {
1009         sset_destroy(&be_opts.targets);
1010     }
1011
1012     if (n_fe_opts > 0) {
1013         struct ofproto_ipfix_flow_exporter_options *opts = fe_opts;
1014         size_t i;
1015         for (i = 0; i < n_fe_opts; i++) {
1016             sset_destroy(&opts->targets);
1017             opts++;
1018         }
1019         free(fe_opts);
1020     }
1021 }
1022
1023 static void
1024 port_configure_stp(const struct ofproto *ofproto, struct port *port,
1025                    struct ofproto_port_stp_settings *port_s,
1026                    int *port_num_counter, unsigned long *port_num_bitmap)
1027 {
1028     const char *config_str;
1029     struct iface *iface;
1030
1031     if (!smap_get_bool(&port->cfg->other_config, "stp-enable", true)) {
1032         port_s->enable = false;
1033         return;
1034     } else {
1035         port_s->enable = true;
1036     }
1037
1038     /* STP over bonds is not supported. */
1039     if (!list_is_singleton(&port->ifaces)) {
1040         VLOG_ERR("port %s: cannot enable STP on bonds, disabling",
1041                  port->name);
1042         port_s->enable = false;
1043         return;
1044     }
1045
1046     iface = CONTAINER_OF(list_front(&port->ifaces), struct iface, port_elem);
1047
1048     /* Internal ports shouldn't participate in spanning tree, so
1049      * skip them. */
1050     if (!strcmp(iface->type, "internal")) {
1051         VLOG_DBG("port %s: disable STP on internal ports", port->name);
1052         port_s->enable = false;
1053         return;
1054     }
1055
1056     /* STP on mirror output ports is not supported. */
1057     if (ofproto_is_mirror_output_bundle(ofproto, port)) {
1058         VLOG_DBG("port %s: disable STP on mirror ports", port->name);
1059         port_s->enable = false;
1060         return;
1061     }
1062
1063     config_str = smap_get(&port->cfg->other_config, "stp-port-num");
1064     if (config_str) {
1065         unsigned long int port_num = strtoul(config_str, NULL, 0);
1066         int port_idx = port_num - 1;
1067
1068         if (port_num < 1 || port_num > STP_MAX_PORTS) {
1069             VLOG_ERR("port %s: invalid stp-port-num", port->name);
1070             port_s->enable = false;
1071             return;
1072         }
1073
1074         if (bitmap_is_set(port_num_bitmap, port_idx)) {
1075             VLOG_ERR("port %s: duplicate stp-port-num %lu, disabling",
1076                     port->name, port_num);
1077             port_s->enable = false;
1078             return;
1079         }
1080         bitmap_set1(port_num_bitmap, port_idx);
1081         port_s->port_num = port_idx;
1082     } else {
1083         if (*port_num_counter >= STP_MAX_PORTS) {
1084             VLOG_ERR("port %s: too many STP ports, disabling", port->name);
1085             port_s->enable = false;
1086             return;
1087         }
1088
1089         port_s->port_num = (*port_num_counter)++;
1090     }
1091
1092     config_str = smap_get(&port->cfg->other_config, "stp-path-cost");
1093     if (config_str) {
1094         port_s->path_cost = strtoul(config_str, NULL, 10);
1095     } else {
1096         enum netdev_features current;
1097         unsigned int mbps;
1098
1099         netdev_get_features(iface->netdev, &current, NULL, NULL, NULL);
1100         mbps = netdev_features_to_bps(current, 100 * 1000 * 1000) / 1000000;
1101         port_s->path_cost = stp_convert_speed_to_cost(mbps);
1102     }
1103
1104     config_str = smap_get(&port->cfg->other_config, "stp-port-priority");
1105     if (config_str) {
1106         port_s->priority = strtoul(config_str, NULL, 0);
1107     } else {
1108         port_s->priority = STP_DEFAULT_PORT_PRIORITY;
1109     }
1110 }
1111
1112 /* Set spanning tree configuration on 'br'. */
1113 static void
1114 bridge_configure_stp(struct bridge *br)
1115 {
1116     if (!br->cfg->stp_enable) {
1117         ofproto_set_stp(br->ofproto, NULL);
1118     } else {
1119         struct ofproto_stp_settings br_s;
1120         const char *config_str;
1121         struct port *port;
1122         int port_num_counter;
1123         unsigned long *port_num_bitmap;
1124
1125         config_str = smap_get(&br->cfg->other_config, "stp-system-id");
1126         if (config_str) {
1127             uint8_t ea[ETH_ADDR_LEN];
1128
1129             if (eth_addr_from_string(config_str, ea)) {
1130                 br_s.system_id = eth_addr_to_uint64(ea);
1131             } else {
1132                 br_s.system_id = eth_addr_to_uint64(br->ea);
1133                 VLOG_ERR("bridge %s: invalid stp-system-id, defaulting "
1134                          "to "ETH_ADDR_FMT, br->name, ETH_ADDR_ARGS(br->ea));
1135             }
1136         } else {
1137             br_s.system_id = eth_addr_to_uint64(br->ea);
1138         }
1139
1140         config_str = smap_get(&br->cfg->other_config, "stp-priority");
1141         if (config_str) {
1142             br_s.priority = strtoul(config_str, NULL, 0);
1143         } else {
1144             br_s.priority = STP_DEFAULT_BRIDGE_PRIORITY;
1145         }
1146
1147         config_str = smap_get(&br->cfg->other_config, "stp-hello-time");
1148         if (config_str) {
1149             br_s.hello_time = strtoul(config_str, NULL, 10) * 1000;
1150         } else {
1151             br_s.hello_time = STP_DEFAULT_HELLO_TIME;
1152         }
1153
1154         config_str = smap_get(&br->cfg->other_config, "stp-max-age");
1155         if (config_str) {
1156             br_s.max_age = strtoul(config_str, NULL, 10) * 1000;
1157         } else {
1158             br_s.max_age = STP_DEFAULT_MAX_AGE;
1159         }
1160
1161         config_str = smap_get(&br->cfg->other_config, "stp-forward-delay");
1162         if (config_str) {
1163             br_s.fwd_delay = strtoul(config_str, NULL, 10) * 1000;
1164         } else {
1165             br_s.fwd_delay = STP_DEFAULT_FWD_DELAY;
1166         }
1167
1168         /* Configure STP on the bridge. */
1169         if (ofproto_set_stp(br->ofproto, &br_s)) {
1170             VLOG_ERR("bridge %s: could not enable STP", br->name);
1171             return;
1172         }
1173
1174         /* Users must either set the port number with the "stp-port-num"
1175          * configuration on all ports or none.  If manual configuration
1176          * is not done, then we allocate them sequentially. */
1177         port_num_counter = 0;
1178         port_num_bitmap = bitmap_allocate(STP_MAX_PORTS);
1179         HMAP_FOR_EACH (port, hmap_node, &br->ports) {
1180             struct ofproto_port_stp_settings port_s;
1181             struct iface *iface;
1182
1183             port_configure_stp(br->ofproto, port, &port_s,
1184                                &port_num_counter, port_num_bitmap);
1185
1186             /* As bonds are not supported, just apply configuration to
1187              * all interfaces. */
1188             LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
1189                 if (ofproto_port_set_stp(br->ofproto, iface->ofp_port,
1190                                          &port_s)) {
1191                     VLOG_ERR("port %s: could not enable STP", port->name);
1192                     continue;
1193                 }
1194             }
1195         }
1196
1197         if (bitmap_scan(port_num_bitmap, 0, STP_MAX_PORTS) != STP_MAX_PORTS
1198                     && port_num_counter) {
1199             VLOG_ERR("bridge %s: must manually configure all STP port "
1200                      "IDs or none, disabling", br->name);
1201             ofproto_set_stp(br->ofproto, NULL);
1202         }
1203         bitmap_free(port_num_bitmap);
1204     }
1205 }
1206
1207 static bool
1208 bridge_has_bond_fake_iface(const struct bridge *br, const char *name)
1209 {
1210     const struct port *port = port_lookup(br, name);
1211     return port && port_is_bond_fake_iface(port);
1212 }
1213
1214 static bool
1215 port_is_bond_fake_iface(const struct port *port)
1216 {
1217     return port->cfg->bond_fake_iface && !list_is_short(&port->ifaces);
1218 }
1219
1220 static void
1221 add_del_bridges(const struct ovsrec_open_vswitch *cfg)
1222 {
1223     struct bridge *br, *next;
1224     struct shash new_br;
1225     size_t i;
1226
1227     /* Collect new bridges' names and types. */
1228     shash_init(&new_br);
1229     for (i = 0; i < cfg->n_bridges; i++) {
1230         static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
1231         const struct ovsrec_bridge *br_cfg = cfg->bridges[i];
1232
1233         if (strchr(br_cfg->name, '/')) {
1234             /* Prevent remote ovsdb-server users from accessing arbitrary
1235              * directories, e.g. consider a bridge named "../../../etc/". */
1236             VLOG_WARN_RL(&rl, "ignoring bridge with invalid name \"%s\"",
1237                          br_cfg->name);
1238         } else if (!shash_add_once(&new_br, br_cfg->name, br_cfg)) {
1239             VLOG_WARN_RL(&rl, "bridge %s specified twice", br_cfg->name);
1240         }
1241     }
1242
1243     /* Get rid of deleted bridges or those whose types have changed.
1244      * Update 'cfg' of bridges that still exist. */
1245     HMAP_FOR_EACH_SAFE (br, next, node, &all_bridges) {
1246         br->cfg = shash_find_data(&new_br, br->name);
1247         if (!br->cfg || strcmp(br->type, ofproto_normalize_type(
1248                                    br->cfg->datapath_type))) {
1249             bridge_destroy(br);
1250         }
1251     }
1252
1253     /* Add new bridges. */
1254     for (i = 0; i < cfg->n_bridges; i++) {
1255         const struct ovsrec_bridge *br_cfg = cfg->bridges[i];
1256         struct bridge *br = bridge_lookup(br_cfg->name);
1257         if (!br) {
1258             bridge_create(br_cfg);
1259         }
1260     }
1261
1262     shash_destroy(&new_br);
1263 }
1264
1265 static void
1266 iface_set_ofp_port(struct iface *iface, int ofp_port)
1267 {
1268     struct bridge *br = iface->port->bridge;
1269
1270     ovs_assert(iface->ofp_port < 0 && ofp_port >= 0);
1271     iface->ofp_port = ofp_port;
1272     hmap_insert(&br->ifaces, &iface->ofp_port_node, hash_int(ofp_port, 0));
1273     iface_set_ofport(iface->cfg, ofp_port);
1274 }
1275
1276 /* Configures 'netdev' based on the "options" column in 'iface_cfg'.
1277  * Returns 0 if successful, otherwise a positive errno value. */
1278 static int
1279 iface_set_netdev_config(const struct ovsrec_interface *iface_cfg,
1280                         struct netdev *netdev)
1281 {
1282     int error;
1283
1284     error = netdev_set_config(netdev, &iface_cfg->options);
1285     if (error) {
1286         VLOG_WARN("could not configure network device %s (%s)",
1287                   iface_cfg->name, strerror(error));
1288     }
1289     return error;
1290 }
1291
1292 /* This function determines whether 'ofproto_port', which is attached to
1293  * br->ofproto's datapath, is one that we want in 'br'.
1294  *
1295  * If it is, it returns true, after creating an iface (if necessary),
1296  * configuring the iface's netdev according to the iface's options, and setting
1297  * iface's ofp_port member to 'ofproto_port->ofp_port'.
1298  *
1299  * If, on the other hand, 'port' should be removed, it returns false.  The
1300  * caller should later detach the port from br->ofproto. */
1301 static bool
1302 bridge_refresh_one_ofp_port(struct bridge *br,
1303                             const struct ofproto_port *ofproto_port)
1304 {
1305     const char *name = ofproto_port->name;
1306     const char *type = ofproto_port->type;
1307     uint16_t ofp_port = ofproto_port->ofp_port;
1308
1309     struct iface *iface = iface_lookup(br, name);
1310     if (iface) {
1311         /* Check that the name-to-number mapping is one-to-one. */
1312         if (iface->ofp_port >= 0) {
1313             VLOG_WARN("bridge %s: interface %s reported twice",
1314                       br->name, name);
1315             return false;
1316         } else if (iface_from_ofp_port(br, ofp_port)) {
1317             VLOG_WARN("bridge %s: interface %"PRIu16" reported twice",
1318                       br->name, ofp_port);
1319             return false;
1320         }
1321
1322         /* There's a configured interface named 'name'. */
1323         if (strcmp(type, iface->type)
1324             || iface_set_netdev_config(iface->cfg, iface->netdev)) {
1325             /* It's the wrong type, or it's the right type but can't be
1326              * configured as the user requested, so we must destroy it. */
1327             return false;
1328         } else {
1329             /* It's the right type and configured correctly.  Keep it. */
1330             iface_set_ofp_port(iface, ofp_port);
1331             return true;
1332         }
1333     } else if (bridge_has_bond_fake_iface(br, name)
1334                && !strcmp(type, "internal")) {
1335         /* It's a bond fake iface.  Keep it. */
1336         return true;
1337     } else {
1338         /* There's no configured interface named 'name', but there might be an
1339          * interface of that name queued to be created.
1340          *
1341          * If there is, and it has the correct type, then try to configure it
1342          * and add it.  If that's successful, we'll keep it.  Otherwise, we'll
1343          * delete it and later try to re-add it. */
1344         struct if_cfg *if_cfg = if_cfg_lookup(br, name);
1345         return (if_cfg
1346                 && !strcmp(type, iface_get_type(if_cfg->cfg, br->cfg))
1347                 && iface_create(br, if_cfg, ofp_port));
1348     }
1349 }
1350
1351 /* Update bridges "if_cfg"s, "struct port"s, and "struct iface"s to be
1352  * consistent with the ofp_ports in "br->ofproto". */
1353 static void
1354 bridge_refresh_ofp_port(struct bridge *br)
1355 {
1356     struct ofproto_port_dump dump;
1357     struct ofproto_port ofproto_port;
1358     struct port *port, *port_next;
1359
1360     /* Clear each "struct iface"s ofp_port so we can get its correct value. */
1361     hmap_clear(&br->ifaces);
1362     HMAP_FOR_EACH (port, hmap_node, &br->ports) {
1363         struct iface *iface;
1364
1365         LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
1366             iface->ofp_port = -1;
1367         }
1368     }
1369
1370     /* Obtain the correct "ofp_port"s from ofproto. Find any if_cfg's which
1371      * already exist in the datapath and promote them to full fledged "struct
1372      * iface"s.  Mark ports in the datapath which don't belong as garbage. */
1373     OFPROTO_PORT_FOR_EACH (&ofproto_port, &dump, br->ofproto) {
1374         if (!bridge_refresh_one_ofp_port(br, &ofproto_port)) {
1375             struct ofpp_garbage *garbage = xmalloc(sizeof *garbage);
1376             garbage->ofp_port = ofproto_port.ofp_port;
1377             list_push_front(&br->ofpp_garbage, &garbage->list_node);
1378         }
1379     }
1380
1381     /* Some ifaces may not have "ofp_port"s in ofproto and therefore don't
1382      * deserve to have "struct iface"s.  Demote these to "if_cfg"s so that
1383      * later they can be added to ofproto. */
1384     HMAP_FOR_EACH_SAFE (port, port_next, hmap_node, &br->ports) {
1385         struct iface *iface, *iface_next;
1386
1387         LIST_FOR_EACH_SAFE (iface, iface_next, port_elem, &port->ifaces) {
1388             if (iface->ofp_port < 0) {
1389                 bridge_queue_if_cfg(br, iface->cfg, port->cfg);
1390                 iface_destroy(iface);
1391             }
1392         }
1393
1394         if (list_is_empty(&port->ifaces)) {
1395             port_destroy(port);
1396         }
1397     }
1398 }
1399
1400 /* Opens a network device for 'if_cfg' and configures it.  If '*ofp_portp'
1401  * is negative, adds the network device to br->ofproto and stores the OpenFlow
1402  * port number in '*ofp_portp'; otherwise leaves br->ofproto and '*ofp_portp'
1403  * untouched.
1404  *
1405  * If successful, returns 0 and stores the network device in '*netdevp'.  On
1406  * failure, returns a positive errno value and stores NULL in '*netdevp'. */
1407 static int
1408 iface_do_create(const struct bridge *br,
1409                 const struct if_cfg *if_cfg,
1410                 int *ofp_portp, struct netdev **netdevp)
1411 {
1412     const struct ovsrec_interface *iface_cfg = if_cfg->cfg;
1413     const struct ovsrec_port *port_cfg = if_cfg->parent;
1414     struct netdev *netdev;
1415     int error;
1416
1417     error = netdev_open(iface_cfg->name,
1418                         iface_get_type(iface_cfg, br->cfg), &netdev);
1419     if (error) {
1420         VLOG_WARN("could not open network device %s (%s)",
1421                   iface_cfg->name, strerror(error));
1422         goto error;
1423     }
1424
1425     error = iface_set_netdev_config(iface_cfg, netdev);
1426     if (error) {
1427         goto error;
1428     }
1429
1430     if (*ofp_portp < 0) {
1431         uint16_t ofp_port = if_cfg->ofport;
1432
1433         error = ofproto_port_add(br->ofproto, netdev, &ofp_port);
1434         if (error) {
1435             goto error;
1436         }
1437         *ofp_portp = ofp_port;
1438
1439         VLOG_INFO("bridge %s: added interface %s on port %d",
1440                   br->name, iface_cfg->name, *ofp_portp);
1441     } else {
1442         VLOG_DBG("bridge %s: interface %s is on port %d",
1443                  br->name, iface_cfg->name, *ofp_portp);
1444     }
1445
1446     if ((port_cfg->vlan_mode && !strcmp(port_cfg->vlan_mode, "splinter"))
1447         || iface_is_internal(iface_cfg, br->cfg)) {
1448         netdev_turn_flags_on(netdev, NETDEV_UP, true);
1449     }
1450
1451     *netdevp = netdev;
1452     return 0;
1453
1454 error:
1455     *netdevp = NULL;
1456     netdev_close(netdev);
1457     return error;
1458 }
1459
1460 /* Creates a new iface on 'br' based on 'if_cfg'.  The new iface has OpenFlow
1461  * port number 'ofp_port'.  If ofp_port is negative, an OpenFlow port is
1462  * automatically allocated for the iface.  Takes ownership of and
1463  * deallocates 'if_cfg'.
1464  *
1465  * Return true if an iface is successfully created, false otherwise. */
1466 static bool
1467 iface_create(struct bridge *br, struct if_cfg *if_cfg, int ofp_port)
1468 {
1469     const struct ovsrec_interface *iface_cfg = if_cfg->cfg;
1470     const struct ovsrec_port *port_cfg = if_cfg->parent;
1471
1472     struct netdev *netdev;
1473     struct iface *iface;
1474     struct port *port;
1475     int error;
1476     bool ok = true;
1477
1478     /* Do the bits that can fail up front.
1479      *
1480      * It's a bit dangerous to call bridge_run_fast() here as ofproto's
1481      * internal datastructures may not be consistent.  Eventually, when port
1482      * additions and deletions are cheaper, these calls should be removed. */
1483     bridge_run_fast();
1484     ovs_assert(!iface_lookup(br, iface_cfg->name));
1485     error = iface_do_create(br, if_cfg, &ofp_port, &netdev);
1486     bridge_run_fast();
1487     if (error) {
1488         iface_set_ofport(iface_cfg, -1);
1489         iface_clear_db_record(iface_cfg);
1490         ok = false;
1491         goto done;
1492     }
1493
1494     /* Get or create the port structure. */
1495     port = port_lookup(br, port_cfg->name);
1496     if (!port) {
1497         port = port_create(br, port_cfg);
1498     }
1499
1500     /* Create the iface structure. */
1501     iface = xzalloc(sizeof *iface);
1502     list_push_back(&port->ifaces, &iface->port_elem);
1503     hmap_insert(&br->iface_by_name, &iface->name_node,
1504                 hash_string(iface_cfg->name, 0));
1505     iface->port = port;
1506     iface->name = xstrdup(iface_cfg->name);
1507     iface->ofp_port = -1;
1508     iface->netdev = netdev;
1509     iface->type = iface_get_type(iface_cfg, br->cfg);
1510     iface->cfg = iface_cfg;
1511
1512     iface_set_ofp_port(iface, ofp_port);
1513
1514     /* Populate initial status in database. */
1515     iface_refresh_stats(iface);
1516     iface_refresh_status(iface);
1517
1518     /* Add bond fake iface if necessary. */
1519     if (port_is_bond_fake_iface(port)) {
1520         struct ofproto_port ofproto_port;
1521
1522         if (ofproto_port_query_by_name(br->ofproto, port->name,
1523                                        &ofproto_port)) {
1524             struct netdev *netdev;
1525             int error;
1526
1527             error = netdev_open(port->name, "internal", &netdev);
1528             if (!error) {
1529                 uint16_t fake_ofp_port = if_cfg->ofport;
1530
1531                 ofproto_port_add(br->ofproto, netdev, &fake_ofp_port);
1532                 netdev_close(netdev);
1533             } else {
1534                 VLOG_WARN("could not open network device %s (%s)",
1535                           port->name, strerror(error));
1536             }
1537         } else {
1538             /* Already exists, nothing to do. */
1539             ofproto_port_destroy(&ofproto_port);
1540         }
1541     }
1542
1543 done:
1544     hmap_remove(&br->if_cfg_todo, &if_cfg->hmap_node);
1545     free(if_cfg);
1546
1547     return ok;
1548 }
1549
1550 /* Set Flow eviction threshold */
1551 static void
1552 bridge_configure_flow_eviction_threshold(struct bridge *br)
1553 {
1554     const char *threshold_str;
1555     unsigned threshold;
1556
1557     threshold_str = smap_get(&br->cfg->other_config,
1558                              "flow-eviction-threshold");
1559     if (threshold_str) {
1560         threshold = strtoul(threshold_str, NULL, 10);
1561     } else {
1562         threshold = OFPROTO_FLOW_EVICTION_THRESHOLD_DEFAULT;
1563     }
1564     ofproto_set_flow_eviction_threshold(br->ofproto, threshold);
1565 }
1566
1567 /* Set forward BPDU option. */
1568 static void
1569 bridge_configure_forward_bpdu(struct bridge *br)
1570 {
1571     ofproto_set_forward_bpdu(br->ofproto,
1572                              smap_get_bool(&br->cfg->other_config,
1573                                            "forward-bpdu",
1574                                            false));
1575 }
1576
1577 /* Set MAC learning table configuration for 'br'. */
1578 static void
1579 bridge_configure_mac_table(struct bridge *br)
1580 {
1581     const char *idle_time_str;
1582     int idle_time;
1583
1584     const char *mac_table_size_str;
1585     int mac_table_size;
1586
1587     idle_time_str = smap_get(&br->cfg->other_config, "mac-aging-time");
1588     idle_time = (idle_time_str && atoi(idle_time_str)
1589                  ? atoi(idle_time_str)
1590                  : MAC_ENTRY_DEFAULT_IDLE_TIME);
1591
1592     mac_table_size_str = smap_get(&br->cfg->other_config, "mac-table-size");
1593     mac_table_size = (mac_table_size_str && atoi(mac_table_size_str)
1594                       ? atoi(mac_table_size_str)
1595                       : MAC_DEFAULT_MAX);
1596
1597     ofproto_set_mac_table_config(br->ofproto, idle_time, mac_table_size);
1598 }
1599
1600 static void
1601 bridge_pick_local_hw_addr(struct bridge *br, uint8_t ea[ETH_ADDR_LEN],
1602                           struct iface **hw_addr_iface)
1603 {
1604     struct hmapx mirror_output_ports;
1605     const char *hwaddr;
1606     struct port *port;
1607     bool found_addr = false;
1608     int error;
1609     int i;
1610
1611     *hw_addr_iface = NULL;
1612
1613     /* Did the user request a particular MAC? */
1614     hwaddr = smap_get(&br->cfg->other_config, "hwaddr");
1615     if (hwaddr && eth_addr_from_string(hwaddr, ea)) {
1616         if (eth_addr_is_multicast(ea)) {
1617             VLOG_ERR("bridge %s: cannot set MAC address to multicast "
1618                      "address "ETH_ADDR_FMT, br->name, ETH_ADDR_ARGS(ea));
1619         } else if (eth_addr_is_zero(ea)) {
1620             VLOG_ERR("bridge %s: cannot set MAC address to zero", br->name);
1621         } else {
1622             return;
1623         }
1624     }
1625
1626     /* Mirror output ports don't participate in picking the local hardware
1627      * address.  ofproto can't help us find out whether a given port is a
1628      * mirror output because we haven't configured mirrors yet, so we need to
1629      * accumulate them ourselves. */
1630     hmapx_init(&mirror_output_ports);
1631     for (i = 0; i < br->cfg->n_mirrors; i++) {
1632         struct ovsrec_mirror *m = br->cfg->mirrors[i];
1633         if (m->output_port) {
1634             hmapx_add(&mirror_output_ports, m->output_port);
1635         }
1636     }
1637
1638     /* Otherwise choose the minimum non-local MAC address among all of the
1639      * interfaces. */
1640     HMAP_FOR_EACH (port, hmap_node, &br->ports) {
1641         uint8_t iface_ea[ETH_ADDR_LEN];
1642         struct iface *candidate;
1643         struct iface *iface;
1644
1645         /* Mirror output ports don't participate. */
1646         if (hmapx_contains(&mirror_output_ports, port->cfg)) {
1647             continue;
1648         }
1649
1650         /* Choose the MAC address to represent the port. */
1651         iface = NULL;
1652         if (port->cfg->mac && eth_addr_from_string(port->cfg->mac, iface_ea)) {
1653             /* Find the interface with this Ethernet address (if any) so that
1654              * we can provide the correct devname to the caller. */
1655             LIST_FOR_EACH (candidate, port_elem, &port->ifaces) {
1656                 uint8_t candidate_ea[ETH_ADDR_LEN];
1657                 if (!netdev_get_etheraddr(candidate->netdev, candidate_ea)
1658                     && eth_addr_equals(iface_ea, candidate_ea)) {
1659                     iface = candidate;
1660                 }
1661             }
1662         } else {
1663             /* Choose the interface whose MAC address will represent the port.
1664              * The Linux kernel bonding code always chooses the MAC address of
1665              * the first slave added to a bond, and the Fedora networking
1666              * scripts always add slaves to a bond in alphabetical order, so
1667              * for compatibility we choose the interface with the name that is
1668              * first in alphabetical order. */
1669             LIST_FOR_EACH (candidate, port_elem, &port->ifaces) {
1670                 if (!iface || strcmp(candidate->name, iface->name) < 0) {
1671                     iface = candidate;
1672                 }
1673             }
1674
1675             /* The local port doesn't count (since we're trying to choose its
1676              * MAC address anyway). */
1677             if (iface->ofp_port == OFPP_LOCAL) {
1678                 continue;
1679             }
1680
1681             /* Grab MAC. */
1682             error = netdev_get_etheraddr(iface->netdev, iface_ea);
1683             if (error) {
1684                 continue;
1685             }
1686         }
1687
1688         /* Compare against our current choice. */
1689         if (!eth_addr_is_multicast(iface_ea) &&
1690             !eth_addr_is_local(iface_ea) &&
1691             !eth_addr_is_reserved(iface_ea) &&
1692             !eth_addr_is_zero(iface_ea) &&
1693             (!found_addr || eth_addr_compare_3way(iface_ea, ea) < 0))
1694         {
1695             memcpy(ea, iface_ea, ETH_ADDR_LEN);
1696             *hw_addr_iface = iface;
1697             found_addr = true;
1698         }
1699     }
1700
1701     if (!found_addr) {
1702         memcpy(ea, br->default_ea, ETH_ADDR_LEN);
1703         *hw_addr_iface = NULL;
1704     }
1705
1706     hmapx_destroy(&mirror_output_ports);
1707 }
1708
1709 /* Choose and returns the datapath ID for bridge 'br' given that the bridge
1710  * Ethernet address is 'bridge_ea'.  If 'bridge_ea' is the Ethernet address of
1711  * an interface on 'br', then that interface must be passed in as
1712  * 'hw_addr_iface'; if 'bridge_ea' was derived some other way, then
1713  * 'hw_addr_iface' must be passed in as a null pointer. */
1714 static uint64_t
1715 bridge_pick_datapath_id(struct bridge *br,
1716                         const uint8_t bridge_ea[ETH_ADDR_LEN],
1717                         struct iface *hw_addr_iface)
1718 {
1719     /*
1720      * The procedure for choosing a bridge MAC address will, in the most
1721      * ordinary case, also choose a unique MAC that we can use as a datapath
1722      * ID.  In some special cases, though, multiple bridges will end up with
1723      * the same MAC address.  This is OK for the bridges, but it will confuse
1724      * the OpenFlow controller, because each datapath needs a unique datapath
1725      * ID.
1726      *
1727      * Datapath IDs must be unique.  It is also very desirable that they be
1728      * stable from one run to the next, so that policy set on a datapath
1729      * "sticks".
1730      */
1731     const char *datapath_id;
1732     uint64_t dpid;
1733
1734     datapath_id = smap_get(&br->cfg->other_config, "datapath-id");
1735     if (datapath_id && dpid_from_string(datapath_id, &dpid)) {
1736         return dpid;
1737     }
1738
1739     if (!hw_addr_iface) {
1740         /*
1741          * A purely internal bridge, that is, one that has no non-virtual
1742          * network devices on it at all, is difficult because it has no
1743          * natural unique identifier at all.
1744          *
1745          * When the host is a XenServer, we handle this case by hashing the
1746          * host's UUID with the name of the bridge.  Names of bridges are
1747          * persistent across XenServer reboots, although they can be reused if
1748          * an internal network is destroyed and then a new one is later
1749          * created, so this is fairly effective.
1750          *
1751          * When the host is not a XenServer, we punt by using a random MAC
1752          * address on each run.
1753          */
1754         const char *host_uuid = xenserver_get_host_uuid();
1755         if (host_uuid) {
1756             char *combined = xasprintf("%s,%s", host_uuid, br->name);
1757             dpid = dpid_from_hash(combined, strlen(combined));
1758             free(combined);
1759             return dpid;
1760         }
1761     }
1762
1763     return eth_addr_to_uint64(bridge_ea);
1764 }
1765
1766 static uint64_t
1767 dpid_from_hash(const void *data, size_t n)
1768 {
1769     uint8_t hash[SHA1_DIGEST_SIZE];
1770
1771     BUILD_ASSERT_DECL(sizeof hash >= ETH_ADDR_LEN);
1772     sha1_bytes(data, n, hash);
1773     eth_addr_mark_random(hash);
1774     return eth_addr_to_uint64(hash);
1775 }
1776
1777 static void
1778 iface_refresh_status(struct iface *iface)
1779 {
1780     struct smap smap;
1781
1782     enum netdev_features current;
1783     int64_t bps;
1784     int mtu;
1785     int64_t mtu_64;
1786     uint8_t mac[ETH_ADDR_LEN];
1787     int error;
1788
1789     if (iface_is_synthetic(iface)) {
1790         return;
1791     }
1792
1793     smap_init(&smap);
1794
1795     if (!netdev_get_status(iface->netdev, &smap)) {
1796         ovsrec_interface_set_status(iface->cfg, &smap);
1797     } else {
1798         ovsrec_interface_set_status(iface->cfg, NULL);
1799     }
1800
1801     smap_destroy(&smap);
1802
1803     error = netdev_get_features(iface->netdev, &current, NULL, NULL, NULL);
1804     bps = !error ? netdev_features_to_bps(current, 0) : 0;
1805     if (bps) {
1806         ovsrec_interface_set_duplex(iface->cfg,
1807                                     netdev_features_is_full_duplex(current)
1808                                     ? "full" : "half");
1809         ovsrec_interface_set_link_speed(iface->cfg, &bps, 1);
1810     } else {
1811         ovsrec_interface_set_duplex(iface->cfg, NULL);
1812         ovsrec_interface_set_link_speed(iface->cfg, NULL, 0);
1813     }
1814
1815     error = netdev_get_mtu(iface->netdev, &mtu);
1816     if (!error) {
1817         mtu_64 = mtu;
1818         ovsrec_interface_set_mtu(iface->cfg, &mtu_64, 1);
1819     } else {
1820         ovsrec_interface_set_mtu(iface->cfg, NULL, 0);
1821     }
1822
1823     error = netdev_get_etheraddr(iface->netdev, mac);
1824     if (!error) {
1825         char mac_string[32];
1826
1827         sprintf(mac_string, ETH_ADDR_FMT, ETH_ADDR_ARGS(mac));
1828         ovsrec_interface_set_mac_in_use(iface->cfg, mac_string);
1829     } else {
1830         ovsrec_interface_set_mac_in_use(iface->cfg, NULL);
1831     }
1832 }
1833
1834 /* Writes 'iface''s CFM statistics to the database. 'iface' must not be
1835  * synthetic. */
1836 static void
1837 iface_refresh_cfm_stats(struct iface *iface)
1838 {
1839     const struct ovsrec_interface *cfg = iface->cfg;
1840     struct ofproto_cfm_status status;
1841
1842     if (!ofproto_port_get_cfm_status(iface->port->bridge->ofproto,
1843                                     iface->ofp_port, &status)) {
1844         ovsrec_interface_set_cfm_fault(cfg, NULL, 0);
1845         ovsrec_interface_set_cfm_fault_status(cfg, NULL, 0);
1846         ovsrec_interface_set_cfm_remote_opstate(cfg, NULL);
1847         ovsrec_interface_set_cfm_health(cfg, NULL, 0);
1848         ovsrec_interface_set_cfm_remote_mpids(cfg, NULL, 0);
1849     } else {
1850         const char *reasons[CFM_FAULT_N_REASONS];
1851         int64_t cfm_health = status.health;
1852         bool faulted = status.faults != 0;
1853         size_t i, j;
1854
1855         ovsrec_interface_set_cfm_fault(cfg, &faulted, 1);
1856
1857         j = 0;
1858         for (i = 0; i < CFM_FAULT_N_REASONS; i++) {
1859             int reason = 1 << i;
1860             if (status.faults & reason) {
1861                 reasons[j++] = cfm_fault_reason_to_str(reason);
1862             }
1863         }
1864         ovsrec_interface_set_cfm_fault_status(cfg, (char **) reasons, j);
1865
1866         if (status.remote_opstate >= 0) {
1867             const char *remote_opstate = status.remote_opstate ? "up" : "down";
1868             ovsrec_interface_set_cfm_remote_opstate(cfg, remote_opstate);
1869         } else {
1870             ovsrec_interface_set_cfm_remote_opstate(cfg, NULL);
1871         }
1872
1873         ovsrec_interface_set_cfm_remote_mpids(cfg,
1874                                               (const int64_t *)status.rmps,
1875                                               status.n_rmps);
1876         if (cfm_health >= 0) {
1877             ovsrec_interface_set_cfm_health(cfg, &cfm_health, 1);
1878         } else {
1879             ovsrec_interface_set_cfm_health(cfg, NULL, 0);
1880         }
1881     }
1882 }
1883
1884 static void
1885 iface_refresh_stats(struct iface *iface)
1886 {
1887 #define IFACE_STATS                             \
1888     IFACE_STAT(rx_packets,      "rx_packets")   \
1889     IFACE_STAT(tx_packets,      "tx_packets")   \
1890     IFACE_STAT(rx_bytes,        "rx_bytes")     \
1891     IFACE_STAT(tx_bytes,        "tx_bytes")     \
1892     IFACE_STAT(rx_dropped,      "rx_dropped")   \
1893     IFACE_STAT(tx_dropped,      "tx_dropped")   \
1894     IFACE_STAT(rx_errors,       "rx_errors")    \
1895     IFACE_STAT(tx_errors,       "tx_errors")    \
1896     IFACE_STAT(rx_frame_errors, "rx_frame_err") \
1897     IFACE_STAT(rx_over_errors,  "rx_over_err")  \
1898     IFACE_STAT(rx_crc_errors,   "rx_crc_err")   \
1899     IFACE_STAT(collisions,      "collisions")
1900
1901 #define IFACE_STAT(MEMBER, NAME) + 1
1902     enum { N_IFACE_STATS = IFACE_STATS };
1903 #undef IFACE_STAT
1904     int64_t values[N_IFACE_STATS];
1905     char *keys[N_IFACE_STATS];
1906     int n;
1907
1908     struct netdev_stats stats;
1909
1910     if (iface_is_synthetic(iface)) {
1911         return;
1912     }
1913
1914     /* Intentionally ignore return value, since errors will set 'stats' to
1915      * all-1s, and we will deal with that correctly below. */
1916     netdev_get_stats(iface->netdev, &stats);
1917
1918     /* Copy statistics into keys[] and values[]. */
1919     n = 0;
1920 #define IFACE_STAT(MEMBER, NAME)                \
1921     if (stats.MEMBER != UINT64_MAX) {           \
1922         keys[n] = NAME;                         \
1923         values[n] = stats.MEMBER;               \
1924         n++;                                    \
1925     }
1926     IFACE_STATS;
1927 #undef IFACE_STAT
1928     ovs_assert(n <= N_IFACE_STATS);
1929
1930     ovsrec_interface_set_statistics(iface->cfg, keys, values, n);
1931 #undef IFACE_STATS
1932 }
1933
1934 static void
1935 br_refresh_stp_status(struct bridge *br)
1936 {
1937     struct smap smap = SMAP_INITIALIZER(&smap);
1938     struct ofproto *ofproto = br->ofproto;
1939     struct ofproto_stp_status status;
1940
1941     if (ofproto_get_stp_status(ofproto, &status)) {
1942         return;
1943     }
1944
1945     if (!status.enabled) {
1946         ovsrec_bridge_set_status(br->cfg, NULL);
1947         return;
1948     }
1949
1950     smap_add_format(&smap, "stp_bridge_id", STP_ID_FMT,
1951                     STP_ID_ARGS(status.bridge_id));
1952     smap_add_format(&smap, "stp_designated_root", STP_ID_FMT,
1953                     STP_ID_ARGS(status.designated_root));
1954     smap_add_format(&smap, "stp_root_path_cost", "%d", status.root_path_cost);
1955
1956     ovsrec_bridge_set_status(br->cfg, &smap);
1957     smap_destroy(&smap);
1958 }
1959
1960 static void
1961 port_refresh_stp_status(struct port *port)
1962 {
1963     struct ofproto *ofproto = port->bridge->ofproto;
1964     struct iface *iface;
1965     struct ofproto_port_stp_status status;
1966     char *keys[3];
1967     int64_t int_values[3];
1968     struct smap smap;
1969
1970     if (port_is_synthetic(port)) {
1971         return;
1972     }
1973
1974     /* STP doesn't currently support bonds. */
1975     if (!list_is_singleton(&port->ifaces)) {
1976         ovsrec_port_set_status(port->cfg, NULL);
1977         return;
1978     }
1979
1980     iface = CONTAINER_OF(list_front(&port->ifaces), struct iface, port_elem);
1981
1982     if (ofproto_port_get_stp_status(ofproto, iface->ofp_port, &status)) {
1983         return;
1984     }
1985
1986     if (!status.enabled) {
1987         ovsrec_port_set_status(port->cfg, NULL);
1988         ovsrec_port_set_statistics(port->cfg, NULL, NULL, 0);
1989         return;
1990     }
1991
1992     /* Set Status column. */
1993     smap_init(&smap);
1994     smap_add_format(&smap, "stp_port_id", STP_PORT_ID_FMT, status.port_id);
1995     smap_add(&smap, "stp_state", stp_state_name(status.state));
1996     smap_add_format(&smap, "stp_sec_in_state", "%u", status.sec_in_state);
1997     smap_add(&smap, "stp_role", stp_role_name(status.role));
1998     ovsrec_port_set_status(port->cfg, &smap);
1999     smap_destroy(&smap);
2000
2001     /* Set Statistics column. */
2002     keys[0] = "stp_tx_count";
2003     int_values[0] = status.tx_count;
2004     keys[1] = "stp_rx_count";
2005     int_values[1] = status.rx_count;
2006     keys[2] = "stp_error_count";
2007     int_values[2] = status.error_count;
2008
2009     ovsrec_port_set_statistics(port->cfg, keys, int_values,
2010                                ARRAY_SIZE(int_values));
2011 }
2012
2013 static bool
2014 enable_system_stats(const struct ovsrec_open_vswitch *cfg)
2015 {
2016     return smap_get_bool(&cfg->other_config, "enable-statistics", false);
2017 }
2018
2019 static void
2020 reconfigure_system_stats(const struct ovsrec_open_vswitch *cfg)
2021 {
2022     bool enable = enable_system_stats(cfg);
2023
2024     system_stats_enable(enable);
2025     if (!enable) {
2026         ovsrec_open_vswitch_set_statistics(cfg, NULL);
2027     }
2028 }
2029
2030 static void
2031 run_system_stats(void)
2032 {
2033     const struct ovsrec_open_vswitch *cfg = ovsrec_open_vswitch_first(idl);
2034     struct smap *stats;
2035
2036     stats = system_stats_run();
2037     if (stats && cfg) {
2038         struct ovsdb_idl_txn *txn;
2039         struct ovsdb_datum datum;
2040
2041         txn = ovsdb_idl_txn_create(idl);
2042         ovsdb_datum_from_smap(&datum, stats);
2043         ovsdb_idl_txn_write(&cfg->header_, &ovsrec_open_vswitch_col_statistics,
2044                             &datum);
2045         ovsdb_idl_txn_commit(txn);
2046         ovsdb_idl_txn_destroy(txn);
2047
2048         free(stats);
2049     }
2050 }
2051
2052 static inline const char *
2053 ofp12_controller_role_to_str(enum ofp12_controller_role role)
2054 {
2055     switch (role) {
2056     case OFPCR12_ROLE_EQUAL:
2057         return "other";
2058     case OFPCR12_ROLE_MASTER:
2059         return "master";
2060     case OFPCR12_ROLE_SLAVE:
2061         return "slave";
2062     case OFPCR12_ROLE_NOCHANGE:
2063     default:
2064         return "*** INVALID ROLE ***";
2065     }
2066 }
2067
2068 static void
2069 refresh_controller_status(void)
2070 {
2071     struct bridge *br;
2072     struct shash info;
2073     const struct ovsrec_controller *cfg;
2074
2075     shash_init(&info);
2076
2077     /* Accumulate status for controllers on all bridges. */
2078     HMAP_FOR_EACH (br, node, &all_bridges) {
2079         ofproto_get_ofproto_controller_info(br->ofproto, &info);
2080     }
2081
2082     /* Update each controller in the database with current status. */
2083     OVSREC_CONTROLLER_FOR_EACH(cfg, idl) {
2084         struct ofproto_controller_info *cinfo =
2085             shash_find_data(&info, cfg->target);
2086
2087         if (cinfo) {
2088             struct smap smap = SMAP_INITIALIZER(&smap);
2089             const char **values = cinfo->pairs.values;
2090             const char **keys = cinfo->pairs.keys;
2091             size_t i;
2092
2093             for (i = 0; i < cinfo->pairs.n; i++) {
2094                 smap_add(&smap, keys[i], values[i]);
2095             }
2096
2097             ovsrec_controller_set_is_connected(cfg, cinfo->is_connected);
2098             ovsrec_controller_set_role(cfg, ofp12_controller_role_to_str(
2099                                            cinfo->role));
2100             ovsrec_controller_set_status(cfg, &smap);
2101             smap_destroy(&smap);
2102         } else {
2103             ovsrec_controller_set_is_connected(cfg, false);
2104             ovsrec_controller_set_role(cfg, NULL);
2105             ovsrec_controller_set_status(cfg, NULL);
2106         }
2107     }
2108
2109     ofproto_free_ofproto_controller_info(&info);
2110 }
2111 \f
2112 /* "Instant" stats.
2113  *
2114  * Some information in the database must be kept as up-to-date as possible to
2115  * allow controllers to respond rapidly to network outages.  We call these
2116  * statistics "instant" stats.
2117  *
2118  * We wish to update these statistics every INSTANT_INTERVAL_MSEC milliseconds,
2119  * assuming that they've changed.  The only means we have to determine whether
2120  * they have changed are:
2121  *
2122  *   - Try to commit changes to the database.  If nothing changed, then
2123  *     ovsdb_idl_txn_commit() returns TXN_UNCHANGED, otherwise some other
2124  *     value.
2125  *
2126  *   - instant_stats_run() is called late in the run loop, after anything that
2127  *     might change any of the instant stats.
2128  *
2129  * We use these two facts together to avoid waking the process up every
2130  * INSTANT_INTERVAL_MSEC whether there is any change or not.
2131  */
2132
2133 /* Minimum interval between writing updates to the instant stats to the
2134  * database. */
2135 #define INSTANT_INTERVAL_MSEC 100
2136
2137 /* Current instant stats database transaction, NULL if there is no ongoing
2138  * transaction. */
2139 static struct ovsdb_idl_txn *instant_txn;
2140
2141 /* Next time (in msec on monotonic clock) at which we will update the instant
2142  * stats.  */
2143 static long long int instant_next_txn = LLONG_MIN;
2144
2145 /* True if the run loop has run since we last saw that the instant stats were
2146  * unchanged, that is, this is true if we need to wake up at 'instant_next_txn'
2147  * to refresh the instant stats. */
2148 static bool instant_stats_could_have_changed;
2149
2150 static void
2151 instant_stats_run(void)
2152 {
2153     enum ovsdb_idl_txn_status status;
2154
2155     instant_stats_could_have_changed = true;
2156
2157     if (!instant_txn) {
2158         struct bridge *br;
2159
2160         if (time_msec() < instant_next_txn) {
2161             return;
2162         }
2163         instant_next_txn = time_msec() + INSTANT_INTERVAL_MSEC;
2164
2165         instant_txn = ovsdb_idl_txn_create(idl);
2166         HMAP_FOR_EACH (br, node, &all_bridges) {
2167             struct iface *iface;
2168             struct port *port;
2169
2170             br_refresh_stp_status(br);
2171
2172             HMAP_FOR_EACH (port, hmap_node, &br->ports) {
2173                 port_refresh_stp_status(port);
2174             }
2175
2176             HMAP_FOR_EACH (iface, name_node, &br->iface_by_name) {
2177                 enum netdev_flags flags;
2178                 const char *link_state;
2179                 int64_t link_resets;
2180                 int current, error;
2181
2182                 if (iface_is_synthetic(iface)) {
2183                     continue;
2184                 }
2185
2186                 current = ofproto_port_is_lacp_current(br->ofproto,
2187                                                        iface->ofp_port);
2188                 if (current >= 0) {
2189                     bool bl = current;
2190                     ovsrec_interface_set_lacp_current(iface->cfg, &bl, 1);
2191                 } else {
2192                     ovsrec_interface_set_lacp_current(iface->cfg, NULL, 0);
2193                 }
2194
2195                 error = netdev_get_flags(iface->netdev, &flags);
2196                 if (!error) {
2197                     const char *state = flags & NETDEV_UP ? "up" : "down";
2198                     ovsrec_interface_set_admin_state(iface->cfg, state);
2199                 } else {
2200                     ovsrec_interface_set_admin_state(iface->cfg, NULL);
2201                 }
2202
2203                 link_state = netdev_get_carrier(iface->netdev) ? "up" : "down";
2204                 ovsrec_interface_set_link_state(iface->cfg, link_state);
2205
2206                 link_resets = netdev_get_carrier_resets(iface->netdev);
2207                 ovsrec_interface_set_link_resets(iface->cfg, &link_resets, 1);
2208
2209                 iface_refresh_cfm_stats(iface);
2210             }
2211         }
2212     }
2213
2214     status = ovsdb_idl_txn_commit(instant_txn);
2215     if (status != TXN_INCOMPLETE) {
2216         ovsdb_idl_txn_destroy(instant_txn);
2217         instant_txn = NULL;
2218     }
2219     if (status == TXN_UNCHANGED) {
2220         instant_stats_could_have_changed = false;
2221     }
2222 }
2223
2224 static void
2225 instant_stats_wait(void)
2226 {
2227     if (instant_txn) {
2228         ovsdb_idl_txn_wait(instant_txn);
2229     } else if (instant_stats_could_have_changed) {
2230         poll_timer_wait_until(instant_next_txn);
2231     }
2232 }
2233 \f
2234 /* Performs periodic activity required by bridges that needs to be done with
2235  * the least possible latency.
2236  *
2237  * It makes sense to call this function a couple of times per poll loop, to
2238  * provide a significant performance boost on some benchmarks with ofprotos
2239  * that use the ofproto-dpif implementation. */
2240 void
2241 bridge_run_fast(void)
2242 {
2243     struct sset types;
2244     const char *type;
2245     struct bridge *br;
2246
2247     sset_init(&types);
2248     ofproto_enumerate_types(&types);
2249     SSET_FOR_EACH (type, &types) {
2250         ofproto_type_run_fast(type);
2251     }
2252     sset_destroy(&types);
2253
2254     HMAP_FOR_EACH (br, node, &all_bridges) {
2255         ofproto_run_fast(br->ofproto);
2256     }
2257 }
2258
2259 void
2260 bridge_run(void)
2261 {
2262     static struct ovsrec_open_vswitch null_cfg;
2263     const struct ovsrec_open_vswitch *cfg;
2264     struct ovsdb_idl_txn *reconf_txn = NULL;
2265     struct sset types;
2266     const char *type;
2267
2268     bool vlan_splinters_changed;
2269     struct bridge *br;
2270
2271     ovsrec_open_vswitch_init(&null_cfg);
2272
2273     /* (Re)configure if necessary. */
2274     if (!reconfiguring) {
2275         ovsdb_idl_run(idl);
2276
2277         if (ovsdb_idl_is_lock_contended(idl)) {
2278             static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 1);
2279             struct bridge *br, *next_br;
2280
2281             VLOG_ERR_RL(&rl, "another ovs-vswitchd process is running, "
2282                         "disabling this process (pid %ld) until it goes away",
2283                         (long int) getpid());
2284
2285             HMAP_FOR_EACH_SAFE (br, next_br, node, &all_bridges) {
2286                 bridge_destroy(br);
2287             }
2288             /* Since we will not be running system_stats_run() in this process
2289              * with the current situation of multiple ovs-vswitchd daemons,
2290              * disable system stats collection. */
2291             system_stats_enable(false);
2292             return;
2293         } else if (!ovsdb_idl_has_lock(idl)) {
2294             return;
2295         }
2296     }
2297     cfg = ovsrec_open_vswitch_first(idl);
2298
2299     /* Initialize the ofproto library.  This only needs to run once, but
2300      * it must be done after the configuration is set.  If the
2301      * initialization has already occurred, bridge_init_ofproto()
2302      * returns immediately. */
2303     bridge_init_ofproto(cfg);
2304
2305     /* Let each datapath type do the work that it needs to do. */
2306     sset_init(&types);
2307     ofproto_enumerate_types(&types);
2308     SSET_FOR_EACH (type, &types) {
2309         ofproto_type_run(type);
2310     }
2311     sset_destroy(&types);
2312
2313     /* Let each bridge do the work that it needs to do. */
2314     HMAP_FOR_EACH (br, node, &all_bridges) {
2315         ofproto_run(br->ofproto);
2316     }
2317
2318     /* Re-configure SSL.  We do this on every trip through the main loop,
2319      * instead of just when the database changes, because the contents of the
2320      * key and certificate files can change without the database changing.
2321      *
2322      * We do this before bridge_reconfigure() because that function might
2323      * initiate SSL connections and thus requires SSL to be configured. */
2324     if (cfg && cfg->ssl) {
2325         const struct ovsrec_ssl *ssl = cfg->ssl;
2326
2327         stream_ssl_set_key_and_cert(ssl->private_key, ssl->certificate);
2328         stream_ssl_set_ca_cert_file(ssl->ca_cert, ssl->bootstrap_ca_cert);
2329     }
2330
2331     if (!reconfiguring) {
2332         /* If VLAN splinters are in use, then we need to reconfigure if VLAN
2333          * usage has changed. */
2334         vlan_splinters_changed = false;
2335         if (vlan_splinters_enabled_anywhere) {
2336             HMAP_FOR_EACH (br, node, &all_bridges) {
2337                 if (ofproto_has_vlan_usage_changed(br->ofproto)) {
2338                     vlan_splinters_changed = true;
2339                     break;
2340                 }
2341             }
2342         }
2343
2344         if (ovsdb_idl_get_seqno(idl) != idl_seqno || vlan_splinters_changed) {
2345             idl_seqno = ovsdb_idl_get_seqno(idl);
2346             if (cfg) {
2347                 reconf_txn = ovsdb_idl_txn_create(idl);
2348                 bridge_reconfigure(cfg);
2349             } else {
2350                 /* We still need to reconfigure to avoid dangling pointers to
2351                  * now-destroyed ovsrec structures inside bridge data. */
2352                 bridge_reconfigure(&null_cfg);
2353             }
2354         }
2355     }
2356
2357     if (reconfiguring) {
2358         if (!reconf_txn) {
2359             reconf_txn = ovsdb_idl_txn_create(idl);
2360         }
2361
2362         if (bridge_reconfigure_continue(cfg ? cfg : &null_cfg)) {
2363             reconfiguring = false;
2364
2365             if (cfg) {
2366                 ovsrec_open_vswitch_set_cur_cfg(cfg, cfg->next_cfg);
2367             }
2368
2369             /* If we are completing our initial configuration for this run
2370              * of ovs-vswitchd, then keep the transaction around to monitor
2371              * it for completion. */
2372             if (!initial_config_done) {
2373                 initial_config_done = true;
2374                 daemonize_txn = reconf_txn;
2375                 reconf_txn = NULL;
2376             }
2377         }
2378     }
2379
2380     if (reconf_txn) {
2381         ovsdb_idl_txn_commit(reconf_txn);
2382         ovsdb_idl_txn_destroy(reconf_txn);
2383         reconf_txn = NULL;
2384     }
2385
2386     if (daemonize_txn) {
2387         enum ovsdb_idl_txn_status status = ovsdb_idl_txn_commit(daemonize_txn);
2388         if (status != TXN_INCOMPLETE) {
2389             ovsdb_idl_txn_destroy(daemonize_txn);
2390             daemonize_txn = NULL;
2391
2392             /* ovs-vswitchd has completed initialization, so allow the
2393              * process that forked us to exit successfully. */
2394             daemonize_complete();
2395
2396             VLOG_INFO_ONCE("%s (Open vSwitch) %s", program_name, VERSION);
2397         }
2398     }
2399
2400     /* Refresh interface and mirror stats if necessary. */
2401     if (time_msec() >= iface_stats_timer) {
2402         if (cfg) {
2403             struct ovsdb_idl_txn *txn;
2404
2405             txn = ovsdb_idl_txn_create(idl);
2406             HMAP_FOR_EACH (br, node, &all_bridges) {
2407                 struct port *port;
2408                 struct mirror *m;
2409
2410                 HMAP_FOR_EACH (port, hmap_node, &br->ports) {
2411                     struct iface *iface;
2412
2413                     LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
2414                         iface_refresh_stats(iface);
2415                         iface_refresh_status(iface);
2416                     }
2417                 }
2418
2419                 HMAP_FOR_EACH (m, hmap_node, &br->mirrors) {
2420                     mirror_refresh_stats(m);
2421                 }
2422
2423             }
2424             refresh_controller_status();
2425             ovsdb_idl_txn_commit(txn);
2426             ovsdb_idl_txn_destroy(txn); /* XXX */
2427         }
2428
2429         iface_stats_timer = time_msec() + IFACE_STATS_INTERVAL;
2430     }
2431
2432     run_system_stats();
2433     instant_stats_run();
2434 }
2435
2436 void
2437 bridge_wait(void)
2438 {
2439     struct sset types;
2440     const char *type;
2441
2442     ovsdb_idl_wait(idl);
2443     if (daemonize_txn) {
2444         ovsdb_idl_txn_wait(daemonize_txn);
2445     }
2446
2447     if (reconfiguring) {
2448         poll_immediate_wake();
2449     }
2450
2451     sset_init(&types);
2452     ofproto_enumerate_types(&types);
2453     SSET_FOR_EACH (type, &types) {
2454         ofproto_type_wait(type);
2455     }
2456     sset_destroy(&types);
2457
2458     if (!hmap_is_empty(&all_bridges)) {
2459         struct bridge *br;
2460
2461         HMAP_FOR_EACH (br, node, &all_bridges) {
2462             ofproto_wait(br->ofproto);
2463         }
2464         poll_timer_wait_until(iface_stats_timer);
2465     }
2466
2467     system_stats_wait();
2468     instant_stats_wait();
2469 }
2470
2471 /* Adds some memory usage statistics for bridges into 'usage', for use with
2472  * memory_report(). */
2473 void
2474 bridge_get_memory_usage(struct simap *usage)
2475 {
2476     struct bridge *br;
2477
2478     HMAP_FOR_EACH (br, node, &all_bridges) {
2479         ofproto_get_memory_usage(br->ofproto, usage);
2480     }
2481 }
2482 \f
2483 /* QoS unixctl user interface functions. */
2484
2485 struct qos_unixctl_show_cbdata {
2486     struct ds *ds;
2487     struct iface *iface;
2488 };
2489
2490 static void
2491 qos_unixctl_show_cb(unsigned int queue_id,
2492                     const struct smap *details,
2493                     void *aux)
2494 {
2495     struct qos_unixctl_show_cbdata *data = aux;
2496     struct ds *ds = data->ds;
2497     struct iface *iface = data->iface;
2498     struct netdev_queue_stats stats;
2499     struct smap_node *node;
2500     int error;
2501
2502     ds_put_cstr(ds, "\n");
2503     if (queue_id) {
2504         ds_put_format(ds, "Queue %u:\n", queue_id);
2505     } else {
2506         ds_put_cstr(ds, "Default:\n");
2507     }
2508
2509     SMAP_FOR_EACH (node, details) {
2510         ds_put_format(ds, "\t%s: %s\n", node->key, node->value);
2511     }
2512
2513     error = netdev_get_queue_stats(iface->netdev, queue_id, &stats);
2514     if (!error) {
2515         if (stats.tx_packets != UINT64_MAX) {
2516             ds_put_format(ds, "\ttx_packets: %"PRIu64"\n", stats.tx_packets);
2517         }
2518
2519         if (stats.tx_bytes != UINT64_MAX) {
2520             ds_put_format(ds, "\ttx_bytes: %"PRIu64"\n", stats.tx_bytes);
2521         }
2522
2523         if (stats.tx_errors != UINT64_MAX) {
2524             ds_put_format(ds, "\ttx_errors: %"PRIu64"\n", stats.tx_errors);
2525         }
2526     } else {
2527         ds_put_format(ds, "\tFailed to get statistics for queue %u: %s",
2528                       queue_id, strerror(error));
2529     }
2530 }
2531
2532 static void
2533 qos_unixctl_show(struct unixctl_conn *conn, int argc OVS_UNUSED,
2534                  const char *argv[], void *aux OVS_UNUSED)
2535 {
2536     struct ds ds = DS_EMPTY_INITIALIZER;
2537     struct smap smap = SMAP_INITIALIZER(&smap);
2538     struct iface *iface;
2539     const char *type;
2540     struct smap_node *node;
2541     struct qos_unixctl_show_cbdata data;
2542     int error;
2543
2544     iface = iface_find(argv[1]);
2545     if (!iface) {
2546         unixctl_command_reply_error(conn, "no such interface");
2547         return;
2548     }
2549
2550     netdev_get_qos(iface->netdev, &type, &smap);
2551
2552     if (*type != '\0') {
2553         ds_put_format(&ds, "QoS: %s %s\n", iface->name, type);
2554
2555         SMAP_FOR_EACH (node, &smap) {
2556             ds_put_format(&ds, "%s: %s\n", node->key, node->value);
2557         }
2558
2559         data.ds = &ds;
2560         data.iface = iface;
2561         error = netdev_dump_queues(iface->netdev, qos_unixctl_show_cb, &data);
2562
2563         if (error) {
2564             ds_put_format(&ds, "failed to dump queues: %s", strerror(error));
2565         }
2566         unixctl_command_reply(conn, ds_cstr(&ds));
2567     } else {
2568         ds_put_format(&ds, "QoS not configured on %s\n", iface->name);
2569         unixctl_command_reply_error(conn, ds_cstr(&ds));
2570     }
2571
2572     smap_destroy(&smap);
2573     ds_destroy(&ds);
2574 }
2575 \f
2576 /* Bridge reconfiguration functions. */
2577 static void
2578 bridge_create(const struct ovsrec_bridge *br_cfg)
2579 {
2580     struct bridge *br;
2581
2582     ovs_assert(!bridge_lookup(br_cfg->name));
2583     br = xzalloc(sizeof *br);
2584
2585     br->name = xstrdup(br_cfg->name);
2586     br->type = xstrdup(ofproto_normalize_type(br_cfg->datapath_type));
2587     br->cfg = br_cfg;
2588
2589     /* Derive the default Ethernet address from the bridge's UUID.  This should
2590      * be unique and it will be stable between ovs-vswitchd runs.  */
2591     memcpy(br->default_ea, &br_cfg->header_.uuid, ETH_ADDR_LEN);
2592     eth_addr_mark_random(br->default_ea);
2593
2594     hmap_init(&br->ports);
2595     hmap_init(&br->ifaces);
2596     hmap_init(&br->iface_by_name);
2597     hmap_init(&br->mirrors);
2598
2599     hmap_init(&br->if_cfg_todo);
2600     list_init(&br->ofpp_garbage);
2601
2602     hmap_insert(&all_bridges, &br->node, hash_string(br->name, 0));
2603 }
2604
2605 static void
2606 bridge_destroy(struct bridge *br)
2607 {
2608     if (br) {
2609         struct mirror *mirror, *next_mirror;
2610         struct port *port, *next_port;
2611         struct if_cfg *if_cfg, *next_if_cfg;
2612         struct ofpp_garbage *garbage, *next_garbage;
2613
2614         HMAP_FOR_EACH_SAFE (port, next_port, hmap_node, &br->ports) {
2615             port_destroy(port);
2616         }
2617         HMAP_FOR_EACH_SAFE (mirror, next_mirror, hmap_node, &br->mirrors) {
2618             mirror_destroy(mirror);
2619         }
2620         HMAP_FOR_EACH_SAFE (if_cfg, next_if_cfg, hmap_node, &br->if_cfg_todo) {
2621             hmap_remove(&br->if_cfg_todo, &if_cfg->hmap_node);
2622             free(if_cfg);
2623         }
2624         LIST_FOR_EACH_SAFE (garbage, next_garbage, list_node,
2625                             &br->ofpp_garbage) {
2626             list_remove(&garbage->list_node);
2627             free(garbage);
2628         }
2629
2630         hmap_remove(&all_bridges, &br->node);
2631         ofproto_destroy(br->ofproto);
2632         hmap_destroy(&br->ifaces);
2633         hmap_destroy(&br->ports);
2634         hmap_destroy(&br->iface_by_name);
2635         hmap_destroy(&br->mirrors);
2636         hmap_destroy(&br->if_cfg_todo);
2637         free(br->name);
2638         free(br->type);
2639         free(br);
2640     }
2641 }
2642
2643 static struct bridge *
2644 bridge_lookup(const char *name)
2645 {
2646     struct bridge *br;
2647
2648     HMAP_FOR_EACH_WITH_HASH (br, node, hash_string(name, 0), &all_bridges) {
2649         if (!strcmp(br->name, name)) {
2650             return br;
2651         }
2652     }
2653     return NULL;
2654 }
2655
2656 /* Handle requests for a listing of all flows known by the OpenFlow
2657  * stack, including those normally hidden. */
2658 static void
2659 bridge_unixctl_dump_flows(struct unixctl_conn *conn, int argc OVS_UNUSED,
2660                           const char *argv[], void *aux OVS_UNUSED)
2661 {
2662     struct bridge *br;
2663     struct ds results;
2664
2665     br = bridge_lookup(argv[1]);
2666     if (!br) {
2667         unixctl_command_reply_error(conn, "Unknown bridge");
2668         return;
2669     }
2670
2671     ds_init(&results);
2672     ofproto_get_all_flows(br->ofproto, &results);
2673
2674     unixctl_command_reply(conn, ds_cstr(&results));
2675     ds_destroy(&results);
2676 }
2677
2678 /* "bridge/reconnect [BRIDGE]": makes BRIDGE drop all of its controller
2679  * connections and reconnect.  If BRIDGE is not specified, then all bridges
2680  * drop their controller connections and reconnect. */
2681 static void
2682 bridge_unixctl_reconnect(struct unixctl_conn *conn, int argc,
2683                          const char *argv[], void *aux OVS_UNUSED)
2684 {
2685     struct bridge *br;
2686     if (argc > 1) {
2687         br = bridge_lookup(argv[1]);
2688         if (!br) {
2689             unixctl_command_reply_error(conn,  "Unknown bridge");
2690             return;
2691         }
2692         ofproto_reconnect_controllers(br->ofproto);
2693     } else {
2694         HMAP_FOR_EACH (br, node, &all_bridges) {
2695             ofproto_reconnect_controllers(br->ofproto);
2696         }
2697     }
2698     unixctl_command_reply(conn, NULL);
2699 }
2700
2701 static size_t
2702 bridge_get_controllers(const struct bridge *br,
2703                        struct ovsrec_controller ***controllersp)
2704 {
2705     struct ovsrec_controller **controllers;
2706     size_t n_controllers;
2707
2708     controllers = br->cfg->controller;
2709     n_controllers = br->cfg->n_controller;
2710
2711     if (n_controllers == 1 && !strcmp(controllers[0]->target, "none")) {
2712         controllers = NULL;
2713         n_controllers = 0;
2714     }
2715
2716     if (controllersp) {
2717         *controllersp = controllers;
2718     }
2719     return n_controllers;
2720 }
2721
2722 static void
2723 bridge_queue_if_cfg(struct bridge *br,
2724                     const struct ovsrec_interface *cfg,
2725                     const struct ovsrec_port *parent)
2726 {
2727     struct if_cfg *if_cfg = xmalloc(sizeof *if_cfg);
2728
2729     if_cfg->cfg = cfg;
2730     if_cfg->parent = parent;
2731     if_cfg->ofport = iface_pick_ofport(cfg);
2732     hmap_insert(&br->if_cfg_todo, &if_cfg->hmap_node,
2733                 hash_string(if_cfg->cfg->name, 0));
2734 }
2735
2736 /* Deletes "struct port"s and "struct iface"s under 'br' which aren't
2737  * consistent with 'br->cfg'.  Updates 'br->if_cfg_queue' with interfaces which
2738  * 'br' needs to complete its configuration. */
2739 static void
2740 bridge_add_del_ports(struct bridge *br,
2741                      const unsigned long int *splinter_vlans)
2742 {
2743     struct shash_node *port_node;
2744     struct port *port, *next;
2745     struct shash new_ports;
2746     size_t i;
2747
2748     ovs_assert(hmap_is_empty(&br->if_cfg_todo));
2749
2750     /* Collect new ports. */
2751     shash_init(&new_ports);
2752     for (i = 0; i < br->cfg->n_ports; i++) {
2753         const char *name = br->cfg->ports[i]->name;
2754         if (!shash_add_once(&new_ports, name, br->cfg->ports[i])) {
2755             VLOG_WARN("bridge %s: %s specified twice as bridge port",
2756                       br->name, name);
2757         }
2758     }
2759     if (bridge_get_controllers(br, NULL)
2760         && !shash_find(&new_ports, br->name)) {
2761         VLOG_WARN("bridge %s: no port named %s, synthesizing one",
2762                   br->name, br->name);
2763
2764         ovsrec_interface_init(&br->synth_local_iface);
2765         ovsrec_port_init(&br->synth_local_port);
2766
2767         br->synth_local_port.interfaces = &br->synth_local_ifacep;
2768         br->synth_local_port.n_interfaces = 1;
2769         br->synth_local_port.name = br->name;
2770
2771         br->synth_local_iface.name = br->name;
2772         br->synth_local_iface.type = "internal";
2773
2774         br->synth_local_ifacep = &br->synth_local_iface;
2775
2776         shash_add(&new_ports, br->name, &br->synth_local_port);
2777     }
2778
2779     if (splinter_vlans) {
2780         add_vlan_splinter_ports(br, splinter_vlans, &new_ports);
2781     }
2782
2783     /* Get rid of deleted ports.
2784      * Get rid of deleted interfaces on ports that still exist. */
2785     HMAP_FOR_EACH_SAFE (port, next, hmap_node, &br->ports) {
2786         port->cfg = shash_find_data(&new_ports, port->name);
2787         if (!port->cfg) {
2788             port_destroy(port);
2789         } else {
2790             port_del_ifaces(port);
2791         }
2792     }
2793
2794     /* Update iface->cfg and iface->type in interfaces that still exist.
2795      * Add new interfaces to creation queue. */
2796     SHASH_FOR_EACH (port_node, &new_ports) {
2797         const struct ovsrec_port *port = port_node->data;
2798         size_t i;
2799
2800         for (i = 0; i < port->n_interfaces; i++) {
2801             const struct ovsrec_interface *cfg = port->interfaces[i];
2802             struct iface *iface = iface_lookup(br, cfg->name);
2803             const char *type = iface_get_type(cfg, br->cfg);
2804
2805             if (iface) {
2806                 iface->cfg = cfg;
2807                 iface->type = type;
2808             } else if (!strcmp(type, "null")) {
2809                 VLOG_WARN_ONCE("%s: The null interface type is deprecated and"
2810                                " may be removed in February 2013. Please email"
2811                                " dev@openvswitch.org with concerns.",
2812                                cfg->name);
2813             } else {
2814                 bridge_queue_if_cfg(br, cfg, port);
2815             }
2816         }
2817     }
2818
2819     shash_destroy(&new_ports);
2820 }
2821
2822 /* Initializes 'oc' appropriately as a management service controller for
2823  * 'br'.
2824  *
2825  * The caller must free oc->target when it is no longer needed. */
2826 static void
2827 bridge_ofproto_controller_for_mgmt(const struct bridge *br,
2828                                    struct ofproto_controller *oc)
2829 {
2830     oc->target = xasprintf("punix:%s/%s.mgmt", ovs_rundir(), br->name);
2831     oc->max_backoff = 0;
2832     oc->probe_interval = 60;
2833     oc->band = OFPROTO_OUT_OF_BAND;
2834     oc->rate_limit = 0;
2835     oc->burst_limit = 0;
2836     oc->enable_async_msgs = true;
2837 }
2838
2839 /* Converts ovsrec_controller 'c' into an ofproto_controller in 'oc'.  */
2840 static void
2841 bridge_ofproto_controller_from_ovsrec(const struct ovsrec_controller *c,
2842                                       struct ofproto_controller *oc)
2843 {
2844     int dscp;
2845
2846     oc->target = c->target;
2847     oc->max_backoff = c->max_backoff ? *c->max_backoff / 1000 : 8;
2848     oc->probe_interval = c->inactivity_probe ? *c->inactivity_probe / 1000 : 5;
2849     oc->band = (!c->connection_mode || !strcmp(c->connection_mode, "in-band")
2850                 ? OFPROTO_IN_BAND : OFPROTO_OUT_OF_BAND);
2851     oc->rate_limit = c->controller_rate_limit ? *c->controller_rate_limit : 0;
2852     oc->burst_limit = (c->controller_burst_limit
2853                        ? *c->controller_burst_limit : 0);
2854     oc->enable_async_msgs = (!c->enable_async_messages
2855                              || *c->enable_async_messages);
2856     dscp = smap_get_int(&c->other_config, "dscp", DSCP_DEFAULT);
2857     if (dscp < 0 || dscp > 63) {
2858         dscp = DSCP_DEFAULT;
2859     }
2860     oc->dscp = dscp;
2861 }
2862
2863 /* Configures the IP stack for 'br''s local interface properly according to the
2864  * configuration in 'c'.  */
2865 static void
2866 bridge_configure_local_iface_netdev(struct bridge *br,
2867                                     struct ovsrec_controller *c)
2868 {
2869     struct netdev *netdev;
2870     struct in_addr mask, gateway;
2871
2872     struct iface *local_iface;
2873     struct in_addr ip;
2874
2875     /* If there's no local interface or no IP address, give up. */
2876     local_iface = iface_from_ofp_port(br, OFPP_LOCAL);
2877     if (!local_iface || !c->local_ip || !inet_aton(c->local_ip, &ip)) {
2878         return;
2879     }
2880
2881     /* Bring up the local interface. */
2882     netdev = local_iface->netdev;
2883     netdev_turn_flags_on(netdev, NETDEV_UP, true);
2884
2885     /* Configure the IP address and netmask. */
2886     if (!c->local_netmask
2887         || !inet_aton(c->local_netmask, &mask)
2888         || !mask.s_addr) {
2889         mask.s_addr = guess_netmask(ip.s_addr);
2890     }
2891     if (!netdev_set_in4(netdev, ip, mask)) {
2892         VLOG_INFO("bridge %s: configured IP address "IP_FMT", netmask "IP_FMT,
2893                   br->name, IP_ARGS(ip.s_addr), IP_ARGS(mask.s_addr));
2894     }
2895
2896     /* Configure the default gateway. */
2897     if (c->local_gateway
2898         && inet_aton(c->local_gateway, &gateway)
2899         && gateway.s_addr) {
2900         if (!netdev_add_router(netdev, gateway)) {
2901             VLOG_INFO("bridge %s: configured gateway "IP_FMT,
2902                       br->name, IP_ARGS(gateway.s_addr));
2903         }
2904     }
2905 }
2906
2907 /* Returns true if 'a' and 'b' are the same except that any number of slashes
2908  * in either string are treated as equal to any number of slashes in the other,
2909  * e.g. "x///y" is equal to "x/y".
2910  *
2911  * Also, if 'b_stoplen' bytes from 'b' are found to be equal to corresponding
2912  * bytes from 'a', the function considers this success.  Specify 'b_stoplen' as
2913  * SIZE_MAX to compare all of 'a' to all of 'b' rather than just a prefix of
2914  * 'b' against a prefix of 'a'.
2915  */
2916 static bool
2917 equal_pathnames(const char *a, const char *b, size_t b_stoplen)
2918 {
2919     const char *b_start = b;
2920     for (;;) {
2921         if (b - b_start >= b_stoplen) {
2922             return true;
2923         } else if (*a != *b) {
2924             return false;
2925         } else if (*a == '/') {
2926             a += strspn(a, "/");
2927             b += strspn(b, "/");
2928         } else if (*a == '\0') {
2929             return true;
2930         } else {
2931             a++;
2932             b++;
2933         }
2934     }
2935 }
2936
2937 static void
2938 bridge_configure_remotes(struct bridge *br,
2939                          const struct sockaddr_in *managers, size_t n_managers)
2940 {
2941     bool disable_in_band;
2942
2943     struct ovsrec_controller **controllers;
2944     size_t n_controllers;
2945
2946     enum ofproto_fail_mode fail_mode;
2947
2948     struct ofproto_controller *ocs;
2949     size_t n_ocs;
2950     size_t i;
2951
2952     /* Check if we should disable in-band control on this bridge. */
2953     disable_in_band = smap_get_bool(&br->cfg->other_config, "disable-in-band",
2954                                     false);
2955
2956     /* Set OpenFlow queue ID for in-band control. */
2957     ofproto_set_in_band_queue(br->ofproto,
2958                               smap_get_int(&br->cfg->other_config,
2959                                            "in-band-queue", -1));
2960
2961     if (disable_in_band) {
2962         ofproto_set_extra_in_band_remotes(br->ofproto, NULL, 0);
2963     } else {
2964         ofproto_set_extra_in_band_remotes(br->ofproto, managers, n_managers);
2965     }
2966
2967     n_controllers = bridge_get_controllers(br, &controllers);
2968
2969     ocs = xmalloc((n_controllers + 1) * sizeof *ocs);
2970     n_ocs = 0;
2971
2972     bridge_ofproto_controller_for_mgmt(br, &ocs[n_ocs++]);
2973     for (i = 0; i < n_controllers; i++) {
2974         struct ovsrec_controller *c = controllers[i];
2975
2976         if (!strncmp(c->target, "punix:", 6)
2977             || !strncmp(c->target, "unix:", 5)) {
2978             static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
2979             char *whitelist;
2980
2981             if (!strncmp(c->target, "unix:", 5)) {
2982                 /* Connect to a listening socket */
2983                 whitelist = xasprintf("unix:%s/", ovs_rundir());
2984                 if (strchr(c->target, '/') &&
2985                    !equal_pathnames(c->target, whitelist,
2986                      strlen(whitelist))) {
2987                     /* Absolute path specified, but not in ovs_rundir */
2988                     VLOG_ERR_RL(&rl, "bridge %s: Not connecting to socket "
2989                                   "controller \"%s\" due to possibility for "
2990                                   "remote exploit.  Instead, specify socket "
2991                                   "in whitelisted \"%s\" or connect to "
2992                                   "\"unix:%s/%s.mgmt\" (which is always "
2993                                   "available without special configuration).",
2994                                   br->name, c->target, whitelist,
2995                                   ovs_rundir(), br->name);
2996                     free(whitelist);
2997                     continue;
2998                 }
2999             } else {
3000                whitelist = xasprintf("punix:%s/%s.controller",
3001                                      ovs_rundir(), br->name);
3002                if (!equal_pathnames(c->target, whitelist, SIZE_MAX)) {
3003                    /* Prevent remote ovsdb-server users from accessing
3004                     * arbitrary Unix domain sockets and overwriting arbitrary
3005                     * local files. */
3006                    VLOG_ERR_RL(&rl, "bridge %s: Not adding Unix domain socket "
3007                                   "controller \"%s\" due to possibility of "
3008                                   "overwriting local files. Instead, specify "
3009                                   "whitelisted \"%s\" or connect to "
3010                                   "\"unix:%s/%s.mgmt\" (which is always "
3011                                   "available without special configuration).",
3012                                   br->name, c->target, whitelist,
3013                                   ovs_rundir(), br->name);
3014                    free(whitelist);
3015                    continue;
3016                }
3017             }
3018
3019             free(whitelist);
3020         }
3021
3022         bridge_configure_local_iface_netdev(br, c);
3023         bridge_ofproto_controller_from_ovsrec(c, &ocs[n_ocs]);
3024         if (disable_in_band) {
3025             ocs[n_ocs].band = OFPROTO_OUT_OF_BAND;
3026         }
3027         n_ocs++;
3028     }
3029
3030     ofproto_set_controllers(br->ofproto, ocs, n_ocs,
3031                             bridge_get_allowed_versions(br));
3032     free(ocs[0].target); /* From bridge_ofproto_controller_for_mgmt(). */
3033     free(ocs);
3034
3035     /* Set the fail-mode. */
3036     fail_mode = !br->cfg->fail_mode
3037                 || !strcmp(br->cfg->fail_mode, "standalone")
3038                     ? OFPROTO_FAIL_STANDALONE
3039                     : OFPROTO_FAIL_SECURE;
3040     ofproto_set_fail_mode(br->ofproto, fail_mode);
3041
3042     /* Configure OpenFlow controller connection snooping. */
3043     if (!ofproto_has_snoops(br->ofproto)) {
3044         struct sset snoops;
3045
3046         sset_init(&snoops);
3047         sset_add_and_free(&snoops, xasprintf("punix:%s/%s.snoop",
3048                                              ovs_rundir(), br->name));
3049         ofproto_set_snoops(br->ofproto, &snoops);
3050         sset_destroy(&snoops);
3051     }
3052 }
3053
3054 static void
3055 bridge_configure_tables(struct bridge *br)
3056 {
3057     static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
3058     int n_tables;
3059     int i, j;
3060
3061     n_tables = ofproto_get_n_tables(br->ofproto);
3062     j = 0;
3063     for (i = 0; i < n_tables; i++) {
3064         struct ofproto_table_settings s;
3065
3066         s.name = NULL;
3067         s.max_flows = UINT_MAX;
3068         s.groups = NULL;
3069         s.n_groups = 0;
3070
3071         if (j < br->cfg->n_flow_tables && i == br->cfg->key_flow_tables[j]) {
3072             struct ovsrec_flow_table *cfg = br->cfg->value_flow_tables[j++];
3073
3074             s.name = cfg->name;
3075             if (cfg->n_flow_limit && *cfg->flow_limit < UINT_MAX) {
3076                 s.max_flows = *cfg->flow_limit;
3077             }
3078             if (cfg->overflow_policy
3079                 && !strcmp(cfg->overflow_policy, "evict")) {
3080                 size_t k;
3081
3082                 s.groups = xmalloc(cfg->n_groups * sizeof *s.groups);
3083                 for (k = 0; k < cfg->n_groups; k++) {
3084                     const char *string = cfg->groups[k];
3085                     char *msg;
3086
3087                     msg = mf_parse_subfield__(&s.groups[k], &string);
3088                     if (msg) {
3089                         VLOG_WARN_RL(&rl, "bridge %s table %d: error parsing "
3090                                      "'groups' (%s)", br->name, i, msg);
3091                         free(msg);
3092                     } else if (*string) {
3093                         VLOG_WARN_RL(&rl, "bridge %s table %d: 'groups' "
3094                                      "element '%s' contains trailing garbage",
3095                                      br->name, i, cfg->groups[k]);
3096                     } else {
3097                         s.n_groups++;
3098                     }
3099                 }
3100             }
3101         }
3102
3103         ofproto_configure_table(br->ofproto, i, &s);
3104
3105         free(s.groups);
3106     }
3107     for (; j < br->cfg->n_flow_tables; j++) {
3108         VLOG_WARN_RL(&rl, "bridge %s: ignoring configuration for flow table "
3109                      "%"PRId64" not supported by this datapath", br->name,
3110                      br->cfg->key_flow_tables[j]);
3111     }
3112 }
3113
3114 static void
3115 bridge_configure_dp_desc(struct bridge *br)
3116 {
3117     ofproto_set_dp_desc(br->ofproto,
3118                         smap_get(&br->cfg->other_config, "dp-desc"));
3119 }
3120 \f
3121 /* Port functions. */
3122
3123 static struct port *
3124 port_create(struct bridge *br, const struct ovsrec_port *cfg)
3125 {
3126     struct port *port;
3127
3128     port = xzalloc(sizeof *port);
3129     port->bridge = br;
3130     port->name = xstrdup(cfg->name);
3131     port->cfg = cfg;
3132     list_init(&port->ifaces);
3133
3134     hmap_insert(&br->ports, &port->hmap_node, hash_string(port->name, 0));
3135     return port;
3136 }
3137
3138 /* Deletes interfaces from 'port' that are no longer configured for it. */
3139 static void
3140 port_del_ifaces(struct port *port)
3141 {
3142     struct iface *iface, *next;
3143     struct sset new_ifaces;
3144     size_t i;
3145
3146     /* Collect list of new interfaces. */
3147     sset_init(&new_ifaces);
3148     for (i = 0; i < port->cfg->n_interfaces; i++) {
3149         const char *name = port->cfg->interfaces[i]->name;
3150         const char *type = port->cfg->interfaces[i]->type;
3151         if (strcmp(type, "null")) {
3152             sset_add(&new_ifaces, name);
3153         }
3154     }
3155
3156     /* Get rid of deleted interfaces. */
3157     LIST_FOR_EACH_SAFE (iface, next, port_elem, &port->ifaces) {
3158         if (!sset_contains(&new_ifaces, iface->name)) {
3159             iface_destroy(iface);
3160         }
3161     }
3162
3163     sset_destroy(&new_ifaces);
3164 }
3165
3166 static void
3167 port_destroy(struct port *port)
3168 {
3169     if (port) {
3170         struct bridge *br = port->bridge;
3171         struct iface *iface, *next;
3172
3173         if (br->ofproto) {
3174             ofproto_bundle_unregister(br->ofproto, port);
3175         }
3176
3177         LIST_FOR_EACH_SAFE (iface, next, port_elem, &port->ifaces) {
3178             iface_destroy(iface);
3179         }
3180
3181         hmap_remove(&br->ports, &port->hmap_node);
3182         free(port->name);
3183         free(port);
3184     }
3185 }
3186
3187 static struct port *
3188 port_lookup(const struct bridge *br, const char *name)
3189 {
3190     struct port *port;
3191
3192     HMAP_FOR_EACH_WITH_HASH (port, hmap_node, hash_string(name, 0),
3193                              &br->ports) {
3194         if (!strcmp(port->name, name)) {
3195             return port;
3196         }
3197     }
3198     return NULL;
3199 }
3200
3201 static bool
3202 enable_lacp(struct port *port, bool *activep)
3203 {
3204     if (!port->cfg->lacp) {
3205         /* XXX when LACP implementation has been sufficiently tested, enable by
3206          * default and make active on bonded ports. */
3207         return false;
3208     } else if (!strcmp(port->cfg->lacp, "off")) {
3209         return false;
3210     } else if (!strcmp(port->cfg->lacp, "active")) {
3211         *activep = true;
3212         return true;
3213     } else if (!strcmp(port->cfg->lacp, "passive")) {
3214         *activep = false;
3215         return true;
3216     } else {
3217         VLOG_WARN("port %s: unknown LACP mode %s",
3218                   port->name, port->cfg->lacp);
3219         return false;
3220     }
3221 }
3222
3223 static struct lacp_settings *
3224 port_configure_lacp(struct port *port, struct lacp_settings *s)
3225 {
3226     const char *lacp_time, *system_id;
3227     int priority;
3228
3229     if (!enable_lacp(port, &s->active)) {
3230         return NULL;
3231     }
3232
3233     s->name = port->name;
3234
3235     system_id = smap_get(&port->cfg->other_config, "lacp-system-id");
3236     if (system_id) {
3237         if (sscanf(system_id, ETH_ADDR_SCAN_FMT,
3238                    ETH_ADDR_SCAN_ARGS(s->id)) != ETH_ADDR_SCAN_COUNT) {
3239             VLOG_WARN("port %s: LACP system ID (%s) must be an Ethernet"
3240                       " address.", port->name, system_id);
3241             return NULL;
3242         }
3243     } else {
3244         memcpy(s->id, port->bridge->ea, ETH_ADDR_LEN);
3245     }
3246
3247     if (eth_addr_is_zero(s->id)) {
3248         VLOG_WARN("port %s: Invalid zero LACP system ID.", port->name);
3249         return NULL;
3250     }
3251
3252     /* Prefer bondable links if unspecified. */
3253     priority = smap_get_int(&port->cfg->other_config, "lacp-system-priority",
3254                             0);
3255     s->priority = (priority > 0 && priority <= UINT16_MAX
3256                    ? priority
3257                    : UINT16_MAX - !list_is_short(&port->ifaces));
3258
3259     lacp_time = smap_get(&port->cfg->other_config, "lacp-time");
3260     s->fast = lacp_time && !strcasecmp(lacp_time, "fast");
3261     return s;
3262 }
3263
3264 static void
3265 iface_configure_lacp(struct iface *iface, struct lacp_slave_settings *s)
3266 {
3267     int priority, portid, key;
3268
3269     portid = smap_get_int(&iface->cfg->other_config, "lacp-port-id", 0);
3270     priority = smap_get_int(&iface->cfg->other_config, "lacp-port-priority",
3271                             0);
3272     key = smap_get_int(&iface->cfg->other_config, "lacp-aggregation-key", 0);
3273
3274     if (portid <= 0 || portid > UINT16_MAX) {
3275         portid = iface->ofp_port;
3276     }
3277
3278     if (priority <= 0 || priority > UINT16_MAX) {
3279         priority = UINT16_MAX;
3280     }
3281
3282     if (key < 0 || key > UINT16_MAX) {
3283         key = 0;
3284     }
3285
3286     s->name = iface->name;
3287     s->id = portid;
3288     s->priority = priority;
3289     s->key = key;
3290 }
3291
3292 static void
3293 port_configure_bond(struct port *port, struct bond_settings *s)
3294 {
3295     const char *detect_s;
3296     struct iface *iface;
3297     int miimon_interval;
3298
3299     s->name = port->name;
3300     s->balance = BM_AB;
3301     if (port->cfg->bond_mode) {
3302         if (!bond_mode_from_string(&s->balance, port->cfg->bond_mode)) {
3303             VLOG_WARN("port %s: unknown bond_mode %s, defaulting to %s",
3304                       port->name, port->cfg->bond_mode,
3305                       bond_mode_to_string(s->balance));
3306         }
3307     } else {
3308         static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 1);
3309
3310         /* XXX: Post version 1.5.*, the default bond_mode changed from SLB to
3311          * active-backup. At some point we should remove this warning. */
3312         VLOG_WARN_RL(&rl, "port %s: Using the default bond_mode %s. Note that"
3313                      " in previous versions, the default bond_mode was"
3314                      " balance-slb", port->name,
3315                      bond_mode_to_string(s->balance));
3316     }
3317     if (s->balance == BM_SLB && port->bridge->cfg->n_flood_vlans) {
3318         VLOG_WARN("port %s: SLB bonds are incompatible with flood_vlans, "
3319                   "please use another bond type or disable flood_vlans",
3320                   port->name);
3321     }
3322
3323     miimon_interval = smap_get_int(&port->cfg->other_config,
3324                                    "bond-miimon-interval", 0);
3325     if (miimon_interval <= 0) {
3326         miimon_interval = 200;
3327     }
3328
3329     detect_s = smap_get(&port->cfg->other_config, "bond-detect-mode");
3330     if (!detect_s || !strcmp(detect_s, "carrier")) {
3331         miimon_interval = 0;
3332     } else if (strcmp(detect_s, "miimon")) {
3333         VLOG_WARN("port %s: unsupported bond-detect-mode %s, "
3334                   "defaulting to carrier", port->name, detect_s);
3335         miimon_interval = 0;
3336     }
3337
3338     s->up_delay = MAX(0, port->cfg->bond_updelay);
3339     s->down_delay = MAX(0, port->cfg->bond_downdelay);
3340     s->basis = smap_get_int(&port->cfg->other_config, "bond-hash-basis", 0);
3341     s->rebalance_interval = smap_get_int(&port->cfg->other_config,
3342                                            "bond-rebalance-interval", 10000);
3343     if (s->rebalance_interval && s->rebalance_interval < 1000) {
3344         s->rebalance_interval = 1000;
3345     }
3346
3347     s->fake_iface = port->cfg->bond_fake_iface;
3348
3349     LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
3350         netdev_set_miimon_interval(iface->netdev, miimon_interval);
3351     }
3352 }
3353
3354 /* Returns true if 'port' is synthetic, that is, if we constructed it locally
3355  * instead of obtaining it from the database. */
3356 static bool
3357 port_is_synthetic(const struct port *port)
3358 {
3359     return ovsdb_idl_row_is_synthetic(&port->cfg->header_);
3360 }
3361 \f
3362 /* Interface functions. */
3363
3364 static bool
3365 iface_is_internal(const struct ovsrec_interface *iface,
3366                   const struct ovsrec_bridge *br)
3367 {
3368     /* The local port and "internal" ports are always "internal". */
3369     return !strcmp(iface->type, "internal") || !strcmp(iface->name, br->name);
3370 }
3371
3372 /* Returns the correct network device type for interface 'iface' in bridge
3373  * 'br'. */
3374 static const char *
3375 iface_get_type(const struct ovsrec_interface *iface,
3376                const struct ovsrec_bridge *br)
3377 {
3378     const char *type;
3379
3380     /* The local port always has type "internal".  Other ports take
3381      * their type from the database and default to "system" if none is
3382      * specified. */
3383     if (iface_is_internal(iface, br)) {
3384         type = "internal";
3385     } else {
3386         type = iface->type[0] ? iface->type : "system";
3387     }
3388
3389     return ofproto_port_open_type(br->datapath_type, type);
3390 }
3391
3392 static void
3393 iface_destroy(struct iface *iface)
3394 {
3395     if (iface) {
3396         struct port *port = iface->port;
3397         struct bridge *br = port->bridge;
3398
3399         if (br->ofproto && iface->ofp_port >= 0) {
3400             ofproto_port_unregister(br->ofproto, iface->ofp_port);
3401         }
3402
3403         if (iface->ofp_port >= 0) {
3404             hmap_remove(&br->ifaces, &iface->ofp_port_node);
3405         }
3406
3407         list_remove(&iface->port_elem);
3408         hmap_remove(&br->iface_by_name, &iface->name_node);
3409
3410         netdev_close(iface->netdev);
3411
3412         free(iface->name);
3413         free(iface);
3414     }
3415 }
3416
3417 static struct iface *
3418 iface_lookup(const struct bridge *br, const char *name)
3419 {
3420     struct iface *iface;
3421
3422     HMAP_FOR_EACH_WITH_HASH (iface, name_node, hash_string(name, 0),
3423                              &br->iface_by_name) {
3424         if (!strcmp(iface->name, name)) {
3425             return iface;
3426         }
3427     }
3428
3429     return NULL;
3430 }
3431
3432 static struct iface *
3433 iface_find(const char *name)
3434 {
3435     const struct bridge *br;
3436
3437     HMAP_FOR_EACH (br, node, &all_bridges) {
3438         struct iface *iface = iface_lookup(br, name);
3439
3440         if (iface) {
3441             return iface;
3442         }
3443     }
3444     return NULL;
3445 }
3446
3447 static struct if_cfg *
3448 if_cfg_lookup(const struct bridge *br, const char *name)
3449 {
3450     struct if_cfg *if_cfg;
3451
3452     HMAP_FOR_EACH_WITH_HASH (if_cfg, hmap_node, hash_string(name, 0),
3453                              &br->if_cfg_todo) {
3454         if (!strcmp(if_cfg->cfg->name, name)) {
3455             return if_cfg;
3456         }
3457     }
3458
3459     return NULL;
3460 }
3461
3462 static struct iface *
3463 iface_from_ofp_port(const struct bridge *br, uint16_t ofp_port)
3464 {
3465     struct iface *iface;
3466
3467     HMAP_FOR_EACH_IN_BUCKET (iface, ofp_port_node,
3468                              hash_int(ofp_port, 0), &br->ifaces) {
3469         if (iface->ofp_port == ofp_port) {
3470             return iface;
3471         }
3472     }
3473     return NULL;
3474 }
3475
3476 /* Set Ethernet address of 'iface', if one is specified in the configuration
3477  * file. */
3478 static void
3479 iface_set_mac(struct iface *iface)
3480 {
3481     uint8_t ea[ETH_ADDR_LEN];
3482
3483     if (!strcmp(iface->type, "internal")
3484         && iface->cfg->mac && eth_addr_from_string(iface->cfg->mac, ea)) {
3485         if (iface->ofp_port == OFPP_LOCAL) {
3486             VLOG_ERR("interface %s: ignoring mac in Interface record "
3487                      "(use Bridge record to set local port's mac)",
3488                      iface->name);
3489         } else if (eth_addr_is_multicast(ea)) {
3490             VLOG_ERR("interface %s: cannot set MAC to multicast address",
3491                      iface->name);
3492         } else {
3493             int error = netdev_set_etheraddr(iface->netdev, ea);
3494             if (error) {
3495                 VLOG_ERR("interface %s: setting MAC failed (%s)",
3496                          iface->name, strerror(error));
3497             }
3498         }
3499     }
3500 }
3501
3502 /* Sets the ofport column of 'if_cfg' to 'ofport'. */
3503 static void
3504 iface_set_ofport(const struct ovsrec_interface *if_cfg, int64_t ofport)
3505 {
3506     if (if_cfg && !ovsdb_idl_row_is_synthetic(&if_cfg->header_)) {
3507         ovsrec_interface_set_ofport(if_cfg, &ofport, 1);
3508     }
3509 }
3510
3511 /* Clears all of the fields in 'if_cfg' that indicate interface status, and
3512  * sets the "ofport" field to -1.
3513  *
3514  * This is appropriate when 'if_cfg''s interface cannot be created or is
3515  * otherwise invalid. */
3516 static void
3517 iface_clear_db_record(const struct ovsrec_interface *if_cfg)
3518 {
3519     if (!ovsdb_idl_row_is_synthetic(&if_cfg->header_)) {
3520         ovsrec_interface_set_status(if_cfg, NULL);
3521         ovsrec_interface_set_admin_state(if_cfg, NULL);
3522         ovsrec_interface_set_duplex(if_cfg, NULL);
3523         ovsrec_interface_set_link_speed(if_cfg, NULL, 0);
3524         ovsrec_interface_set_link_state(if_cfg, NULL);
3525         ovsrec_interface_set_mac_in_use(if_cfg, NULL);
3526         ovsrec_interface_set_mtu(if_cfg, NULL, 0);
3527         ovsrec_interface_set_cfm_fault(if_cfg, NULL, 0);
3528         ovsrec_interface_set_cfm_fault_status(if_cfg, NULL, 0);
3529         ovsrec_interface_set_cfm_remote_mpids(if_cfg, NULL, 0);
3530         ovsrec_interface_set_lacp_current(if_cfg, NULL, 0);
3531         ovsrec_interface_set_statistics(if_cfg, NULL, NULL, 0);
3532     }
3533 }
3534
3535 struct iface_delete_queues_cbdata {
3536     struct netdev *netdev;
3537     const struct ovsdb_datum *queues;
3538 };
3539
3540 static bool
3541 queue_ids_include(const struct ovsdb_datum *queues, int64_t target)
3542 {
3543     union ovsdb_atom atom;
3544
3545     atom.integer = target;
3546     return ovsdb_datum_find_key(queues, &atom, OVSDB_TYPE_INTEGER) != UINT_MAX;
3547 }
3548
3549 static void
3550 iface_delete_queues(unsigned int queue_id,
3551                     const struct smap *details OVS_UNUSED, void *cbdata_)
3552 {
3553     struct iface_delete_queues_cbdata *cbdata = cbdata_;
3554
3555     if (!queue_ids_include(cbdata->queues, queue_id)) {
3556         netdev_delete_queue(cbdata->netdev, queue_id);
3557     }
3558 }
3559
3560 static void
3561 iface_configure_qos(struct iface *iface, const struct ovsrec_qos *qos)
3562 {
3563     struct ofpbuf queues_buf;
3564
3565     ofpbuf_init(&queues_buf, 0);
3566
3567     if (!qos || qos->type[0] == '\0' || qos->n_queues < 1) {
3568         netdev_set_qos(iface->netdev, NULL, NULL);
3569     } else {
3570         struct iface_delete_queues_cbdata cbdata;
3571         bool queue_zero;
3572         size_t i;
3573
3574         /* Configure top-level Qos for 'iface'. */
3575         netdev_set_qos(iface->netdev, qos->type, &qos->other_config);
3576
3577         /* Deconfigure queues that were deleted. */
3578         cbdata.netdev = iface->netdev;
3579         cbdata.queues = ovsrec_qos_get_queues(qos, OVSDB_TYPE_INTEGER,
3580                                               OVSDB_TYPE_UUID);
3581         netdev_dump_queues(iface->netdev, iface_delete_queues, &cbdata);
3582
3583         /* Configure queues for 'iface'. */
3584         queue_zero = false;
3585         for (i = 0; i < qos->n_queues; i++) {
3586             const struct ovsrec_queue *queue = qos->value_queues[i];
3587             unsigned int queue_id = qos->key_queues[i];
3588
3589             if (queue_id == 0) {
3590                 queue_zero = true;
3591             }
3592
3593             if (queue->n_dscp == 1) {
3594                 struct ofproto_port_queue *port_queue;
3595
3596                 port_queue = ofpbuf_put_uninit(&queues_buf,
3597                                                sizeof *port_queue);
3598                 port_queue->queue = queue_id;
3599                 port_queue->dscp = queue->dscp[0];
3600             }
3601
3602             netdev_set_queue(iface->netdev, queue_id, &queue->other_config);
3603         }
3604         if (!queue_zero) {
3605             struct smap details;
3606
3607             smap_init(&details);
3608             netdev_set_queue(iface->netdev, 0, &details);
3609             smap_destroy(&details);
3610         }
3611     }
3612
3613     if (iface->ofp_port >= 0) {
3614         const struct ofproto_port_queue *port_queues = queues_buf.data;
3615         size_t n_queues = queues_buf.size / sizeof *port_queues;
3616
3617         ofproto_port_set_queues(iface->port->bridge->ofproto, iface->ofp_port,
3618                                 port_queues, n_queues);
3619     }
3620
3621     netdev_set_policing(iface->netdev,
3622                         iface->cfg->ingress_policing_rate,
3623                         iface->cfg->ingress_policing_burst);
3624
3625     ofpbuf_uninit(&queues_buf);
3626 }
3627
3628 static void
3629 iface_configure_cfm(struct iface *iface)
3630 {
3631     const struct ovsrec_interface *cfg = iface->cfg;
3632     const char *opstate_str;
3633     const char *cfm_ccm_vlan;
3634     struct cfm_settings s;
3635     struct smap netdev_args;
3636
3637     if (!cfg->n_cfm_mpid) {
3638         ofproto_port_clear_cfm(iface->port->bridge->ofproto, iface->ofp_port);
3639         return;
3640     }
3641
3642     s.check_tnl_key = false;
3643     smap_init(&netdev_args);
3644     if (!netdev_get_config(iface->netdev, &netdev_args)) {
3645         const char *key = smap_get(&netdev_args, "key");
3646         const char *in_key = smap_get(&netdev_args, "in_key");
3647
3648         s.check_tnl_key = (key && !strcmp(key, "flow"))
3649                            || (in_key && !strcmp(in_key, "flow"));
3650     }
3651     smap_destroy(&netdev_args);
3652
3653     s.mpid = *cfg->cfm_mpid;
3654     s.interval = smap_get_int(&iface->cfg->other_config, "cfm_interval", 0);
3655     cfm_ccm_vlan = smap_get(&iface->cfg->other_config, "cfm_ccm_vlan");
3656     s.ccm_pcp = smap_get_int(&iface->cfg->other_config, "cfm_ccm_pcp", 0);
3657
3658     if (s.interval <= 0) {
3659         s.interval = 1000;
3660     }
3661
3662     if (!cfm_ccm_vlan) {
3663         s.ccm_vlan = 0;
3664     } else if (!strcasecmp("random", cfm_ccm_vlan)) {
3665         s.ccm_vlan = CFM_RANDOM_VLAN;
3666     } else {
3667         s.ccm_vlan = atoi(cfm_ccm_vlan);
3668         if (s.ccm_vlan == CFM_RANDOM_VLAN) {
3669             s.ccm_vlan = 0;
3670         }
3671     }
3672
3673     s.extended = smap_get_bool(&iface->cfg->other_config, "cfm_extended",
3674                                false);
3675
3676     opstate_str = smap_get(&iface->cfg->other_config, "cfm_opstate");
3677     s.opup = !opstate_str || !strcasecmp("up", opstate_str);
3678
3679     ofproto_port_set_cfm(iface->port->bridge->ofproto, iface->ofp_port, &s);
3680 }
3681
3682 /* Returns true if 'iface' is synthetic, that is, if we constructed it locally
3683  * instead of obtaining it from the database. */
3684 static bool
3685 iface_is_synthetic(const struct iface *iface)
3686 {
3687     return ovsdb_idl_row_is_synthetic(&iface->cfg->header_);
3688 }
3689
3690 static int64_t
3691 iface_pick_ofport(const struct ovsrec_interface *cfg)
3692 {
3693     int64_t ofport = cfg->n_ofport ? *cfg->ofport : OFPP_NONE;
3694     return cfg->n_ofport_request ? *cfg->ofport_request : ofport;
3695 }
3696
3697 \f
3698 /* Port mirroring. */
3699
3700 static struct mirror *
3701 mirror_find_by_uuid(struct bridge *br, const struct uuid *uuid)
3702 {
3703     struct mirror *m;
3704
3705     HMAP_FOR_EACH_IN_BUCKET (m, hmap_node, uuid_hash(uuid), &br->mirrors) {
3706         if (uuid_equals(uuid, &m->uuid)) {
3707             return m;
3708         }
3709     }
3710     return NULL;
3711 }
3712
3713 static void
3714 bridge_configure_mirrors(struct bridge *br)
3715 {
3716     const struct ovsdb_datum *mc;
3717     unsigned long *flood_vlans;
3718     struct mirror *m, *next;
3719     size_t i;
3720
3721     /* Get rid of deleted mirrors. */
3722     mc = ovsrec_bridge_get_mirrors(br->cfg, OVSDB_TYPE_UUID);
3723     HMAP_FOR_EACH_SAFE (m, next, hmap_node, &br->mirrors) {
3724         union ovsdb_atom atom;
3725
3726         atom.uuid = m->uuid;
3727         if (ovsdb_datum_find_key(mc, &atom, OVSDB_TYPE_UUID) == UINT_MAX) {
3728             mirror_destroy(m);
3729         }
3730     }
3731
3732     /* Add new mirrors and reconfigure existing ones. */
3733     for (i = 0; i < br->cfg->n_mirrors; i++) {
3734         const struct ovsrec_mirror *cfg = br->cfg->mirrors[i];
3735         struct mirror *m = mirror_find_by_uuid(br, &cfg->header_.uuid);
3736         if (!m) {
3737             m = mirror_create(br, cfg);
3738         }
3739         m->cfg = cfg;
3740         if (!mirror_configure(m)) {
3741             mirror_destroy(m);
3742         }
3743     }
3744
3745     /* Update flooded vlans (for RSPAN). */
3746     flood_vlans = vlan_bitmap_from_array(br->cfg->flood_vlans,
3747                                          br->cfg->n_flood_vlans);
3748     ofproto_set_flood_vlans(br->ofproto, flood_vlans);
3749     bitmap_free(flood_vlans);
3750 }
3751
3752 static struct mirror *
3753 mirror_create(struct bridge *br, const struct ovsrec_mirror *cfg)
3754 {
3755     struct mirror *m;
3756
3757     m = xzalloc(sizeof *m);
3758     m->uuid = cfg->header_.uuid;
3759     hmap_insert(&br->mirrors, &m->hmap_node, uuid_hash(&m->uuid));
3760     m->bridge = br;
3761     m->name = xstrdup(cfg->name);
3762
3763     return m;
3764 }
3765
3766 static void
3767 mirror_destroy(struct mirror *m)
3768 {
3769     if (m) {
3770         struct bridge *br = m->bridge;
3771
3772         if (br->ofproto) {
3773             ofproto_mirror_unregister(br->ofproto, m);
3774         }
3775
3776         hmap_remove(&br->mirrors, &m->hmap_node);
3777         free(m->name);
3778         free(m);
3779     }
3780 }
3781
3782 static void
3783 mirror_collect_ports(struct mirror *m,
3784                      struct ovsrec_port **in_ports, int n_in_ports,
3785                      void ***out_portsp, size_t *n_out_portsp)
3786 {
3787     void **out_ports = xmalloc(n_in_ports * sizeof *out_ports);
3788     size_t n_out_ports = 0;
3789     size_t i;
3790
3791     for (i = 0; i < n_in_ports; i++) {
3792         const char *name = in_ports[i]->name;
3793         struct port *port = port_lookup(m->bridge, name);
3794         if (port) {
3795             out_ports[n_out_ports++] = port;
3796         } else {
3797             VLOG_WARN("bridge %s: mirror %s cannot match on nonexistent "
3798                       "port %s", m->bridge->name, m->name, name);
3799         }
3800     }
3801     *out_portsp = out_ports;
3802     *n_out_portsp = n_out_ports;
3803 }
3804
3805 static bool
3806 mirror_configure(struct mirror *m)
3807 {
3808     const struct ovsrec_mirror *cfg = m->cfg;
3809     struct ofproto_mirror_settings s;
3810
3811     /* Set name. */
3812     if (strcmp(cfg->name, m->name)) {
3813         free(m->name);
3814         m->name = xstrdup(cfg->name);
3815     }
3816     s.name = m->name;
3817
3818     /* Get output port or VLAN. */
3819     if (cfg->output_port) {
3820         s.out_bundle = port_lookup(m->bridge, cfg->output_port->name);
3821         if (!s.out_bundle) {
3822             VLOG_ERR("bridge %s: mirror %s outputs to port not on bridge",
3823                      m->bridge->name, m->name);
3824             return false;
3825         }
3826         s.out_vlan = UINT16_MAX;
3827
3828         if (cfg->output_vlan) {
3829             VLOG_ERR("bridge %s: mirror %s specifies both output port and "
3830                      "output vlan; ignoring output vlan",
3831                      m->bridge->name, m->name);
3832         }
3833     } else if (cfg->output_vlan) {
3834         /* The database should prevent invalid VLAN values. */
3835         s.out_bundle = NULL;
3836         s.out_vlan = *cfg->output_vlan;
3837     } else {
3838         VLOG_ERR("bridge %s: mirror %s does not specify output; ignoring",
3839                  m->bridge->name, m->name);
3840         return false;
3841     }
3842
3843     /* Get port selection. */
3844     if (cfg->select_all) {
3845         size_t n_ports = hmap_count(&m->bridge->ports);
3846         void **ports = xmalloc(n_ports * sizeof *ports);
3847         struct port *port;
3848         size_t i;
3849
3850         i = 0;
3851         HMAP_FOR_EACH (port, hmap_node, &m->bridge->ports) {
3852             ports[i++] = port;
3853         }
3854
3855         s.srcs = ports;
3856         s.n_srcs = n_ports;
3857
3858         s.dsts = ports;
3859         s.n_dsts = n_ports;
3860     } else {
3861         /* Get ports, dropping ports that don't exist.
3862          * The IDL ensures that there are no duplicates. */
3863         mirror_collect_ports(m, cfg->select_src_port, cfg->n_select_src_port,
3864                              &s.srcs, &s.n_srcs);
3865         mirror_collect_ports(m, cfg->select_dst_port, cfg->n_select_dst_port,
3866                              &s.dsts, &s.n_dsts);
3867     }
3868
3869     /* Get VLAN selection. */
3870     s.src_vlans = vlan_bitmap_from_array(cfg->select_vlan, cfg->n_select_vlan);
3871
3872     /* Configure. */
3873     ofproto_mirror_register(m->bridge->ofproto, m, &s);
3874
3875     /* Clean up. */
3876     if (s.srcs != s.dsts) {
3877         free(s.dsts);
3878     }
3879     free(s.srcs);
3880     free(s.src_vlans);
3881
3882     return true;
3883 }
3884 \f
3885 /* Linux VLAN device support (e.g. "eth0.10" for VLAN 10.)
3886  *
3887  * This is deprecated.  It is only for compatibility with broken device drivers
3888  * in old versions of Linux that do not properly support VLANs when VLAN
3889  * devices are not used.  When broken device drivers are no longer in
3890  * widespread use, we will delete these interfaces. */
3891
3892 static struct ovsrec_port **recs;
3893 static size_t n_recs, allocated_recs;
3894
3895 /* Adds 'rec' to a list of recs that have to be destroyed when the VLAN
3896  * splinters are reconfigured. */
3897 static void
3898 register_rec(struct ovsrec_port *rec)
3899 {
3900     if (n_recs >= allocated_recs) {
3901         recs = x2nrealloc(recs, &allocated_recs, sizeof *recs);
3902     }
3903     recs[n_recs++] = rec;
3904 }
3905
3906 /* Frees all of the ports registered with register_reg(). */
3907 static void
3908 free_registered_recs(void)
3909 {
3910     size_t i;
3911
3912     for (i = 0; i < n_recs; i++) {
3913         struct ovsrec_port *port = recs[i];
3914         size_t j;
3915
3916         for (j = 0; j < port->n_interfaces; j++) {
3917             struct ovsrec_interface *iface = port->interfaces[j];
3918             free(iface->name);
3919             free(iface);
3920         }
3921
3922         smap_destroy(&port->other_config);
3923         free(port->interfaces);
3924         free(port->name);
3925         free(port->tag);
3926         free(port);
3927     }
3928     n_recs = 0;
3929 }
3930
3931 /* Returns true if VLAN splinters are enabled on 'iface_cfg', false
3932  * otherwise. */
3933 static bool
3934 vlan_splinters_is_enabled(const struct ovsrec_interface *iface_cfg)
3935 {
3936     return smap_get_bool(&iface_cfg->other_config, "enable-vlan-splinters",
3937                          false);
3938 }
3939
3940 /* Figures out the set of VLANs that are in use for the purpose of VLAN
3941  * splinters.
3942  *
3943  * If VLAN splinters are enabled on at least one interface and any VLANs are in
3944  * use, returns a 4096-bit bitmap with a 1-bit for each in-use VLAN (bits 0 and
3945  * 4095 will not be set).  The caller is responsible for freeing the bitmap,
3946  * with free().
3947  *
3948  * If VLANs splinters are not enabled on any interface or if no VLANs are in
3949  * use, returns NULL.
3950  *
3951  * Updates 'vlan_splinters_enabled_anywhere'. */
3952 static unsigned long int *
3953 collect_splinter_vlans(const struct ovsrec_open_vswitch *ovs_cfg)
3954 {
3955     unsigned long int *splinter_vlans;
3956     struct sset splinter_ifaces;
3957     const char *real_dev_name;
3958     struct shash *real_devs;
3959     struct shash_node *node;
3960     struct bridge *br;
3961     size_t i;
3962
3963     /* Free space allocated for synthesized ports and interfaces, since we're
3964      * in the process of reconstructing all of them. */
3965     free_registered_recs();
3966
3967     splinter_vlans = bitmap_allocate(4096);
3968     sset_init(&splinter_ifaces);
3969     vlan_splinters_enabled_anywhere = false;
3970     for (i = 0; i < ovs_cfg->n_bridges; i++) {
3971         struct ovsrec_bridge *br_cfg = ovs_cfg->bridges[i];
3972         size_t j;
3973
3974         for (j = 0; j < br_cfg->n_ports; j++) {
3975             struct ovsrec_port *port_cfg = br_cfg->ports[j];
3976             int k;
3977
3978             for (k = 0; k < port_cfg->n_interfaces; k++) {
3979                 struct ovsrec_interface *iface_cfg = port_cfg->interfaces[k];
3980
3981                 if (vlan_splinters_is_enabled(iface_cfg)) {
3982                     vlan_splinters_enabled_anywhere = true;
3983                     sset_add(&splinter_ifaces, iface_cfg->name);
3984                     vlan_bitmap_from_array__(port_cfg->trunks,
3985                                              port_cfg->n_trunks,
3986                                              splinter_vlans);
3987                 }
3988             }
3989
3990             if (port_cfg->tag && *port_cfg->tag > 0 && *port_cfg->tag < 4095) {
3991                 bitmap_set1(splinter_vlans, *port_cfg->tag);
3992             }
3993         }
3994     }
3995
3996     if (!vlan_splinters_enabled_anywhere) {
3997         free(splinter_vlans);
3998         sset_destroy(&splinter_ifaces);
3999         return NULL;
4000     }
4001
4002     HMAP_FOR_EACH (br, node, &all_bridges) {
4003         if (br->ofproto) {
4004             ofproto_get_vlan_usage(br->ofproto, splinter_vlans);
4005         }
4006     }
4007
4008     /* Don't allow VLANs 0 or 4095 to be splintered.  VLAN 0 should appear on
4009      * the real device.  VLAN 4095 is reserved and Linux doesn't allow a VLAN
4010      * device to be created for it. */
4011     bitmap_set0(splinter_vlans, 0);
4012     bitmap_set0(splinter_vlans, 4095);
4013
4014     /* Delete all VLAN devices that we don't need. */
4015     vlandev_refresh();
4016     real_devs = vlandev_get_real_devs();
4017     SHASH_FOR_EACH (node, real_devs) {
4018         const struct vlan_real_dev *real_dev = node->data;
4019         const struct vlan_dev *vlan_dev;
4020         bool real_dev_has_splinters;
4021
4022         real_dev_has_splinters = sset_contains(&splinter_ifaces,
4023                                                real_dev->name);
4024         HMAP_FOR_EACH (vlan_dev, hmap_node, &real_dev->vlan_devs) {
4025             if (!real_dev_has_splinters
4026                 || !bitmap_is_set(splinter_vlans, vlan_dev->vid)) {
4027                 struct netdev *netdev;
4028
4029                 if (!netdev_open(vlan_dev->name, "system", &netdev)) {
4030                     if (!netdev_get_in4(netdev, NULL, NULL) ||
4031                         !netdev_get_in6(netdev, NULL)) {
4032                         vlandev_del(vlan_dev->name);
4033                     } else {
4034                         /* It has an IP address configured, so we don't own
4035                          * it.  Don't delete it. */
4036                     }
4037                     netdev_close(netdev);
4038                 }
4039             }
4040
4041         }
4042     }
4043
4044     /* Add all VLAN devices that we need. */
4045     SSET_FOR_EACH (real_dev_name, &splinter_ifaces) {
4046         int vid;
4047
4048         BITMAP_FOR_EACH_1 (vid, 4096, splinter_vlans) {
4049             if (!vlandev_get_name(real_dev_name, vid)) {
4050                 vlandev_add(real_dev_name, vid);
4051             }
4052         }
4053     }
4054
4055     vlandev_refresh();
4056
4057     sset_destroy(&splinter_ifaces);
4058
4059     if (bitmap_scan(splinter_vlans, 0, 4096) >= 4096) {
4060         free(splinter_vlans);
4061         return NULL;
4062     }
4063     return splinter_vlans;
4064 }
4065
4066 /* Pushes the configure of VLAN splinter port 'port' (e.g. eth0.9) down to
4067  * ofproto.  */
4068 static void
4069 configure_splinter_port(struct port *port)
4070 {
4071     struct ofproto *ofproto = port->bridge->ofproto;
4072     uint16_t realdev_ofp_port;
4073     const char *realdev_name;
4074     struct iface *vlandev, *realdev;
4075
4076     ofproto_bundle_unregister(port->bridge->ofproto, port);
4077
4078     vlandev = CONTAINER_OF(list_front(&port->ifaces), struct iface,
4079                            port_elem);
4080
4081     realdev_name = smap_get(&port->cfg->other_config, "realdev");
4082     realdev = iface_lookup(port->bridge, realdev_name);
4083     realdev_ofp_port = realdev ? realdev->ofp_port : 0;
4084
4085     ofproto_port_set_realdev(ofproto, vlandev->ofp_port, realdev_ofp_port,
4086                              *port->cfg->tag);
4087 }
4088
4089 static struct ovsrec_port *
4090 synthesize_splinter_port(const char *real_dev_name,
4091                          const char *vlan_dev_name, int vid)
4092 {
4093     struct ovsrec_interface *iface;
4094     struct ovsrec_port *port;
4095
4096     iface = xmalloc(sizeof *iface);
4097     ovsrec_interface_init(iface);
4098     iface->name = xstrdup(vlan_dev_name);
4099     iface->type = "system";
4100
4101     port = xmalloc(sizeof *port);
4102     ovsrec_port_init(port);
4103     port->interfaces = xmemdup(&iface, sizeof iface);
4104     port->n_interfaces = 1;
4105     port->name = xstrdup(vlan_dev_name);
4106     port->vlan_mode = "splinter";
4107     port->tag = xmalloc(sizeof *port->tag);
4108     *port->tag = vid;
4109
4110     smap_add(&port->other_config, "realdev", real_dev_name);
4111
4112     register_rec(port);
4113     return port;
4114 }
4115
4116 /* For each interface with 'br' that has VLAN splinters enabled, adds a
4117  * corresponding ovsrec_port to 'ports' for each splinter VLAN marked with a
4118  * 1-bit in the 'splinter_vlans' bitmap. */
4119 static void
4120 add_vlan_splinter_ports(struct bridge *br,
4121                         const unsigned long int *splinter_vlans,
4122                         struct shash *ports)
4123 {
4124     size_t i;
4125
4126     /* We iterate through 'br->cfg->ports' instead of 'ports' here because
4127      * we're modifying 'ports'. */
4128     for (i = 0; i < br->cfg->n_ports; i++) {
4129         const char *name = br->cfg->ports[i]->name;
4130         struct ovsrec_port *port_cfg = shash_find_data(ports, name);
4131         size_t j;
4132
4133         for (j = 0; j < port_cfg->n_interfaces; j++) {
4134             struct ovsrec_interface *iface_cfg = port_cfg->interfaces[j];
4135
4136             if (vlan_splinters_is_enabled(iface_cfg)) {
4137                 const char *real_dev_name;
4138                 uint16_t vid;
4139
4140                 real_dev_name = iface_cfg->name;
4141                 BITMAP_FOR_EACH_1 (vid, 4096, splinter_vlans) {
4142                     const char *vlan_dev_name;
4143
4144                     vlan_dev_name = vlandev_get_name(real_dev_name, vid);
4145                     if (vlan_dev_name
4146                         && !shash_find(ports, vlan_dev_name)) {
4147                         shash_add(ports, vlan_dev_name,
4148                                   synthesize_splinter_port(
4149                                       real_dev_name, vlan_dev_name, vid));
4150                     }
4151                 }
4152             }
4153         }
4154     }
4155 }
4156
4157 static void
4158 mirror_refresh_stats(struct mirror *m)
4159 {
4160     struct ofproto *ofproto = m->bridge->ofproto;
4161     uint64_t tx_packets, tx_bytes;
4162     char *keys[2];
4163     int64_t values[2];
4164     size_t stat_cnt = 0;
4165
4166     if (ofproto_mirror_get_stats(ofproto, m, &tx_packets, &tx_bytes)) {
4167         ovsrec_mirror_set_statistics(m->cfg, NULL, NULL, 0);
4168         return;
4169     }
4170
4171     if (tx_packets != UINT64_MAX) {
4172         keys[stat_cnt] = "tx_packets";
4173         values[stat_cnt] = tx_packets;
4174         stat_cnt++;
4175     }
4176     if (tx_bytes != UINT64_MAX) {
4177         keys[stat_cnt] = "tx_bytes";
4178         values[stat_cnt] = tx_bytes;
4179         stat_cnt++;
4180     }
4181
4182     ovsrec_mirror_set_statistics(m->cfg, keys, values, stat_cnt);
4183 }