lib: Utilize smaps in the idl.
[sliver-openvswitch.git] / vswitchd / bridge.c
1 /* Copyright (c) 2008, 2009, 2010, 2011, 2012 Nicira, Inc.
2  *
3  * Licensed under the Apache License, Version 2.0 (the "License");
4  * you may not use this file except in compliance with the License.
5  * You may obtain a copy of the License at:
6  *
7  *     http://www.apache.org/licenses/LICENSE-2.0
8  *
9  * Unless required by applicable law or agreed to in writing, software
10  * distributed under the License is distributed on an "AS IS" BASIS,
11  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
12  * See the License for the specific language governing permissions and
13  * limitations under the License.
14  */
15
16 #include <config.h>
17 #include "bridge.h"
18 #include <assert.h>
19 #include <errno.h>
20 #include <inttypes.h>
21 #include <stdlib.h>
22 #include "bitmap.h"
23 #include "bond.h"
24 #include "cfm.h"
25 #include "coverage.h"
26 #include "daemon.h"
27 #include "dirs.h"
28 #include "dynamic-string.h"
29 #include "hash.h"
30 #include "hmap.h"
31 #include "hmapx.h"
32 #include "jsonrpc.h"
33 #include "lacp.h"
34 #include "list.h"
35 #include "mac-learning.h"
36 #include "meta-flow.h"
37 #include "netdev.h"
38 #include "ofp-print.h"
39 #include "ofpbuf.h"
40 #include "ofproto/ofproto.h"
41 #include "poll-loop.h"
42 #include "sha1.h"
43 #include "shash.h"
44 #include "smap.h"
45 #include "socket-util.h"
46 #include "stream.h"
47 #include "stream-ssl.h"
48 #include "sset.h"
49 #include "system-stats.h"
50 #include "timeval.h"
51 #include "util.h"
52 #include "unixctl.h"
53 #include "vlandev.h"
54 #include "lib/vswitch-idl.h"
55 #include "xenserver.h"
56 #include "vlog.h"
57 #include "sflow_api.h"
58 #include "vlan-bitmap.h"
59
60 VLOG_DEFINE_THIS_MODULE(bridge);
61
62 COVERAGE_DEFINE(bridge_reconfigure);
63
64 /* Configuration of an uninstantiated iface. */
65 struct if_cfg {
66     struct hmap_node hmap_node;         /* Node in bridge's if_cfg_todo. */
67     const struct ovsrec_interface *cfg; /* Interface record. */
68     const struct ovsrec_port *parent;   /* Parent port record. */
69 };
70
71 /* OpenFlow port slated for removal from ofproto. */
72 struct ofpp_garbage {
73     struct list list_node;      /* Node in bridge's ofpp_garbage. */
74     uint16_t ofp_port;          /* Port to be deleted. */
75 };
76
77 struct iface {
78     /* These members are always valid. */
79     struct list port_elem;      /* Element in struct port's "ifaces" list. */
80     struct hmap_node name_node; /* In struct bridge's "iface_by_name" hmap. */
81     struct port *port;          /* Containing port. */
82     char *name;                 /* Host network device name. */
83
84     /* These members are valid only after bridge_reconfigure() causes them to
85      * be initialized. */
86     struct hmap_node ofp_port_node; /* In struct bridge's "ifaces" hmap. */
87     int ofp_port;               /* OpenFlow port number, -1 if unknown. */
88     struct netdev *netdev;      /* Network device. */
89     const char *type;           /* Usually same as cfg->type. */
90     const struct ovsrec_interface *cfg;
91 };
92
93 struct mirror {
94     struct uuid uuid;           /* UUID of this "mirror" record in database. */
95     struct hmap_node hmap_node; /* In struct bridge's "mirrors" hmap. */
96     struct bridge *bridge;
97     char *name;
98     const struct ovsrec_mirror *cfg;
99 };
100
101 struct port {
102     struct hmap_node hmap_node; /* Element in struct bridge's "ports" hmap. */
103     struct bridge *bridge;
104     char *name;
105
106     const struct ovsrec_port *cfg;
107
108     /* An ordinary bridge port has 1 interface.
109      * A bridge port for bonding has at least 2 interfaces. */
110     struct list ifaces;         /* List of "struct iface"s. */
111 };
112
113 struct bridge {
114     struct hmap_node node;      /* In 'all_bridges'. */
115     char *name;                 /* User-specified arbitrary name. */
116     char *type;                 /* Datapath type. */
117     uint8_t ea[ETH_ADDR_LEN];   /* Bridge Ethernet Address. */
118     uint8_t default_ea[ETH_ADDR_LEN]; /* Default MAC. */
119     const struct ovsrec_bridge *cfg;
120
121     /* OpenFlow switch processing. */
122     struct ofproto *ofproto;    /* OpenFlow switch. */
123
124     /* Bridge ports. */
125     struct hmap ports;          /* "struct port"s indexed by name. */
126     struct hmap ifaces;         /* "struct iface"s indexed by ofp_port. */
127     struct hmap iface_by_name;  /* "struct iface"s indexed by name. */
128
129     struct list ofpp_garbage;   /* "struct ofpp_garbage" slated for removal. */
130     struct hmap if_cfg_todo;    /* "struct if_cfg"s slated for creation.
131                                    Indexed on 'cfg->name'. */
132
133     /* Port mirroring. */
134     struct hmap mirrors;        /* "struct mirror" indexed by UUID. */
135
136     /* Synthetic local port if necessary. */
137     struct ovsrec_port synth_local_port;
138     struct ovsrec_interface synth_local_iface;
139     struct ovsrec_interface *synth_local_ifacep;
140 };
141
142 /* All bridges, indexed by name. */
143 static struct hmap all_bridges = HMAP_INITIALIZER(&all_bridges);
144
145 /* OVSDB IDL used to obtain configuration. */
146 static struct ovsdb_idl *idl;
147
148 /* Most recently processed IDL sequence number. */
149 static unsigned int idl_seqno;
150
151 /* Each time this timer expires, the bridge fetches systems and interface
152  * statistics and pushes them into the database. */
153 #define STATS_INTERVAL (5 * 1000) /* In milliseconds. */
154 static long long int stats_timer = LLONG_MIN;
155
156 /* Stores the time after which rate limited statistics may be written to the
157  * database.  Only updated when changes to the database require rate limiting.
158  */
159 #define DB_LIMIT_INTERVAL (1 * 1000) /* In milliseconds. */
160 static long long int db_limiter = LLONG_MIN;
161
162 /* In some datapaths, creating and destroying OpenFlow ports can be extremely
163  * expensive.  This can cause bridge_reconfigure() to take a long time during
164  * which no other work can be done.  To deal with this problem, we limit port
165  * adds and deletions to a window of OFP_PORT_ACTION_WINDOW milliseconds per
166  * call to bridge_reconfigure().  If there is more work to do after the limit
167  * is reached, 'need_reconfigure', is flagged and it's done on the next loop.
168  * This allows the rest of the code to catch up on important things like
169  * forwarding packets. */
170 #define OFP_PORT_ACTION_WINDOW 10
171 static bool reconfiguring = false;
172
173 static void add_del_bridges(const struct ovsrec_open_vswitch *);
174 static void bridge_update_ofprotos(void);
175 static void bridge_create(const struct ovsrec_bridge *);
176 static void bridge_destroy(struct bridge *);
177 static struct bridge *bridge_lookup(const char *name);
178 static unixctl_cb_func bridge_unixctl_dump_flows;
179 static unixctl_cb_func bridge_unixctl_reconnect;
180 static size_t bridge_get_controllers(const struct bridge *br,
181                                      struct ovsrec_controller ***controllersp);
182 static void bridge_add_del_ports(struct bridge *,
183                                  const unsigned long int *splinter_vlans);
184 static void bridge_refresh_ofp_port(struct bridge *);
185 static void bridge_configure_datapath_id(struct bridge *);
186 static void bridge_configure_flow_eviction_threshold(struct bridge *);
187 static void bridge_configure_netflow(struct bridge *);
188 static void bridge_configure_forward_bpdu(struct bridge *);
189 static void bridge_configure_mac_idle_time(struct bridge *);
190 static void bridge_configure_sflow(struct bridge *, int *sflow_bridge_number);
191 static void bridge_configure_stp(struct bridge *);
192 static void bridge_configure_tables(struct bridge *);
193 static void bridge_configure_remotes(struct bridge *,
194                                      const struct sockaddr_in *managers,
195                                      size_t n_managers);
196 static void bridge_pick_local_hw_addr(struct bridge *,
197                                       uint8_t ea[ETH_ADDR_LEN],
198                                       struct iface **hw_addr_iface);
199 static uint64_t bridge_pick_datapath_id(struct bridge *,
200                                         const uint8_t bridge_ea[ETH_ADDR_LEN],
201                                         struct iface *hw_addr_iface);
202 static void bridge_queue_if_cfg(struct bridge *,
203                                 const struct ovsrec_interface *,
204                                 const struct ovsrec_port *);
205 static uint64_t dpid_from_hash(const void *, size_t nbytes);
206 static bool bridge_has_bond_fake_iface(const struct bridge *,
207                                        const char *name);
208 static bool port_is_bond_fake_iface(const struct port *);
209
210 static unixctl_cb_func qos_unixctl_show;
211
212 static struct port *port_create(struct bridge *, const struct ovsrec_port *);
213 static void port_del_ifaces(struct port *);
214 static void port_destroy(struct port *);
215 static struct port *port_lookup(const struct bridge *, const char *name);
216 static void port_configure(struct port *);
217 static struct lacp_settings *port_configure_lacp(struct port *,
218                                                  struct lacp_settings *);
219 static void port_configure_bond(struct port *, struct bond_settings *,
220                                 uint32_t *bond_stable_ids);
221 static bool port_is_synthetic(const struct port *);
222
223 static void bridge_configure_mirrors(struct bridge *);
224 static struct mirror *mirror_create(struct bridge *,
225                                     const struct ovsrec_mirror *);
226 static void mirror_destroy(struct mirror *);
227 static bool mirror_configure(struct mirror *);
228 static void mirror_refresh_stats(struct mirror *);
229
230 static void iface_configure_lacp(struct iface *, struct lacp_slave_settings *);
231 static bool iface_create(struct bridge *, struct if_cfg *, int ofp_port);
232 static const char *iface_get_type(const struct ovsrec_interface *,
233                                   const struct ovsrec_bridge *);
234 static void iface_destroy(struct iface *);
235 static struct iface *iface_lookup(const struct bridge *, const char *name);
236 static struct iface *iface_find(const char *name);
237 static struct if_cfg *if_cfg_lookup(const struct bridge *, const char *name);
238 static struct iface *iface_from_ofp_port(const struct bridge *,
239                                          uint16_t ofp_port);
240 static void iface_set_mac(struct iface *);
241 static void iface_set_ofport(const struct ovsrec_interface *, int64_t ofport);
242 static void iface_clear_db_record(const struct ovsrec_interface *if_cfg);
243 static void iface_configure_qos(struct iface *, const struct ovsrec_qos *);
244 static void iface_configure_cfm(struct iface *);
245 static void iface_refresh_cfm_stats(struct iface *);
246 static void iface_refresh_stats(struct iface *);
247 static void iface_refresh_status(struct iface *);
248 static bool iface_is_synthetic(const struct iface *);
249
250 /* Linux VLAN device support (e.g. "eth0.10" for VLAN 10.)
251  *
252  * This is deprecated.  It is only for compatibility with broken device drivers
253  * in old versions of Linux that do not properly support VLANs when VLAN
254  * devices are not used.  When broken device drivers are no longer in
255  * widespread use, we will delete these interfaces. */
256
257 /* True if VLAN splinters are enabled on any interface, false otherwise.*/
258 static bool vlan_splinters_enabled_anywhere;
259
260 static bool vlan_splinters_is_enabled(const struct ovsrec_interface *);
261 static unsigned long int *collect_splinter_vlans(
262     const struct ovsrec_open_vswitch *);
263 static void configure_splinter_port(struct port *);
264 static void add_vlan_splinter_ports(struct bridge *,
265                                     const unsigned long int *splinter_vlans,
266                                     struct shash *ports);
267 \f
268 /* Public functions. */
269
270 /* Initializes the bridge module, configuring it to obtain its configuration
271  * from an OVSDB server accessed over 'remote', which should be a string in a
272  * form acceptable to ovsdb_idl_create(). */
273 void
274 bridge_init(const char *remote)
275 {
276     /* Create connection to database. */
277     idl = ovsdb_idl_create(remote, &ovsrec_idl_class, true);
278     idl_seqno = ovsdb_idl_get_seqno(idl);
279     ovsdb_idl_set_lock(idl, "ovs_vswitchd");
280
281     ovsdb_idl_omit_alert(idl, &ovsrec_open_vswitch_col_cur_cfg);
282     ovsdb_idl_omit_alert(idl, &ovsrec_open_vswitch_col_statistics);
283     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_external_ids);
284     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_ovs_version);
285     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_db_version);
286     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_system_type);
287     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_system_version);
288
289     ovsdb_idl_omit_alert(idl, &ovsrec_bridge_col_datapath_id);
290     ovsdb_idl_omit_alert(idl, &ovsrec_bridge_col_status);
291     ovsdb_idl_omit(idl, &ovsrec_bridge_col_external_ids);
292
293     ovsdb_idl_omit_alert(idl, &ovsrec_port_col_status);
294     ovsdb_idl_omit_alert(idl, &ovsrec_port_col_statistics);
295     ovsdb_idl_omit(idl, &ovsrec_port_col_external_ids);
296     ovsdb_idl_omit(idl, &ovsrec_port_col_fake_bridge);
297
298     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_admin_state);
299     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_duplex);
300     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_link_speed);
301     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_link_state);
302     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_link_resets);
303     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_mtu);
304     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_ofport);
305     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_statistics);
306     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_status);
307     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_fault);
308     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_fault_status);
309     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_remote_mpids);
310     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_health);
311     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_lacp_current);
312     ovsdb_idl_omit(idl, &ovsrec_interface_col_external_ids);
313
314     ovsdb_idl_omit_alert(idl, &ovsrec_controller_col_is_connected);
315     ovsdb_idl_omit_alert(idl, &ovsrec_controller_col_role);
316     ovsdb_idl_omit_alert(idl, &ovsrec_controller_col_status);
317     ovsdb_idl_omit(idl, &ovsrec_controller_col_external_ids);
318
319     ovsdb_idl_omit(idl, &ovsrec_qos_col_external_ids);
320
321     ovsdb_idl_omit(idl, &ovsrec_queue_col_external_ids);
322
323     ovsdb_idl_omit(idl, &ovsrec_mirror_col_external_ids);
324     ovsdb_idl_omit_alert(idl, &ovsrec_mirror_col_statistics);
325
326     ovsdb_idl_omit(idl, &ovsrec_netflow_col_external_ids);
327
328     ovsdb_idl_omit(idl, &ovsrec_sflow_col_external_ids);
329
330     ovsdb_idl_omit(idl, &ovsrec_manager_col_external_ids);
331     ovsdb_idl_omit(idl, &ovsrec_manager_col_inactivity_probe);
332     ovsdb_idl_omit(idl, &ovsrec_manager_col_is_connected);
333     ovsdb_idl_omit(idl, &ovsrec_manager_col_max_backoff);
334     ovsdb_idl_omit(idl, &ovsrec_manager_col_status);
335
336     ovsdb_idl_omit(idl, &ovsrec_ssl_col_external_ids);
337
338     /* Register unixctl commands. */
339     unixctl_command_register("qos/show", "interface", 1, 1,
340                              qos_unixctl_show, NULL);
341     unixctl_command_register("bridge/dump-flows", "bridge", 1, 1,
342                              bridge_unixctl_dump_flows, NULL);
343     unixctl_command_register("bridge/reconnect", "[bridge]", 0, 1,
344                              bridge_unixctl_reconnect, NULL);
345     lacp_init();
346     bond_init();
347     cfm_init();
348     stp_init();
349 }
350
351 void
352 bridge_exit(void)
353 {
354     struct bridge *br, *next_br;
355
356     HMAP_FOR_EACH_SAFE (br, next_br, node, &all_bridges) {
357         bridge_destroy(br);
358     }
359     ovsdb_idl_destroy(idl);
360 }
361
362 /* Looks at the list of managers in 'ovs_cfg' and extracts their remote IP
363  * addresses and ports into '*managersp' and '*n_managersp'.  The caller is
364  * responsible for freeing '*managersp' (with free()).
365  *
366  * You may be asking yourself "why does ovs-vswitchd care?", because
367  * ovsdb-server is responsible for connecting to the managers, and ovs-vswitchd
368  * should not be and in fact is not directly involved in that.  But
369  * ovs-vswitchd needs to make sure that ovsdb-server can reach the managers, so
370  * it has to tell in-band control where the managers are to enable that.
371  * (Thus, only managers connected in-band are collected.)
372  */
373 static void
374 collect_in_band_managers(const struct ovsrec_open_vswitch *ovs_cfg,
375                          struct sockaddr_in **managersp, size_t *n_managersp)
376 {
377     struct sockaddr_in *managers = NULL;
378     size_t n_managers = 0;
379     struct sset targets;
380     size_t i;
381
382     /* Collect all of the potential targets from the "targets" columns of the
383      * rows pointed to by "manager_options", excluding any that are
384      * out-of-band. */
385     sset_init(&targets);
386     for (i = 0; i < ovs_cfg->n_manager_options; i++) {
387         struct ovsrec_manager *m = ovs_cfg->manager_options[i];
388
389         if (m->connection_mode && !strcmp(m->connection_mode, "out-of-band")) {
390             sset_find_and_delete(&targets, m->target);
391         } else {
392             sset_add(&targets, m->target);
393         }
394     }
395
396     /* Now extract the targets' IP addresses. */
397     if (!sset_is_empty(&targets)) {
398         const char *target;
399
400         managers = xmalloc(sset_count(&targets) * sizeof *managers);
401         SSET_FOR_EACH (target, &targets) {
402             struct sockaddr_in *sin = &managers[n_managers];
403
404             if (stream_parse_target_with_default_ports(target,
405                                                        JSONRPC_TCP_PORT,
406                                                        JSONRPC_SSL_PORT,
407                                                        sin)) {
408                 n_managers++;
409             }
410         }
411     }
412     sset_destroy(&targets);
413
414     *managersp = managers;
415     *n_managersp = n_managers;
416 }
417
418 static void
419 bridge_reconfigure(const struct ovsrec_open_vswitch *ovs_cfg)
420 {
421     unsigned long int *splinter_vlans;
422     struct bridge *br;
423
424     COVERAGE_INC(bridge_reconfigure);
425
426     assert(!reconfiguring);
427     reconfiguring = true;
428
429     /* Destroy "struct bridge"s, "struct port"s, and "struct iface"s according
430      * to 'ovs_cfg' while update the "if_cfg_queue", with only very minimal
431      * configuration otherwise.
432      *
433      * This is mostly an update to bridge data structures. Nothing is pushed
434      * down to ofproto or lower layers. */
435     add_del_bridges(ovs_cfg);
436     splinter_vlans = collect_splinter_vlans(ovs_cfg);
437     HMAP_FOR_EACH (br, node, &all_bridges) {
438         bridge_add_del_ports(br, splinter_vlans);
439     }
440     free(splinter_vlans);
441
442     /* Delete datapaths that are no longer configured, and create ones which
443      * don't exist but should. */
444     bridge_update_ofprotos();
445
446     /* Make sure each "struct iface" has a correct ofp_port in its ofproto. */
447     HMAP_FOR_EACH (br, node, &all_bridges) {
448         bridge_refresh_ofp_port(br);
449     }
450
451     /* Clear database records for "if_cfg"s which haven't been instantiated. */
452     HMAP_FOR_EACH (br, node, &all_bridges) {
453         struct if_cfg *if_cfg;
454
455         HMAP_FOR_EACH (if_cfg, hmap_node, &br->if_cfg_todo) {
456             iface_clear_db_record(if_cfg->cfg);
457         }
458     }
459 }
460
461 static bool
462 bridge_reconfigure_ofp(void)
463 {
464     long long int deadline;
465     struct bridge *br;
466
467     time_refresh();
468     deadline = time_msec() + OFP_PORT_ACTION_WINDOW;
469
470     /* The kernel will reject any attempt to add a given port to a datapath if
471      * that port already belongs to a different datapath, so we must do all
472      * port deletions before any port additions. */
473     HMAP_FOR_EACH (br, node, &all_bridges) {
474         struct ofpp_garbage *garbage, *next;
475
476         LIST_FOR_EACH_SAFE (garbage, next, list_node, &br->ofpp_garbage) {
477             ofproto_port_del(br->ofproto, garbage->ofp_port);
478             list_remove(&garbage->list_node);
479             free(garbage);
480
481             time_refresh();
482             if (time_msec() >= deadline) {
483                 return false;
484             }
485         }
486     }
487
488     HMAP_FOR_EACH (br, node, &all_bridges) {
489         struct if_cfg *if_cfg, *next;
490
491         HMAP_FOR_EACH_SAFE (if_cfg, next, hmap_node, &br->if_cfg_todo) {
492             iface_create(br, if_cfg, -1);
493             time_refresh();
494             if (time_msec() >= deadline) {
495                 return false;
496             }
497         }
498     }
499
500     return true;
501 }
502
503 static bool
504 bridge_reconfigure_continue(const struct ovsrec_open_vswitch *ovs_cfg)
505 {
506     struct sockaddr_in *managers;
507     int sflow_bridge_number;
508     size_t n_managers;
509     struct bridge *br;
510     bool done;
511
512     assert(reconfiguring);
513     done = bridge_reconfigure_ofp();
514
515     /* Complete the configuration. */
516     sflow_bridge_number = 0;
517     collect_in_band_managers(ovs_cfg, &managers, &n_managers);
518     HMAP_FOR_EACH (br, node, &all_bridges) {
519         struct port *port;
520
521         /* We need the datapath ID early to allow LACP ports to use it as the
522          * default system ID. */
523         bridge_configure_datapath_id(br);
524
525         HMAP_FOR_EACH (port, hmap_node, &br->ports) {
526             struct iface *iface;
527
528             port_configure(port);
529
530             LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
531                 iface_configure_cfm(iface);
532                 iface_configure_qos(iface, port->cfg->qos);
533                 iface_set_mac(iface);
534             }
535         }
536         bridge_configure_mirrors(br);
537         bridge_configure_flow_eviction_threshold(br);
538         bridge_configure_forward_bpdu(br);
539         bridge_configure_mac_idle_time(br);
540         bridge_configure_remotes(br, managers, n_managers);
541         bridge_configure_netflow(br);
542         bridge_configure_sflow(br, &sflow_bridge_number);
543         bridge_configure_stp(br);
544         bridge_configure_tables(br);
545     }
546     free(managers);
547
548     if (done) {
549         /* ovs-vswitchd has completed initialization, so allow the process that
550          * forked us to exit successfully. */
551         daemonize_complete();
552         reconfiguring = false;
553     }
554
555     return done;
556 }
557
558 /* Delete ofprotos which aren't configured or have the wrong type.  Create
559  * ofprotos which don't exist but need to. */
560 static void
561 bridge_update_ofprotos(void)
562 {
563     struct bridge *br, *next;
564     struct sset names;
565     struct sset types;
566     const char *type;
567
568     /* Delete ofprotos with no bridge or with the wrong type. */
569     sset_init(&names);
570     sset_init(&types);
571     ofproto_enumerate_types(&types);
572     SSET_FOR_EACH (type, &types) {
573         const char *name;
574
575         ofproto_enumerate_names(type, &names);
576         SSET_FOR_EACH (name, &names) {
577             br = bridge_lookup(name);
578             if (!br || strcmp(type, br->type)) {
579                 ofproto_delete(name, type);
580             }
581         }
582     }
583     sset_destroy(&names);
584     sset_destroy(&types);
585
586     /* Add ofprotos for bridges which don't have one yet. */
587     HMAP_FOR_EACH_SAFE (br, next, node, &all_bridges) {
588         struct bridge *br2;
589         int error;
590
591         if (br->ofproto) {
592             continue;
593         }
594
595         /* Remove ports from any datapath with the same name as 'br'.  If we
596          * don't do this, creating 'br''s ofproto will fail because a port with
597          * the same name as its local port already exists. */
598         HMAP_FOR_EACH (br2, node, &all_bridges) {
599             struct ofproto_port ofproto_port;
600
601             if (!br2->ofproto) {
602                 continue;
603             }
604
605             if (!ofproto_port_query_by_name(br2->ofproto, br->name,
606                                             &ofproto_port)) {
607                 error = ofproto_port_del(br2->ofproto, ofproto_port.ofp_port);
608                 if (error) {
609                     VLOG_ERR("failed to delete port %s: %s", ofproto_port.name,
610                              strerror(error));
611                 }
612                 ofproto_port_destroy(&ofproto_port);
613             }
614         }
615
616         error = ofproto_create(br->name, br->type, &br->ofproto);
617         if (error) {
618             VLOG_ERR("failed to create bridge %s: %s", br->name,
619                      strerror(error));
620             bridge_destroy(br);
621         }
622     }
623 }
624
625 static void
626 port_configure(struct port *port)
627 {
628     const struct ovsrec_port *cfg = port->cfg;
629     struct bond_settings bond_settings;
630     struct lacp_settings lacp_settings;
631     struct ofproto_bundle_settings s;
632     struct iface *iface;
633
634     if (cfg->vlan_mode && !strcmp(cfg->vlan_mode, "splinter")) {
635         configure_splinter_port(port);
636         return;
637     }
638
639     /* Get name. */
640     s.name = port->name;
641
642     /* Get slaves. */
643     s.n_slaves = 0;
644     s.slaves = xmalloc(list_size(&port->ifaces) * sizeof *s.slaves);
645     LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
646         s.slaves[s.n_slaves++] = iface->ofp_port;
647     }
648
649     /* Get VLAN tag. */
650     s.vlan = -1;
651     if (cfg->tag && *cfg->tag >= 0 && *cfg->tag <= 4095) {
652         s.vlan = *cfg->tag;
653     }
654
655     /* Get VLAN trunks. */
656     s.trunks = NULL;
657     if (cfg->n_trunks) {
658         s.trunks = vlan_bitmap_from_array(cfg->trunks, cfg->n_trunks);
659     }
660
661     /* Get VLAN mode. */
662     if (cfg->vlan_mode) {
663         if (!strcmp(cfg->vlan_mode, "access")) {
664             s.vlan_mode = PORT_VLAN_ACCESS;
665         } else if (!strcmp(cfg->vlan_mode, "trunk")) {
666             s.vlan_mode = PORT_VLAN_TRUNK;
667         } else if (!strcmp(cfg->vlan_mode, "native-tagged")) {
668             s.vlan_mode = PORT_VLAN_NATIVE_TAGGED;
669         } else if (!strcmp(cfg->vlan_mode, "native-untagged")) {
670             s.vlan_mode = PORT_VLAN_NATIVE_UNTAGGED;
671         } else {
672             /* This "can't happen" because ovsdb-server should prevent it. */
673             VLOG_ERR("unknown VLAN mode %s", cfg->vlan_mode);
674             s.vlan_mode = PORT_VLAN_TRUNK;
675         }
676     } else {
677         if (s.vlan >= 0) {
678             s.vlan_mode = PORT_VLAN_ACCESS;
679             if (cfg->n_trunks) {
680                 VLOG_ERR("port %s: ignoring trunks in favor of implicit vlan",
681                          port->name);
682             }
683         } else {
684             s.vlan_mode = PORT_VLAN_TRUNK;
685         }
686     }
687     s.use_priority_tags = smap_get_bool(&cfg->other_config, "priority-tags",
688                                         false);
689
690     /* Get LACP settings. */
691     s.lacp = port_configure_lacp(port, &lacp_settings);
692     if (s.lacp) {
693         size_t i = 0;
694
695         s.lacp_slaves = xmalloc(s.n_slaves * sizeof *s.lacp_slaves);
696         LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
697             iface_configure_lacp(iface, &s.lacp_slaves[i++]);
698         }
699     } else {
700         s.lacp_slaves = NULL;
701     }
702
703     /* Get bond settings. */
704     if (s.n_slaves > 1) {
705         s.bond = &bond_settings;
706         s.bond_stable_ids = xmalloc(s.n_slaves * sizeof *s.bond_stable_ids);
707         port_configure_bond(port, &bond_settings, s.bond_stable_ids);
708     } else {
709         s.bond = NULL;
710         s.bond_stable_ids = NULL;
711
712         LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
713             netdev_set_miimon_interval(iface->netdev, 0);
714         }
715     }
716
717     /* Register. */
718     ofproto_bundle_register(port->bridge->ofproto, port, &s);
719
720     /* Clean up. */
721     free(s.slaves);
722     free(s.trunks);
723     free(s.lacp_slaves);
724     free(s.bond_stable_ids);
725 }
726
727 /* Pick local port hardware address and datapath ID for 'br'. */
728 static void
729 bridge_configure_datapath_id(struct bridge *br)
730 {
731     uint8_t ea[ETH_ADDR_LEN];
732     uint64_t dpid;
733     struct iface *local_iface;
734     struct iface *hw_addr_iface;
735     char *dpid_string;
736
737     bridge_pick_local_hw_addr(br, ea, &hw_addr_iface);
738     local_iface = iface_from_ofp_port(br, OFPP_LOCAL);
739     if (local_iface) {
740         int error = netdev_set_etheraddr(local_iface->netdev, ea);
741         if (error) {
742             static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
743             VLOG_ERR_RL(&rl, "bridge %s: failed to set bridge "
744                         "Ethernet address: %s",
745                         br->name, strerror(error));
746         }
747     }
748     memcpy(br->ea, ea, ETH_ADDR_LEN);
749
750     dpid = bridge_pick_datapath_id(br, ea, hw_addr_iface);
751     ofproto_set_datapath_id(br->ofproto, dpid);
752
753     dpid_string = xasprintf("%016"PRIx64, dpid);
754     ovsrec_bridge_set_datapath_id(br->cfg, dpid_string);
755     free(dpid_string);
756 }
757
758 /* Set NetFlow configuration on 'br'. */
759 static void
760 bridge_configure_netflow(struct bridge *br)
761 {
762     struct ovsrec_netflow *cfg = br->cfg->netflow;
763     struct netflow_options opts;
764
765     if (!cfg) {
766         ofproto_set_netflow(br->ofproto, NULL);
767         return;
768     }
769
770     memset(&opts, 0, sizeof opts);
771
772     /* Get default NetFlow configuration from datapath.
773      * Apply overrides from 'cfg'. */
774     ofproto_get_netflow_ids(br->ofproto, &opts.engine_type, &opts.engine_id);
775     if (cfg->engine_type) {
776         opts.engine_type = *cfg->engine_type;
777     }
778     if (cfg->engine_id) {
779         opts.engine_id = *cfg->engine_id;
780     }
781
782     /* Configure active timeout interval. */
783     opts.active_timeout = cfg->active_timeout;
784     if (!opts.active_timeout) {
785         opts.active_timeout = -1;
786     } else if (opts.active_timeout < 0) {
787         VLOG_WARN("bridge %s: active timeout interval set to negative "
788                   "value, using default instead (%d seconds)", br->name,
789                   NF_ACTIVE_TIMEOUT_DEFAULT);
790         opts.active_timeout = -1;
791     }
792
793     /* Add engine ID to interface number to disambiguate bridgs? */
794     opts.add_id_to_iface = cfg->add_id_to_interface;
795     if (opts.add_id_to_iface) {
796         if (opts.engine_id > 0x7f) {
797             VLOG_WARN("bridge %s: NetFlow port mangling may conflict with "
798                       "another vswitch, choose an engine id less than 128",
799                       br->name);
800         }
801         if (hmap_count(&br->ports) > 508) {
802             VLOG_WARN("bridge %s: NetFlow port mangling will conflict with "
803                       "another port when more than 508 ports are used",
804                       br->name);
805         }
806     }
807
808     /* Collectors. */
809     sset_init(&opts.collectors);
810     sset_add_array(&opts.collectors, cfg->targets, cfg->n_targets);
811
812     /* Configure. */
813     if (ofproto_set_netflow(br->ofproto, &opts)) {
814         VLOG_ERR("bridge %s: problem setting netflow collectors", br->name);
815     }
816     sset_destroy(&opts.collectors);
817 }
818
819 /* Set sFlow configuration on 'br'. */
820 static void
821 bridge_configure_sflow(struct bridge *br, int *sflow_bridge_number)
822 {
823     const struct ovsrec_sflow *cfg = br->cfg->sflow;
824     struct ovsrec_controller **controllers;
825     struct ofproto_sflow_options oso;
826     size_t n_controllers;
827     size_t i;
828
829     if (!cfg) {
830         ofproto_set_sflow(br->ofproto, NULL);
831         return;
832     }
833
834     memset(&oso, 0, sizeof oso);
835
836     sset_init(&oso.targets);
837     sset_add_array(&oso.targets, cfg->targets, cfg->n_targets);
838
839     oso.sampling_rate = SFL_DEFAULT_SAMPLING_RATE;
840     if (cfg->sampling) {
841         oso.sampling_rate = *cfg->sampling;
842     }
843
844     oso.polling_interval = SFL_DEFAULT_POLLING_INTERVAL;
845     if (cfg->polling) {
846         oso.polling_interval = *cfg->polling;
847     }
848
849     oso.header_len = SFL_DEFAULT_HEADER_SIZE;
850     if (cfg->header) {
851         oso.header_len = *cfg->header;
852     }
853
854     oso.sub_id = (*sflow_bridge_number)++;
855     oso.agent_device = cfg->agent;
856
857     oso.control_ip = NULL;
858     n_controllers = bridge_get_controllers(br, &controllers);
859     for (i = 0; i < n_controllers; i++) {
860         if (controllers[i]->local_ip) {
861             oso.control_ip = controllers[i]->local_ip;
862             break;
863         }
864     }
865     ofproto_set_sflow(br->ofproto, &oso);
866
867     sset_destroy(&oso.targets);
868 }
869
870 static void
871 port_configure_stp(const struct ofproto *ofproto, struct port *port,
872                    struct ofproto_port_stp_settings *port_s,
873                    int *port_num_counter, unsigned long *port_num_bitmap)
874 {
875     const char *config_str;
876     struct iface *iface;
877
878     if (smap_get_bool(&port->cfg->other_config, "stp-enable", false)) {
879         port_s->enable = false;
880         return;
881     } else {
882         port_s->enable = true;
883     }
884
885     /* STP over bonds is not supported. */
886     if (!list_is_singleton(&port->ifaces)) {
887         VLOG_ERR("port %s: cannot enable STP on bonds, disabling",
888                  port->name);
889         port_s->enable = false;
890         return;
891     }
892
893     iface = CONTAINER_OF(list_front(&port->ifaces), struct iface, port_elem);
894
895     /* Internal ports shouldn't participate in spanning tree, so
896      * skip them. */
897     if (!strcmp(iface->type, "internal")) {
898         VLOG_DBG("port %s: disable STP on internal ports", port->name);
899         port_s->enable = false;
900         return;
901     }
902
903     /* STP on mirror output ports is not supported. */
904     if (ofproto_is_mirror_output_bundle(ofproto, port)) {
905         VLOG_DBG("port %s: disable STP on mirror ports", port->name);
906         port_s->enable = false;
907         return;
908     }
909
910     config_str = smap_get(&port->cfg->other_config, "stp-port-num");
911     if (config_str) {
912         unsigned long int port_num = strtoul(config_str, NULL, 0);
913         int port_idx = port_num - 1;
914
915         if (port_num < 1 || port_num > STP_MAX_PORTS) {
916             VLOG_ERR("port %s: invalid stp-port-num", port->name);
917             port_s->enable = false;
918             return;
919         }
920
921         if (bitmap_is_set(port_num_bitmap, port_idx)) {
922             VLOG_ERR("port %s: duplicate stp-port-num %lu, disabling",
923                     port->name, port_num);
924             port_s->enable = false;
925             return;
926         }
927         bitmap_set1(port_num_bitmap, port_idx);
928         port_s->port_num = port_idx;
929     } else {
930         if (*port_num_counter > STP_MAX_PORTS) {
931             VLOG_ERR("port %s: too many STP ports, disabling", port->name);
932             port_s->enable = false;
933             return;
934         }
935
936         port_s->port_num = (*port_num_counter)++;
937     }
938
939     config_str = smap_get(&port->cfg->other_config, "stp-path-cost");
940     if (config_str) {
941         port_s->path_cost = strtoul(config_str, NULL, 10);
942     } else {
943         enum netdev_features current;
944
945         if (netdev_get_features(iface->netdev, &current, NULL, NULL, NULL)) {
946             /* Couldn't get speed, so assume 100Mb/s. */
947             port_s->path_cost = 19;
948         } else {
949             unsigned int mbps;
950
951             mbps = netdev_features_to_bps(current) / 1000000;
952             port_s->path_cost = stp_convert_speed_to_cost(mbps);
953         }
954     }
955
956     config_str = smap_get(&port->cfg->other_config, "stp-port-priority");
957     if (config_str) {
958         port_s->priority = strtoul(config_str, NULL, 0);
959     } else {
960         port_s->priority = STP_DEFAULT_PORT_PRIORITY;
961     }
962 }
963
964 /* Set spanning tree configuration on 'br'. */
965 static void
966 bridge_configure_stp(struct bridge *br)
967 {
968     if (!br->cfg->stp_enable) {
969         ofproto_set_stp(br->ofproto, NULL);
970     } else {
971         struct ofproto_stp_settings br_s;
972         const char *config_str;
973         struct port *port;
974         int port_num_counter;
975         unsigned long *port_num_bitmap;
976
977         config_str = smap_get(&br->cfg->other_config, "stp-system-id");
978         if (config_str) {
979             uint8_t ea[ETH_ADDR_LEN];
980
981             if (eth_addr_from_string(config_str, ea)) {
982                 br_s.system_id = eth_addr_to_uint64(ea);
983             } else {
984                 br_s.system_id = eth_addr_to_uint64(br->ea);
985                 VLOG_ERR("bridge %s: invalid stp-system-id, defaulting "
986                          "to "ETH_ADDR_FMT, br->name, ETH_ADDR_ARGS(br->ea));
987             }
988         } else {
989             br_s.system_id = eth_addr_to_uint64(br->ea);
990         }
991
992         config_str = smap_get(&br->cfg->other_config, "stp-priority");
993         if (config_str) {
994             br_s.priority = strtoul(config_str, NULL, 0);
995         } else {
996             br_s.priority = STP_DEFAULT_BRIDGE_PRIORITY;
997         }
998
999         config_str = smap_get(&br->cfg->other_config, "stp-hello-time");
1000         if (config_str) {
1001             br_s.hello_time = strtoul(config_str, NULL, 10) * 1000;
1002         } else {
1003             br_s.hello_time = STP_DEFAULT_HELLO_TIME;
1004         }
1005
1006         config_str = smap_get(&br->cfg->other_config, "stp-max-age");
1007         if (config_str) {
1008             br_s.max_age = strtoul(config_str, NULL, 10) * 1000;
1009         } else {
1010             br_s.max_age = STP_DEFAULT_MAX_AGE;
1011         }
1012
1013         config_str = smap_get(&br->cfg->other_config, "stp-forward-delay");
1014         if (config_str) {
1015             br_s.fwd_delay = strtoul(config_str, NULL, 10) * 1000;
1016         } else {
1017             br_s.fwd_delay = STP_DEFAULT_FWD_DELAY;
1018         }
1019
1020         /* Configure STP on the bridge. */
1021         if (ofproto_set_stp(br->ofproto, &br_s)) {
1022             VLOG_ERR("bridge %s: could not enable STP", br->name);
1023             return;
1024         }
1025
1026         /* Users must either set the port number with the "stp-port-num"
1027          * configuration on all ports or none.  If manual configuration
1028          * is not done, then we allocate them sequentially. */
1029         port_num_counter = 0;
1030         port_num_bitmap = bitmap_allocate(STP_MAX_PORTS);
1031         HMAP_FOR_EACH (port, hmap_node, &br->ports) {
1032             struct ofproto_port_stp_settings port_s;
1033             struct iface *iface;
1034
1035             port_configure_stp(br->ofproto, port, &port_s,
1036                                &port_num_counter, port_num_bitmap);
1037
1038             /* As bonds are not supported, just apply configuration to
1039              * all interfaces. */
1040             LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
1041                 if (ofproto_port_set_stp(br->ofproto, iface->ofp_port,
1042                                          &port_s)) {
1043                     VLOG_ERR("port %s: could not enable STP", port->name);
1044                     continue;
1045                 }
1046             }
1047         }
1048
1049         if (bitmap_scan(port_num_bitmap, 0, STP_MAX_PORTS) != STP_MAX_PORTS
1050                     && port_num_counter) {
1051             VLOG_ERR("bridge %s: must manually configure all STP port "
1052                      "IDs or none, disabling", br->name);
1053             ofproto_set_stp(br->ofproto, NULL);
1054         }
1055         bitmap_free(port_num_bitmap);
1056     }
1057 }
1058
1059 static bool
1060 bridge_has_bond_fake_iface(const struct bridge *br, const char *name)
1061 {
1062     const struct port *port = port_lookup(br, name);
1063     return port && port_is_bond_fake_iface(port);
1064 }
1065
1066 static bool
1067 port_is_bond_fake_iface(const struct port *port)
1068 {
1069     return port->cfg->bond_fake_iface && !list_is_short(&port->ifaces);
1070 }
1071
1072 static void
1073 add_del_bridges(const struct ovsrec_open_vswitch *cfg)
1074 {
1075     struct bridge *br, *next;
1076     struct shash new_br;
1077     size_t i;
1078
1079     /* Collect new bridges' names and types. */
1080     shash_init(&new_br);
1081     for (i = 0; i < cfg->n_bridges; i++) {
1082         static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
1083         const struct ovsrec_bridge *br_cfg = cfg->bridges[i];
1084
1085         if (strchr(br_cfg->name, '/')) {
1086             /* Prevent remote ovsdb-server users from accessing arbitrary
1087              * directories, e.g. consider a bridge named "../../../etc/". */
1088             VLOG_WARN_RL(&rl, "ignoring bridge with invalid name \"%s\"",
1089                          br_cfg->name);
1090         } else if (!shash_add_once(&new_br, br_cfg->name, br_cfg)) {
1091             VLOG_WARN_RL(&rl, "bridge %s specified twice", br_cfg->name);
1092         }
1093     }
1094
1095     /* Get rid of deleted bridges or those whose types have changed.
1096      * Update 'cfg' of bridges that still exist. */
1097     HMAP_FOR_EACH_SAFE (br, next, node, &all_bridges) {
1098         br->cfg = shash_find_data(&new_br, br->name);
1099         if (!br->cfg || strcmp(br->type, ofproto_normalize_type(
1100                                    br->cfg->datapath_type))) {
1101             bridge_destroy(br);
1102         }
1103     }
1104
1105     /* Add new bridges. */
1106     for (i = 0; i < cfg->n_bridges; i++) {
1107         const struct ovsrec_bridge *br_cfg = cfg->bridges[i];
1108         struct bridge *br = bridge_lookup(br_cfg->name);
1109         if (!br) {
1110             bridge_create(br_cfg);
1111         }
1112     }
1113
1114     shash_destroy(&new_br);
1115 }
1116
1117 static void
1118 iface_set_ofp_port(struct iface *iface, int ofp_port)
1119 {
1120     struct bridge *br = iface->port->bridge;
1121
1122     assert(iface->ofp_port < 0 && ofp_port >= 0);
1123     iface->ofp_port = ofp_port;
1124     hmap_insert(&br->ifaces, &iface->ofp_port_node, hash_int(ofp_port, 0));
1125     iface_set_ofport(iface->cfg, ofp_port);
1126 }
1127
1128 /* Configures 'netdev' based on the "options" column in 'iface_cfg'.
1129  * Returns 0 if successful, otherwise a positive errno value. */
1130 static int
1131 iface_set_netdev_config(const struct ovsrec_interface *iface_cfg,
1132                         struct netdev *netdev)
1133 {
1134     int error;
1135
1136     error = netdev_set_config(netdev, &iface_cfg->options);
1137     if (error) {
1138         VLOG_WARN("could not configure network device %s (%s)",
1139                   iface_cfg->name, strerror(error));
1140     }
1141     return error;
1142 }
1143
1144 /* This function determines whether 'ofproto_port', which is attached to
1145  * br->ofproto's datapath, is one that we want in 'br'.
1146  *
1147  * If it is, it returns true, after creating an iface (if necessary),
1148  * configuring the iface's netdev according to the iface's options, and setting
1149  * iface's ofp_port member to 'ofproto_port->ofp_port'.
1150  *
1151  * If, on the other hand, 'port' should be removed, it returns false.  The
1152  * caller should later detach the port from br->ofproto. */
1153 static bool
1154 bridge_refresh_one_ofp_port(struct bridge *br,
1155                             const struct ofproto_port *ofproto_port)
1156 {
1157     const char *name = ofproto_port->name;
1158     const char *type = ofproto_port->type;
1159     uint16_t ofp_port = ofproto_port->ofp_port;
1160
1161     struct iface *iface = iface_lookup(br, name);
1162     if (iface) {
1163         /* Check that the name-to-number mapping is one-to-one. */
1164         if (iface->ofp_port >= 0) {
1165             VLOG_WARN("bridge %s: interface %s reported twice",
1166                       br->name, name);
1167             return false;
1168         } else if (iface_from_ofp_port(br, ofp_port)) {
1169             VLOG_WARN("bridge %s: interface %"PRIu16" reported twice",
1170                       br->name, ofp_port);
1171             return false;
1172         }
1173
1174         /* There's a configured interface named 'name'. */
1175         if (strcmp(type, iface->type)
1176             || iface_set_netdev_config(iface->cfg, iface->netdev)) {
1177             /* It's the wrong type, or it's the right type but can't be
1178              * configured as the user requested, so we must destroy it. */
1179             return false;
1180         } else {
1181             /* It's the right type and configured correctly.  keep it. */
1182             iface_set_ofp_port(iface, ofp_port);
1183             return true;
1184         }
1185     } else if (bridge_has_bond_fake_iface(br, name)
1186                && !strcmp(type, "internal")) {
1187         /* It's a bond fake iface.  Keep it. */
1188         return true;
1189     } else {
1190         /* There's no configured interface named 'name', but there might be an
1191          * interface of that name queued to be created.
1192          *
1193          * If there is, and it has the correct type, then try to configure it
1194          * and add it.  If that's successful, we'll keep it.  Otherwise, we'll
1195          * delete it and later try to re-add it. */
1196         struct if_cfg *if_cfg = if_cfg_lookup(br, name);
1197         return (if_cfg
1198                 && !strcmp(type, iface_get_type(if_cfg->cfg, br->cfg))
1199                 && iface_create(br, if_cfg, ofp_port));
1200     }
1201 }
1202
1203 /* Update bridges "if_cfg"s, "struct port"s, and "struct iface"s to be
1204  * consistent with the ofp_ports in "br->ofproto". */
1205 static void
1206 bridge_refresh_ofp_port(struct bridge *br)
1207 {
1208     struct ofproto_port_dump dump;
1209     struct ofproto_port ofproto_port;
1210     struct port *port, *port_next;
1211
1212     /* Clear each "struct iface"s ofp_port so we can get its correct value. */
1213     hmap_clear(&br->ifaces);
1214     HMAP_FOR_EACH (port, hmap_node, &br->ports) {
1215         struct iface *iface;
1216
1217         LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
1218             iface->ofp_port = -1;
1219         }
1220     }
1221
1222     /* Obtain the correct "ofp_port"s from ofproto. Find any if_cfg's which
1223      * already exist in the datapath and promote them to full fledged "struct
1224      * iface"s.  Mark ports in the datapath which don't belong as garbage. */
1225     OFPROTO_PORT_FOR_EACH (&ofproto_port, &dump, br->ofproto) {
1226         if (!bridge_refresh_one_ofp_port(br, &ofproto_port)) {
1227             struct ofpp_garbage *garbage = xmalloc(sizeof *garbage);
1228             garbage->ofp_port = ofproto_port.ofp_port;
1229             list_push_front(&br->ofpp_garbage, &garbage->list_node);
1230         }
1231     }
1232
1233     /* Some ifaces may not have "ofp_port"s in ofproto and therefore don't
1234      * deserve to have "struct iface"s.  Demote these to "if_cfg"s so that
1235      * later they can be added to ofproto. */
1236     HMAP_FOR_EACH_SAFE (port, port_next, hmap_node, &br->ports) {
1237         struct iface *iface, *iface_next;
1238
1239         LIST_FOR_EACH_SAFE (iface, iface_next, port_elem, &port->ifaces) {
1240             if (iface->ofp_port < 0) {
1241                 bridge_queue_if_cfg(br, iface->cfg, port->cfg);
1242                 iface_destroy(iface);
1243             }
1244         }
1245
1246         if (list_is_empty(&port->ifaces)) {
1247             port_destroy(port);
1248         }
1249     }
1250 }
1251
1252 /* Opens a network device for 'iface_cfg' and configures it.  If '*ofp_portp'
1253  * is negative, adds the network device to br->ofproto and stores the OpenFlow
1254  * port number in '*ofp_portp'; otherwise leaves br->ofproto and '*ofp_portp'
1255  * untouched.
1256  *
1257  * If successful, returns 0 and stores the network device in '*netdevp'.  On
1258  * failure, returns a positive errno value and stores NULL in '*netdevp'. */
1259 static int
1260 iface_do_create(const struct bridge *br,
1261                 const struct ovsrec_interface *iface_cfg,
1262                 const struct ovsrec_port *port_cfg,
1263                 int *ofp_portp, struct netdev **netdevp)
1264 {
1265     struct netdev *netdev;
1266     int error;
1267
1268     error = netdev_open(iface_cfg->name,
1269                         iface_get_type(iface_cfg, br->cfg), &netdev);
1270     if (error) {
1271         VLOG_WARN("could not open network device %s (%s)",
1272                   iface_cfg->name, strerror(error));
1273         goto error;
1274     }
1275
1276     error = iface_set_netdev_config(iface_cfg, netdev);
1277     if (error) {
1278         goto error;
1279     }
1280
1281     if (*ofp_portp < 0) {
1282         uint16_t ofp_port;
1283
1284         error = ofproto_port_add(br->ofproto, netdev, &ofp_port);
1285         if (error) {
1286             goto error;
1287         }
1288         *ofp_portp = ofp_port;
1289
1290         VLOG_INFO("bridge %s: added interface %s on port %d",
1291                   br->name, iface_cfg->name, *ofp_portp);
1292     } else {
1293         VLOG_DBG("bridge %s: interface %s is on port %d",
1294                  br->name, iface_cfg->name, *ofp_portp);
1295     }
1296
1297     if (port_cfg->vlan_mode && !strcmp(port_cfg->vlan_mode, "splinter")) {
1298         netdev_turn_flags_on(netdev, NETDEV_UP, true);
1299     }
1300
1301     *netdevp = netdev;
1302     return 0;
1303
1304 error:
1305     *netdevp = NULL;
1306     netdev_close(netdev);
1307     return error;
1308 }
1309
1310 /* Creates a new iface on 'br' based on 'if_cfg'.  The new iface has OpenFlow
1311  * port number 'ofp_port'.  If ofp_port is negative, an OpenFlow port is
1312  * automatically allocated for the iface.  Takes ownership of and
1313  * deallocates 'if_cfg'.
1314  *
1315  * Return true if an iface is successfully created, false otherwise. */
1316 static bool
1317 iface_create(struct bridge *br, struct if_cfg *if_cfg, int ofp_port)
1318 {
1319     const struct ovsrec_interface *iface_cfg = if_cfg->cfg;
1320     const struct ovsrec_port *port_cfg = if_cfg->parent;
1321
1322     struct netdev *netdev;
1323     struct iface *iface;
1324     struct port *port;
1325     int error;
1326
1327     /* Get rid of 'if_cfg' itself.  We already copied out the interesting
1328      * bits. */
1329     hmap_remove(&br->if_cfg_todo, &if_cfg->hmap_node);
1330     free(if_cfg);
1331
1332     /* Do the bits that can fail up front. */
1333     assert(!iface_lookup(br, iface_cfg->name));
1334     error = iface_do_create(br, iface_cfg, port_cfg, &ofp_port, &netdev);
1335     if (error) {
1336         iface_clear_db_record(iface_cfg);
1337         return false;
1338     }
1339
1340     /* Get or create the port structure. */
1341     port = port_lookup(br, port_cfg->name);
1342     if (!port) {
1343         port = port_create(br, port_cfg);
1344     }
1345
1346     /* Create the iface structure. */
1347     iface = xzalloc(sizeof *iface);
1348     list_push_back(&port->ifaces, &iface->port_elem);
1349     hmap_insert(&br->iface_by_name, &iface->name_node,
1350                 hash_string(iface_cfg->name, 0));
1351     iface->port = port;
1352     iface->name = xstrdup(iface_cfg->name);
1353     iface->ofp_port = -1;
1354     iface->netdev = netdev;
1355     iface->type = iface_get_type(iface_cfg, br->cfg);
1356     iface->cfg = iface_cfg;
1357
1358     iface_set_ofp_port(iface, ofp_port);
1359
1360     /* Populate initial status in database. */
1361     iface_refresh_stats(iface);
1362     iface_refresh_status(iface);
1363
1364     /* Add bond fake iface if necessary. */
1365     if (port_is_bond_fake_iface(port)) {
1366         struct ofproto_port ofproto_port;
1367
1368         if (ofproto_port_query_by_name(br->ofproto, port->name,
1369                                        &ofproto_port)) {
1370             struct netdev *netdev;
1371             int error;
1372
1373             error = netdev_open(port->name, "internal", &netdev);
1374             if (!error) {
1375                 ofproto_port_add(br->ofproto, netdev, NULL);
1376                 netdev_close(netdev);
1377             } else {
1378                 VLOG_WARN("could not open network device %s (%s)",
1379                           port->name, strerror(error));
1380             }
1381         } else {
1382             /* Already exists, nothing to do. */
1383             ofproto_port_destroy(&ofproto_port);
1384         }
1385     }
1386
1387     return true;
1388 }
1389
1390 /* Set Flow eviction threshold */
1391 static void
1392 bridge_configure_flow_eviction_threshold(struct bridge *br)
1393 {
1394     const char *threshold_str;
1395     unsigned threshold;
1396
1397     threshold_str = smap_get(&br->cfg->other_config,
1398                              "flow-eviction-threshold");
1399     if (threshold_str) {
1400         threshold = strtoul(threshold_str, NULL, 10);
1401     } else {
1402         threshold = OFPROTO_FLOW_EVICTON_THRESHOLD_DEFAULT;
1403     }
1404     ofproto_set_flow_eviction_threshold(br->ofproto, threshold);
1405 }
1406
1407 /* Set forward BPDU option. */
1408 static void
1409 bridge_configure_forward_bpdu(struct bridge *br)
1410 {
1411     ofproto_set_forward_bpdu(br->ofproto,
1412                              smap_get_bool(&br->cfg->other_config,
1413                                            "forward-bpdu",
1414                                            false));
1415 }
1416
1417 /* Set MAC aging time for 'br'. */
1418 static void
1419 bridge_configure_mac_idle_time(struct bridge *br)
1420 {
1421     const char *idle_time_str;
1422     int idle_time;
1423
1424     idle_time_str = smap_get(&br->cfg->other_config, "mac-aging-time");
1425     idle_time = (idle_time_str && atoi(idle_time_str)
1426                  ? atoi(idle_time_str)
1427                  : MAC_ENTRY_DEFAULT_IDLE_TIME);
1428     ofproto_set_mac_idle_time(br->ofproto, idle_time);
1429 }
1430
1431 static void
1432 bridge_pick_local_hw_addr(struct bridge *br, uint8_t ea[ETH_ADDR_LEN],
1433                           struct iface **hw_addr_iface)
1434 {
1435     struct hmapx mirror_output_ports;
1436     const char *hwaddr;
1437     struct port *port;
1438     bool found_addr = false;
1439     int error;
1440     int i;
1441
1442     *hw_addr_iface = NULL;
1443
1444     /* Did the user request a particular MAC? */
1445     hwaddr = smap_get(&br->cfg->other_config, "hwaddr");
1446     if (hwaddr && eth_addr_from_string(hwaddr, ea)) {
1447         if (eth_addr_is_multicast(ea)) {
1448             VLOG_ERR("bridge %s: cannot set MAC address to multicast "
1449                      "address "ETH_ADDR_FMT, br->name, ETH_ADDR_ARGS(ea));
1450         } else if (eth_addr_is_zero(ea)) {
1451             VLOG_ERR("bridge %s: cannot set MAC address to zero", br->name);
1452         } else {
1453             return;
1454         }
1455     }
1456
1457     /* Mirror output ports don't participate in picking the local hardware
1458      * address.  ofproto can't help us find out whether a given port is a
1459      * mirror output because we haven't configured mirrors yet, so we need to
1460      * accumulate them ourselves. */
1461     hmapx_init(&mirror_output_ports);
1462     for (i = 0; i < br->cfg->n_mirrors; i++) {
1463         struct ovsrec_mirror *m = br->cfg->mirrors[i];
1464         if (m->output_port) {
1465             hmapx_add(&mirror_output_ports, m->output_port);
1466         }
1467     }
1468
1469     /* Otherwise choose the minimum non-local MAC address among all of the
1470      * interfaces. */
1471     HMAP_FOR_EACH (port, hmap_node, &br->ports) {
1472         uint8_t iface_ea[ETH_ADDR_LEN];
1473         struct iface *candidate;
1474         struct iface *iface;
1475
1476         /* Mirror output ports don't participate. */
1477         if (hmapx_contains(&mirror_output_ports, port->cfg)) {
1478             continue;
1479         }
1480
1481         /* Choose the MAC address to represent the port. */
1482         iface = NULL;
1483         if (port->cfg->mac && eth_addr_from_string(port->cfg->mac, iface_ea)) {
1484             /* Find the interface with this Ethernet address (if any) so that
1485              * we can provide the correct devname to the caller. */
1486             LIST_FOR_EACH (candidate, port_elem, &port->ifaces) {
1487                 uint8_t candidate_ea[ETH_ADDR_LEN];
1488                 if (!netdev_get_etheraddr(candidate->netdev, candidate_ea)
1489                     && eth_addr_equals(iface_ea, candidate_ea)) {
1490                     iface = candidate;
1491                 }
1492             }
1493         } else {
1494             /* Choose the interface whose MAC address will represent the port.
1495              * The Linux kernel bonding code always chooses the MAC address of
1496              * the first slave added to a bond, and the Fedora networking
1497              * scripts always add slaves to a bond in alphabetical order, so
1498              * for compatibility we choose the interface with the name that is
1499              * first in alphabetical order. */
1500             LIST_FOR_EACH (candidate, port_elem, &port->ifaces) {
1501                 if (!iface || strcmp(candidate->name, iface->name) < 0) {
1502                     iface = candidate;
1503                 }
1504             }
1505
1506             /* The local port doesn't count (since we're trying to choose its
1507              * MAC address anyway). */
1508             if (iface->ofp_port == OFPP_LOCAL) {
1509                 continue;
1510             }
1511
1512             /* Grab MAC. */
1513             error = netdev_get_etheraddr(iface->netdev, iface_ea);
1514             if (error) {
1515                 continue;
1516             }
1517         }
1518
1519         /* Compare against our current choice. */
1520         if (!eth_addr_is_multicast(iface_ea) &&
1521             !eth_addr_is_local(iface_ea) &&
1522             !eth_addr_is_reserved(iface_ea) &&
1523             !eth_addr_is_zero(iface_ea) &&
1524             (!found_addr || eth_addr_compare_3way(iface_ea, ea) < 0))
1525         {
1526             memcpy(ea, iface_ea, ETH_ADDR_LEN);
1527             *hw_addr_iface = iface;
1528             found_addr = true;
1529         }
1530     }
1531     if (found_addr) {
1532         VLOG_DBG("bridge %s: using bridge Ethernet address "ETH_ADDR_FMT,
1533                  br->name, ETH_ADDR_ARGS(ea));
1534     } else {
1535         static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 10);
1536         memcpy(ea, br->default_ea, ETH_ADDR_LEN);
1537         *hw_addr_iface = NULL;
1538         VLOG_WARN_RL(&rl, "bridge %s: using default bridge Ethernet "
1539                      "address "ETH_ADDR_FMT, br->name, ETH_ADDR_ARGS(ea));
1540     }
1541
1542     hmapx_destroy(&mirror_output_ports);
1543 }
1544
1545 /* Choose and returns the datapath ID for bridge 'br' given that the bridge
1546  * Ethernet address is 'bridge_ea'.  If 'bridge_ea' is the Ethernet address of
1547  * an interface on 'br', then that interface must be passed in as
1548  * 'hw_addr_iface'; if 'bridge_ea' was derived some other way, then
1549  * 'hw_addr_iface' must be passed in as a null pointer. */
1550 static uint64_t
1551 bridge_pick_datapath_id(struct bridge *br,
1552                         const uint8_t bridge_ea[ETH_ADDR_LEN],
1553                         struct iface *hw_addr_iface)
1554 {
1555     /*
1556      * The procedure for choosing a bridge MAC address will, in the most
1557      * ordinary case, also choose a unique MAC that we can use as a datapath
1558      * ID.  In some special cases, though, multiple bridges will end up with
1559      * the same MAC address.  This is OK for the bridges, but it will confuse
1560      * the OpenFlow controller, because each datapath needs a unique datapath
1561      * ID.
1562      *
1563      * Datapath IDs must be unique.  It is also very desirable that they be
1564      * stable from one run to the next, so that policy set on a datapath
1565      * "sticks".
1566      */
1567     const char *datapath_id;
1568     uint64_t dpid;
1569
1570     datapath_id = smap_get(&br->cfg->other_config, "datapath-id");
1571     if (datapath_id && dpid_from_string(datapath_id, &dpid)) {
1572         return dpid;
1573     }
1574
1575     if (!hw_addr_iface) {
1576         /*
1577          * A purely internal bridge, that is, one that has no non-virtual
1578          * network devices on it at all, is difficult because it has no
1579          * natural unique identifier at all.
1580          *
1581          * When the host is a XenServer, we handle this case by hashing the
1582          * host's UUID with the name of the bridge.  Names of bridges are
1583          * persistent across XenServer reboots, although they can be reused if
1584          * an internal network is destroyed and then a new one is later
1585          * created, so this is fairly effective.
1586          *
1587          * When the host is not a XenServer, we punt by using a random MAC
1588          * address on each run.
1589          */
1590         const char *host_uuid = xenserver_get_host_uuid();
1591         if (host_uuid) {
1592             char *combined = xasprintf("%s,%s", host_uuid, br->name);
1593             dpid = dpid_from_hash(combined, strlen(combined));
1594             free(combined);
1595             return dpid;
1596         }
1597     }
1598
1599     return eth_addr_to_uint64(bridge_ea);
1600 }
1601
1602 static uint64_t
1603 dpid_from_hash(const void *data, size_t n)
1604 {
1605     uint8_t hash[SHA1_DIGEST_SIZE];
1606
1607     BUILD_ASSERT_DECL(sizeof hash >= ETH_ADDR_LEN);
1608     sha1_bytes(data, n, hash);
1609     eth_addr_mark_random(hash);
1610     return eth_addr_to_uint64(hash);
1611 }
1612
1613 static void
1614 iface_refresh_status(struct iface *iface)
1615 {
1616     struct smap smap;
1617
1618     enum netdev_features current;
1619     enum netdev_flags flags;
1620     int64_t bps;
1621     int mtu;
1622     int64_t mtu_64;
1623     int error;
1624
1625     if (iface_is_synthetic(iface)) {
1626         return;
1627     }
1628
1629     smap_init(&smap);
1630
1631     if (!netdev_get_drv_info(iface->netdev, &smap)) {
1632         ovsrec_interface_set_status(iface->cfg, &smap);
1633     } else {
1634         ovsrec_interface_set_status(iface->cfg, NULL);
1635     }
1636
1637     smap_destroy(&smap);
1638
1639     error = netdev_get_flags(iface->netdev, &flags);
1640     if (!error) {
1641         ovsrec_interface_set_admin_state(iface->cfg,
1642                                          flags & NETDEV_UP ? "up" : "down");
1643     }
1644     else {
1645         ovsrec_interface_set_admin_state(iface->cfg, NULL);
1646     }
1647
1648     error = netdev_get_features(iface->netdev, &current, NULL, NULL, NULL);
1649     if (!error) {
1650         ovsrec_interface_set_duplex(iface->cfg,
1651                                     netdev_features_is_full_duplex(current)
1652                                     ? "full" : "half");
1653         /* warning: uint64_t -> int64_t conversion */
1654         bps = netdev_features_to_bps(current);
1655         ovsrec_interface_set_link_speed(iface->cfg, &bps, 1);
1656     }
1657     else {
1658         ovsrec_interface_set_duplex(iface->cfg, NULL);
1659         ovsrec_interface_set_link_speed(iface->cfg, NULL, 0);
1660     }
1661
1662     error = netdev_get_mtu(iface->netdev, &mtu);
1663     if (!error) {
1664         mtu_64 = mtu;
1665         ovsrec_interface_set_mtu(iface->cfg, &mtu_64, 1);
1666     }
1667     else {
1668         ovsrec_interface_set_mtu(iface->cfg, NULL, 0);
1669     }
1670 }
1671
1672 /* Writes 'iface''s CFM statistics to the database. */
1673 static void
1674 iface_refresh_cfm_stats(struct iface *iface)
1675 {
1676     const struct ovsrec_interface *cfg = iface->cfg;
1677     int fault, error;
1678     const uint64_t *rmps;
1679     size_t n_rmps;
1680     int health;
1681
1682     if (iface_is_synthetic(iface)) {
1683         return;
1684     }
1685
1686     fault = ofproto_port_get_cfm_fault(iface->port->bridge->ofproto,
1687                                        iface->ofp_port);
1688     if (fault >= 0) {
1689         const char *reasons[CFM_FAULT_N_REASONS];
1690         bool fault_bool = fault;
1691         size_t i, j;
1692
1693         j = 0;
1694         for (i = 0; i < CFM_FAULT_N_REASONS; i++) {
1695             int reason = 1 << i;
1696             if (fault & reason) {
1697                 reasons[j++] = cfm_fault_reason_to_str(reason);
1698             }
1699         }
1700
1701         ovsrec_interface_set_cfm_fault(cfg, &fault_bool, 1);
1702         ovsrec_interface_set_cfm_fault_status(cfg, (char **) reasons, j);
1703     } else {
1704         ovsrec_interface_set_cfm_fault(cfg, NULL, 0);
1705         ovsrec_interface_set_cfm_fault_status(cfg, NULL, 0);
1706     }
1707
1708     error = ofproto_port_get_cfm_remote_mpids(iface->port->bridge->ofproto,
1709                                               iface->ofp_port, &rmps, &n_rmps);
1710     if (error >= 0) {
1711         ovsrec_interface_set_cfm_remote_mpids(cfg, (const int64_t *)rmps,
1712                                               n_rmps);
1713     } else {
1714         ovsrec_interface_set_cfm_remote_mpids(cfg, NULL, 0);
1715     }
1716
1717     health = ofproto_port_get_cfm_health(iface->port->bridge->ofproto,
1718                                         iface->ofp_port);
1719     if (health >= 0) {
1720         int64_t cfm_health = health;
1721         ovsrec_interface_set_cfm_health(cfg, &cfm_health, 1);
1722     } else {
1723         ovsrec_interface_set_cfm_health(cfg, NULL, 0);
1724     }
1725 }
1726
1727 static void
1728 iface_refresh_stats(struct iface *iface)
1729 {
1730 #define IFACE_STATS                             \
1731     IFACE_STAT(rx_packets,      "rx_packets")   \
1732     IFACE_STAT(tx_packets,      "tx_packets")   \
1733     IFACE_STAT(rx_bytes,        "rx_bytes")     \
1734     IFACE_STAT(tx_bytes,        "tx_bytes")     \
1735     IFACE_STAT(rx_dropped,      "rx_dropped")   \
1736     IFACE_STAT(tx_dropped,      "tx_dropped")   \
1737     IFACE_STAT(rx_errors,       "rx_errors")    \
1738     IFACE_STAT(tx_errors,       "tx_errors")    \
1739     IFACE_STAT(rx_frame_errors, "rx_frame_err") \
1740     IFACE_STAT(rx_over_errors,  "rx_over_err")  \
1741     IFACE_STAT(rx_crc_errors,   "rx_crc_err")   \
1742     IFACE_STAT(collisions,      "collisions")
1743
1744 #define IFACE_STAT(MEMBER, NAME) NAME,
1745     static char *keys[] = { IFACE_STATS };
1746 #undef IFACE_STAT
1747     int64_t values[ARRAY_SIZE(keys)];
1748     int i;
1749
1750     struct netdev_stats stats;
1751
1752     if (iface_is_synthetic(iface)) {
1753         return;
1754     }
1755
1756     /* Intentionally ignore return value, since errors will set 'stats' to
1757      * all-1s, and we will deal with that correctly below. */
1758     netdev_get_stats(iface->netdev, &stats);
1759
1760     /* Copy statistics into values[] array. */
1761     i = 0;
1762 #define IFACE_STAT(MEMBER, NAME) values[i++] = stats.MEMBER;
1763     IFACE_STATS;
1764 #undef IFACE_STAT
1765     assert(i == ARRAY_SIZE(keys));
1766
1767     ovsrec_interface_set_statistics(iface->cfg, keys, values,
1768                                     ARRAY_SIZE(keys));
1769 #undef IFACE_STATS
1770 }
1771
1772 static void
1773 br_refresh_stp_status(struct bridge *br)
1774 {
1775     struct smap smap = SMAP_INITIALIZER(&smap);
1776     struct ofproto *ofproto = br->ofproto;
1777     struct ofproto_stp_status status;
1778
1779     if (ofproto_get_stp_status(ofproto, &status)) {
1780         return;
1781     }
1782
1783     if (!status.enabled) {
1784         ovsrec_bridge_set_status(br->cfg, NULL);
1785         return;
1786     }
1787
1788     smap_add_format(&smap, "stp_bridge_id", STP_ID_FMT,
1789                     STP_ID_ARGS(status.bridge_id));
1790     smap_add_format(&smap, "stp_designated_root", STP_ID_FMT,
1791                     STP_ID_ARGS(status.designated_root));
1792     smap_add_format(&smap, "stp_root_path_cost", "%d", status.root_path_cost);
1793
1794     ovsrec_bridge_set_status(br->cfg, &smap);
1795     smap_destroy(&smap);
1796 }
1797
1798 static void
1799 port_refresh_stp_status(struct port *port)
1800 {
1801     struct ofproto *ofproto = port->bridge->ofproto;
1802     struct iface *iface;
1803     struct ofproto_port_stp_status status;
1804     char *keys[3];
1805     int64_t int_values[3];
1806     struct smap smap;
1807
1808     if (port_is_synthetic(port)) {
1809         return;
1810     }
1811
1812     /* STP doesn't currently support bonds. */
1813     if (!list_is_singleton(&port->ifaces)) {
1814         ovsrec_port_set_status(port->cfg, NULL);
1815         return;
1816     }
1817
1818     iface = CONTAINER_OF(list_front(&port->ifaces), struct iface, port_elem);
1819
1820     if (ofproto_port_get_stp_status(ofproto, iface->ofp_port, &status)) {
1821         return;
1822     }
1823
1824     if (!status.enabled) {
1825         ovsrec_port_set_status(port->cfg, NULL);
1826         ovsrec_port_set_statistics(port->cfg, NULL, NULL, 0);
1827         return;
1828     }
1829
1830     /* Set Status column. */
1831     smap_init(&smap);
1832     smap_add_format(&smap, "stp_port_id", STP_PORT_ID_FMT, status.port_id);
1833     smap_add(&smap, "stp_state", stp_state_name(status.state));
1834     smap_add_format(&smap, "stp_sec_in_state", "%u", status.sec_in_state);
1835     smap_add(&smap, "stp_role", stp_role_name(status.role));
1836     ovsrec_port_set_status(port->cfg, &smap);
1837     smap_destroy(&smap);
1838
1839     /* Set Statistics column. */
1840     keys[0] = "stp_tx_count";
1841     int_values[0] = status.tx_count;
1842     keys[1] = "stp_rx_count";
1843     int_values[1] = status.rx_count;
1844     keys[2] = "stp_error_count";
1845     int_values[2] = status.error_count;
1846
1847     ovsrec_port_set_statistics(port->cfg, keys, int_values,
1848                                ARRAY_SIZE(int_values));
1849 }
1850
1851 static bool
1852 enable_system_stats(const struct ovsrec_open_vswitch *cfg)
1853 {
1854     return smap_get_bool(&cfg->other_config, "enable-statistics", false);
1855 }
1856
1857 static void
1858 refresh_system_stats(const struct ovsrec_open_vswitch *cfg)
1859 {
1860     struct ovsdb_datum datum;
1861     struct shash stats;
1862
1863     shash_init(&stats);
1864     if (enable_system_stats(cfg)) {
1865         get_system_stats(&stats);
1866     }
1867
1868     ovsdb_datum_from_shash(&datum, &stats);
1869     ovsdb_idl_txn_write(&cfg->header_, &ovsrec_open_vswitch_col_statistics,
1870                         &datum);
1871 }
1872
1873 static inline const char *
1874 nx_role_to_str(enum nx_role role)
1875 {
1876     switch (role) {
1877     case NX_ROLE_OTHER:
1878         return "other";
1879     case NX_ROLE_MASTER:
1880         return "master";
1881     case NX_ROLE_SLAVE:
1882         return "slave";
1883     default:
1884         return "*** INVALID ROLE ***";
1885     }
1886 }
1887
1888 static void
1889 refresh_controller_status(void)
1890 {
1891     struct bridge *br;
1892     struct shash info;
1893     const struct ovsrec_controller *cfg;
1894
1895     shash_init(&info);
1896
1897     /* Accumulate status for controllers on all bridges. */
1898     HMAP_FOR_EACH (br, node, &all_bridges) {
1899         ofproto_get_ofproto_controller_info(br->ofproto, &info);
1900     }
1901
1902     /* Update each controller in the database with current status. */
1903     OVSREC_CONTROLLER_FOR_EACH(cfg, idl) {
1904         struct ofproto_controller_info *cinfo =
1905             shash_find_data(&info, cfg->target);
1906
1907         if (cinfo) {
1908             struct smap smap = SMAP_INITIALIZER(&smap);
1909             const char **values = cinfo->pairs.values;
1910             const char **keys = cinfo->pairs.keys;
1911             size_t i;
1912
1913             for (i = 0; i < cinfo->pairs.n; i++) {
1914                 smap_add(&smap, keys[i], values[i]);
1915             }
1916
1917             ovsrec_controller_set_is_connected(cfg, cinfo->is_connected);
1918             ovsrec_controller_set_role(cfg, nx_role_to_str(cinfo->role));
1919             ovsrec_controller_set_status(cfg, &smap);
1920             smap_destroy(&smap);
1921         } else {
1922             ovsrec_controller_set_is_connected(cfg, false);
1923             ovsrec_controller_set_role(cfg, NULL);
1924             ovsrec_controller_set_status(cfg, NULL);
1925         }
1926     }
1927
1928     ofproto_free_ofproto_controller_info(&info);
1929 }
1930
1931 static void
1932 refresh_cfm_stats(void)
1933 {
1934     static struct ovsdb_idl_txn *txn = NULL;
1935
1936     if (!txn) {
1937         struct bridge *br;
1938
1939         txn = ovsdb_idl_txn_create(idl);
1940
1941         HMAP_FOR_EACH (br, node, &all_bridges) {
1942             struct iface *iface;
1943
1944             HMAP_FOR_EACH (iface, name_node, &br->iface_by_name) {
1945                 iface_refresh_cfm_stats(iface);
1946             }
1947         }
1948     }
1949
1950     if (ovsdb_idl_txn_commit(txn) != TXN_INCOMPLETE) {
1951         ovsdb_idl_txn_destroy(txn);
1952         txn = NULL;
1953     }
1954 }
1955
1956 /* Performs periodic activity required by bridges that needs to be done with
1957  * the least possible latency.
1958  *
1959  * It makes sense to call this function a couple of times per poll loop, to
1960  * provide a significant performance boost on some benchmarks with ofprotos
1961  * that use the ofproto-dpif implementation. */
1962 void
1963 bridge_run_fast(void)
1964 {
1965     struct bridge *br;
1966
1967     HMAP_FOR_EACH (br, node, &all_bridges) {
1968         ofproto_run_fast(br->ofproto);
1969     }
1970 }
1971
1972 void
1973 bridge_run(void)
1974 {
1975     static const struct ovsrec_open_vswitch null_cfg;
1976     const struct ovsrec_open_vswitch *cfg;
1977     struct ovsdb_idl_txn *reconf_txn = NULL;
1978
1979     bool vlan_splinters_changed;
1980     struct bridge *br;
1981
1982     /* (Re)configure if necessary. */
1983     if (!reconfiguring) {
1984         ovsdb_idl_run(idl);
1985
1986         if (ovsdb_idl_is_lock_contended(idl)) {
1987             static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 1);
1988             struct bridge *br, *next_br;
1989
1990             VLOG_ERR_RL(&rl, "another ovs-vswitchd process is running, "
1991                         "disabling this process until it goes away");
1992
1993             HMAP_FOR_EACH_SAFE (br, next_br, node, &all_bridges) {
1994                 bridge_destroy(br);
1995             }
1996             return;
1997         } else if (!ovsdb_idl_has_lock(idl)) {
1998             return;
1999         }
2000     }
2001     cfg = ovsrec_open_vswitch_first(idl);
2002
2003     /* Let each bridge do the work that it needs to do. */
2004     HMAP_FOR_EACH (br, node, &all_bridges) {
2005         ofproto_run(br->ofproto);
2006     }
2007
2008     /* Re-configure SSL.  We do this on every trip through the main loop,
2009      * instead of just when the database changes, because the contents of the
2010      * key and certificate files can change without the database changing.
2011      *
2012      * We do this before bridge_reconfigure() because that function might
2013      * initiate SSL connections and thus requires SSL to be configured. */
2014     if (cfg && cfg->ssl) {
2015         const struct ovsrec_ssl *ssl = cfg->ssl;
2016
2017         stream_ssl_set_key_and_cert(ssl->private_key, ssl->certificate);
2018         stream_ssl_set_ca_cert_file(ssl->ca_cert, ssl->bootstrap_ca_cert);
2019     }
2020
2021     if (!reconfiguring) {
2022         /* If VLAN splinters are in use, then we need to reconfigure if VLAN
2023          * usage has changed. */
2024         vlan_splinters_changed = false;
2025         if (vlan_splinters_enabled_anywhere) {
2026             HMAP_FOR_EACH (br, node, &all_bridges) {
2027                 if (ofproto_has_vlan_usage_changed(br->ofproto)) {
2028                     vlan_splinters_changed = true;
2029                     break;
2030                 }
2031             }
2032         }
2033
2034         if (ovsdb_idl_get_seqno(idl) != idl_seqno || vlan_splinters_changed) {
2035             idl_seqno = ovsdb_idl_get_seqno(idl);
2036             if (cfg) {
2037                 reconf_txn = ovsdb_idl_txn_create(idl);
2038                 bridge_reconfigure(cfg);
2039             } else {
2040                 /* We still need to reconfigure to avoid dangling pointers to
2041                  * now-destroyed ovsrec structures inside bridge data. */
2042                 bridge_reconfigure(&null_cfg);
2043             }
2044         }
2045     }
2046
2047     if (reconfiguring) {
2048         if (cfg) {
2049             if (!reconf_txn) {
2050                 reconf_txn = ovsdb_idl_txn_create(idl);
2051             }
2052             if (bridge_reconfigure_continue(cfg)) {
2053                 ovsrec_open_vswitch_set_cur_cfg(cfg, cfg->next_cfg);
2054             }
2055         } else {
2056             bridge_reconfigure_continue(&null_cfg);
2057         }
2058     }
2059
2060     if (reconf_txn) {
2061         ovsdb_idl_txn_commit(reconf_txn);
2062         ovsdb_idl_txn_destroy(reconf_txn);
2063         reconf_txn = NULL;
2064     }
2065
2066     /* Refresh system and interface stats if necessary. */
2067     if (time_msec() >= stats_timer) {
2068         if (cfg) {
2069             struct ovsdb_idl_txn *txn;
2070
2071             txn = ovsdb_idl_txn_create(idl);
2072             HMAP_FOR_EACH (br, node, &all_bridges) {
2073                 struct port *port;
2074                 struct mirror *m;
2075
2076                 HMAP_FOR_EACH (port, hmap_node, &br->ports) {
2077                     struct iface *iface;
2078
2079                     LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
2080                         iface_refresh_stats(iface);
2081                         iface_refresh_status(iface);
2082                     }
2083                 }
2084
2085                 HMAP_FOR_EACH (m, hmap_node, &br->mirrors) {
2086                     mirror_refresh_stats(m);
2087                 }
2088
2089             }
2090             refresh_system_stats(cfg);
2091             refresh_controller_status();
2092             ovsdb_idl_txn_commit(txn);
2093             ovsdb_idl_txn_destroy(txn); /* XXX */
2094         }
2095
2096         stats_timer = time_msec() + STATS_INTERVAL;
2097     }
2098
2099     if (time_msec() >= db_limiter) {
2100         struct ovsdb_idl_txn *txn;
2101
2102         txn = ovsdb_idl_txn_create(idl);
2103         HMAP_FOR_EACH (br, node, &all_bridges) {
2104             struct iface *iface;
2105             struct port *port;
2106
2107             br_refresh_stp_status(br);
2108
2109             HMAP_FOR_EACH (port, hmap_node, &br->ports) {
2110                 port_refresh_stp_status(port);
2111             }
2112
2113             HMAP_FOR_EACH (iface, name_node, &br->iface_by_name) {
2114                 const char *link_state;
2115                 int64_t link_resets;
2116                 int current;
2117
2118                 if (iface_is_synthetic(iface)) {
2119                     continue;
2120                 }
2121
2122                 current = ofproto_port_is_lacp_current(br->ofproto,
2123                                                        iface->ofp_port);
2124                 if (current >= 0) {
2125                     bool bl = current;
2126                     ovsrec_interface_set_lacp_current(iface->cfg, &bl, 1);
2127                 } else {
2128                     ovsrec_interface_set_lacp_current(iface->cfg, NULL, 0);
2129                 }
2130
2131                 link_state = netdev_get_carrier(iface->netdev) ? "up" : "down";
2132                 ovsrec_interface_set_link_state(iface->cfg, link_state);
2133
2134                 link_resets = netdev_get_carrier_resets(iface->netdev);
2135                 ovsrec_interface_set_link_resets(iface->cfg, &link_resets, 1);
2136             }
2137         }
2138
2139         if (ovsdb_idl_txn_commit(txn) != TXN_UNCHANGED) {
2140             db_limiter = time_msec() + DB_LIMIT_INTERVAL;
2141         }
2142         ovsdb_idl_txn_destroy(txn);
2143     }
2144
2145     refresh_cfm_stats();
2146 }
2147
2148 void
2149 bridge_wait(void)
2150 {
2151     ovsdb_idl_wait(idl);
2152
2153     if (reconfiguring) {
2154         poll_immediate_wake();
2155     }
2156
2157     if (!hmap_is_empty(&all_bridges)) {
2158         struct bridge *br;
2159
2160         HMAP_FOR_EACH (br, node, &all_bridges) {
2161             ofproto_wait(br->ofproto);
2162         }
2163         poll_timer_wait_until(stats_timer);
2164
2165         if (db_limiter > time_msec()) {
2166             poll_timer_wait_until(db_limiter);
2167         }
2168     }
2169 }
2170
2171 /* Adds some memory usage statistics for bridges into 'usage', for use with
2172  * memory_report(). */
2173 void
2174 bridge_get_memory_usage(struct simap *usage)
2175 {
2176     struct bridge *br;
2177
2178     HMAP_FOR_EACH (br, node, &all_bridges) {
2179         ofproto_get_memory_usage(br->ofproto, usage);
2180     }
2181 }
2182 \f
2183 /* QoS unixctl user interface functions. */
2184
2185 struct qos_unixctl_show_cbdata {
2186     struct ds *ds;
2187     struct iface *iface;
2188 };
2189
2190 static void
2191 qos_unixctl_show_cb(unsigned int queue_id,
2192                     const struct smap *details,
2193                     void *aux)
2194 {
2195     struct qos_unixctl_show_cbdata *data = aux;
2196     struct ds *ds = data->ds;
2197     struct iface *iface = data->iface;
2198     struct netdev_queue_stats stats;
2199     struct smap_node *node;
2200     int error;
2201
2202     ds_put_cstr(ds, "\n");
2203     if (queue_id) {
2204         ds_put_format(ds, "Queue %u:\n", queue_id);
2205     } else {
2206         ds_put_cstr(ds, "Default:\n");
2207     }
2208
2209     SMAP_FOR_EACH (node, details) {
2210         ds_put_format(ds, "\t%s: %s\n", node->key, node->value);
2211     }
2212
2213     error = netdev_get_queue_stats(iface->netdev, queue_id, &stats);
2214     if (!error) {
2215         if (stats.tx_packets != UINT64_MAX) {
2216             ds_put_format(ds, "\ttx_packets: %"PRIu64"\n", stats.tx_packets);
2217         }
2218
2219         if (stats.tx_bytes != UINT64_MAX) {
2220             ds_put_format(ds, "\ttx_bytes: %"PRIu64"\n", stats.tx_bytes);
2221         }
2222
2223         if (stats.tx_errors != UINT64_MAX) {
2224             ds_put_format(ds, "\ttx_errors: %"PRIu64"\n", stats.tx_errors);
2225         }
2226     } else {
2227         ds_put_format(ds, "\tFailed to get statistics for queue %u: %s",
2228                       queue_id, strerror(error));
2229     }
2230 }
2231
2232 static void
2233 qos_unixctl_show(struct unixctl_conn *conn, int argc OVS_UNUSED,
2234                  const char *argv[], void *aux OVS_UNUSED)
2235 {
2236     struct ds ds = DS_EMPTY_INITIALIZER;
2237     struct smap smap = SMAP_INITIALIZER(&smap);
2238     struct iface *iface;
2239     const char *type;
2240     struct smap_node *node;
2241     struct qos_unixctl_show_cbdata data;
2242     int error;
2243
2244     iface = iface_find(argv[1]);
2245     if (!iface) {
2246         unixctl_command_reply_error(conn, "no such interface");
2247         return;
2248     }
2249
2250     netdev_get_qos(iface->netdev, &type, &smap);
2251
2252     if (*type != '\0') {
2253         ds_put_format(&ds, "QoS: %s %s\n", iface->name, type);
2254
2255         SMAP_FOR_EACH (node, &smap) {
2256             ds_put_format(&ds, "%s: %s\n", node->key, node->value);
2257         }
2258
2259         data.ds = &ds;
2260         data.iface = iface;
2261         error = netdev_dump_queues(iface->netdev, qos_unixctl_show_cb, &data);
2262
2263         if (error) {
2264             ds_put_format(&ds, "failed to dump queues: %s", strerror(error));
2265         }
2266         unixctl_command_reply(conn, ds_cstr(&ds));
2267     } else {
2268         ds_put_format(&ds, "QoS not configured on %s\n", iface->name);
2269         unixctl_command_reply_error(conn, ds_cstr(&ds));
2270     }
2271
2272     smap_destroy(&smap);
2273     ds_destroy(&ds);
2274 }
2275 \f
2276 /* Bridge reconfiguration functions. */
2277 static void
2278 bridge_create(const struct ovsrec_bridge *br_cfg)
2279 {
2280     struct bridge *br;
2281
2282     assert(!bridge_lookup(br_cfg->name));
2283     br = xzalloc(sizeof *br);
2284
2285     br->name = xstrdup(br_cfg->name);
2286     br->type = xstrdup(ofproto_normalize_type(br_cfg->datapath_type));
2287     br->cfg = br_cfg;
2288
2289     /* Derive the default Ethernet address from the bridge's UUID.  This should
2290      * be unique and it will be stable between ovs-vswitchd runs.  */
2291     memcpy(br->default_ea, &br_cfg->header_.uuid, ETH_ADDR_LEN);
2292     eth_addr_mark_random(br->default_ea);
2293
2294     hmap_init(&br->ports);
2295     hmap_init(&br->ifaces);
2296     hmap_init(&br->iface_by_name);
2297     hmap_init(&br->mirrors);
2298
2299     hmap_init(&br->if_cfg_todo);
2300     list_init(&br->ofpp_garbage);
2301
2302     hmap_insert(&all_bridges, &br->node, hash_string(br->name, 0));
2303 }
2304
2305 static void
2306 bridge_destroy(struct bridge *br)
2307 {
2308     if (br) {
2309         struct mirror *mirror, *next_mirror;
2310         struct port *port, *next_port;
2311         struct if_cfg *if_cfg, *next_if_cfg;
2312         struct ofpp_garbage *garbage, *next_garbage;
2313
2314         HMAP_FOR_EACH_SAFE (port, next_port, hmap_node, &br->ports) {
2315             port_destroy(port);
2316         }
2317         HMAP_FOR_EACH_SAFE (mirror, next_mirror, hmap_node, &br->mirrors) {
2318             mirror_destroy(mirror);
2319         }
2320         HMAP_FOR_EACH_SAFE (if_cfg, next_if_cfg, hmap_node, &br->if_cfg_todo) {
2321             hmap_remove(&br->if_cfg_todo, &if_cfg->hmap_node);
2322             free(if_cfg);
2323         }
2324         LIST_FOR_EACH_SAFE (garbage, next_garbage, list_node,
2325                             &br->ofpp_garbage) {
2326             list_remove(&garbage->list_node);
2327             free(garbage);
2328         }
2329
2330         hmap_remove(&all_bridges, &br->node);
2331         ofproto_destroy(br->ofproto);
2332         hmap_destroy(&br->ifaces);
2333         hmap_destroy(&br->ports);
2334         hmap_destroy(&br->iface_by_name);
2335         hmap_destroy(&br->mirrors);
2336         hmap_destroy(&br->if_cfg_todo);
2337         free(br->name);
2338         free(br->type);
2339         free(br);
2340     }
2341 }
2342
2343 static struct bridge *
2344 bridge_lookup(const char *name)
2345 {
2346     struct bridge *br;
2347
2348     HMAP_FOR_EACH_WITH_HASH (br, node, hash_string(name, 0), &all_bridges) {
2349         if (!strcmp(br->name, name)) {
2350             return br;
2351         }
2352     }
2353     return NULL;
2354 }
2355
2356 /* Handle requests for a listing of all flows known by the OpenFlow
2357  * stack, including those normally hidden. */
2358 static void
2359 bridge_unixctl_dump_flows(struct unixctl_conn *conn, int argc OVS_UNUSED,
2360                           const char *argv[], void *aux OVS_UNUSED)
2361 {
2362     struct bridge *br;
2363     struct ds results;
2364
2365     br = bridge_lookup(argv[1]);
2366     if (!br) {
2367         unixctl_command_reply_error(conn, "Unknown bridge");
2368         return;
2369     }
2370
2371     ds_init(&results);
2372     ofproto_get_all_flows(br->ofproto, &results);
2373
2374     unixctl_command_reply(conn, ds_cstr(&results));
2375     ds_destroy(&results);
2376 }
2377
2378 /* "bridge/reconnect [BRIDGE]": makes BRIDGE drop all of its controller
2379  * connections and reconnect.  If BRIDGE is not specified, then all bridges
2380  * drop their controller connections and reconnect. */
2381 static void
2382 bridge_unixctl_reconnect(struct unixctl_conn *conn, int argc,
2383                          const char *argv[], void *aux OVS_UNUSED)
2384 {
2385     struct bridge *br;
2386     if (argc > 1) {
2387         br = bridge_lookup(argv[1]);
2388         if (!br) {
2389             unixctl_command_reply_error(conn,  "Unknown bridge");
2390             return;
2391         }
2392         ofproto_reconnect_controllers(br->ofproto);
2393     } else {
2394         HMAP_FOR_EACH (br, node, &all_bridges) {
2395             ofproto_reconnect_controllers(br->ofproto);
2396         }
2397     }
2398     unixctl_command_reply(conn, NULL);
2399 }
2400
2401 static size_t
2402 bridge_get_controllers(const struct bridge *br,
2403                        struct ovsrec_controller ***controllersp)
2404 {
2405     struct ovsrec_controller **controllers;
2406     size_t n_controllers;
2407
2408     controllers = br->cfg->controller;
2409     n_controllers = br->cfg->n_controller;
2410
2411     if (n_controllers == 1 && !strcmp(controllers[0]->target, "none")) {
2412         controllers = NULL;
2413         n_controllers = 0;
2414     }
2415
2416     if (controllersp) {
2417         *controllersp = controllers;
2418     }
2419     return n_controllers;
2420 }
2421
2422 static void
2423 bridge_queue_if_cfg(struct bridge *br,
2424                     const struct ovsrec_interface *cfg,
2425                     const struct ovsrec_port *parent)
2426 {
2427     struct if_cfg *if_cfg = xmalloc(sizeof *if_cfg);
2428
2429     if_cfg->cfg = cfg;
2430     if_cfg->parent = parent;
2431     hmap_insert(&br->if_cfg_todo, &if_cfg->hmap_node,
2432                 hash_string(if_cfg->cfg->name, 0));
2433 }
2434
2435 /* Deletes "struct port"s and "struct iface"s under 'br' which aren't
2436  * consistent with 'br->cfg'.  Updates 'br->if_cfg_queue' with interfaces which
2437  * 'br' needs to complete its configuration. */
2438 static void
2439 bridge_add_del_ports(struct bridge *br,
2440                      const unsigned long int *splinter_vlans)
2441 {
2442     struct shash_node *port_node;
2443     struct port *port, *next;
2444     struct shash new_ports;
2445     size_t i;
2446
2447     assert(hmap_is_empty(&br->if_cfg_todo));
2448
2449     /* Collect new ports. */
2450     shash_init(&new_ports);
2451     for (i = 0; i < br->cfg->n_ports; i++) {
2452         const char *name = br->cfg->ports[i]->name;
2453         if (!shash_add_once(&new_ports, name, br->cfg->ports[i])) {
2454             VLOG_WARN("bridge %s: %s specified twice as bridge port",
2455                       br->name, name);
2456         }
2457     }
2458     if (bridge_get_controllers(br, NULL)
2459         && !shash_find(&new_ports, br->name)) {
2460         VLOG_WARN("bridge %s: no port named %s, synthesizing one",
2461                   br->name, br->name);
2462
2463         ovsrec_interface_init(&br->synth_local_iface);
2464         ovsrec_port_init(&br->synth_local_port);
2465
2466         br->synth_local_port.interfaces = &br->synth_local_ifacep;
2467         br->synth_local_port.n_interfaces = 1;
2468         br->synth_local_port.name = br->name;
2469
2470         br->synth_local_iface.name = br->name;
2471         br->synth_local_iface.type = "internal";
2472
2473         br->synth_local_ifacep = &br->synth_local_iface;
2474
2475         shash_add(&new_ports, br->name, &br->synth_local_port);
2476     }
2477
2478     if (splinter_vlans) {
2479         add_vlan_splinter_ports(br, splinter_vlans, &new_ports);
2480     }
2481
2482     /* Get rid of deleted ports.
2483      * Get rid of deleted interfaces on ports that still exist. */
2484     HMAP_FOR_EACH_SAFE (port, next, hmap_node, &br->ports) {
2485         port->cfg = shash_find_data(&new_ports, port->name);
2486         if (!port->cfg) {
2487             port_destroy(port);
2488         } else {
2489             port_del_ifaces(port);
2490         }
2491     }
2492
2493     /* Update iface->cfg and iface->type in interfaces that still exist.
2494      * Add new interfaces to creation queue. */
2495     SHASH_FOR_EACH (port_node, &new_ports) {
2496         const struct ovsrec_port *port = port_node->data;
2497         size_t i;
2498
2499         for (i = 0; i < port->n_interfaces; i++) {
2500             const struct ovsrec_interface *cfg = port->interfaces[i];
2501             struct iface *iface = iface_lookup(br, cfg->name);
2502             const char *type = iface_get_type(cfg, br->cfg);
2503
2504             if (iface) {
2505                 iface->cfg = cfg;
2506                 iface->type = type;
2507             } else if (strcmp(type, "null")) {
2508                 bridge_queue_if_cfg(br, cfg, port);
2509             }
2510         }
2511     }
2512
2513     shash_destroy(&new_ports);
2514 }
2515
2516 /* Initializes 'oc' appropriately as a management service controller for
2517  * 'br'.
2518  *
2519  * The caller must free oc->target when it is no longer needed. */
2520 static void
2521 bridge_ofproto_controller_for_mgmt(const struct bridge *br,
2522                                    struct ofproto_controller *oc)
2523 {
2524     oc->target = xasprintf("punix:%s/%s.mgmt", ovs_rundir(), br->name);
2525     oc->max_backoff = 0;
2526     oc->probe_interval = 60;
2527     oc->band = OFPROTO_OUT_OF_BAND;
2528     oc->rate_limit = 0;
2529     oc->burst_limit = 0;
2530     oc->enable_async_msgs = true;
2531 }
2532
2533 /* Converts ovsrec_controller 'c' into an ofproto_controller in 'oc'.  */
2534 static void
2535 bridge_ofproto_controller_from_ovsrec(const struct ovsrec_controller *c,
2536                                       struct ofproto_controller *oc)
2537 {
2538     int dscp;
2539
2540     oc->target = c->target;
2541     oc->max_backoff = c->max_backoff ? *c->max_backoff / 1000 : 8;
2542     oc->probe_interval = c->inactivity_probe ? *c->inactivity_probe / 1000 : 5;
2543     oc->band = (!c->connection_mode || !strcmp(c->connection_mode, "in-band")
2544                 ? OFPROTO_IN_BAND : OFPROTO_OUT_OF_BAND);
2545     oc->rate_limit = c->controller_rate_limit ? *c->controller_rate_limit : 0;
2546     oc->burst_limit = (c->controller_burst_limit
2547                        ? *c->controller_burst_limit : 0);
2548     oc->enable_async_msgs = (!c->enable_async_messages
2549                              || *c->enable_async_messages);
2550     dscp = smap_get_int(&c->other_config, "dscp", DSCP_DEFAULT);
2551     if (dscp < 0 || dscp > 63) {
2552         dscp = DSCP_DEFAULT;
2553     }
2554     oc->dscp = dscp;
2555 }
2556
2557 /* Configures the IP stack for 'br''s local interface properly according to the
2558  * configuration in 'c'.  */
2559 static void
2560 bridge_configure_local_iface_netdev(struct bridge *br,
2561                                     struct ovsrec_controller *c)
2562 {
2563     struct netdev *netdev;
2564     struct in_addr mask, gateway;
2565
2566     struct iface *local_iface;
2567     struct in_addr ip;
2568
2569     /* If there's no local interface or no IP address, give up. */
2570     local_iface = iface_from_ofp_port(br, OFPP_LOCAL);
2571     if (!local_iface || !c->local_ip || !inet_aton(c->local_ip, &ip)) {
2572         return;
2573     }
2574
2575     /* Bring up the local interface. */
2576     netdev = local_iface->netdev;
2577     netdev_turn_flags_on(netdev, NETDEV_UP, true);
2578
2579     /* Configure the IP address and netmask. */
2580     if (!c->local_netmask
2581         || !inet_aton(c->local_netmask, &mask)
2582         || !mask.s_addr) {
2583         mask.s_addr = guess_netmask(ip.s_addr);
2584     }
2585     if (!netdev_set_in4(netdev, ip, mask)) {
2586         VLOG_INFO("bridge %s: configured IP address "IP_FMT", netmask "IP_FMT,
2587                   br->name, IP_ARGS(&ip.s_addr), IP_ARGS(&mask.s_addr));
2588     }
2589
2590     /* Configure the default gateway. */
2591     if (c->local_gateway
2592         && inet_aton(c->local_gateway, &gateway)
2593         && gateway.s_addr) {
2594         if (!netdev_add_router(netdev, gateway)) {
2595             VLOG_INFO("bridge %s: configured gateway "IP_FMT,
2596                       br->name, IP_ARGS(&gateway.s_addr));
2597         }
2598     }
2599 }
2600
2601 /* Returns true if 'a' and 'b' are the same except that any number of slashes
2602  * in either string are treated as equal to any number of slashes in the other,
2603  * e.g. "x///y" is equal to "x/y". */
2604 static bool
2605 equal_pathnames(const char *a, const char *b)
2606 {
2607     while (*a == *b) {
2608         if (*a == '/') {
2609             a += strspn(a, "/");
2610             b += strspn(b, "/");
2611         } else if (*a == '\0') {
2612             return true;
2613         } else {
2614             a++;
2615             b++;
2616         }
2617     }
2618     return false;
2619 }
2620
2621 static void
2622 bridge_configure_remotes(struct bridge *br,
2623                          const struct sockaddr_in *managers, size_t n_managers)
2624 {
2625     bool disable_in_band;
2626
2627     struct ovsrec_controller **controllers;
2628     size_t n_controllers;
2629
2630     enum ofproto_fail_mode fail_mode;
2631
2632     struct ofproto_controller *ocs;
2633     size_t n_ocs;
2634     size_t i;
2635
2636     /* Check if we should disable in-band control on this bridge. */
2637     disable_in_band = smap_get_bool(&br->cfg->other_config, "disable-in-band",
2638                                     false);
2639
2640     /* Set OpenFlow queue ID for in-band control. */
2641     ofproto_set_in_band_queue(br->ofproto,
2642                               smap_get_int(&br->cfg->other_config,
2643                                            "in-band-queue", -1));
2644
2645     if (disable_in_band) {
2646         ofproto_set_extra_in_band_remotes(br->ofproto, NULL, 0);
2647     } else {
2648         ofproto_set_extra_in_band_remotes(br->ofproto, managers, n_managers);
2649     }
2650
2651     n_controllers = bridge_get_controllers(br, &controllers);
2652
2653     ocs = xmalloc((n_controllers + 1) * sizeof *ocs);
2654     n_ocs = 0;
2655
2656     bridge_ofproto_controller_for_mgmt(br, &ocs[n_ocs++]);
2657     for (i = 0; i < n_controllers; i++) {
2658         struct ovsrec_controller *c = controllers[i];
2659
2660         if (!strncmp(c->target, "punix:", 6)
2661             || !strncmp(c->target, "unix:", 5)) {
2662             static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
2663             char *whitelist;
2664
2665             whitelist = xasprintf("unix:%s/%s.controller",
2666                                   ovs_rundir(), br->name);
2667             if (!equal_pathnames(c->target, whitelist)) {
2668                 /* Prevent remote ovsdb-server users from accessing arbitrary
2669                  * Unix domain sockets and overwriting arbitrary local
2670                  * files. */
2671                 VLOG_ERR_RL(&rl, "bridge %s: Not adding Unix domain socket "
2672                             "controller \"%s\" due to possibility for remote "
2673                             "exploit.  Instead, specify whitelisted \"%s\" or "
2674                             "connect to \"unix:%s/%s.mgmt\" (which is always "
2675                             "available without special configuration).",
2676                             br->name, c->target, whitelist,
2677                             ovs_rundir(), br->name);
2678                 free(whitelist);
2679                 continue;
2680             }
2681
2682             free(whitelist);
2683         }
2684
2685         bridge_configure_local_iface_netdev(br, c);
2686         bridge_ofproto_controller_from_ovsrec(c, &ocs[n_ocs]);
2687         if (disable_in_band) {
2688             ocs[n_ocs].band = OFPROTO_OUT_OF_BAND;
2689         }
2690         n_ocs++;
2691     }
2692
2693     ofproto_set_controllers(br->ofproto, ocs, n_ocs);
2694     free(ocs[0].target); /* From bridge_ofproto_controller_for_mgmt(). */
2695     free(ocs);
2696
2697     /* Set the fail-mode. */
2698     fail_mode = !br->cfg->fail_mode
2699                 || !strcmp(br->cfg->fail_mode, "standalone")
2700                     ? OFPROTO_FAIL_STANDALONE
2701                     : OFPROTO_FAIL_SECURE;
2702     ofproto_set_fail_mode(br->ofproto, fail_mode);
2703
2704     /* Configure OpenFlow controller connection snooping. */
2705     if (!ofproto_has_snoops(br->ofproto)) {
2706         struct sset snoops;
2707
2708         sset_init(&snoops);
2709         sset_add_and_free(&snoops, xasprintf("punix:%s/%s.snoop",
2710                                              ovs_rundir(), br->name));
2711         ofproto_set_snoops(br->ofproto, &snoops);
2712         sset_destroy(&snoops);
2713     }
2714 }
2715
2716 static void
2717 bridge_configure_tables(struct bridge *br)
2718 {
2719     static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
2720     int n_tables;
2721     int i, j;
2722
2723     n_tables = ofproto_get_n_tables(br->ofproto);
2724     j = 0;
2725     for (i = 0; i < n_tables; i++) {
2726         struct ofproto_table_settings s;
2727
2728         s.name = NULL;
2729         s.max_flows = UINT_MAX;
2730         s.groups = NULL;
2731         s.n_groups = 0;
2732
2733         if (j < br->cfg->n_flow_tables && i == br->cfg->key_flow_tables[j]) {
2734             struct ovsrec_flow_table *cfg = br->cfg->value_flow_tables[j++];
2735
2736             s.name = cfg->name;
2737             if (cfg->n_flow_limit && *cfg->flow_limit < UINT_MAX) {
2738                 s.max_flows = *cfg->flow_limit;
2739             }
2740             if (cfg->overflow_policy
2741                 && !strcmp(cfg->overflow_policy, "evict")) {
2742                 size_t k;
2743
2744                 s.groups = xmalloc(cfg->n_groups * sizeof *s.groups);
2745                 for (k = 0; k < cfg->n_groups; k++) {
2746                     const char *string = cfg->groups[k];
2747                     char *msg;
2748
2749                     msg = mf_parse_subfield__(&s.groups[k], &string);
2750                     if (msg) {
2751                         VLOG_WARN_RL(&rl, "bridge %s table %d: error parsing "
2752                                      "'groups' (%s)", br->name, i, msg);
2753                         free(msg);
2754                     } else if (*string) {
2755                         VLOG_WARN_RL(&rl, "bridge %s table %d: 'groups' "
2756                                      "element '%s' contains trailing garbage",
2757                                      br->name, i, cfg->groups[k]);
2758                     } else {
2759                         s.n_groups++;
2760                     }
2761                 }
2762             }
2763         }
2764
2765         ofproto_configure_table(br->ofproto, i, &s);
2766
2767         free(s.groups);
2768     }
2769     for (; j < br->cfg->n_flow_tables; j++) {
2770         VLOG_WARN_RL(&rl, "bridge %s: ignoring configuration for flow table "
2771                      "%"PRId64" not supported by this datapath", br->name,
2772                      br->cfg->key_flow_tables[j]);
2773     }
2774 }
2775 \f
2776 /* Port functions. */
2777
2778 static struct port *
2779 port_create(struct bridge *br, const struct ovsrec_port *cfg)
2780 {
2781     struct port *port;
2782
2783     port = xzalloc(sizeof *port);
2784     port->bridge = br;
2785     port->name = xstrdup(cfg->name);
2786     port->cfg = cfg;
2787     list_init(&port->ifaces);
2788
2789     hmap_insert(&br->ports, &port->hmap_node, hash_string(port->name, 0));
2790     return port;
2791 }
2792
2793 /* Deletes interfaces from 'port' that are no longer configured for it. */
2794 static void
2795 port_del_ifaces(struct port *port)
2796 {
2797     struct iface *iface, *next;
2798     struct sset new_ifaces;
2799     size_t i;
2800
2801     /* Collect list of new interfaces. */
2802     sset_init(&new_ifaces);
2803     for (i = 0; i < port->cfg->n_interfaces; i++) {
2804         const char *name = port->cfg->interfaces[i]->name;
2805         const char *type = port->cfg->interfaces[i]->type;
2806         if (strcmp(type, "null")) {
2807             sset_add(&new_ifaces, name);
2808         }
2809     }
2810
2811     /* Get rid of deleted interfaces. */
2812     LIST_FOR_EACH_SAFE (iface, next, port_elem, &port->ifaces) {
2813         if (!sset_contains(&new_ifaces, iface->name)) {
2814             iface_destroy(iface);
2815         }
2816     }
2817
2818     sset_destroy(&new_ifaces);
2819 }
2820
2821 static void
2822 port_destroy(struct port *port)
2823 {
2824     if (port) {
2825         struct bridge *br = port->bridge;
2826         struct iface *iface, *next;
2827
2828         if (br->ofproto) {
2829             ofproto_bundle_unregister(br->ofproto, port);
2830         }
2831
2832         LIST_FOR_EACH_SAFE (iface, next, port_elem, &port->ifaces) {
2833             iface_destroy(iface);
2834         }
2835
2836         hmap_remove(&br->ports, &port->hmap_node);
2837         free(port->name);
2838         free(port);
2839     }
2840 }
2841
2842 static struct port *
2843 port_lookup(const struct bridge *br, const char *name)
2844 {
2845     struct port *port;
2846
2847     HMAP_FOR_EACH_WITH_HASH (port, hmap_node, hash_string(name, 0),
2848                              &br->ports) {
2849         if (!strcmp(port->name, name)) {
2850             return port;
2851         }
2852     }
2853     return NULL;
2854 }
2855
2856 static bool
2857 enable_lacp(struct port *port, bool *activep)
2858 {
2859     if (!port->cfg->lacp) {
2860         /* XXX when LACP implementation has been sufficiently tested, enable by
2861          * default and make active on bonded ports. */
2862         return false;
2863     } else if (!strcmp(port->cfg->lacp, "off")) {
2864         return false;
2865     } else if (!strcmp(port->cfg->lacp, "active")) {
2866         *activep = true;
2867         return true;
2868     } else if (!strcmp(port->cfg->lacp, "passive")) {
2869         *activep = false;
2870         return true;
2871     } else {
2872         VLOG_WARN("port %s: unknown LACP mode %s",
2873                   port->name, port->cfg->lacp);
2874         return false;
2875     }
2876 }
2877
2878 static struct lacp_settings *
2879 port_configure_lacp(struct port *port, struct lacp_settings *s)
2880 {
2881     const char *lacp_time, *system_id;
2882     int priority;
2883
2884     if (!enable_lacp(port, &s->active)) {
2885         return NULL;
2886     }
2887
2888     s->name = port->name;
2889
2890     system_id = smap_get(&port->cfg->other_config, "lacp-system-id");
2891     if (system_id) {
2892         if (sscanf(system_id, ETH_ADDR_SCAN_FMT,
2893                    ETH_ADDR_SCAN_ARGS(s->id)) != ETH_ADDR_SCAN_COUNT) {
2894             VLOG_WARN("port %s: LACP system ID (%s) must be an Ethernet"
2895                       " address.", port->name, system_id);
2896             return NULL;
2897         }
2898     } else {
2899         memcpy(s->id, port->bridge->ea, ETH_ADDR_LEN);
2900     }
2901
2902     if (eth_addr_is_zero(s->id)) {
2903         VLOG_WARN("port %s: Invalid zero LACP system ID.", port->name);
2904         return NULL;
2905     }
2906
2907     /* Prefer bondable links if unspecified. */
2908     priority = smap_get_int(&port->cfg->other_config, "lacp-system-priority",
2909                             0);
2910     s->priority = (priority > 0 && priority <= UINT16_MAX
2911                    ? priority
2912                    : UINT16_MAX - !list_is_short(&port->ifaces));
2913
2914     lacp_time = smap_get(&port->cfg->other_config, "lacp-time");
2915     s->fast = lacp_time && !strcasecmp(lacp_time, "fast");
2916     return s;
2917 }
2918
2919 static void
2920 iface_configure_lacp(struct iface *iface, struct lacp_slave_settings *s)
2921 {
2922     int priority, portid, key;
2923
2924     portid = smap_get_int(&iface->cfg->other_config, "lacp-port-id", 0);
2925     priority = smap_get_int(&iface->cfg->other_config, "lacp-port-priority",
2926                             0);
2927     key = smap_get_int(&iface->cfg->other_config, "lacp-aggregation-key", 0);
2928
2929     if (portid <= 0 || portid > UINT16_MAX) {
2930         portid = iface->ofp_port;
2931     }
2932
2933     if (priority <= 0 || priority > UINT16_MAX) {
2934         priority = UINT16_MAX;
2935     }
2936
2937     if (key < 0 || key > UINT16_MAX) {
2938         key = 0;
2939     }
2940
2941     s->name = iface->name;
2942     s->id = portid;
2943     s->priority = priority;
2944     s->key = key;
2945 }
2946
2947 static void
2948 port_configure_bond(struct port *port, struct bond_settings *s,
2949                     uint32_t *bond_stable_ids)
2950 {
2951     const char *detect_s;
2952     struct iface *iface;
2953     int miimon_interval;
2954     size_t i;
2955
2956     s->name = port->name;
2957     s->balance = BM_AB;
2958     if (port->cfg->bond_mode) {
2959         if (!bond_mode_from_string(&s->balance, port->cfg->bond_mode)) {
2960             VLOG_WARN("port %s: unknown bond_mode %s, defaulting to %s",
2961                       port->name, port->cfg->bond_mode,
2962                       bond_mode_to_string(s->balance));
2963         }
2964     } else {
2965         static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 1);
2966
2967         /* XXX: Post version 1.5.*, the default bond_mode changed from SLB to
2968          * active-backup. At some point we should remove this warning. */
2969         VLOG_WARN_RL(&rl, "port %s: Using the default bond_mode %s. Note that"
2970                      " in previous versions, the default bond_mode was"
2971                      " balance-slb", port->name,
2972                      bond_mode_to_string(s->balance));
2973     }
2974     if (s->balance == BM_SLB && port->bridge->cfg->n_flood_vlans) {
2975         VLOG_WARN("port %s: SLB bonds are incompatible with flood_vlans, "
2976                   "please use another bond type or disable flood_vlans",
2977                   port->name);
2978     }
2979
2980     miimon_interval = smap_get_int(&port->cfg->other_config,
2981                                    "bond-miimon-interval", 0);
2982     if (miimon_interval <= 0) {
2983         miimon_interval = 200;
2984     }
2985
2986     detect_s = smap_get(&port->cfg->other_config, "bond-detect-mode");
2987     if (!detect_s || !strcmp(detect_s, "carrier")) {
2988         miimon_interval = 0;
2989     } else if (strcmp(detect_s, "miimon")) {
2990         VLOG_WARN("port %s: unsupported bond-detect-mode %s, "
2991                   "defaulting to carrier", port->name, detect_s);
2992         miimon_interval = 0;
2993     }
2994
2995     s->up_delay = MAX(0, port->cfg->bond_updelay);
2996     s->down_delay = MAX(0, port->cfg->bond_downdelay);
2997     s->basis = smap_get_int(&port->cfg->other_config, "bond-hash-basis", 0);
2998     s->rebalance_interval = smap_get_int(&port->cfg->other_config,
2999                                            "bond-rebalance-interval", 10000);
3000     if (s->rebalance_interval && s->rebalance_interval < 1000) {
3001         s->rebalance_interval = 1000;
3002     }
3003
3004     s->fake_iface = port->cfg->bond_fake_iface;
3005
3006     i = 0;
3007     LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
3008         long long stable_id;
3009
3010         stable_id = smap_get_int(&iface->cfg->other_config, "bond-stable-id",
3011                                  0);
3012         if (stable_id <= 0 || stable_id >= UINT32_MAX) {
3013             stable_id = iface->ofp_port;
3014         }
3015         bond_stable_ids[i++] = stable_id;
3016
3017         netdev_set_miimon_interval(iface->netdev, miimon_interval);
3018     }
3019 }
3020
3021 /* Returns true if 'port' is synthetic, that is, if we constructed it locally
3022  * instead of obtaining it from the database. */
3023 static bool
3024 port_is_synthetic(const struct port *port)
3025 {
3026     return ovsdb_idl_row_is_synthetic(&port->cfg->header_);
3027 }
3028 \f
3029 /* Interface functions. */
3030
3031 /* Returns the correct network device type for interface 'iface' in bridge
3032  * 'br'. */
3033 static const char *
3034 iface_get_type(const struct ovsrec_interface *iface,
3035                const struct ovsrec_bridge *br)
3036 {
3037     /* The local port always has type "internal".  Other ports take their type
3038      * from the database and default to "system" if none is specified. */
3039     return (!strcmp(iface->name, br->name) ? "internal"
3040             : iface->type[0] ? iface->type
3041             : "system");
3042 }
3043
3044 static void
3045 iface_destroy(struct iface *iface)
3046 {
3047     if (iface) {
3048         struct port *port = iface->port;
3049         struct bridge *br = port->bridge;
3050
3051         if (br->ofproto && iface->ofp_port >= 0) {
3052             ofproto_port_unregister(br->ofproto, iface->ofp_port);
3053         }
3054
3055         if (iface->ofp_port >= 0) {
3056             hmap_remove(&br->ifaces, &iface->ofp_port_node);
3057         }
3058
3059         list_remove(&iface->port_elem);
3060         hmap_remove(&br->iface_by_name, &iface->name_node);
3061
3062         netdev_close(iface->netdev);
3063
3064         free(iface->name);
3065         free(iface);
3066     }
3067 }
3068
3069 static struct iface *
3070 iface_lookup(const struct bridge *br, const char *name)
3071 {
3072     struct iface *iface;
3073
3074     HMAP_FOR_EACH_WITH_HASH (iface, name_node, hash_string(name, 0),
3075                              &br->iface_by_name) {
3076         if (!strcmp(iface->name, name)) {
3077             return iface;
3078         }
3079     }
3080
3081     return NULL;
3082 }
3083
3084 static struct iface *
3085 iface_find(const char *name)
3086 {
3087     const struct bridge *br;
3088
3089     HMAP_FOR_EACH (br, node, &all_bridges) {
3090         struct iface *iface = iface_lookup(br, name);
3091
3092         if (iface) {
3093             return iface;
3094         }
3095     }
3096     return NULL;
3097 }
3098
3099 static struct if_cfg *
3100 if_cfg_lookup(const struct bridge *br, const char *name)
3101 {
3102     struct if_cfg *if_cfg;
3103
3104     HMAP_FOR_EACH_WITH_HASH (if_cfg, hmap_node, hash_string(name, 0),
3105                              &br->if_cfg_todo) {
3106         if (!strcmp(if_cfg->cfg->name, name)) {
3107             return if_cfg;
3108         }
3109     }
3110
3111     return NULL;
3112 }
3113
3114 static struct iface *
3115 iface_from_ofp_port(const struct bridge *br, uint16_t ofp_port)
3116 {
3117     struct iface *iface;
3118
3119     HMAP_FOR_EACH_IN_BUCKET (iface, ofp_port_node,
3120                              hash_int(ofp_port, 0), &br->ifaces) {
3121         if (iface->ofp_port == ofp_port) {
3122             return iface;
3123         }
3124     }
3125     return NULL;
3126 }
3127
3128 /* Set Ethernet address of 'iface', if one is specified in the configuration
3129  * file. */
3130 static void
3131 iface_set_mac(struct iface *iface)
3132 {
3133     uint8_t ea[ETH_ADDR_LEN];
3134
3135     if (!strcmp(iface->type, "internal")
3136         && iface->cfg->mac && eth_addr_from_string(iface->cfg->mac, ea)) {
3137         if (iface->ofp_port == OFPP_LOCAL) {
3138             VLOG_ERR("interface %s: ignoring mac in Interface record "
3139                      "(use Bridge record to set local port's mac)",
3140                      iface->name);
3141         } else if (eth_addr_is_multicast(ea)) {
3142             VLOG_ERR("interface %s: cannot set MAC to multicast address",
3143                      iface->name);
3144         } else {
3145             int error = netdev_set_etheraddr(iface->netdev, ea);
3146             if (error) {
3147                 VLOG_ERR("interface %s: setting MAC failed (%s)",
3148                          iface->name, strerror(error));
3149             }
3150         }
3151     }
3152 }
3153
3154 /* Sets the ofport column of 'if_cfg' to 'ofport'. */
3155 static void
3156 iface_set_ofport(const struct ovsrec_interface *if_cfg, int64_t ofport)
3157 {
3158     if (if_cfg && !ovsdb_idl_row_is_synthetic(&if_cfg->header_)) {
3159         ovsrec_interface_set_ofport(if_cfg, &ofport, 1);
3160     }
3161 }
3162
3163 /* Clears all of the fields in 'if_cfg' that indicate interface status, and
3164  * sets the "ofport" field to -1.
3165  *
3166  * This is appropriate when 'if_cfg''s interface cannot be created or is
3167  * otherwise invalid. */
3168 static void
3169 iface_clear_db_record(const struct ovsrec_interface *if_cfg)
3170 {
3171     if (!ovsdb_idl_row_is_synthetic(&if_cfg->header_)) {
3172         iface_set_ofport(if_cfg, -1);
3173         ovsrec_interface_set_status(if_cfg, NULL);
3174         ovsrec_interface_set_admin_state(if_cfg, NULL);
3175         ovsrec_interface_set_duplex(if_cfg, NULL);
3176         ovsrec_interface_set_link_speed(if_cfg, NULL, 0);
3177         ovsrec_interface_set_link_state(if_cfg, NULL);
3178         ovsrec_interface_set_mtu(if_cfg, NULL, 0);
3179         ovsrec_interface_set_cfm_fault(if_cfg, NULL, 0);
3180         ovsrec_interface_set_cfm_fault_status(if_cfg, NULL, 0);
3181         ovsrec_interface_set_cfm_remote_mpids(if_cfg, NULL, 0);
3182         ovsrec_interface_set_lacp_current(if_cfg, NULL, 0);
3183         ovsrec_interface_set_statistics(if_cfg, NULL, NULL, 0);
3184     }
3185 }
3186
3187 struct iface_delete_queues_cbdata {
3188     struct netdev *netdev;
3189     const struct ovsdb_datum *queues;
3190 };
3191
3192 static bool
3193 queue_ids_include(const struct ovsdb_datum *queues, int64_t target)
3194 {
3195     union ovsdb_atom atom;
3196
3197     atom.integer = target;
3198     return ovsdb_datum_find_key(queues, &atom, OVSDB_TYPE_INTEGER) != UINT_MAX;
3199 }
3200
3201 static void
3202 iface_delete_queues(unsigned int queue_id,
3203                     const struct smap *details OVS_UNUSED, void *cbdata_)
3204 {
3205     struct iface_delete_queues_cbdata *cbdata = cbdata_;
3206
3207     if (!queue_ids_include(cbdata->queues, queue_id)) {
3208         netdev_delete_queue(cbdata->netdev, queue_id);
3209     }
3210 }
3211
3212 static void
3213 iface_configure_qos(struct iface *iface, const struct ovsrec_qos *qos)
3214 {
3215     struct ofpbuf queues_buf;
3216
3217     ofpbuf_init(&queues_buf, 0);
3218
3219     if (!qos || qos->type[0] == '\0' || qos->n_queues < 1) {
3220         netdev_set_qos(iface->netdev, NULL, NULL);
3221     } else {
3222         struct iface_delete_queues_cbdata cbdata;
3223         bool queue_zero;
3224         size_t i;
3225
3226         /* Configure top-level Qos for 'iface'. */
3227         netdev_set_qos(iface->netdev, qos->type, &qos->other_config);
3228
3229         /* Deconfigure queues that were deleted. */
3230         cbdata.netdev = iface->netdev;
3231         cbdata.queues = ovsrec_qos_get_queues(qos, OVSDB_TYPE_INTEGER,
3232                                               OVSDB_TYPE_UUID);
3233         netdev_dump_queues(iface->netdev, iface_delete_queues, &cbdata);
3234
3235         /* Configure queues for 'iface'. */
3236         queue_zero = false;
3237         for (i = 0; i < qos->n_queues; i++) {
3238             const struct ovsrec_queue *queue = qos->value_queues[i];
3239             unsigned int queue_id = qos->key_queues[i];
3240
3241             if (queue_id == 0) {
3242                 queue_zero = true;
3243             }
3244
3245             if (queue->n_dscp == 1) {
3246                 struct ofproto_port_queue *port_queue;
3247
3248                 port_queue = ofpbuf_put_uninit(&queues_buf,
3249                                                sizeof *port_queue);
3250                 port_queue->queue = queue_id;
3251                 port_queue->dscp = queue->dscp[0];
3252             }
3253
3254             netdev_set_queue(iface->netdev, queue_id, &queue->other_config);
3255         }
3256         if (!queue_zero) {
3257             struct smap details;
3258
3259             smap_init(&details);
3260             netdev_set_queue(iface->netdev, 0, &details);
3261             smap_destroy(&details);
3262         }
3263     }
3264
3265     if (iface->ofp_port >= 0) {
3266         const struct ofproto_port_queue *port_queues = queues_buf.data;
3267         size_t n_queues = queues_buf.size / sizeof *port_queues;
3268
3269         ofproto_port_set_queues(iface->port->bridge->ofproto, iface->ofp_port,
3270                                 port_queues, n_queues);
3271     }
3272
3273     netdev_set_policing(iface->netdev,
3274                         iface->cfg->ingress_policing_rate,
3275                         iface->cfg->ingress_policing_burst);
3276
3277     ofpbuf_uninit(&queues_buf);
3278 }
3279
3280 static void
3281 iface_configure_cfm(struct iface *iface)
3282 {
3283     const struct ovsrec_interface *cfg = iface->cfg;
3284     const char *opstate_str;
3285     const char *cfm_ccm_vlan;
3286     struct cfm_settings s;
3287
3288     if (!cfg->n_cfm_mpid) {
3289         ofproto_port_clear_cfm(iface->port->bridge->ofproto, iface->ofp_port);
3290         return;
3291     }
3292
3293     s.mpid = *cfg->cfm_mpid;
3294     s.interval = smap_get_int(&iface->cfg->other_config, "cfm_interval", 0);
3295     cfm_ccm_vlan = smap_get(&iface->cfg->other_config, "cfm_ccm_vlan");
3296     s.ccm_pcp = smap_get_int(&iface->cfg->other_config, "cfm_ccm_pcp", 0);
3297
3298     if (s.interval <= 0) {
3299         s.interval = 1000;
3300     }
3301
3302     if (!cfm_ccm_vlan) {
3303         s.ccm_vlan = 0;
3304     } else if (!strcasecmp("random", cfm_ccm_vlan)) {
3305         s.ccm_vlan = CFM_RANDOM_VLAN;
3306     } else {
3307         s.ccm_vlan = atoi(cfm_ccm_vlan);
3308         if (s.ccm_vlan == CFM_RANDOM_VLAN) {
3309             s.ccm_vlan = 0;
3310         }
3311     }
3312
3313     s.extended = smap_get_bool(&iface->cfg->other_config, "cfm_extended",
3314                                false);
3315
3316     opstate_str = smap_get(&iface->cfg->other_config, "cfm_opstate");
3317     s.opup = !opstate_str || !strcasecmp("up", opstate_str);
3318
3319     ofproto_port_set_cfm(iface->port->bridge->ofproto, iface->ofp_port, &s);
3320 }
3321
3322 /* Returns true if 'iface' is synthetic, that is, if we constructed it locally
3323  * instead of obtaining it from the database. */
3324 static bool
3325 iface_is_synthetic(const struct iface *iface)
3326 {
3327     return ovsdb_idl_row_is_synthetic(&iface->cfg->header_);
3328 }
3329
3330 \f
3331 /* Port mirroring. */
3332
3333 static struct mirror *
3334 mirror_find_by_uuid(struct bridge *br, const struct uuid *uuid)
3335 {
3336     struct mirror *m;
3337
3338     HMAP_FOR_EACH_IN_BUCKET (m, hmap_node, uuid_hash(uuid), &br->mirrors) {
3339         if (uuid_equals(uuid, &m->uuid)) {
3340             return m;
3341         }
3342     }
3343     return NULL;
3344 }
3345
3346 static void
3347 bridge_configure_mirrors(struct bridge *br)
3348 {
3349     const struct ovsdb_datum *mc;
3350     unsigned long *flood_vlans;
3351     struct mirror *m, *next;
3352     size_t i;
3353
3354     /* Get rid of deleted mirrors. */
3355     mc = ovsrec_bridge_get_mirrors(br->cfg, OVSDB_TYPE_UUID);
3356     HMAP_FOR_EACH_SAFE (m, next, hmap_node, &br->mirrors) {
3357         union ovsdb_atom atom;
3358
3359         atom.uuid = m->uuid;
3360         if (ovsdb_datum_find_key(mc, &atom, OVSDB_TYPE_UUID) == UINT_MAX) {
3361             mirror_destroy(m);
3362         }
3363     }
3364
3365     /* Add new mirrors and reconfigure existing ones. */
3366     for (i = 0; i < br->cfg->n_mirrors; i++) {
3367         const struct ovsrec_mirror *cfg = br->cfg->mirrors[i];
3368         struct mirror *m = mirror_find_by_uuid(br, &cfg->header_.uuid);
3369         if (!m) {
3370             m = mirror_create(br, cfg);
3371         }
3372         m->cfg = cfg;
3373         if (!mirror_configure(m)) {
3374             mirror_destroy(m);
3375         }
3376     }
3377
3378     /* Update flooded vlans (for RSPAN). */
3379     flood_vlans = vlan_bitmap_from_array(br->cfg->flood_vlans,
3380                                          br->cfg->n_flood_vlans);
3381     ofproto_set_flood_vlans(br->ofproto, flood_vlans);
3382     bitmap_free(flood_vlans);
3383 }
3384
3385 static struct mirror *
3386 mirror_create(struct bridge *br, const struct ovsrec_mirror *cfg)
3387 {
3388     struct mirror *m;
3389
3390     m = xzalloc(sizeof *m);
3391     m->uuid = cfg->header_.uuid;
3392     hmap_insert(&br->mirrors, &m->hmap_node, uuid_hash(&m->uuid));
3393     m->bridge = br;
3394     m->name = xstrdup(cfg->name);
3395
3396     return m;
3397 }
3398
3399 static void
3400 mirror_destroy(struct mirror *m)
3401 {
3402     if (m) {
3403         struct bridge *br = m->bridge;
3404
3405         if (br->ofproto) {
3406             ofproto_mirror_unregister(br->ofproto, m);
3407         }
3408
3409         hmap_remove(&br->mirrors, &m->hmap_node);
3410         free(m->name);
3411         free(m);
3412     }
3413 }
3414
3415 static void
3416 mirror_collect_ports(struct mirror *m,
3417                      struct ovsrec_port **in_ports, int n_in_ports,
3418                      void ***out_portsp, size_t *n_out_portsp)
3419 {
3420     void **out_ports = xmalloc(n_in_ports * sizeof *out_ports);
3421     size_t n_out_ports = 0;
3422     size_t i;
3423
3424     for (i = 0; i < n_in_ports; i++) {
3425         const char *name = in_ports[i]->name;
3426         struct port *port = port_lookup(m->bridge, name);
3427         if (port) {
3428             out_ports[n_out_ports++] = port;
3429         } else {
3430             VLOG_WARN("bridge %s: mirror %s cannot match on nonexistent "
3431                       "port %s", m->bridge->name, m->name, name);
3432         }
3433     }
3434     *out_portsp = out_ports;
3435     *n_out_portsp = n_out_ports;
3436 }
3437
3438 static bool
3439 mirror_configure(struct mirror *m)
3440 {
3441     const struct ovsrec_mirror *cfg = m->cfg;
3442     struct ofproto_mirror_settings s;
3443
3444     /* Set name. */
3445     if (strcmp(cfg->name, m->name)) {
3446         free(m->name);
3447         m->name = xstrdup(cfg->name);
3448     }
3449     s.name = m->name;
3450
3451     /* Get output port or VLAN. */
3452     if (cfg->output_port) {
3453         s.out_bundle = port_lookup(m->bridge, cfg->output_port->name);
3454         if (!s.out_bundle) {
3455             VLOG_ERR("bridge %s: mirror %s outputs to port not on bridge",
3456                      m->bridge->name, m->name);
3457             return false;
3458         }
3459         s.out_vlan = UINT16_MAX;
3460
3461         if (cfg->output_vlan) {
3462             VLOG_ERR("bridge %s: mirror %s specifies both output port and "
3463                      "output vlan; ignoring output vlan",
3464                      m->bridge->name, m->name);
3465         }
3466     } else if (cfg->output_vlan) {
3467         /* The database should prevent invalid VLAN values. */
3468         s.out_bundle = NULL;
3469         s.out_vlan = *cfg->output_vlan;
3470     } else {
3471         VLOG_ERR("bridge %s: mirror %s does not specify output; ignoring",
3472                  m->bridge->name, m->name);
3473         return false;
3474     }
3475
3476     /* Get port selection. */
3477     if (cfg->select_all) {
3478         size_t n_ports = hmap_count(&m->bridge->ports);
3479         void **ports = xmalloc(n_ports * sizeof *ports);
3480         struct port *port;
3481         size_t i;
3482
3483         i = 0;
3484         HMAP_FOR_EACH (port, hmap_node, &m->bridge->ports) {
3485             ports[i++] = port;
3486         }
3487
3488         s.srcs = ports;
3489         s.n_srcs = n_ports;
3490
3491         s.dsts = ports;
3492         s.n_dsts = n_ports;
3493     } else {
3494         /* Get ports, dropping ports that don't exist.
3495          * The IDL ensures that there are no duplicates. */
3496         mirror_collect_ports(m, cfg->select_src_port, cfg->n_select_src_port,
3497                              &s.srcs, &s.n_srcs);
3498         mirror_collect_ports(m, cfg->select_dst_port, cfg->n_select_dst_port,
3499                              &s.dsts, &s.n_dsts);
3500     }
3501
3502     /* Get VLAN selection. */
3503     s.src_vlans = vlan_bitmap_from_array(cfg->select_vlan, cfg->n_select_vlan);
3504
3505     /* Configure. */
3506     ofproto_mirror_register(m->bridge->ofproto, m, &s);
3507
3508     /* Clean up. */
3509     if (s.srcs != s.dsts) {
3510         free(s.dsts);
3511     }
3512     free(s.srcs);
3513     free(s.src_vlans);
3514
3515     return true;
3516 }
3517 \f
3518 /* Linux VLAN device support (e.g. "eth0.10" for VLAN 10.)
3519  *
3520  * This is deprecated.  It is only for compatibility with broken device drivers
3521  * in old versions of Linux that do not properly support VLANs when VLAN
3522  * devices are not used.  When broken device drivers are no longer in
3523  * widespread use, we will delete these interfaces. */
3524
3525 static struct ovsrec_port **recs;
3526 static size_t n_recs, allocated_recs;
3527
3528 /* Adds 'rec' to a list of recs that have to be destroyed when the VLAN
3529  * splinters are reconfigured. */
3530 static void
3531 register_rec(struct ovsrec_port *rec)
3532 {
3533     if (n_recs >= allocated_recs) {
3534         recs = x2nrealloc(recs, &allocated_recs, sizeof *recs);
3535     }
3536     recs[n_recs++] = rec;
3537 }
3538
3539 /* Frees all of the ports registered with register_reg(). */
3540 static void
3541 free_registered_recs(void)
3542 {
3543     size_t i;
3544
3545     for (i = 0; i < n_recs; i++) {
3546         struct ovsrec_port *port = recs[i];
3547         size_t j;
3548
3549         for (j = 0; j < port->n_interfaces; j++) {
3550             struct ovsrec_interface *iface = port->interfaces[j];
3551             free(iface->name);
3552             free(iface);
3553         }
3554
3555         smap_destroy(&port->other_config);
3556         free(port->interfaces);
3557         free(port->name);
3558         free(port->tag);
3559         free(port);
3560     }
3561     n_recs = 0;
3562 }
3563
3564 /* Returns true if VLAN splinters are enabled on 'iface_cfg', false
3565  * otherwise. */
3566 static bool
3567 vlan_splinters_is_enabled(const struct ovsrec_interface *iface_cfg)
3568 {
3569     return smap_get_bool(&iface_cfg->other_config, "enable-vlan-splinters",
3570                          false);
3571 }
3572
3573 /* Figures out the set of VLANs that are in use for the purpose of VLAN
3574  * splinters.
3575  *
3576  * If VLAN splinters are enabled on at least one interface and any VLANs are in
3577  * use, returns a 4096-bit bitmap with a 1-bit for each in-use VLAN (bits 0 and
3578  * 4095 will not be set).  The caller is responsible for freeing the bitmap,
3579  * with free().
3580  *
3581  * If VLANs splinters are not enabled on any interface or if no VLANs are in
3582  * use, returns NULL.
3583  *
3584  * Updates 'vlan_splinters_enabled_anywhere'. */
3585 static unsigned long int *
3586 collect_splinter_vlans(const struct ovsrec_open_vswitch *ovs_cfg)
3587 {
3588     unsigned long int *splinter_vlans;
3589     struct sset splinter_ifaces;
3590     const char *real_dev_name;
3591     struct shash *real_devs;
3592     struct shash_node *node;
3593     struct bridge *br;
3594     size_t i;
3595
3596     /* Free space allocated for synthesized ports and interfaces, since we're
3597      * in the process of reconstructing all of them. */
3598     free_registered_recs();
3599
3600     splinter_vlans = bitmap_allocate(4096);
3601     sset_init(&splinter_ifaces);
3602     vlan_splinters_enabled_anywhere = false;
3603     for (i = 0; i < ovs_cfg->n_bridges; i++) {
3604         struct ovsrec_bridge *br_cfg = ovs_cfg->bridges[i];
3605         size_t j;
3606
3607         for (j = 0; j < br_cfg->n_ports; j++) {
3608             struct ovsrec_port *port_cfg = br_cfg->ports[j];
3609             int k;
3610
3611             for (k = 0; k < port_cfg->n_interfaces; k++) {
3612                 struct ovsrec_interface *iface_cfg = port_cfg->interfaces[k];
3613
3614                 if (vlan_splinters_is_enabled(iface_cfg)) {
3615                     vlan_splinters_enabled_anywhere = true;
3616                     sset_add(&splinter_ifaces, iface_cfg->name);
3617                     vlan_bitmap_from_array__(port_cfg->trunks,
3618                                              port_cfg->n_trunks,
3619                                              splinter_vlans);
3620                 }
3621             }
3622
3623             if (port_cfg->tag && *port_cfg->tag > 0 && *port_cfg->tag < 4095) {
3624                 bitmap_set1(splinter_vlans, *port_cfg->tag);
3625             }
3626         }
3627     }
3628
3629     if (!vlan_splinters_enabled_anywhere) {
3630         free(splinter_vlans);
3631         sset_destroy(&splinter_ifaces);
3632         return NULL;
3633     }
3634
3635     HMAP_FOR_EACH (br, node, &all_bridges) {
3636         if (br->ofproto) {
3637             ofproto_get_vlan_usage(br->ofproto, splinter_vlans);
3638         }
3639     }
3640
3641     /* Don't allow VLANs 0 or 4095 to be splintered.  VLAN 0 should appear on
3642      * the real device.  VLAN 4095 is reserved and Linux doesn't allow a VLAN
3643      * device to be created for it. */
3644     bitmap_set0(splinter_vlans, 0);
3645     bitmap_set0(splinter_vlans, 4095);
3646
3647     /* Delete all VLAN devices that we don't need. */
3648     vlandev_refresh();
3649     real_devs = vlandev_get_real_devs();
3650     SHASH_FOR_EACH (node, real_devs) {
3651         const struct vlan_real_dev *real_dev = node->data;
3652         const struct vlan_dev *vlan_dev;
3653         bool real_dev_has_splinters;
3654
3655         real_dev_has_splinters = sset_contains(&splinter_ifaces,
3656                                                real_dev->name);
3657         HMAP_FOR_EACH (vlan_dev, hmap_node, &real_dev->vlan_devs) {
3658             if (!real_dev_has_splinters
3659                 || !bitmap_is_set(splinter_vlans, vlan_dev->vid)) {
3660                 struct netdev *netdev;
3661
3662                 if (!netdev_open(vlan_dev->name, "system", &netdev)) {
3663                     if (!netdev_get_in4(netdev, NULL, NULL) ||
3664                         !netdev_get_in6(netdev, NULL)) {
3665                         vlandev_del(vlan_dev->name);
3666                     } else {
3667                         /* It has an IP address configured, so we don't own
3668                          * it.  Don't delete it. */
3669                     }
3670                     netdev_close(netdev);
3671                 }
3672             }
3673
3674         }
3675     }
3676
3677     /* Add all VLAN devices that we need. */
3678     SSET_FOR_EACH (real_dev_name, &splinter_ifaces) {
3679         int vid;
3680
3681         BITMAP_FOR_EACH_1 (vid, 4096, splinter_vlans) {
3682             if (!vlandev_get_name(real_dev_name, vid)) {
3683                 vlandev_add(real_dev_name, vid);
3684             }
3685         }
3686     }
3687
3688     vlandev_refresh();
3689
3690     sset_destroy(&splinter_ifaces);
3691
3692     if (bitmap_scan(splinter_vlans, 0, 4096) >= 4096) {
3693         free(splinter_vlans);
3694         return NULL;
3695     }
3696     return splinter_vlans;
3697 }
3698
3699 /* Pushes the configure of VLAN splinter port 'port' (e.g. eth0.9) down to
3700  * ofproto.  */
3701 static void
3702 configure_splinter_port(struct port *port)
3703 {
3704     struct ofproto *ofproto = port->bridge->ofproto;
3705     uint16_t realdev_ofp_port;
3706     const char *realdev_name;
3707     struct iface *vlandev, *realdev;
3708
3709     ofproto_bundle_unregister(port->bridge->ofproto, port);
3710
3711     vlandev = CONTAINER_OF(list_front(&port->ifaces), struct iface,
3712                            port_elem);
3713
3714     realdev_name = smap_get(&port->cfg->other_config, "realdev");
3715     realdev = iface_lookup(port->bridge, realdev_name);
3716     realdev_ofp_port = realdev ? realdev->ofp_port : 0;
3717
3718     ofproto_port_set_realdev(ofproto, vlandev->ofp_port, realdev_ofp_port,
3719                              *port->cfg->tag);
3720 }
3721
3722 static struct ovsrec_port *
3723 synthesize_splinter_port(const char *real_dev_name,
3724                          const char *vlan_dev_name, int vid)
3725 {
3726     struct ovsrec_interface *iface;
3727     struct ovsrec_port *port;
3728
3729     iface = xmalloc(sizeof *iface);
3730     ovsrec_interface_init(iface);
3731     iface->name = xstrdup(vlan_dev_name);
3732     iface->type = "system";
3733
3734     port = xmalloc(sizeof *port);
3735     ovsrec_port_init(port);
3736     port->interfaces = xmemdup(&iface, sizeof iface);
3737     port->n_interfaces = 1;
3738     port->name = xstrdup(vlan_dev_name);
3739     port->vlan_mode = "splinter";
3740     port->tag = xmalloc(sizeof *port->tag);
3741     *port->tag = vid;
3742
3743     smap_add(&port->other_config, "realdev", real_dev_name);
3744
3745     register_rec(port);
3746     return port;
3747 }
3748
3749 /* For each interface with 'br' that has VLAN splinters enabled, adds a
3750  * corresponding ovsrec_port to 'ports' for each splinter VLAN marked with a
3751  * 1-bit in the 'splinter_vlans' bitmap. */
3752 static void
3753 add_vlan_splinter_ports(struct bridge *br,
3754                         const unsigned long int *splinter_vlans,
3755                         struct shash *ports)
3756 {
3757     size_t i;
3758
3759     /* We iterate through 'br->cfg->ports' instead of 'ports' here because
3760      * we're modifying 'ports'. */
3761     for (i = 0; i < br->cfg->n_ports; i++) {
3762         const char *name = br->cfg->ports[i]->name;
3763         struct ovsrec_port *port_cfg = shash_find_data(ports, name);
3764         size_t j;
3765
3766         for (j = 0; j < port_cfg->n_interfaces; j++) {
3767             struct ovsrec_interface *iface_cfg = port_cfg->interfaces[j];
3768
3769             if (vlan_splinters_is_enabled(iface_cfg)) {
3770                 const char *real_dev_name;
3771                 uint16_t vid;
3772
3773                 real_dev_name = iface_cfg->name;
3774                 BITMAP_FOR_EACH_1 (vid, 4096, splinter_vlans) {
3775                     const char *vlan_dev_name;
3776
3777                     vlan_dev_name = vlandev_get_name(real_dev_name, vid);
3778                     if (vlan_dev_name
3779                         && !shash_find(ports, vlan_dev_name)) {
3780                         shash_add(ports, vlan_dev_name,
3781                                   synthesize_splinter_port(
3782                                       real_dev_name, vlan_dev_name, vid));
3783                     }
3784                 }
3785             }
3786         }
3787     }
3788 }
3789
3790 static void
3791 mirror_refresh_stats(struct mirror *m)
3792 {
3793     struct ofproto *ofproto = m->bridge->ofproto;
3794     uint64_t tx_packets, tx_bytes;
3795     char *keys[2];
3796     int64_t values[2];
3797     size_t stat_cnt = 0;
3798
3799     if (ofproto_mirror_get_stats(ofproto, m, &tx_packets, &tx_bytes)) {
3800         ovsrec_mirror_set_statistics(m->cfg, NULL, NULL, 0);
3801         return;
3802     }
3803
3804     if (tx_packets != UINT64_MAX) {
3805         keys[stat_cnt] = "tx_packets";
3806         values[stat_cnt] = tx_packets;
3807         stat_cnt++;
3808     }
3809     if (tx_bytes != UINT64_MAX) {
3810         keys[stat_cnt] = "tx_bytes";
3811         values[stat_cnt] = tx_bytes;
3812         stat_cnt++;
3813     }
3814
3815     ovsrec_mirror_set_statistics(m->cfg, keys, values, stat_cnt);
3816 }