vswitchd/bridge.c

   1 /* Copyright (c) 2008, 2009, 2010, 2011, 2012 Nicira, Inc.
   2  *
   3  * Licensed under the Apache License, Version 2.0 (the "License");
   4  * you may not use this file except in compliance with the License.
   5  * You may obtain a copy of the License at:
   6  *
   7  *     http://www.apache.org/licenses/LICENSE-2.0
   8  *
   9  * Unless required by applicable law or agreed to in writing, software
  10  * distributed under the License is distributed on an "AS IS" BASIS,
  11  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
  12  * See the License for the specific language governing permissions and
  13  * limitations under the License.
  14  */
  15
  16 #include <config.h>
  17 #include "bridge.h"
  18 #include <assert.h>
  19 #include <errno.h>
  20 #include <inttypes.h>
  21 #include <stdlib.h>
  22 #include "bitmap.h"
  23 #include "bond.h"
  24 #include "cfm.h"
  25 #include "coverage.h"
  26 #include "daemon.h"
  27 #include "dirs.h"
  28 #include "dynamic-string.h"
  29 #include "hash.h"
  30 #include "hmap.h"
  31 #include "hmapx.h"
  32 #include "jsonrpc.h"
  33 #include "lacp.h"
  34 #include "list.h"
  35 #include "mac-learning.h"
  36 #include "meta-flow.h"
  37 #include "netdev.h"
  38 #include "ofp-print.h"
  39 #include "ofpbuf.h"
  40 #include "ofproto/ofproto.h"
  41 #include "poll-loop.h"
  42 #include "sha1.h"
  43 #include "shash.h"
  44 #include "smap.h"
  45 #include "socket-util.h"
  46 #include "stream.h"
  47 #include "stream-ssl.h"
  48 #include "sset.h"
  49 #include "system-stats.h"
  50 #include "timeval.h"
  51 #include "util.h"
  52 #include "unixctl.h"
  53 #include "vlandev.h"
  54 #include "lib/vswitch-idl.h"
  55 #include "xenserver.h"
  56 #include "vlog.h"
  57 #include "sflow_api.h"
  58 #include "vlan-bitmap.h"
  59
  60 VLOG_DEFINE_THIS_MODULE(bridge);
  61
  62 COVERAGE_DEFINE(bridge_reconfigure);
  63
  64 /* Configuration of an uninstantiated iface. */
  65 struct if_cfg {
  66     struct hmap_node hmap_node;         /* Node in bridge's if_cfg_todo. */
  67     const struct ovsrec_interface *cfg; /* Interface record. */
  68     const struct ovsrec_port *parent;   /* Parent port record. */
  69 };
  70
  71 /* OpenFlow port slated for removal from ofproto. */
  72 struct ofpp_garbage {
  73     struct list list_node;      /* Node in bridge's ofpp_garbage. */
  74     uint16_t ofp_port;          /* Port to be deleted. */
  75 };
  76
  77 struct iface {
  78     /* These members are always valid. */
  79     struct list port_elem;      /* Element in struct port's "ifaces" list. */
  80     struct hmap_node name_node; /* In struct bridge's "iface_by_name" hmap. */
  81     struct port *port;          /* Containing port. */
  82     char *name;                 /* Host network device name. */
  83
  84     /* These members are valid only after bridge_reconfigure() causes them to
  85      * be initialized. */
  86     struct hmap_node ofp_port_node; /* In struct bridge's "ifaces" hmap. */
  87     int ofp_port;               /* OpenFlow port number, -1 if unknown. */
  88     struct netdev *netdev;      /* Network device. */
  89     const char *type;           /* Usually same as cfg->type. */
  90     const struct ovsrec_interface *cfg;
  91 };
  92
  93 struct mirror {
  94     struct uuid uuid;           /* UUID of this "mirror" record in database. */
  95     struct hmap_node hmap_node; /* In struct bridge's "mirrors" hmap. */
  96     struct bridge *bridge;
  97     char *name;
  98     const struct ovsrec_mirror *cfg;
  99 };
 100
 101 struct port {
 102     struct hmap_node hmap_node; /* Element in struct bridge's "ports" hmap. */
 103     struct bridge *bridge;
 104     char *name;
 105
 106     const struct ovsrec_port *cfg;
 107
 108     /* An ordinary bridge port has 1 interface.
 109      * A bridge port for bonding has at least 2 interfaces. */
 110     struct list ifaces;         /* List of "struct iface"s. */
 111 };
 112
 113 struct bridge {
 114     struct hmap_node node;      /* In 'all_bridges'. */
 115     char *name;                 /* User-specified arbitrary name. */
 116     char *type;                 /* Datapath type. */
 117     uint8_t ea[ETH_ADDR_LEN];   /* Bridge Ethernet Address. */
 118     uint8_t default_ea[ETH_ADDR_LEN]; /* Default MAC. */
 119     const struct ovsrec_bridge *cfg;
 120
 121     /* OpenFlow switch processing. */
 122     struct ofproto *ofproto;    /* OpenFlow switch. */
 123
 124     /* Bridge ports. */
 125     struct hmap ports;          /* "struct port"s indexed by name. */
 126     struct hmap ifaces;         /* "struct iface"s indexed by ofp_port. */
 127     struct hmap iface_by_name;  /* "struct iface"s indexed by name. */
 128
 129     struct list ofpp_garbage;   /* "struct ofpp_garbage" slated for removal. */
 130     struct hmap if_cfg_todo;    /* "struct if_cfg"s slated for creation.
 131                                    Indexed on 'cfg->name'. */
 132
 133     /* Port mirroring. */
 134     struct hmap mirrors;        /* "struct mirror" indexed by UUID. */
 135
 136     /* Synthetic local port if necessary. */
 137     struct ovsrec_port synth_local_port;
 138     struct ovsrec_interface synth_local_iface;
 139     struct ovsrec_interface *synth_local_ifacep;
 140 };
 141
 142 /* All bridges, indexed by name. */
 143 static struct hmap all_bridges = HMAP_INITIALIZER(&all_bridges);
 144
 145 /* OVSDB IDL used to obtain configuration. */
 146 static struct ovsdb_idl *idl;
 147
 148 /* Most recently processed IDL sequence number. */
 149 static unsigned int idl_seqno;
 150
 151 /* Each time this timer expires, the bridge fetches systems and interface
 152  * statistics and pushes them into the database. */
 153 #define STATS_INTERVAL (5 * 1000) /* In milliseconds. */
 154 static long long int stats_timer = LLONG_MIN;
 155
 156 /* Stores the time after which rate limited statistics may be written to the
 157  * database.  Only updated when changes to the database require rate limiting.
 158  */
 159 #define DB_LIMIT_INTERVAL (1 * 1000) /* In milliseconds. */
 160 static long long int db_limiter = LLONG_MIN;
 161
 162 /* In some datapaths, creating and destroying OpenFlow ports can be extremely
 163  * expensive.  This can cause bridge_reconfigure() to take a long time during
 164  * which no other work can be done.  To deal with this problem, we limit port
 165  * adds and deletions to a window of OFP_PORT_ACTION_WINDOW milliseconds per
 166  * call to bridge_reconfigure().  If there is more work to do after the limit
 167  * is reached, 'need_reconfigure', is flagged and it's done on the next loop.
 168  * This allows the rest of the code to catch up on important things like
 169  * forwarding packets. */
 170 #define OFP_PORT_ACTION_WINDOW 10
 171 static bool reconfiguring = false;
 172
 173 static void add_del_bridges(const struct ovsrec_open_vswitch *);
 174 static void bridge_update_ofprotos(void);
 175 static void bridge_create(const struct ovsrec_bridge *);
 176 static void bridge_destroy(struct bridge *);
 177 static struct bridge *bridge_lookup(const char *name);
 178 static unixctl_cb_func bridge_unixctl_dump_flows;
 179 static unixctl_cb_func bridge_unixctl_reconnect;
 180 static size_t bridge_get_controllers(const struct bridge *br,
 181                                      struct ovsrec_controller ***controllersp);
 182 static void bridge_add_del_ports(struct bridge *,
 183                                  const unsigned long int *splinter_vlans);
 184 static void bridge_refresh_ofp_port(struct bridge *);
 185 static void bridge_configure_datapath_id(struct bridge *);
 186 static void bridge_configure_flow_eviction_threshold(struct bridge *);
 187 static void bridge_configure_netflow(struct bridge *);
 188 static void bridge_configure_forward_bpdu(struct bridge *);
 189 static void bridge_configure_mac_idle_time(struct bridge *);
 190 static void bridge_configure_sflow(struct bridge *, int *sflow_bridge_number);
 191 static void bridge_configure_stp(struct bridge *);
 192 static void bridge_configure_tables(struct bridge *);
 193 static void bridge_configure_remotes(struct bridge *,
 194                                      const struct sockaddr_in *managers,
 195                                      size_t n_managers);
 196 static void bridge_pick_local_hw_addr(struct bridge *,
 197                                       uint8_t ea[ETH_ADDR_LEN],
 198                                       struct iface **hw_addr_iface);
 199 static uint64_t bridge_pick_datapath_id(struct bridge *,
 200                                         const uint8_t bridge_ea[ETH_ADDR_LEN],
 201                                         struct iface *hw_addr_iface);
 202 static void bridge_queue_if_cfg(struct bridge *,
 203                                 const struct ovsrec_interface *,
 204                                 const struct ovsrec_port *);
 205 static uint64_t dpid_from_hash(const void *, size_t nbytes);
 206 static bool bridge_has_bond_fake_iface(const struct bridge *,
 207                                        const char *name);
 208 static bool port_is_bond_fake_iface(const struct port *);
 209
 210 static unixctl_cb_func qos_unixctl_show;
 211
 212 static struct port *port_create(struct bridge *, const struct ovsrec_port *);
 213 static void port_del_ifaces(struct port *);
 214 static void port_destroy(struct port *);
 215 static struct port *port_lookup(const struct bridge *, const char *name);
 216 static void port_configure(struct port *);
 217 static struct lacp_settings *port_configure_lacp(struct port *,
 218                                                  struct lacp_settings *);
 219 static void port_configure_bond(struct port *, struct bond_settings *,
 220                                 uint32_t *bond_stable_ids);
 221 static bool port_is_synthetic(const struct port *);
 222
 223 static void bridge_configure_mirrors(struct bridge *);
 224 static struct mirror *mirror_create(struct bridge *,
 225                                     const struct ovsrec_mirror *);
 226 static void mirror_destroy(struct mirror *);
 227 static bool mirror_configure(struct mirror *);
 228 static void mirror_refresh_stats(struct mirror *);
 229
 230 static void iface_configure_lacp(struct iface *, struct lacp_slave_settings *);
 231 static bool iface_create(struct bridge *, struct if_cfg *, int ofp_port);
 232 static const char *iface_get_type(const struct ovsrec_interface *,
 233                                   const struct ovsrec_bridge *);
 234 static void iface_destroy(struct iface *);
 235 static struct iface *iface_lookup(const struct bridge *, const char *name);
 236 static struct iface *iface_find(const char *name);
 237 static struct if_cfg *if_cfg_lookup(const struct bridge *, const char *name);
 238 static struct iface *iface_from_ofp_port(const struct bridge *,
 239                                          uint16_t ofp_port);
 240 static void iface_set_mac(struct iface *);
 241 static void iface_set_ofport(const struct ovsrec_interface *, int64_t ofport);
 242 static void iface_clear_db_record(const struct ovsrec_interface *if_cfg);
 243 static void iface_configure_qos(struct iface *, const struct ovsrec_qos *);
 244 static void iface_configure_cfm(struct iface *);
 245 static void iface_refresh_cfm_stats(struct iface *);
 246 static void iface_refresh_stats(struct iface *);
 247 static void iface_refresh_status(struct iface *);
 248 static bool iface_is_synthetic(const struct iface *);
 249 static void smap_from_ovs_idl_map(char **keys, char **values, size_t n,
 250                                   struct smap *);
 251 static void smap_to_ovs_idl_map(struct smap *,
 252                                 char ***keys, char ***values, size_t *n);
 253
 254 /* Linux VLAN device support (e.g. "eth0.10" for VLAN 10.)
 255  *
 256  * This is deprecated.  It is only for compatibility with broken device drivers
 257  * in old versions of Linux that do not properly support VLANs when VLAN
 258  * devices are not used.  When broken device drivers are no longer in
 259  * widespread use, we will delete these interfaces. */
 260
 261 /* True if VLAN splinters are enabled on any interface, false otherwise.*/
 262 static bool vlan_splinters_enabled_anywhere;
 263
 264 static bool vlan_splinters_is_enabled(const struct ovsrec_interface *);
 265 static unsigned long int *collect_splinter_vlans(
 266     const struct ovsrec_open_vswitch *);
 267 static void configure_splinter_port(struct port *);
 268 static void add_vlan_splinter_ports(struct bridge *,
 269                                     const unsigned long int *splinter_vlans,
 270                                     struct shash *ports);
 271 \f
 272 /* Public functions. */
 273
 274 /* Initializes the bridge module, configuring it to obtain its configuration
 275  * from an OVSDB server accessed over 'remote', which should be a string in a
 276  * form acceptable to ovsdb_idl_create(). */
 277 void
 278 bridge_init(const char *remote)
 279 {
 280     /* Create connection to database. */
 281     idl = ovsdb_idl_create(remote, &ovsrec_idl_class, true);
 282     idl_seqno = ovsdb_idl_get_seqno(idl);
 283     ovsdb_idl_set_lock(idl, "ovs_vswitchd");
 284
 285     ovsdb_idl_omit_alert(idl, &ovsrec_open_vswitch_col_cur_cfg);
 286     ovsdb_idl_omit_alert(idl, &ovsrec_open_vswitch_col_statistics);
 287     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_external_ids);
 288     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_ovs_version);
 289     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_db_version);
 290     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_system_type);
 291     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_system_version);
 292
 293     ovsdb_idl_omit_alert(idl, &ovsrec_bridge_col_datapath_id);
 294     ovsdb_idl_omit_alert(idl, &ovsrec_bridge_col_status);
 295     ovsdb_idl_omit(idl, &ovsrec_bridge_col_external_ids);
 296
 297     ovsdb_idl_omit_alert(idl, &ovsrec_port_col_status);
 298     ovsdb_idl_omit_alert(idl, &ovsrec_port_col_statistics);
 299     ovsdb_idl_omit(idl, &ovsrec_port_col_external_ids);
 300     ovsdb_idl_omit(idl, &ovsrec_port_col_fake_bridge);
 301
 302     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_admin_state);
 303     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_duplex);
 304     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_link_speed);
 305     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_link_state);
 306     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_link_resets);
 307     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_mtu);
 308     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_ofport);
 309     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_statistics);
 310     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_status);
 311     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_fault);
 312     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_fault_status);
 313     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_remote_mpids);
 314     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_health);
 315     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_lacp_current);
 316     ovsdb_idl_omit(idl, &ovsrec_interface_col_external_ids);
 317
 318     ovsdb_idl_omit_alert(idl, &ovsrec_controller_col_is_connected);
 319     ovsdb_idl_omit_alert(idl, &ovsrec_controller_col_role);
 320     ovsdb_idl_omit_alert(idl, &ovsrec_controller_col_status);
 321     ovsdb_idl_omit(idl, &ovsrec_controller_col_external_ids);
 322
 323     ovsdb_idl_omit(idl, &ovsrec_qos_col_external_ids);
 324
 325     ovsdb_idl_omit(idl, &ovsrec_queue_col_external_ids);
 326
 327     ovsdb_idl_omit(idl, &ovsrec_mirror_col_external_ids);
 328     ovsdb_idl_omit_alert(idl, &ovsrec_mirror_col_statistics);
 329
 330     ovsdb_idl_omit(idl, &ovsrec_netflow_col_external_ids);
 331
 332     ovsdb_idl_omit(idl, &ovsrec_sflow_col_external_ids);
 333
 334     ovsdb_idl_omit(idl, &ovsrec_manager_col_external_ids);
 335     ovsdb_idl_omit(idl, &ovsrec_manager_col_inactivity_probe);
 336     ovsdb_idl_omit(idl, &ovsrec_manager_col_is_connected);
 337     ovsdb_idl_omit(idl, &ovsrec_manager_col_max_backoff);
 338     ovsdb_idl_omit(idl, &ovsrec_manager_col_status);
 339
 340     ovsdb_idl_omit(idl, &ovsrec_ssl_col_external_ids);
 341
 342     /* Register unixctl commands. */
 343     unixctl_command_register("qos/show", "interface", 1, 1,
 344                              qos_unixctl_show, NULL);
 345     unixctl_command_register("bridge/dump-flows", "bridge", 1, 1,
 346                              bridge_unixctl_dump_flows, NULL);
 347     unixctl_command_register("bridge/reconnect", "[bridge]", 0, 1,
 348                              bridge_unixctl_reconnect, NULL);
 349     lacp_init();
 350     bond_init();
 351     cfm_init();
 352     stp_init();
 353 }
 354
 355 void
 356 bridge_exit(void)
 357 {
 358     struct bridge *br, *next_br;
 359
 360     HMAP_FOR_EACH_SAFE (br, next_br, node, &all_bridges) {
 361         bridge_destroy(br);
 362     }
 363     ovsdb_idl_destroy(idl);
 364 }
 365
 366 /* Looks at the list of managers in 'ovs_cfg' and extracts their remote IP
 367  * addresses and ports into '*managersp' and '*n_managersp'.  The caller is
 368  * responsible for freeing '*managersp' (with free()).
 369  *
 370  * You may be asking yourself "why does ovs-vswitchd care?", because
 371  * ovsdb-server is responsible for connecting to the managers, and ovs-vswitchd
 372  * should not be and in fact is not directly involved in that.  But
 373  * ovs-vswitchd needs to make sure that ovsdb-server can reach the managers, so
 374  * it has to tell in-band control where the managers are to enable that.
 375  * (Thus, only managers connected in-band are collected.)
 376  */
 377 static void
 378 collect_in_band_managers(const struct ovsrec_open_vswitch *ovs_cfg,
 379                          struct sockaddr_in **managersp, size_t *n_managersp)
 380 {
 381     struct sockaddr_in *managers = NULL;
 382     size_t n_managers = 0;
 383     struct sset targets;
 384     size_t i;
 385
 386     /* Collect all of the potential targets from the "targets" columns of the
 387      * rows pointed to by "manager_options", excluding any that are
 388      * out-of-band. */
 389     sset_init(&targets);
 390     for (i = 0; i < ovs_cfg->n_manager_options; i++) {
 391         struct ovsrec_manager *m = ovs_cfg->manager_options[i];
 392
 393         if (m->connection_mode && !strcmp(m->connection_mode, "out-of-band")) {
 394             sset_find_and_delete(&targets, m->target);
 395         } else {
 396             sset_add(&targets, m->target);
 397         }
 398     }
 399
 400     /* Now extract the targets' IP addresses. */
 401     if (!sset_is_empty(&targets)) {
 402         const char *target;
 403
 404         managers = xmalloc(sset_count(&targets) * sizeof *managers);
 405         SSET_FOR_EACH (target, &targets) {
 406             struct sockaddr_in *sin = &managers[n_managers];
 407
 408             if (stream_parse_target_with_default_ports(target,
 409                                                        JSONRPC_TCP_PORT,
 410                                                        JSONRPC_SSL_PORT,
 411                                                        sin)) {
 412                 n_managers++;
 413             }
 414         }
 415     }
 416     sset_destroy(&targets);
 417
 418     *managersp = managers;
 419     *n_managersp = n_managers;
 420 }
 421
 422 static void
 423 bridge_reconfigure(const struct ovsrec_open_vswitch *ovs_cfg)
 424 {
 425     unsigned long int *splinter_vlans;
 426     struct bridge *br;
 427
 428     COVERAGE_INC(bridge_reconfigure);
 429
 430     assert(!reconfiguring);
 431     reconfiguring = true;
 432
 433     /* Destroy "struct bridge"s, "struct port"s, and "struct iface"s according
 434      * to 'ovs_cfg' while update the "if_cfg_queue", with only very minimal
 435      * configuration otherwise.
 436      *
 437      * This is mostly an update to bridge data structures. Nothing is pushed
 438      * down to ofproto or lower layers. */
 439     add_del_bridges(ovs_cfg);
 440     splinter_vlans = collect_splinter_vlans(ovs_cfg);
 441     HMAP_FOR_EACH (br, node, &all_bridges) {
 442         bridge_add_del_ports(br, splinter_vlans);
 443     }
 444     free(splinter_vlans);
 445
 446     /* Delete datapaths that are no longer configured, and create ones which
 447      * don't exist but should. */
 448     bridge_update_ofprotos();
 449
 450     /* Make sure each "struct iface" has a correct ofp_port in its ofproto. */
 451     HMAP_FOR_EACH (br, node, &all_bridges) {
 452         bridge_refresh_ofp_port(br);
 453     }
 454
 455     /* Clear database records for "if_cfg"s which haven't been instantiated. */
 456     HMAP_FOR_EACH (br, node, &all_bridges) {
 457         struct if_cfg *if_cfg;
 458
 459         HMAP_FOR_EACH (if_cfg, hmap_node, &br->if_cfg_todo) {
 460             iface_clear_db_record(if_cfg->cfg);
 461         }
 462     }
 463 }
 464
 465 static bool
 466 bridge_reconfigure_ofp(void)
 467 {
 468     long long int deadline;
 469     struct bridge *br;
 470
 471     time_refresh();
 472     deadline = time_msec() + OFP_PORT_ACTION_WINDOW;
 473
 474     /* The kernel will reject any attempt to add a given port to a datapath if
 475      * that port already belongs to a different datapath, so we must do all
 476      * port deletions before any port additions. */
 477     HMAP_FOR_EACH (br, node, &all_bridges) {
 478         struct ofpp_garbage *garbage, *next;
 479
 480         LIST_FOR_EACH_SAFE (garbage, next, list_node, &br->ofpp_garbage) {
 481             ofproto_port_del(br->ofproto, garbage->ofp_port);
 482             list_remove(&garbage->list_node);
 483             free(garbage);
 484
 485             time_refresh();
 486             if (time_msec() >= deadline) {
 487                 return false;
 488             }
 489         }
 490     }
 491
 492     HMAP_FOR_EACH (br, node, &all_bridges) {
 493         struct if_cfg *if_cfg, *next;
 494
 495         HMAP_FOR_EACH_SAFE (if_cfg, next, hmap_node, &br->if_cfg_todo) {
 496             iface_create(br, if_cfg, -1);
 497             time_refresh();
 498             if (time_msec() >= deadline) {
 499                 return false;
 500             }
 501         }
 502     }
 503
 504     return true;
 505 }
 506
 507 static bool
 508 bridge_reconfigure_continue(const struct ovsrec_open_vswitch *ovs_cfg)
 509 {
 510     struct sockaddr_in *managers;
 511     int sflow_bridge_number;
 512     size_t n_managers;
 513     struct bridge *br;
 514     bool done;
 515
 516     assert(reconfiguring);
 517     done = bridge_reconfigure_ofp();
 518
 519     /* Complete the configuration. */
 520     sflow_bridge_number = 0;
 521     collect_in_band_managers(ovs_cfg, &managers, &n_managers);
 522     HMAP_FOR_EACH (br, node, &all_bridges) {
 523         struct port *port;
 524
 525         /* We need the datapath ID early to allow LACP ports to use it as the
 526          * default system ID. */
 527         bridge_configure_datapath_id(br);
 528
 529         HMAP_FOR_EACH (port, hmap_node, &br->ports) {
 530             struct iface *iface;
 531
 532             port_configure(port);
 533
 534             LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
 535                 iface_configure_cfm(iface);
 536                 iface_configure_qos(iface, port->cfg->qos);
 537                 iface_set_mac(iface);
 538             }
 539         }
 540         bridge_configure_mirrors(br);
 541         bridge_configure_flow_eviction_threshold(br);
 542         bridge_configure_forward_bpdu(br);
 543         bridge_configure_mac_idle_time(br);
 544         bridge_configure_remotes(br, managers, n_managers);
 545         bridge_configure_netflow(br);
 546         bridge_configure_sflow(br, &sflow_bridge_number);
 547         bridge_configure_stp(br);
 548         bridge_configure_tables(br);
 549     }
 550     free(managers);
 551
 552     if (done) {
 553         /* ovs-vswitchd has completed initialization, so allow the process that
 554          * forked us to exit successfully. */
 555         daemonize_complete();
 556         reconfiguring = false;
 557     }
 558
 559     return done;
 560 }
 561
 562 /* Delete ofprotos which aren't configured or have the wrong type.  Create
 563  * ofprotos which don't exist but need to. */
 564 static void
 565 bridge_update_ofprotos(void)
 566 {
 567     struct bridge *br, *next;
 568     struct sset names;
 569     struct sset types;
 570     const char *type;
 571
 572     /* Delete ofprotos with no bridge or with the wrong type. */
 573     sset_init(&names);
 574     sset_init(&types);
 575     ofproto_enumerate_types(&types);
 576     SSET_FOR_EACH (type, &types) {
 577         const char *name;
 578
 579         ofproto_enumerate_names(type, &names);
 580         SSET_FOR_EACH (name, &names) {
 581             br = bridge_lookup(name);
 582             if (!br || strcmp(type, br->type)) {
 583                 ofproto_delete(name, type);
 584             }
 585         }
 586     }
 587     sset_destroy(&names);
 588     sset_destroy(&types);
 589
 590     /* Add ofprotos for bridges which don't have one yet. */
 591     HMAP_FOR_EACH_SAFE (br, next, node, &all_bridges) {
 592         struct bridge *br2;
 593         int error;
 594
 595         if (br->ofproto) {
 596             continue;
 597         }
 598
 599         /* Remove ports from any datapath with the same name as 'br'.  If we
 600          * don't do this, creating 'br''s ofproto will fail because a port with
 601          * the same name as its local port already exists. */
 602         HMAP_FOR_EACH (br2, node, &all_bridges) {
 603             struct ofproto_port ofproto_port;
 604
 605             if (!br2->ofproto) {
 606                 continue;
 607             }
 608
 609             if (!ofproto_port_query_by_name(br2->ofproto, br->name,
 610                                             &ofproto_port)) {
 611                 error = ofproto_port_del(br2->ofproto, ofproto_port.ofp_port);
 612                 if (error) {
 613                     VLOG_ERR("failed to delete port %s: %s", ofproto_port.name,
 614                              strerror(error));
 615                 }
 616                 ofproto_port_destroy(&ofproto_port);
 617             }
 618         }
 619
 620         error = ofproto_create(br->name, br->type, &br->ofproto);
 621         if (error) {
 622             VLOG_ERR("failed to create bridge %s: %s", br->name,
 623                      strerror(error));
 624             bridge_destroy(br);
 625         }
 626     }
 627 }
 628
 629 static void
 630 port_configure(struct port *port)
 631 {
 632     const struct ovsrec_port *cfg = port->cfg;
 633     struct bond_settings bond_settings;
 634     struct lacp_settings lacp_settings;
 635     struct ofproto_bundle_settings s;
 636     struct iface *iface;
 637
 638     if (cfg->vlan_mode && !strcmp(cfg->vlan_mode, "splinter")) {
 639         configure_splinter_port(port);
 640         return;
 641     }
 642
 643     /* Get name. */
 644     s.name = port->name;
 645
 646     /* Get slaves. */
 647     s.n_slaves = 0;
 648     s.slaves = xmalloc(list_size(&port->ifaces) * sizeof *s.slaves);
 649     LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
 650         s.slaves[s.n_slaves++] = iface->ofp_port;
 651     }
 652
 653     /* Get VLAN tag. */
 654     s.vlan = -1;
 655     if (cfg->tag && *cfg->tag >= 0 && *cfg->tag <= 4095) {
 656         s.vlan = *cfg->tag;
 657     }
 658
 659     /* Get VLAN trunks. */
 660     s.trunks = NULL;
 661     if (cfg->n_trunks) {
 662         s.trunks = vlan_bitmap_from_array(cfg->trunks, cfg->n_trunks);
 663     }
 664
 665     /* Get VLAN mode. */
 666     if (cfg->vlan_mode) {
 667         if (!strcmp(cfg->vlan_mode, "access")) {
 668             s.vlan_mode = PORT_VLAN_ACCESS;
 669         } else if (!strcmp(cfg->vlan_mode, "trunk")) {
 670             s.vlan_mode = PORT_VLAN_TRUNK;
 671         } else if (!strcmp(cfg->vlan_mode, "native-tagged")) {
 672             s.vlan_mode = PORT_VLAN_NATIVE_TAGGED;
 673         } else if (!strcmp(cfg->vlan_mode, "native-untagged")) {
 674             s.vlan_mode = PORT_VLAN_NATIVE_UNTAGGED;
 675         } else {
 676             /* This "can't happen" because ovsdb-server should prevent it. */
 677             VLOG_ERR("unknown VLAN mode %s", cfg->vlan_mode);
 678             s.vlan_mode = PORT_VLAN_TRUNK;
 679         }
 680     } else {
 681         if (s.vlan >= 0) {
 682             s.vlan_mode = PORT_VLAN_ACCESS;
 683             if (cfg->n_trunks) {
 684                 VLOG_ERR("port %s: ignoring trunks in favor of implicit vlan",
 685                          port->name);
 686             }
 687         } else {
 688             s.vlan_mode = PORT_VLAN_TRUNK;
 689         }
 690     }
 691     s.use_priority_tags = !strcmp("true", ovsrec_port_get_other_config_value(
 692                                       cfg, "priority-tags", ""));
 693
 694     /* Get LACP settings. */
 695     s.lacp = port_configure_lacp(port, &lacp_settings);
 696     if (s.lacp) {
 697         size_t i = 0;
 698
 699         s.lacp_slaves = xmalloc(s.n_slaves * sizeof *s.lacp_slaves);
 700         LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
 701             iface_configure_lacp(iface, &s.lacp_slaves[i++]);
 702         }
 703     } else {
 704         s.lacp_slaves = NULL;
 705     }
 706
 707     /* Get bond settings. */
 708     if (s.n_slaves > 1) {
 709         s.bond = &bond_settings;
 710         s.bond_stable_ids = xmalloc(s.n_slaves * sizeof *s.bond_stable_ids);
 711         port_configure_bond(port, &bond_settings, s.bond_stable_ids);
 712     } else {
 713         s.bond = NULL;
 714         s.bond_stable_ids = NULL;
 715
 716         LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
 717             netdev_set_miimon_interval(iface->netdev, 0);
 718         }
 719     }
 720
 721     /* Register. */
 722     ofproto_bundle_register(port->bridge->ofproto, port, &s);
 723
 724     /* Clean up. */
 725     free(s.slaves);
 726     free(s.trunks);
 727     free(s.lacp_slaves);
 728     free(s.bond_stable_ids);
 729 }
 730
 731 /* Pick local port hardware address and datapath ID for 'br'. */
 732 static void
 733 bridge_configure_datapath_id(struct bridge *br)
 734 {
 735     uint8_t ea[ETH_ADDR_LEN];
 736     uint64_t dpid;
 737     struct iface *local_iface;
 738     struct iface *hw_addr_iface;
 739     char *dpid_string;
 740
 741     bridge_pick_local_hw_addr(br, ea, &hw_addr_iface);
 742     local_iface = iface_from_ofp_port(br, OFPP_LOCAL);
 743     if (local_iface) {
 744         int error = netdev_set_etheraddr(local_iface->netdev, ea);
 745         if (error) {
 746             static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
 747             VLOG_ERR_RL(&rl, "bridge %s: failed to set bridge "
 748                         "Ethernet address: %s",
 749                         br->name, strerror(error));
 750         }
 751     }
 752     memcpy(br->ea, ea, ETH_ADDR_LEN);
 753
 754     dpid = bridge_pick_datapath_id(br, ea, hw_addr_iface);
 755     ofproto_set_datapath_id(br->ofproto, dpid);
 756
 757     dpid_string = xasprintf("%016"PRIx64, dpid);
 758     ovsrec_bridge_set_datapath_id(br->cfg, dpid_string);
 759     free(dpid_string);
 760 }
 761
 762 /* Set NetFlow configuration on 'br'. */
 763 static void
 764 bridge_configure_netflow(struct bridge *br)
 765 {
 766     struct ovsrec_netflow *cfg = br->cfg->netflow;
 767     struct netflow_options opts;
 768
 769     if (!cfg) {
 770         ofproto_set_netflow(br->ofproto, NULL);
 771         return;
 772     }
 773
 774     memset(&opts, 0, sizeof opts);
 775
 776     /* Get default NetFlow configuration from datapath.
 777      * Apply overrides from 'cfg'. */
 778     ofproto_get_netflow_ids(br->ofproto, &opts.engine_type, &opts.engine_id);
 779     if (cfg->engine_type) {
 780         opts.engine_type = *cfg->engine_type;
 781     }
 782     if (cfg->engine_id) {
 783         opts.engine_id = *cfg->engine_id;
 784     }
 785
 786     /* Configure active timeout interval. */
 787     opts.active_timeout = cfg->active_timeout;
 788     if (!opts.active_timeout) {
 789         opts.active_timeout = -1;
 790     } else if (opts.active_timeout < 0) {
 791         VLOG_WARN("bridge %s: active timeout interval set to negative "
 792                   "value, using default instead (%d seconds)", br->name,
 793                   NF_ACTIVE_TIMEOUT_DEFAULT);
 794         opts.active_timeout = -1;
 795     }
 796
 797     /* Add engine ID to interface number to disambiguate bridgs? */
 798     opts.add_id_to_iface = cfg->add_id_to_interface;
 799     if (opts.add_id_to_iface) {
 800         if (opts.engine_id > 0x7f) {
 801             VLOG_WARN("bridge %s: NetFlow port mangling may conflict with "
 802                       "another vswitch, choose an engine id less than 128",
 803                       br->name);
 804         }
 805         if (hmap_count(&br->ports) > 508) {
 806             VLOG_WARN("bridge %s: NetFlow port mangling will conflict with "
 807                       "another port when more than 508 ports are used",
 808                       br->name);
 809         }
 810     }
 811
 812     /* Collectors. */
 813     sset_init(&opts.collectors);
 814     sset_add_array(&opts.collectors, cfg->targets, cfg->n_targets);
 815
 816     /* Configure. */
 817     if (ofproto_set_netflow(br->ofproto, &opts)) {
 818         VLOG_ERR("bridge %s: problem setting netflow collectors", br->name);
 819     }
 820     sset_destroy(&opts.collectors);
 821 }
 822
 823 /* Set sFlow configuration on 'br'. */
 824 static void
 825 bridge_configure_sflow(struct bridge *br, int *sflow_bridge_number)
 826 {
 827     const struct ovsrec_sflow *cfg = br->cfg->sflow;
 828     struct ovsrec_controller **controllers;
 829     struct ofproto_sflow_options oso;
 830     size_t n_controllers;
 831     size_t i;
 832
 833     if (!cfg) {
 834         ofproto_set_sflow(br->ofproto, NULL);
 835         return;
 836     }
 837
 838     memset(&oso, 0, sizeof oso);
 839
 840     sset_init(&oso.targets);
 841     sset_add_array(&oso.targets, cfg->targets, cfg->n_targets);
 842
 843     oso.sampling_rate = SFL_DEFAULT_SAMPLING_RATE;
 844     if (cfg->sampling) {
 845         oso.sampling_rate = *cfg->sampling;
 846     }
 847
 848     oso.polling_interval = SFL_DEFAULT_POLLING_INTERVAL;
 849     if (cfg->polling) {
 850         oso.polling_interval = *cfg->polling;
 851     }
 852
 853     oso.header_len = SFL_DEFAULT_HEADER_SIZE;
 854     if (cfg->header) {
 855         oso.header_len = *cfg->header;
 856     }
 857
 858     oso.sub_id = (*sflow_bridge_number)++;
 859     oso.agent_device = cfg->agent;
 860
 861     oso.control_ip = NULL;
 862     n_controllers = bridge_get_controllers(br, &controllers);
 863     for (i = 0; i < n_controllers; i++) {
 864         if (controllers[i]->local_ip) {
 865             oso.control_ip = controllers[i]->local_ip;
 866             break;
 867         }
 868     }
 869     ofproto_set_sflow(br->ofproto, &oso);
 870
 871     sset_destroy(&oso.targets);
 872 }
 873
 874 static void
 875 port_configure_stp(const struct ofproto *ofproto, struct port *port,
 876                    struct ofproto_port_stp_settings *port_s,
 877                    int *port_num_counter, unsigned long *port_num_bitmap)
 878 {
 879     const char *config_str;
 880     struct iface *iface;
 881
 882     config_str = ovsrec_port_get_other_config_value(port->cfg, "stp-enable",
 883                                                     NULL);
 884     if (config_str && !strcmp(config_str, "false")) {
 885         port_s->enable = false;
 886         return;
 887     } else {
 888         port_s->enable = true;
 889     }
 890
 891     /* STP over bonds is not supported. */
 892     if (!list_is_singleton(&port->ifaces)) {
 893         VLOG_ERR("port %s: cannot enable STP on bonds, disabling",
 894                  port->name);
 895         port_s->enable = false;
 896         return;
 897     }
 898
 899     iface = CONTAINER_OF(list_front(&port->ifaces), struct iface, port_elem);
 900
 901     /* Internal ports shouldn't participate in spanning tree, so
 902      * skip them. */
 903     if (!strcmp(iface->type, "internal")) {
 904         VLOG_DBG("port %s: disable STP on internal ports", port->name);
 905         port_s->enable = false;
 906         return;
 907     }
 908
 909     /* STP on mirror output ports is not supported. */
 910     if (ofproto_is_mirror_output_bundle(ofproto, port)) {
 911         VLOG_DBG("port %s: disable STP on mirror ports", port->name);
 912         port_s->enable = false;
 913         return;
 914     }
 915
 916     config_str = ovsrec_port_get_other_config_value(port->cfg, "stp-port-num",
 917                                                     NULL);
 918     if (config_str) {
 919         unsigned long int port_num = strtoul(config_str, NULL, 0);
 920         int port_idx = port_num - 1;
 921
 922         if (port_num < 1 || port_num > STP_MAX_PORTS) {
 923             VLOG_ERR("port %s: invalid stp-port-num", port->name);
 924             port_s->enable = false;
 925             return;
 926         }
 927
 928         if (bitmap_is_set(port_num_bitmap, port_idx)) {
 929             VLOG_ERR("port %s: duplicate stp-port-num %lu, disabling",
 930                     port->name, port_num);
 931             port_s->enable = false;
 932             return;
 933         }
 934         bitmap_set1(port_num_bitmap, port_idx);
 935         port_s->port_num = port_idx;
 936     } else {
 937         if (*port_num_counter > STP_MAX_PORTS) {
 938             VLOG_ERR("port %s: too many STP ports, disabling", port->name);
 939             port_s->enable = false;
 940             return;
 941         }
 942
 943         port_s->port_num = (*port_num_counter)++;
 944     }
 945
 946     config_str = ovsrec_port_get_other_config_value(port->cfg, "stp-path-cost",
 947                                                     NULL);
 948     if (config_str) {
 949         port_s->path_cost = strtoul(config_str, NULL, 10);
 950     } else {
 951         enum netdev_features current;
 952
 953         if (netdev_get_features(iface->netdev, &current, NULL, NULL, NULL)) {
 954             /* Couldn't get speed, so assume 100Mb/s. */
 955             port_s->path_cost = 19;
 956         } else {
 957             unsigned int mbps;
 958
 959             mbps = netdev_features_to_bps(current) / 1000000;
 960             port_s->path_cost = stp_convert_speed_to_cost(mbps);
 961         }
 962     }
 963
 964     config_str = ovsrec_port_get_other_config_value(port->cfg,
 965                                                     "stp-port-priority",
 966                                                     NULL);
 967     if (config_str) {
 968         port_s->priority = strtoul(config_str, NULL, 0);
 969     } else {
 970         port_s->priority = STP_DEFAULT_PORT_PRIORITY;
 971     }
 972 }
 973
 974 /* Set spanning tree configuration on 'br'. */
 975 static void
 976 bridge_configure_stp(struct bridge *br)
 977 {
 978     if (!br->cfg->stp_enable) {
 979         ofproto_set_stp(br->ofproto, NULL);
 980     } else {
 981         struct ofproto_stp_settings br_s;
 982         const char *config_str;
 983         struct port *port;
 984         int port_num_counter;
 985         unsigned long *port_num_bitmap;
 986
 987         config_str = ovsrec_bridge_get_other_config_value(br->cfg,
 988                                                           "stp-system-id",
 989                                                           NULL);
 990         if (config_str) {
 991             uint8_t ea[ETH_ADDR_LEN];
 992
 993             if (eth_addr_from_string(config_str, ea)) {
 994                 br_s.system_id = eth_addr_to_uint64(ea);
 995             } else {
 996                 br_s.system_id = eth_addr_to_uint64(br->ea);
 997                 VLOG_ERR("bridge %s: invalid stp-system-id, defaulting "
 998                          "to "ETH_ADDR_FMT, br->name, ETH_ADDR_ARGS(br->ea));
 999             }
1000         } else {
1001             br_s.system_id = eth_addr_to_uint64(br->ea);
1002         }
1003
1004         config_str = ovsrec_bridge_get_other_config_value(br->cfg,
1005                                                           "stp-priority",
1006                                                           NULL);
1007         if (config_str) {
1008             br_s.priority = strtoul(config_str, NULL, 0);
1009         } else {
1010             br_s.priority = STP_DEFAULT_BRIDGE_PRIORITY;
1011         }
1012
1013         config_str = ovsrec_bridge_get_other_config_value(br->cfg,
1014                                                           "stp-hello-time",
1015                                                           NULL);
1016         if (config_str) {
1017             br_s.hello_time = strtoul(config_str, NULL, 10) * 1000;
1018         } else {
1019             br_s.hello_time = STP_DEFAULT_HELLO_TIME;
1020         }
1021
1022         config_str = ovsrec_bridge_get_other_config_value(br->cfg,
1023                                                           "stp-max-age",
1024                                                           NULL);
1025         if (config_str) {
1026             br_s.max_age = strtoul(config_str, NULL, 10) * 1000;
1027         } else {
1028             br_s.max_age = STP_DEFAULT_MAX_AGE;
1029         }
1030
1031         config_str = ovsrec_bridge_get_other_config_value(br->cfg,
1032                                                           "stp-forward-delay",
1033                                                           NULL);
1034         if (config_str) {
1035             br_s.fwd_delay = strtoul(config_str, NULL, 10) * 1000;
1036         } else {
1037             br_s.fwd_delay = STP_DEFAULT_FWD_DELAY;
1038         }
1039
1040         /* Configure STP on the bridge. */
1041         if (ofproto_set_stp(br->ofproto, &br_s)) {
1042             VLOG_ERR("bridge %s: could not enable STP", br->name);
1043             return;
1044         }
1045
1046         /* Users must either set the port number with the "stp-port-num"
1047          * configuration on all ports or none.  If manual configuration
1048          * is not done, then we allocate them sequentially. */
1049         port_num_counter = 0;
1050         port_num_bitmap = bitmap_allocate(STP_MAX_PORTS);
1051         HMAP_FOR_EACH (port, hmap_node, &br->ports) {
1052             struct ofproto_port_stp_settings port_s;
1053             struct iface *iface;
1054
1055             port_configure_stp(br->ofproto, port, &port_s,
1056                                &port_num_counter, port_num_bitmap);
1057
1058             /* As bonds are not supported, just apply configuration to
1059              * all interfaces. */
1060             LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
1061                 if (ofproto_port_set_stp(br->ofproto, iface->ofp_port,
1062                                          &port_s)) {
1063                     VLOG_ERR("port %s: could not enable STP", port->name);
1064                     continue;
1065                 }
1066             }
1067         }
1068
1069         if (bitmap_scan(port_num_bitmap, 0, STP_MAX_PORTS) != STP_MAX_PORTS
1070                     && port_num_counter) {
1071             VLOG_ERR("bridge %s: must manually configure all STP port "
1072                      "IDs or none, disabling", br->name);
1073             ofproto_set_stp(br->ofproto, NULL);
1074         }
1075         bitmap_free(port_num_bitmap);
1076     }
1077 }
1078
1079 static bool
1080 bridge_has_bond_fake_iface(const struct bridge *br, const char *name)
1081 {
1082     const struct port *port = port_lookup(br, name);
1083     return port && port_is_bond_fake_iface(port);
1084 }
1085
1086 static bool
1087 port_is_bond_fake_iface(const struct port *port)
1088 {
1089     return port->cfg->bond_fake_iface && !list_is_short(&port->ifaces);
1090 }
1091
1092 static void
1093 add_del_bridges(const struct ovsrec_open_vswitch *cfg)
1094 {
1095     struct bridge *br, *next;
1096     struct shash new_br;
1097     size_t i;
1098
1099     /* Collect new bridges' names and types. */
1100     shash_init(&new_br);
1101     for (i = 0; i < cfg->n_bridges; i++) {
1102         static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
1103         const struct ovsrec_bridge *br_cfg = cfg->bridges[i];
1104
1105         if (strchr(br_cfg->name, '/')) {
1106             /* Prevent remote ovsdb-server users from accessing arbitrary
1107              * directories, e.g. consider a bridge named "../../../etc/". */
1108             VLOG_WARN_RL(&rl, "ignoring bridge with invalid name \"%s\"",
1109                          br_cfg->name);
1110         } else if (!shash_add_once(&new_br, br_cfg->name, br_cfg)) {
1111             VLOG_WARN_RL(&rl, "bridge %s specified twice", br_cfg->name);
1112         }
1113     }
1114
1115     /* Get rid of deleted bridges or those whose types have changed.
1116      * Update 'cfg' of bridges that still exist. */
1117     HMAP_FOR_EACH_SAFE (br, next, node, &all_bridges) {
1118         br->cfg = shash_find_data(&new_br, br->name);
1119         if (!br->cfg || strcmp(br->type, ofproto_normalize_type(
1120                                    br->cfg->datapath_type))) {
1121             bridge_destroy(br);
1122         }
1123     }
1124
1125     /* Add new bridges. */
1126     for (i = 0; i < cfg->n_bridges; i++) {
1127         const struct ovsrec_bridge *br_cfg = cfg->bridges[i];
1128         struct bridge *br = bridge_lookup(br_cfg->name);
1129         if (!br) {
1130             bridge_create(br_cfg);
1131         }
1132     }
1133
1134     shash_destroy(&new_br);
1135 }
1136
1137 static void
1138 iface_set_ofp_port(struct iface *iface, int ofp_port)
1139 {
1140     struct bridge *br = iface->port->bridge;
1141
1142     assert(iface->ofp_port < 0 && ofp_port >= 0);
1143     iface->ofp_port = ofp_port;
1144     hmap_insert(&br->ifaces, &iface->ofp_port_node, hash_int(ofp_port, 0));
1145     iface_set_ofport(iface->cfg, ofp_port);
1146 }
1147
1148 /* Configures 'netdev' based on the "options" column in 'iface_cfg'.
1149  * Returns 0 if successful, otherwise a positive errno value. */
1150 static int
1151 iface_set_netdev_config(const struct ovsrec_interface *iface_cfg,
1152                         struct netdev *netdev)
1153 {
1154     struct smap args;
1155     int error;
1156
1157     smap_init(&args);
1158     smap_from_ovs_idl_map(iface_cfg->key_options,
1159                           iface_cfg->value_options,
1160                           iface_cfg->n_options, &args);
1161     error = netdev_set_config(netdev, &args);
1162     smap_destroy(&args);
1163
1164     if (error) {
1165         VLOG_WARN("could not configure network device %s (%s)",
1166                   iface_cfg->name, strerror(error));
1167     }
1168     return error;
1169 }
1170
1171 /* This function determines whether 'ofproto_port', which is attached to
1172  * br->ofproto's datapath, is one that we want in 'br'.
1173  *
1174  * If it is, it returns true, after creating an iface (if necessary),
1175  * configuring the iface's netdev according to the iface's options, and setting
1176  * iface's ofp_port member to 'ofproto_port->ofp_port'.
1177  *
1178  * If, on the other hand, 'port' should be removed, it returns false.  The
1179  * caller should later detach the port from br->ofproto. */
1180 static bool
1181 bridge_refresh_one_ofp_port(struct bridge *br,
1182                             const struct ofproto_port *ofproto_port)
1183 {
1184     const char *name = ofproto_port->name;
1185     const char *type = ofproto_port->type;
1186     uint16_t ofp_port = ofproto_port->ofp_port;
1187
1188     struct iface *iface = iface_lookup(br, name);
1189     if (iface) {
1190         /* Check that the name-to-number mapping is one-to-one. */
1191         if (iface->ofp_port >= 0) {
1192             VLOG_WARN("bridge %s: interface %s reported twice",
1193                       br->name, name);
1194             return false;
1195         } else if (iface_from_ofp_port(br, ofp_port)) {
1196             VLOG_WARN("bridge %s: interface %"PRIu16" reported twice",
1197                       br->name, ofp_port);
1198             return false;
1199         }
1200
1201         /* There's a configured interface named 'name'. */
1202         if (strcmp(type, iface->type)
1203             || iface_set_netdev_config(iface->cfg, iface->netdev)) {
1204             /* It's the wrong type, or it's the right type but can't be
1205              * configured as the user requested, so we must destroy it. */
1206             return false;
1207         } else {
1208             /* It's the right type and configured correctly.  keep it. */
1209             iface_set_ofp_port(iface, ofp_port);
1210             return true;
1211         }
1212     } else if (bridge_has_bond_fake_iface(br, name)
1213                && !strcmp(type, "internal")) {
1214         /* It's a bond fake iface.  Keep it. */
1215         return true;
1216     } else {
1217         /* There's no configured interface named 'name', but there might be an
1218          * interface of that name queued to be created.
1219          *
1220          * If there is, and it has the correct type, then try to configure it
1221          * and add it.  If that's successful, we'll keep it.  Otherwise, we'll
1222          * delete it and later try to re-add it. */
1223         struct if_cfg *if_cfg = if_cfg_lookup(br, name);
1224         return (if_cfg
1225                 && !strcmp(type, iface_get_type(if_cfg->cfg, br->cfg))
1226                 && iface_create(br, if_cfg, ofp_port));
1227     }
1228 }
1229
1230 /* Update bridges "if_cfg"s, "struct port"s, and "struct iface"s to be
1231  * consistent with the ofp_ports in "br->ofproto". */
1232 static void
1233 bridge_refresh_ofp_port(struct bridge *br)
1234 {
1235     struct ofproto_port_dump dump;
1236     struct ofproto_port ofproto_port;
1237     struct port *port, *port_next;
1238
1239     /* Clear each "struct iface"s ofp_port so we can get its correct value. */
1240     hmap_clear(&br->ifaces);
1241     HMAP_FOR_EACH (port, hmap_node, &br->ports) {
1242         struct iface *iface;
1243
1244         LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
1245             iface->ofp_port = -1;
1246         }
1247     }
1248
1249     /* Obtain the correct "ofp_port"s from ofproto. Find any if_cfg's which
1250      * already exist in the datapath and promote them to full fledged "struct
1251      * iface"s.  Mark ports in the datapath which don't belong as garbage. */
1252     OFPROTO_PORT_FOR_EACH (&ofproto_port, &dump, br->ofproto) {
1253         if (!bridge_refresh_one_ofp_port(br, &ofproto_port)) {
1254             struct ofpp_garbage *garbage = xmalloc(sizeof *garbage);
1255             garbage->ofp_port = ofproto_port.ofp_port;
1256             list_push_front(&br->ofpp_garbage, &garbage->list_node);
1257         }
1258     }
1259
1260     /* Some ifaces may not have "ofp_port"s in ofproto and therefore don't
1261      * deserve to have "struct iface"s.  Demote these to "if_cfg"s so that
1262      * later they can be added to ofproto. */
1263     HMAP_FOR_EACH_SAFE (port, port_next, hmap_node, &br->ports) {
1264         struct iface *iface, *iface_next;
1265
1266         LIST_FOR_EACH_SAFE (iface, iface_next, port_elem, &port->ifaces) {
1267             if (iface->ofp_port < 0) {
1268                 bridge_queue_if_cfg(br, iface->cfg, port->cfg);
1269                 iface_destroy(iface);
1270             }
1271         }
1272
1273         if (list_is_empty(&port->ifaces)) {
1274             port_destroy(port);
1275         }
1276     }
1277 }
1278
1279 /* Opens a network device for 'iface_cfg' and configures it.  If '*ofp_portp'
1280  * is negative, adds the network device to br->ofproto and stores the OpenFlow
1281  * port number in '*ofp_portp'; otherwise leaves br->ofproto and '*ofp_portp'
1282  * untouched.
1283  *
1284  * If successful, returns 0 and stores the network device in '*netdevp'.  On
1285  * failure, returns a positive errno value and stores NULL in '*netdevp'. */
1286 static int
1287 iface_do_create(const struct bridge *br,
1288                 const struct ovsrec_interface *iface_cfg,
1289                 const struct ovsrec_port *port_cfg,
1290                 int *ofp_portp, struct netdev **netdevp)
1291 {
1292     struct netdev *netdev;
1293     int error;
1294
1295     error = netdev_open(iface_cfg->name,
1296                         iface_get_type(iface_cfg, br->cfg), &netdev);
1297     if (error) {
1298         VLOG_WARN("could not open network device %s (%s)",
1299                   iface_cfg->name, strerror(error));
1300         goto error;
1301     }
1302
1303     error = iface_set_netdev_config(iface_cfg, netdev);
1304     if (error) {
1305         goto error;
1306     }
1307
1308     if (*ofp_portp < 0) {
1309         uint16_t ofp_port;
1310
1311         error = ofproto_port_add(br->ofproto, netdev, &ofp_port);
1312         if (error) {
1313             goto error;
1314         }
1315         *ofp_portp = ofp_port;
1316
1317         VLOG_INFO("bridge %s: added interface %s on port %d",
1318                   br->name, iface_cfg->name, *ofp_portp);
1319     } else {
1320         VLOG_DBG("bridge %s: interface %s is on port %d",
1321                  br->name, iface_cfg->name, *ofp_portp);
1322     }
1323
1324     if (port_cfg->vlan_mode && !strcmp(port_cfg->vlan_mode, "splinter")) {
1325         netdev_turn_flags_on(netdev, NETDEV_UP, true);
1326     }
1327
1328     *netdevp = netdev;
1329     return 0;
1330
1331 error:
1332     *netdevp = NULL;
1333     netdev_close(netdev);
1334     return error;
1335 }
1336
1337 /* Creates a new iface on 'br' based on 'if_cfg'.  The new iface has OpenFlow
1338  * port number 'ofp_port'.  If ofp_port is negative, an OpenFlow port is
1339  * automatically allocated for the iface.  Takes ownership of and
1340  * deallocates 'if_cfg'.
1341  *
1342  * Return true if an iface is successfully created, false otherwise. */
1343 static bool
1344 iface_create(struct bridge *br, struct if_cfg *if_cfg, int ofp_port)
1345 {
1346     const struct ovsrec_interface *iface_cfg = if_cfg->cfg;
1347     const struct ovsrec_port *port_cfg = if_cfg->parent;
1348
1349     struct netdev *netdev;
1350     struct iface *iface;
1351     struct port *port;
1352     int error;
1353
1354     /* Get rid of 'if_cfg' itself.  We already copied out the interesting
1355      * bits. */
1356     hmap_remove(&br->if_cfg_todo, &if_cfg->hmap_node);
1357     free(if_cfg);
1358
1359     /* Do the bits that can fail up front. */
1360     assert(!iface_lookup(br, iface_cfg->name));
1361     error = iface_do_create(br, iface_cfg, port_cfg, &ofp_port, &netdev);
1362     if (error) {
1363         iface_clear_db_record(iface_cfg);
1364         return false;
1365     }
1366
1367     /* Get or create the port structure. */
1368     port = port_lookup(br, port_cfg->name);
1369     if (!port) {
1370         port = port_create(br, port_cfg);
1371     }
1372
1373     /* Create the iface structure. */
1374     iface = xzalloc(sizeof *iface);
1375     list_push_back(&port->ifaces, &iface->port_elem);
1376     hmap_insert(&br->iface_by_name, &iface->name_node,
1377                 hash_string(iface_cfg->name, 0));
1378     iface->port = port;
1379     iface->name = xstrdup(iface_cfg->name);
1380     iface->ofp_port = -1;
1381     iface->netdev = netdev;
1382     iface->type = iface_get_type(iface_cfg, br->cfg);
1383     iface->cfg = iface_cfg;
1384
1385     iface_set_ofp_port(iface, ofp_port);
1386
1387     /* Populate initial status in database. */
1388     iface_refresh_stats(iface);
1389     iface_refresh_status(iface);
1390
1391     /* Add bond fake iface if necessary. */
1392     if (port_is_bond_fake_iface(port)) {
1393         struct ofproto_port ofproto_port;
1394
1395         if (ofproto_port_query_by_name(br->ofproto, port->name,
1396                                        &ofproto_port)) {
1397             struct netdev *netdev;
1398             int error;
1399
1400             error = netdev_open(port->name, "internal", &netdev);
1401             if (!error) {
1402                 ofproto_port_add(br->ofproto, netdev, NULL);
1403                 netdev_close(netdev);
1404             } else {
1405                 VLOG_WARN("could not open network device %s (%s)",
1406                           port->name, strerror(error));
1407             }
1408         } else {
1409             /* Already exists, nothing to do. */
1410             ofproto_port_destroy(&ofproto_port);
1411         }
1412     }
1413
1414     return true;
1415 }
1416
1417 /* Set Flow eviction threshold */
1418 static void
1419 bridge_configure_flow_eviction_threshold(struct bridge *br)
1420 {
1421     const char *threshold_str;
1422     unsigned threshold;
1423
1424     threshold_str =
1425         ovsrec_bridge_get_other_config_value(br->cfg,
1426                                              "flow-eviction-threshold",
1427                                              NULL);
1428     if (threshold_str) {
1429         threshold = strtoul(threshold_str, NULL, 10);
1430     } else {
1431         threshold = OFPROTO_FLOW_EVICTON_THRESHOLD_DEFAULT;
1432     }
1433     ofproto_set_flow_eviction_threshold(br->ofproto, threshold);
1434 }
1435
1436 /* Set forward BPDU option. */
1437 static void
1438 bridge_configure_forward_bpdu(struct bridge *br)
1439 {
1440     const char *forward_bpdu_str;
1441     bool forward_bpdu = false;
1442
1443     forward_bpdu_str = ovsrec_bridge_get_other_config_value(br->cfg,
1444                                                             "forward-bpdu",
1445                                                             NULL);
1446     if (forward_bpdu_str && !strcmp(forward_bpdu_str, "true")) {
1447         forward_bpdu = true;
1448     }
1449     ofproto_set_forward_bpdu(br->ofproto, forward_bpdu);
1450 }
1451
1452 /* Set MAC aging time for 'br'. */
1453 static void
1454 bridge_configure_mac_idle_time(struct bridge *br)
1455 {
1456     const char *idle_time_str;
1457     int idle_time;
1458
1459     idle_time_str = ovsrec_bridge_get_other_config_value(br->cfg,
1460                                                          "mac-aging-time",
1461                                                          NULL);
1462     idle_time = (idle_time_str && atoi(idle_time_str)
1463                  ? atoi(idle_time_str)
1464                  : MAC_ENTRY_DEFAULT_IDLE_TIME);
1465     ofproto_set_mac_idle_time(br->ofproto, idle_time);
1466 }
1467
1468 static void
1469 bridge_pick_local_hw_addr(struct bridge *br, uint8_t ea[ETH_ADDR_LEN],
1470                           struct iface **hw_addr_iface)
1471 {
1472     struct hmapx mirror_output_ports;
1473     const char *hwaddr;
1474     struct port *port;
1475     bool found_addr = false;
1476     int error;
1477     int i;
1478
1479     *hw_addr_iface = NULL;
1480
1481     /* Did the user request a particular MAC? */
1482     hwaddr = ovsrec_bridge_get_other_config_value(br->cfg, "hwaddr", NULL);
1483     if (hwaddr && eth_addr_from_string(hwaddr, ea)) {
1484         if (eth_addr_is_multicast(ea)) {
1485             VLOG_ERR("bridge %s: cannot set MAC address to multicast "
1486                      "address "ETH_ADDR_FMT, br->name, ETH_ADDR_ARGS(ea));
1487         } else if (eth_addr_is_zero(ea)) {
1488             VLOG_ERR("bridge %s: cannot set MAC address to zero", br->name);
1489         } else {
1490             return;
1491         }
1492     }
1493
1494     /* Mirror output ports don't participate in picking the local hardware
1495      * address.  ofproto can't help us find out whether a given port is a
1496      * mirror output because we haven't configured mirrors yet, so we need to
1497      * accumulate them ourselves. */
1498     hmapx_init(&mirror_output_ports);
1499     for (i = 0; i < br->cfg->n_mirrors; i++) {
1500         struct ovsrec_mirror *m = br->cfg->mirrors[i];
1501         if (m->output_port) {
1502             hmapx_add(&mirror_output_ports, m->output_port);
1503         }
1504     }
1505
1506     /* Otherwise choose the minimum non-local MAC address among all of the
1507      * interfaces. */
1508     HMAP_FOR_EACH (port, hmap_node, &br->ports) {
1509         uint8_t iface_ea[ETH_ADDR_LEN];
1510         struct iface *candidate;
1511         struct iface *iface;
1512
1513         /* Mirror output ports don't participate. */
1514         if (hmapx_contains(&mirror_output_ports, port->cfg)) {
1515             continue;
1516         }
1517
1518         /* Choose the MAC address to represent the port. */
1519         iface = NULL;
1520         if (port->cfg->mac && eth_addr_from_string(port->cfg->mac, iface_ea)) {
1521             /* Find the interface with this Ethernet address (if any) so that
1522              * we can provide the correct devname to the caller. */
1523             LIST_FOR_EACH (candidate, port_elem, &port->ifaces) {
1524                 uint8_t candidate_ea[ETH_ADDR_LEN];
1525                 if (!netdev_get_etheraddr(candidate->netdev, candidate_ea)
1526                     && eth_addr_equals(iface_ea, candidate_ea)) {
1527                     iface = candidate;
1528                 }
1529             }
1530         } else {
1531             /* Choose the interface whose MAC address will represent the port.
1532              * The Linux kernel bonding code always chooses the MAC address of
1533              * the first slave added to a bond, and the Fedora networking
1534              * scripts always add slaves to a bond in alphabetical order, so
1535              * for compatibility we choose the interface with the name that is
1536              * first in alphabetical order. */
1537             LIST_FOR_EACH (candidate, port_elem, &port->ifaces) {
1538                 if (!iface || strcmp(candidate->name, iface->name) < 0) {
1539                     iface = candidate;
1540                 }
1541             }
1542
1543             /* The local port doesn't count (since we're trying to choose its
1544              * MAC address anyway). */
1545             if (iface->ofp_port == OFPP_LOCAL) {
1546                 continue;
1547             }
1548
1549             /* Grab MAC. */
1550             error = netdev_get_etheraddr(iface->netdev, iface_ea);
1551             if (error) {
1552                 continue;
1553             }
1554         }
1555
1556         /* Compare against our current choice. */
1557         if (!eth_addr_is_multicast(iface_ea) &&
1558             !eth_addr_is_local(iface_ea) &&
1559             !eth_addr_is_reserved(iface_ea) &&
1560             !eth_addr_is_zero(iface_ea) &&
1561             (!found_addr || eth_addr_compare_3way(iface_ea, ea) < 0))
1562         {
1563             memcpy(ea, iface_ea, ETH_ADDR_LEN);
1564             *hw_addr_iface = iface;
1565             found_addr = true;
1566         }
1567     }
1568     if (found_addr) {
1569         VLOG_DBG("bridge %s: using bridge Ethernet address "ETH_ADDR_FMT,
1570                  br->name, ETH_ADDR_ARGS(ea));
1571     } else {
1572         static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 10);
1573         memcpy(ea, br->default_ea, ETH_ADDR_LEN);
1574         *hw_addr_iface = NULL;
1575         VLOG_WARN_RL(&rl, "bridge %s: using default bridge Ethernet "
1576                      "address "ETH_ADDR_FMT, br->name, ETH_ADDR_ARGS(ea));
1577     }
1578
1579     hmapx_destroy(&mirror_output_ports);
1580 }
1581
1582 /* Choose and returns the datapath ID for bridge 'br' given that the bridge
1583  * Ethernet address is 'bridge_ea'.  If 'bridge_ea' is the Ethernet address of
1584  * an interface on 'br', then that interface must be passed in as
1585  * 'hw_addr_iface'; if 'bridge_ea' was derived some other way, then
1586  * 'hw_addr_iface' must be passed in as a null pointer. */
1587 static uint64_t
1588 bridge_pick_datapath_id(struct bridge *br,
1589                         const uint8_t bridge_ea[ETH_ADDR_LEN],
1590                         struct iface *hw_addr_iface)
1591 {
1592     /*
1593      * The procedure for choosing a bridge MAC address will, in the most
1594      * ordinary case, also choose a unique MAC that we can use as a datapath
1595      * ID.  In some special cases, though, multiple bridges will end up with
1596      * the same MAC address.  This is OK for the bridges, but it will confuse
1597      * the OpenFlow controller, because each datapath needs a unique datapath
1598      * ID.
1599      *
1600      * Datapath IDs must be unique.  It is also very desirable that they be
1601      * stable from one run to the next, so that policy set on a datapath
1602      * "sticks".
1603      */
1604     const char *datapath_id;
1605     uint64_t dpid;
1606
1607     datapath_id = ovsrec_bridge_get_other_config_value(br->cfg, "datapath-id",
1608                                                        NULL);
1609     if (datapath_id && dpid_from_string(datapath_id, &dpid)) {
1610         return dpid;
1611     }
1612
1613     if (!hw_addr_iface) {
1614         /*
1615          * A purely internal bridge, that is, one that has no non-virtual
1616          * network devices on it at all, is difficult because it has no
1617          * natural unique identifier at all.
1618          *
1619          * When the host is a XenServer, we handle this case by hashing the
1620          * host's UUID with the name of the bridge.  Names of bridges are
1621          * persistent across XenServer reboots, although they can be reused if
1622          * an internal network is destroyed and then a new one is later
1623          * created, so this is fairly effective.
1624          *
1625          * When the host is not a XenServer, we punt by using a random MAC
1626          * address on each run.
1627          */
1628         const char *host_uuid = xenserver_get_host_uuid();
1629         if (host_uuid) {
1630             char *combined = xasprintf("%s,%s", host_uuid, br->name);
1631             dpid = dpid_from_hash(combined, strlen(combined));
1632             free(combined);
1633             return dpid;
1634         }
1635     }
1636
1637     return eth_addr_to_uint64(bridge_ea);
1638 }
1639
1640 static uint64_t
1641 dpid_from_hash(const void *data, size_t n)
1642 {
1643     uint8_t hash[SHA1_DIGEST_SIZE];
1644
1645     BUILD_ASSERT_DECL(sizeof hash >= ETH_ADDR_LEN);
1646     sha1_bytes(data, n, hash);
1647     eth_addr_mark_random(hash);
1648     return eth_addr_to_uint64(hash);
1649 }
1650
1651 static void
1652 iface_refresh_status(struct iface *iface)
1653 {
1654     struct smap smap;
1655
1656     enum netdev_features current;
1657     enum netdev_flags flags;
1658     int64_t bps;
1659     int mtu;
1660     int64_t mtu_64;
1661     int error;
1662
1663     if (iface_is_synthetic(iface)) {
1664         return;
1665     }
1666
1667     smap_init(&smap);
1668
1669     if (!netdev_get_drv_info(iface->netdev, &smap)) {
1670         size_t n;
1671         char **keys, **values;
1672
1673         smap_to_ovs_idl_map(&smap, &keys, &values, &n);
1674         ovsrec_interface_set_status(iface->cfg, keys, values, n);
1675
1676         free(keys);
1677         free(values);
1678     } else {
1679         ovsrec_interface_set_status(iface->cfg, NULL, NULL, 0);
1680     }
1681
1682     smap_destroy(&smap);
1683
1684     error = netdev_get_flags(iface->netdev, &flags);
1685     if (!error) {
1686         ovsrec_interface_set_admin_state(iface->cfg,
1687                                          flags & NETDEV_UP ? "up" : "down");
1688     }
1689     else {
1690         ovsrec_interface_set_admin_state(iface->cfg, NULL);
1691     }
1692
1693     error = netdev_get_features(iface->netdev, &current, NULL, NULL, NULL);
1694     if (!error) {
1695         ovsrec_interface_set_duplex(iface->cfg,
1696                                     netdev_features_is_full_duplex(current)
1697                                     ? "full" : "half");
1698         /* warning: uint64_t -> int64_t conversion */
1699         bps = netdev_features_to_bps(current);
1700         ovsrec_interface_set_link_speed(iface->cfg, &bps, 1);
1701     }
1702     else {
1703         ovsrec_interface_set_duplex(iface->cfg, NULL);
1704         ovsrec_interface_set_link_speed(iface->cfg, NULL, 0);
1705     }
1706
1707     error = netdev_get_mtu(iface->netdev, &mtu);
1708     if (!error) {
1709         mtu_64 = mtu;
1710         ovsrec_interface_set_mtu(iface->cfg, &mtu_64, 1);
1711     }
1712     else {
1713         ovsrec_interface_set_mtu(iface->cfg, NULL, 0);
1714     }
1715 }
1716
1717 /* Writes 'iface''s CFM statistics to the database. */
1718 static void
1719 iface_refresh_cfm_stats(struct iface *iface)
1720 {
1721     const struct ovsrec_interface *cfg = iface->cfg;
1722     int fault, error;
1723     const uint64_t *rmps;
1724     size_t n_rmps;
1725     int health;
1726
1727     if (iface_is_synthetic(iface)) {
1728         return;
1729     }
1730
1731     fault = ofproto_port_get_cfm_fault(iface->port->bridge->ofproto,
1732                                        iface->ofp_port);
1733     if (fault >= 0) {
1734         const char *reasons[CFM_FAULT_N_REASONS];
1735         bool fault_bool = fault;
1736         size_t i, j;
1737
1738         j = 0;
1739         for (i = 0; i < CFM_FAULT_N_REASONS; i++) {
1740             int reason = 1 << i;
1741             if (fault & reason) {
1742                 reasons[j++] = cfm_fault_reason_to_str(reason);
1743             }
1744         }
1745
1746         ovsrec_interface_set_cfm_fault(cfg, &fault_bool, 1);
1747         ovsrec_interface_set_cfm_fault_status(cfg, (char **) reasons, j);
1748     } else {
1749         ovsrec_interface_set_cfm_fault(cfg, NULL, 0);
1750         ovsrec_interface_set_cfm_fault_status(cfg, NULL, 0);
1751     }
1752
1753     error = ofproto_port_get_cfm_remote_mpids(iface->port->bridge->ofproto,
1754                                               iface->ofp_port, &rmps, &n_rmps);
1755     if (error >= 0) {
1756         ovsrec_interface_set_cfm_remote_mpids(cfg, (const int64_t *)rmps,
1757                                               n_rmps);
1758     } else {
1759         ovsrec_interface_set_cfm_remote_mpids(cfg, NULL, 0);
1760     }
1761
1762     health = ofproto_port_get_cfm_health(iface->port->bridge->ofproto,
1763                                         iface->ofp_port);
1764     if (health >= 0) {
1765         int64_t cfm_health = health;
1766         ovsrec_interface_set_cfm_health(cfg, &cfm_health, 1);
1767     } else {
1768         ovsrec_interface_set_cfm_health(cfg, NULL, 0);
1769     }
1770 }
1771
1772 static void
1773 iface_refresh_stats(struct iface *iface)
1774 {
1775 #define IFACE_STATS                             \
1776     IFACE_STAT(rx_packets,      "rx_packets")   \
1777     IFACE_STAT(tx_packets,      "tx_packets")   \
1778     IFACE_STAT(rx_bytes,        "rx_bytes")     \
1779     IFACE_STAT(tx_bytes,        "tx_bytes")     \
1780     IFACE_STAT(rx_dropped,      "rx_dropped")   \
1781     IFACE_STAT(tx_dropped,      "tx_dropped")   \
1782     IFACE_STAT(rx_errors,       "rx_errors")    \
1783     IFACE_STAT(tx_errors,       "tx_errors")    \
1784     IFACE_STAT(rx_frame_errors, "rx_frame_err") \
1785     IFACE_STAT(rx_over_errors,  "rx_over_err")  \
1786     IFACE_STAT(rx_crc_errors,   "rx_crc_err")   \
1787     IFACE_STAT(collisions,      "collisions")
1788
1789 #define IFACE_STAT(MEMBER, NAME) NAME,
1790     static char *keys[] = { IFACE_STATS };
1791 #undef IFACE_STAT
1792     int64_t values[ARRAY_SIZE(keys)];
1793     int i;
1794
1795     struct netdev_stats stats;
1796
1797     if (iface_is_synthetic(iface)) {
1798         return;
1799     }
1800
1801     /* Intentionally ignore return value, since errors will set 'stats' to
1802      * all-1s, and we will deal with that correctly below. */
1803     netdev_get_stats(iface->netdev, &stats);
1804
1805     /* Copy statistics into values[] array. */
1806     i = 0;
1807 #define IFACE_STAT(MEMBER, NAME) values[i++] = stats.MEMBER;
1808     IFACE_STATS;
1809 #undef IFACE_STAT
1810     assert(i == ARRAY_SIZE(keys));
1811
1812     ovsrec_interface_set_statistics(iface->cfg, keys, values,
1813                                     ARRAY_SIZE(keys));
1814 #undef IFACE_STATS
1815 }
1816
1817 static void
1818 br_refresh_stp_status(struct bridge *br)
1819 {
1820     struct ofproto *ofproto = br->ofproto;
1821     struct ofproto_stp_status status;
1822     char *keys[3], *values[3];
1823     size_t i;
1824
1825     if (ofproto_get_stp_status(ofproto, &status)) {
1826         return;
1827     }
1828
1829     if (!status.enabled) {
1830         ovsrec_bridge_set_status(br->cfg, NULL, NULL, 0);
1831         return;
1832     }
1833
1834     keys[0] = "stp_bridge_id",
1835     values[0] = xasprintf(STP_ID_FMT, STP_ID_ARGS(status.bridge_id));
1836     keys[1] = "stp_designated_root",
1837     values[1] = xasprintf(STP_ID_FMT, STP_ID_ARGS(status.designated_root));
1838     keys[2] = "stp_root_path_cost",
1839     values[2] = xasprintf("%d", status.root_path_cost);
1840
1841     ovsrec_bridge_set_status(br->cfg, keys, values, ARRAY_SIZE(values));
1842
1843     for (i = 0; i < ARRAY_SIZE(values); i++) {
1844         free(values[i]);
1845     }
1846 }
1847
1848 static void
1849 port_refresh_stp_status(struct port *port)
1850 {
1851     struct ofproto *ofproto = port->bridge->ofproto;
1852     struct iface *iface;
1853     struct ofproto_port_stp_status status;
1854     char *keys[4];
1855     char *str_values[4];
1856     int64_t int_values[3];
1857     size_t i;
1858
1859     if (port_is_synthetic(port)) {
1860         return;
1861     }
1862
1863     /* STP doesn't currently support bonds. */
1864     if (!list_is_singleton(&port->ifaces)) {
1865         ovsrec_port_set_status(port->cfg, NULL, NULL, 0);
1866         return;
1867     }
1868
1869     iface = CONTAINER_OF(list_front(&port->ifaces), struct iface, port_elem);
1870
1871     if (ofproto_port_get_stp_status(ofproto, iface->ofp_port, &status)) {
1872         return;
1873     }
1874
1875     if (!status.enabled) {
1876         ovsrec_port_set_status(port->cfg, NULL, NULL, 0);
1877         ovsrec_port_set_statistics(port->cfg, NULL, NULL, 0);
1878         return;
1879     }
1880
1881     /* Set Status column. */
1882     keys[0] = "stp_port_id";
1883     str_values[0] = xasprintf(STP_PORT_ID_FMT, status.port_id);
1884     keys[1] = "stp_state";
1885     str_values[1] = xstrdup(stp_state_name(status.state));
1886     keys[2] = "stp_sec_in_state";
1887     str_values[2] = xasprintf("%u", status.sec_in_state);
1888     keys[3] = "stp_role";
1889     str_values[3] = xstrdup(stp_role_name(status.role));
1890
1891     ovsrec_port_set_status(port->cfg, keys, str_values,
1892                            ARRAY_SIZE(str_values));
1893
1894     for (i = 0; i < ARRAY_SIZE(str_values); i++) {
1895         free(str_values[i]);
1896     }
1897
1898     /* Set Statistics column. */
1899     keys[0] = "stp_tx_count";
1900     int_values[0] = status.tx_count;
1901     keys[1] = "stp_rx_count";
1902     int_values[1] = status.rx_count;
1903     keys[2] = "stp_error_count";
1904     int_values[2] = status.error_count;
1905
1906     ovsrec_port_set_statistics(port->cfg, keys, int_values,
1907                                ARRAY_SIZE(int_values));
1908 }
1909
1910 static bool
1911 enable_system_stats(const struct ovsrec_open_vswitch *cfg)
1912 {
1913     const char *enable;
1914
1915     /* Use other-config:enable-system-stats by preference. */
1916     enable = ovsrec_open_vswitch_get_other_config_value(cfg,
1917                                                         "enable-statistics",
1918                                                         NULL);
1919     if (enable) {
1920         return !strcmp(enable, "true");
1921     }
1922
1923     /* Disable by default. */
1924     return false;
1925 }
1926
1927 static void
1928 refresh_system_stats(const struct ovsrec_open_vswitch *cfg)
1929 {
1930     struct ovsdb_datum datum;
1931     struct shash stats;
1932
1933     shash_init(&stats);
1934     if (enable_system_stats(cfg)) {
1935         get_system_stats(&stats);
1936     }
1937
1938     ovsdb_datum_from_shash(&datum, &stats);
1939     ovsdb_idl_txn_write(&cfg->header_, &ovsrec_open_vswitch_col_statistics,
1940                         &datum);
1941 }
1942
1943 static inline const char *
1944 nx_role_to_str(enum nx_role role)
1945 {
1946     switch (role) {
1947     case NX_ROLE_OTHER:
1948         return "other";
1949     case NX_ROLE_MASTER:
1950         return "master";
1951     case NX_ROLE_SLAVE:
1952         return "slave";
1953     default:
1954         return "*** INVALID ROLE ***";
1955     }
1956 }
1957
1958 static void
1959 refresh_controller_status(void)
1960 {
1961     struct bridge *br;
1962     struct shash info;
1963     const struct ovsrec_controller *cfg;
1964
1965     shash_init(&info);
1966
1967     /* Accumulate status for controllers on all bridges. */
1968     HMAP_FOR_EACH (br, node, &all_bridges) {
1969         ofproto_get_ofproto_controller_info(br->ofproto, &info);
1970     }
1971
1972     /* Update each controller in the database with current status. */
1973     OVSREC_CONTROLLER_FOR_EACH(cfg, idl) {
1974         struct ofproto_controller_info *cinfo =
1975             shash_find_data(&info, cfg->target);
1976
1977         if (cinfo) {
1978             ovsrec_controller_set_is_connected(cfg, cinfo->is_connected);
1979             ovsrec_controller_set_role(cfg, nx_role_to_str(cinfo->role));
1980             ovsrec_controller_set_status(cfg, (char **) cinfo->pairs.keys,
1981                                          (char **) cinfo->pairs.values,
1982                                          cinfo->pairs.n);
1983         } else {
1984             ovsrec_controller_set_is_connected(cfg, false);
1985             ovsrec_controller_set_role(cfg, NULL);
1986             ovsrec_controller_set_status(cfg, NULL, NULL, 0);
1987         }
1988     }
1989
1990     ofproto_free_ofproto_controller_info(&info);
1991 }
1992
1993 static void
1994 refresh_cfm_stats(void)
1995 {
1996     static struct ovsdb_idl_txn *txn = NULL;
1997
1998     if (!txn) {
1999         struct bridge *br;
2000
2001         txn = ovsdb_idl_txn_create(idl);
2002
2003         HMAP_FOR_EACH (br, node, &all_bridges) {
2004             struct iface *iface;
2005
2006             HMAP_FOR_EACH (iface, name_node, &br->iface_by_name) {
2007                 iface_refresh_cfm_stats(iface);
2008             }
2009         }
2010     }
2011
2012     if (ovsdb_idl_txn_commit(txn) != TXN_INCOMPLETE) {
2013         ovsdb_idl_txn_destroy(txn);
2014         txn = NULL;
2015     }
2016 }
2017
2018 /* Performs periodic activity required by bridges that needs to be done with
2019  * the least possible latency.
2020  *
2021  * It makes sense to call this function a couple of times per poll loop, to
2022  * provide a significant performance boost on some benchmarks with ofprotos
2023  * that use the ofproto-dpif implementation. */
2024 void
2025 bridge_run_fast(void)
2026 {
2027     struct bridge *br;
2028
2029     HMAP_FOR_EACH (br, node, &all_bridges) {
2030         ofproto_run_fast(br->ofproto);
2031     }
2032 }
2033
2034 void
2035 bridge_run(void)
2036 {
2037     static const struct ovsrec_open_vswitch null_cfg;
2038     const struct ovsrec_open_vswitch *cfg;
2039     struct ovsdb_idl_txn *reconf_txn = NULL;
2040
2041     bool vlan_splinters_changed;
2042     struct bridge *br;
2043
2044     /* (Re)configure if necessary. */
2045     if (!reconfiguring) {
2046         ovsdb_idl_run(idl);
2047
2048         if (ovsdb_idl_is_lock_contended(idl)) {
2049             static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 1);
2050             struct bridge *br, *next_br;
2051
2052             VLOG_ERR_RL(&rl, "another ovs-vswitchd process is running, "
2053                         "disabling this process until it goes away");
2054
2055             HMAP_FOR_EACH_SAFE (br, next_br, node, &all_bridges) {
2056                 bridge_destroy(br);
2057             }
2058             return;
2059         } else if (!ovsdb_idl_has_lock(idl)) {
2060             return;
2061         }
2062     }
2063     cfg = ovsrec_open_vswitch_first(idl);
2064
2065     /* Let each bridge do the work that it needs to do. */
2066     HMAP_FOR_EACH (br, node, &all_bridges) {
2067         ofproto_run(br->ofproto);
2068     }
2069
2070     /* Re-configure SSL.  We do this on every trip through the main loop,
2071      * instead of just when the database changes, because the contents of the
2072      * key and certificate files can change without the database changing.
2073      *
2074      * We do this before bridge_reconfigure() because that function might
2075      * initiate SSL connections and thus requires SSL to be configured. */
2076     if (cfg && cfg->ssl) {
2077         const struct ovsrec_ssl *ssl = cfg->ssl;
2078
2079         stream_ssl_set_key_and_cert(ssl->private_key, ssl->certificate);
2080         stream_ssl_set_ca_cert_file(ssl->ca_cert, ssl->bootstrap_ca_cert);
2081     }
2082
2083     if (!reconfiguring) {
2084         /* If VLAN splinters are in use, then we need to reconfigure if VLAN
2085          * usage has changed. */
2086         vlan_splinters_changed = false;
2087         if (vlan_splinters_enabled_anywhere) {
2088             HMAP_FOR_EACH (br, node, &all_bridges) {
2089                 if (ofproto_has_vlan_usage_changed(br->ofproto)) {
2090                     vlan_splinters_changed = true;
2091                     break;
2092                 }
2093             }
2094         }
2095
2096         if (ovsdb_idl_get_seqno(idl) != idl_seqno || vlan_splinters_changed) {
2097             idl_seqno = ovsdb_idl_get_seqno(idl);
2098             if (cfg) {
2099                 reconf_txn = ovsdb_idl_txn_create(idl);
2100                 bridge_reconfigure(cfg);
2101             } else {
2102                 /* We still need to reconfigure to avoid dangling pointers to
2103                  * now-destroyed ovsrec structures inside bridge data. */
2104                 bridge_reconfigure(&null_cfg);
2105             }
2106         }
2107     }
2108
2109     if (reconfiguring) {
2110         if (cfg) {
2111             if (!reconf_txn) {
2112                 reconf_txn = ovsdb_idl_txn_create(idl);
2113             }
2114             if (bridge_reconfigure_continue(cfg)) {
2115                 ovsrec_open_vswitch_set_cur_cfg(cfg, cfg->next_cfg);
2116             }
2117         } else {
2118             bridge_reconfigure_continue(&null_cfg);
2119         }
2120     }
2121
2122     if (reconf_txn) {
2123         ovsdb_idl_txn_commit(reconf_txn);
2124         ovsdb_idl_txn_destroy(reconf_txn);
2125         reconf_txn = NULL;
2126     }
2127
2128     /* Refresh system and interface stats if necessary. */
2129     if (time_msec() >= stats_timer) {
2130         if (cfg) {
2131             struct ovsdb_idl_txn *txn;
2132
2133             txn = ovsdb_idl_txn_create(idl);
2134             HMAP_FOR_EACH (br, node, &all_bridges) {
2135                 struct port *port;
2136                 struct mirror *m;
2137
2138                 HMAP_FOR_EACH (port, hmap_node, &br->ports) {
2139                     struct iface *iface;
2140
2141                     LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
2142                         iface_refresh_stats(iface);
2143                         iface_refresh_status(iface);
2144                     }
2145                 }
2146
2147                 HMAP_FOR_EACH (m, hmap_node, &br->mirrors) {
2148                     mirror_refresh_stats(m);
2149                 }
2150
2151             }
2152             refresh_system_stats(cfg);
2153             refresh_controller_status();
2154             ovsdb_idl_txn_commit(txn);
2155             ovsdb_idl_txn_destroy(txn); /* XXX */
2156         }
2157
2158         stats_timer = time_msec() + STATS_INTERVAL;
2159     }
2160
2161     if (time_msec() >= db_limiter) {
2162         struct ovsdb_idl_txn *txn;
2163
2164         txn = ovsdb_idl_txn_create(idl);
2165         HMAP_FOR_EACH (br, node, &all_bridges) {
2166             struct iface *iface;
2167             struct port *port;
2168
2169             br_refresh_stp_status(br);
2170
2171             HMAP_FOR_EACH (port, hmap_node, &br->ports) {
2172                 port_refresh_stp_status(port);
2173             }
2174
2175             HMAP_FOR_EACH (iface, name_node, &br->iface_by_name) {
2176                 const char *link_state;
2177                 int64_t link_resets;
2178                 int current;
2179
2180                 if (iface_is_synthetic(iface)) {
2181                     continue;
2182                 }
2183
2184                 current = ofproto_port_is_lacp_current(br->ofproto,
2185                                                        iface->ofp_port);
2186                 if (current >= 0) {
2187                     bool bl = current;
2188                     ovsrec_interface_set_lacp_current(iface->cfg, &bl, 1);
2189                 } else {
2190                     ovsrec_interface_set_lacp_current(iface->cfg, NULL, 0);
2191                 }
2192
2193                 link_state = netdev_get_carrier(iface->netdev) ? "up" : "down";
2194                 ovsrec_interface_set_link_state(iface->cfg, link_state);
2195
2196                 link_resets = netdev_get_carrier_resets(iface->netdev);
2197                 ovsrec_interface_set_link_resets(iface->cfg, &link_resets, 1);
2198             }
2199         }
2200
2201         if (ovsdb_idl_txn_commit(txn) != TXN_UNCHANGED) {
2202             db_limiter = time_msec() + DB_LIMIT_INTERVAL;
2203         }
2204         ovsdb_idl_txn_destroy(txn);
2205     }
2206
2207     refresh_cfm_stats();
2208 }
2209
2210 void
2211 bridge_wait(void)
2212 {
2213     ovsdb_idl_wait(idl);
2214
2215     if (reconfiguring) {
2216         poll_immediate_wake();
2217     }
2218
2219     if (!hmap_is_empty(&all_bridges)) {
2220         struct bridge *br;
2221
2222         HMAP_FOR_EACH (br, node, &all_bridges) {
2223             ofproto_wait(br->ofproto);
2224         }
2225         poll_timer_wait_until(stats_timer);
2226
2227         if (db_limiter > time_msec()) {
2228             poll_timer_wait_until(db_limiter);
2229         }
2230     }
2231 }
2232
2233 /* Adds some memory usage statistics for bridges into 'usage', for use with
2234  * memory_report(). */
2235 void
2236 bridge_get_memory_usage(struct simap *usage)
2237 {
2238     struct bridge *br;
2239
2240     HMAP_FOR_EACH (br, node, &all_bridges) {
2241         ofproto_get_memory_usage(br->ofproto, usage);
2242     }
2243 }
2244 \f
2245 /* QoS unixctl user interface functions. */
2246
2247 struct qos_unixctl_show_cbdata {
2248     struct ds *ds;
2249     struct iface *iface;
2250 };
2251
2252 static void
2253 qos_unixctl_show_cb(unsigned int queue_id,
2254                     const struct smap *details,
2255                     void *aux)
2256 {
2257     struct qos_unixctl_show_cbdata *data = aux;
2258     struct ds *ds = data->ds;
2259     struct iface *iface = data->iface;
2260     struct netdev_queue_stats stats;
2261     struct smap_node *node;
2262     int error;
2263
2264     ds_put_cstr(ds, "\n");
2265     if (queue_id) {
2266         ds_put_format(ds, "Queue %u:\n", queue_id);
2267     } else {
2268         ds_put_cstr(ds, "Default:\n");
2269     }
2270
2271     SMAP_FOR_EACH (node, details) {
2272         ds_put_format(ds, "\t%s: %s\n", node->key, node->value);
2273     }
2274
2275     error = netdev_get_queue_stats(iface->netdev, queue_id, &stats);
2276     if (!error) {
2277         if (stats.tx_packets != UINT64_MAX) {
2278             ds_put_format(ds, "\ttx_packets: %"PRIu64"\n", stats.tx_packets);
2279         }
2280
2281         if (stats.tx_bytes != UINT64_MAX) {
2282             ds_put_format(ds, "\ttx_bytes: %"PRIu64"\n", stats.tx_bytes);
2283         }
2284
2285         if (stats.tx_errors != UINT64_MAX) {
2286             ds_put_format(ds, "\ttx_errors: %"PRIu64"\n", stats.tx_errors);
2287         }
2288     } else {
2289         ds_put_format(ds, "\tFailed to get statistics for queue %u: %s",
2290                       queue_id, strerror(error));
2291     }
2292 }
2293
2294 static void
2295 qos_unixctl_show(struct unixctl_conn *conn, int argc OVS_UNUSED,
2296                  const char *argv[], void *aux OVS_UNUSED)
2297 {
2298     struct ds ds = DS_EMPTY_INITIALIZER;
2299     struct smap smap = SMAP_INITIALIZER(&smap);
2300     struct iface *iface;
2301     const char *type;
2302     struct smap_node *node;
2303     struct qos_unixctl_show_cbdata data;
2304     int error;
2305
2306     iface = iface_find(argv[1]);
2307     if (!iface) {
2308         unixctl_command_reply_error(conn, "no such interface");
2309         return;
2310     }
2311
2312     netdev_get_qos(iface->netdev, &type, &smap);
2313
2314     if (*type != '\0') {
2315         ds_put_format(&ds, "QoS: %s %s\n", iface->name, type);
2316
2317         SMAP_FOR_EACH (node, &smap) {
2318             ds_put_format(&ds, "%s: %s\n", node->key, node->value);
2319         }
2320
2321         data.ds = &ds;
2322         data.iface = iface;
2323         error = netdev_dump_queues(iface->netdev, qos_unixctl_show_cb, &data);
2324
2325         if (error) {
2326             ds_put_format(&ds, "failed to dump queues: %s", strerror(error));
2327         }
2328         unixctl_command_reply(conn, ds_cstr(&ds));
2329     } else {
2330         ds_put_format(&ds, "QoS not configured on %s\n", iface->name);
2331         unixctl_command_reply_error(conn, ds_cstr(&ds));
2332     }
2333
2334     smap_destroy(&smap);
2335     ds_destroy(&ds);
2336 }
2337 \f
2338 /* Bridge reconfiguration functions. */
2339 static void
2340 bridge_create(const struct ovsrec_bridge *br_cfg)
2341 {
2342     struct bridge *br;
2343
2344     assert(!bridge_lookup(br_cfg->name));
2345     br = xzalloc(sizeof *br);
2346
2347     br->name = xstrdup(br_cfg->name);
2348     br->type = xstrdup(ofproto_normalize_type(br_cfg->datapath_type));
2349     br->cfg = br_cfg;
2350
2351     /* Derive the default Ethernet address from the bridge's UUID.  This should
2352      * be unique and it will be stable between ovs-vswitchd runs.  */
2353     memcpy(br->default_ea, &br_cfg->header_.uuid, ETH_ADDR_LEN);
2354     eth_addr_mark_random(br->default_ea);
2355
2356     hmap_init(&br->ports);
2357     hmap_init(&br->ifaces);
2358     hmap_init(&br->iface_by_name);
2359     hmap_init(&br->mirrors);
2360
2361     hmap_init(&br->if_cfg_todo);
2362     list_init(&br->ofpp_garbage);
2363
2364     hmap_insert(&all_bridges, &br->node, hash_string(br->name, 0));
2365 }
2366
2367 static void
2368 bridge_destroy(struct bridge *br)
2369 {
2370     if (br) {
2371         struct mirror *mirror, *next_mirror;
2372         struct port *port, *next_port;
2373         struct if_cfg *if_cfg, *next_if_cfg;
2374         struct ofpp_garbage *garbage, *next_garbage;
2375
2376         HMAP_FOR_EACH_SAFE (port, next_port, hmap_node, &br->ports) {
2377             port_destroy(port);
2378         }
2379         HMAP_FOR_EACH_SAFE (mirror, next_mirror, hmap_node, &br->mirrors) {
2380             mirror_destroy(mirror);
2381         }
2382         HMAP_FOR_EACH_SAFE (if_cfg, next_if_cfg, hmap_node, &br->if_cfg_todo) {
2383             hmap_remove(&br->if_cfg_todo, &if_cfg->hmap_node);
2384             free(if_cfg);
2385         }
2386         LIST_FOR_EACH_SAFE (garbage, next_garbage, list_node,
2387                             &br->ofpp_garbage) {
2388             list_remove(&garbage->list_node);
2389             free(garbage);
2390         }
2391
2392         hmap_remove(&all_bridges, &br->node);
2393         ofproto_destroy(br->ofproto);
2394         hmap_destroy(&br->ifaces);
2395         hmap_destroy(&br->ports);
2396         hmap_destroy(&br->iface_by_name);
2397         hmap_destroy(&br->mirrors);
2398         hmap_destroy(&br->if_cfg_todo);
2399         free(br->name);
2400         free(br->type);
2401         free(br);
2402     }
2403 }
2404
2405 static struct bridge *
2406 bridge_lookup(const char *name)
2407 {
2408     struct bridge *br;
2409
2410     HMAP_FOR_EACH_WITH_HASH (br, node, hash_string(name, 0), &all_bridges) {
2411         if (!strcmp(br->name, name)) {
2412             return br;
2413         }
2414     }
2415     return NULL;
2416 }
2417
2418 /* Handle requests for a listing of all flows known by the OpenFlow
2419  * stack, including those normally hidden. */
2420 static void
2421 bridge_unixctl_dump_flows(struct unixctl_conn *conn, int argc OVS_UNUSED,
2422                           const char *argv[], void *aux OVS_UNUSED)
2423 {
2424     struct bridge *br;
2425     struct ds results;
2426
2427     br = bridge_lookup(argv[1]);
2428     if (!br) {
2429         unixctl_command_reply_error(conn, "Unknown bridge");
2430         return;
2431     }
2432
2433     ds_init(&results);
2434     ofproto_get_all_flows(br->ofproto, &results);
2435
2436     unixctl_command_reply(conn, ds_cstr(&results));
2437     ds_destroy(&results);
2438 }
2439
2440 /* "bridge/reconnect [BRIDGE]": makes BRIDGE drop all of its controller
2441  * connections and reconnect.  If BRIDGE is not specified, then all bridges
2442  * drop their controller connections and reconnect. */
2443 static void
2444 bridge_unixctl_reconnect(struct unixctl_conn *conn, int argc,
2445                          const char *argv[], void *aux OVS_UNUSED)
2446 {
2447     struct bridge *br;
2448     if (argc > 1) {
2449         br = bridge_lookup(argv[1]);
2450         if (!br) {
2451             unixctl_command_reply_error(conn,  "Unknown bridge");
2452             return;
2453         }
2454         ofproto_reconnect_controllers(br->ofproto);
2455     } else {
2456         HMAP_FOR_EACH (br, node, &all_bridges) {
2457             ofproto_reconnect_controllers(br->ofproto);
2458         }
2459     }
2460     unixctl_command_reply(conn, NULL);
2461 }
2462
2463 static size_t
2464 bridge_get_controllers(const struct bridge *br,
2465                        struct ovsrec_controller ***controllersp)
2466 {
2467     struct ovsrec_controller **controllers;
2468     size_t n_controllers;
2469
2470     controllers = br->cfg->controller;
2471     n_controllers = br->cfg->n_controller;
2472
2473     if (n_controllers == 1 && !strcmp(controllers[0]->target, "none")) {
2474         controllers = NULL;
2475         n_controllers = 0;
2476     }
2477
2478     if (controllersp) {
2479         *controllersp = controllers;
2480     }
2481     return n_controllers;
2482 }
2483
2484 static void
2485 bridge_queue_if_cfg(struct bridge *br,
2486                     const struct ovsrec_interface *cfg,
2487                     const struct ovsrec_port *parent)
2488 {
2489     struct if_cfg *if_cfg = xmalloc(sizeof *if_cfg);
2490
2491     if_cfg->cfg = cfg;
2492     if_cfg->parent = parent;
2493     hmap_insert(&br->if_cfg_todo, &if_cfg->hmap_node,
2494                 hash_string(if_cfg->cfg->name, 0));
2495 }
2496
2497 /* Deletes "struct port"s and "struct iface"s under 'br' which aren't
2498  * consistent with 'br->cfg'.  Updates 'br->if_cfg_queue' with interfaces which
2499  * 'br' needs to complete its configuration. */
2500 static void
2501 bridge_add_del_ports(struct bridge *br,
2502                      const unsigned long int *splinter_vlans)
2503 {
2504     struct shash_node *port_node;
2505     struct port *port, *next;
2506     struct shash new_ports;
2507     size_t i;
2508
2509     assert(hmap_is_empty(&br->if_cfg_todo));
2510
2511     /* Collect new ports. */
2512     shash_init(&new_ports);
2513     for (i = 0; i < br->cfg->n_ports; i++) {
2514         const char *name = br->cfg->ports[i]->name;
2515         if (!shash_add_once(&new_ports, name, br->cfg->ports[i])) {
2516             VLOG_WARN("bridge %s: %s specified twice as bridge port",
2517                       br->name, name);
2518         }
2519     }
2520     if (bridge_get_controllers(br, NULL)
2521         && !shash_find(&new_ports, br->name)) {
2522         VLOG_WARN("bridge %s: no port named %s, synthesizing one",
2523                   br->name, br->name);
2524
2525         br->synth_local_port.interfaces = &br->synth_local_ifacep;
2526         br->synth_local_port.n_interfaces = 1;
2527         br->synth_local_port.name = br->name;
2528
2529         br->synth_local_iface.name = br->name;
2530         br->synth_local_iface.type = "internal";
2531
2532         br->synth_local_ifacep = &br->synth_local_iface;
2533
2534         shash_add(&new_ports, br->name, &br->synth_local_port);
2535     }
2536
2537     if (splinter_vlans) {
2538         add_vlan_splinter_ports(br, splinter_vlans, &new_ports);
2539     }
2540
2541     /* Get rid of deleted ports.
2542      * Get rid of deleted interfaces on ports that still exist. */
2543     HMAP_FOR_EACH_SAFE (port, next, hmap_node, &br->ports) {
2544         port->cfg = shash_find_data(&new_ports, port->name);
2545         if (!port->cfg) {
2546             port_destroy(port);
2547         } else {
2548             port_del_ifaces(port);
2549         }
2550     }
2551
2552     /* Update iface->cfg and iface->type in interfaces that still exist.
2553      * Add new interfaces to creation queue. */
2554     SHASH_FOR_EACH (port_node, &new_ports) {
2555         const struct ovsrec_port *port = port_node->data;
2556         size_t i;
2557
2558         for (i = 0; i < port->n_interfaces; i++) {
2559             const struct ovsrec_interface *cfg = port->interfaces[i];
2560             struct iface *iface = iface_lookup(br, cfg->name);
2561             const char *type = iface_get_type(cfg, br->cfg);
2562
2563             if (iface) {
2564                 iface->cfg = cfg;
2565                 iface->type = type;
2566             } else if (strcmp(type, "null")) {
2567                 bridge_queue_if_cfg(br, cfg, port);
2568             }
2569         }
2570     }
2571
2572     shash_destroy(&new_ports);
2573 }
2574
2575 /* Initializes 'oc' appropriately as a management service controller for
2576  * 'br'.
2577  *
2578  * The caller must free oc->target when it is no longer needed. */
2579 static void
2580 bridge_ofproto_controller_for_mgmt(const struct bridge *br,
2581                                    struct ofproto_controller *oc)
2582 {
2583     oc->target = xasprintf("punix:%s/%s.mgmt", ovs_rundir(), br->name);
2584     oc->max_backoff = 0;
2585     oc->probe_interval = 60;
2586     oc->band = OFPROTO_OUT_OF_BAND;
2587     oc->rate_limit = 0;
2588     oc->burst_limit = 0;
2589     oc->enable_async_msgs = true;
2590 }
2591
2592 /* Converts ovsrec_controller 'c' into an ofproto_controller in 'oc'.  */
2593 static void
2594 bridge_ofproto_controller_from_ovsrec(const struct ovsrec_controller *c,
2595                                       struct ofproto_controller *oc)
2596 {
2597     const char *config_str;
2598
2599     oc->target = c->target;
2600     oc->max_backoff = c->max_backoff ? *c->max_backoff / 1000 : 8;
2601     oc->probe_interval = c->inactivity_probe ? *c->inactivity_probe / 1000 : 5;
2602     oc->band = (!c->connection_mode || !strcmp(c->connection_mode, "in-band")
2603                 ? OFPROTO_IN_BAND : OFPROTO_OUT_OF_BAND);
2604     oc->rate_limit = c->controller_rate_limit ? *c->controller_rate_limit : 0;
2605     oc->burst_limit = (c->controller_burst_limit
2606                        ? *c->controller_burst_limit : 0);
2607     oc->enable_async_msgs = (!c->enable_async_messages
2608                              || *c->enable_async_messages);
2609     config_str = ovsrec_controller_get_other_config_value(c, "dscp", NULL);
2610
2611     oc->dscp = DSCP_DEFAULT;
2612     if (config_str) {
2613         int dscp = atoi(config_str);
2614
2615         if (dscp >= 0 && dscp <= 63) {
2616             oc->dscp = dscp;
2617         }
2618     }
2619 }
2620
2621 /* Configures the IP stack for 'br''s local interface properly according to the
2622  * configuration in 'c'.  */
2623 static void
2624 bridge_configure_local_iface_netdev(struct bridge *br,
2625                                     struct ovsrec_controller *c)
2626 {
2627     struct netdev *netdev;
2628     struct in_addr mask, gateway;
2629
2630     struct iface *local_iface;
2631     struct in_addr ip;
2632
2633     /* If there's no local interface or no IP address, give up. */
2634     local_iface = iface_from_ofp_port(br, OFPP_LOCAL);
2635     if (!local_iface || !c->local_ip || !inet_aton(c->local_ip, &ip)) {
2636         return;
2637     }
2638
2639     /* Bring up the local interface. */
2640     netdev = local_iface->netdev;
2641     netdev_turn_flags_on(netdev, NETDEV_UP, true);
2642
2643     /* Configure the IP address and netmask. */
2644     if (!c->local_netmask
2645         || !inet_aton(c->local_netmask, &mask)
2646         || !mask.s_addr) {
2647         mask.s_addr = guess_netmask(ip.s_addr);
2648     }
2649     if (!netdev_set_in4(netdev, ip, mask)) {
2650         VLOG_INFO("bridge %s: configured IP address "IP_FMT", netmask "IP_FMT,
2651                   br->name, IP_ARGS(&ip.s_addr), IP_ARGS(&mask.s_addr));
2652     }
2653
2654     /* Configure the default gateway. */
2655     if (c->local_gateway
2656         && inet_aton(c->local_gateway, &gateway)
2657         && gateway.s_addr) {
2658         if (!netdev_add_router(netdev, gateway)) {
2659             VLOG_INFO("bridge %s: configured gateway "IP_FMT,
2660                       br->name, IP_ARGS(&gateway.s_addr));
2661         }
2662     }
2663 }
2664
2665 /* Returns true if 'a' and 'b' are the same except that any number of slashes
2666  * in either string are treated as equal to any number of slashes in the other,
2667  * e.g. "x///y" is equal to "x/y". */
2668 static bool
2669 equal_pathnames(const char *a, const char *b)
2670 {
2671     while (*a == *b) {
2672         if (*a == '/') {
2673             a += strspn(a, "/");
2674             b += strspn(b, "/");
2675         } else if (*a == '\0') {
2676             return true;
2677         } else {
2678             a++;
2679             b++;
2680         }
2681     }
2682     return false;
2683 }
2684
2685 static void
2686 bridge_configure_remotes(struct bridge *br,
2687                          const struct sockaddr_in *managers, size_t n_managers)
2688 {
2689     const char *disable_ib_str, *queue_id_str;
2690     bool disable_in_band = false;
2691     int queue_id;
2692
2693     struct ovsrec_controller **controllers;
2694     size_t n_controllers;
2695
2696     enum ofproto_fail_mode fail_mode;
2697
2698     struct ofproto_controller *ocs;
2699     size_t n_ocs;
2700     size_t i;
2701
2702     /* Check if we should disable in-band control on this bridge. */
2703     disable_ib_str = ovsrec_bridge_get_other_config_value(br->cfg,
2704                                                           "disable-in-band",
2705                                                           NULL);
2706     if (disable_ib_str && !strcmp(disable_ib_str, "true")) {
2707         disable_in_band = true;
2708     }
2709
2710     /* Set OpenFlow queue ID for in-band control. */
2711     queue_id_str = ovsrec_bridge_get_other_config_value(br->cfg,
2712                                                         "in-band-queue",
2713                                                         NULL);
2714     queue_id = queue_id_str ? strtol(queue_id_str, NULL, 10) : -1;
2715     ofproto_set_in_band_queue(br->ofproto, queue_id);
2716
2717     if (disable_in_band) {
2718         ofproto_set_extra_in_band_remotes(br->ofproto, NULL, 0);
2719     } else {
2720         ofproto_set_extra_in_band_remotes(br->ofproto, managers, n_managers);
2721     }
2722
2723     n_controllers = bridge_get_controllers(br, &controllers);
2724
2725     ocs = xmalloc((n_controllers + 1) * sizeof *ocs);
2726     n_ocs = 0;
2727
2728     bridge_ofproto_controller_for_mgmt(br, &ocs[n_ocs++]);
2729     for (i = 0; i < n_controllers; i++) {
2730         struct ovsrec_controller *c = controllers[i];
2731
2732         if (!strncmp(c->target, "punix:", 6)
2733             || !strncmp(c->target, "unix:", 5)) {
2734             static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
2735             char *whitelist;
2736
2737             whitelist = xasprintf("unix:%s/%s.controller",
2738                                   ovs_rundir(), br->name);
2739             if (!equal_pathnames(c->target, whitelist)) {
2740                 /* Prevent remote ovsdb-server users from accessing arbitrary
2741                  * Unix domain sockets and overwriting arbitrary local
2742                  * files. */
2743                 VLOG_ERR_RL(&rl, "bridge %s: Not adding Unix domain socket "
2744                             "controller \"%s\" due to possibility for remote "
2745                             "exploit.  Instead, specify whitelisted \"%s\" or "
2746                             "connect to \"unix:%s/%s.mgmt\" (which is always "
2747                             "available without special configuration).",
2748                             br->name, c->target, whitelist,
2749                             ovs_rundir(), br->name);
2750                 free(whitelist);
2751                 continue;
2752             }
2753
2754             free(whitelist);
2755         }
2756
2757         bridge_configure_local_iface_netdev(br, c);
2758         bridge_ofproto_controller_from_ovsrec(c, &ocs[n_ocs]);
2759         if (disable_in_band) {
2760             ocs[n_ocs].band = OFPROTO_OUT_OF_BAND;
2761         }
2762         n_ocs++;
2763     }
2764
2765     ofproto_set_controllers(br->ofproto, ocs, n_ocs);
2766     free(ocs[0].target); /* From bridge_ofproto_controller_for_mgmt(). */
2767     free(ocs);
2768
2769     /* Set the fail-mode. */
2770     fail_mode = !br->cfg->fail_mode
2771                 || !strcmp(br->cfg->fail_mode, "standalone")
2772                     ? OFPROTO_FAIL_STANDALONE
2773                     : OFPROTO_FAIL_SECURE;
2774     ofproto_set_fail_mode(br->ofproto, fail_mode);
2775
2776     /* Configure OpenFlow controller connection snooping. */
2777     if (!ofproto_has_snoops(br->ofproto)) {
2778         struct sset snoops;
2779
2780         sset_init(&snoops);
2781         sset_add_and_free(&snoops, xasprintf("punix:%s/%s.snoop",
2782                                              ovs_rundir(), br->name));
2783         ofproto_set_snoops(br->ofproto, &snoops);
2784         sset_destroy(&snoops);
2785     }
2786 }
2787
2788 static void
2789 bridge_configure_tables(struct bridge *br)
2790 {
2791     static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
2792     int n_tables;
2793     int i, j;
2794
2795     n_tables = ofproto_get_n_tables(br->ofproto);
2796     j = 0;
2797     for (i = 0; i < n_tables; i++) {
2798         struct ofproto_table_settings s;
2799
2800         s.name = NULL;
2801         s.max_flows = UINT_MAX;
2802         s.groups = NULL;
2803         s.n_groups = 0;
2804
2805         if (j < br->cfg->n_flow_tables && i == br->cfg->key_flow_tables[j]) {
2806             struct ovsrec_flow_table *cfg = br->cfg->value_flow_tables[j++];
2807
2808             s.name = cfg->name;
2809             if (cfg->n_flow_limit && *cfg->flow_limit < UINT_MAX) {
2810                 s.max_flows = *cfg->flow_limit;
2811             }
2812             if (cfg->overflow_policy
2813                 && !strcmp(cfg->overflow_policy, "evict")) {
2814                 size_t k;
2815
2816                 s.groups = xmalloc(cfg->n_groups * sizeof *s.groups);
2817                 for (k = 0; k < cfg->n_groups; k++) {
2818                     const char *string = cfg->groups[k];
2819                     char *msg;
2820
2821                     msg = mf_parse_subfield__(&s.groups[k], &string);
2822                     if (msg) {
2823                         VLOG_WARN_RL(&rl, "bridge %s table %d: error parsing "
2824                                      "'groups' (%s)", br->name, i, msg);
2825                         free(msg);
2826                     } else if (*string) {
2827                         VLOG_WARN_RL(&rl, "bridge %s table %d: 'groups' "
2828                                      "element '%s' contains trailing garbage",
2829                                      br->name, i, cfg->groups[k]);
2830                     } else {
2831                         s.n_groups++;
2832                     }
2833                 }
2834             }
2835         }
2836
2837         ofproto_configure_table(br->ofproto, i, &s);
2838
2839         free(s.groups);
2840     }
2841     for (; j < br->cfg->n_flow_tables; j++) {
2842         VLOG_WARN_RL(&rl, "bridge %s: ignoring configuration for flow table "
2843                      "%"PRId64" not supported by this datapath", br->name,
2844                      br->cfg->key_flow_tables[j]);
2845     }
2846 }
2847 \f
2848 /* Port functions. */
2849
2850 static struct port *
2851 port_create(struct bridge *br, const struct ovsrec_port *cfg)
2852 {
2853     struct port *port;
2854
2855     port = xzalloc(sizeof *port);
2856     port->bridge = br;
2857     port->name = xstrdup(cfg->name);
2858     port->cfg = cfg;
2859     list_init(&port->ifaces);
2860
2861     hmap_insert(&br->ports, &port->hmap_node, hash_string(port->name, 0));
2862     return port;
2863 }
2864
2865 /* Deletes interfaces from 'port' that are no longer configured for it. */
2866 static void
2867 port_del_ifaces(struct port *port)
2868 {
2869     struct iface *iface, *next;
2870     struct sset new_ifaces;
2871     size_t i;
2872
2873     /* Collect list of new interfaces. */
2874     sset_init(&new_ifaces);
2875     for (i = 0; i < port->cfg->n_interfaces; i++) {
2876         const char *name = port->cfg->interfaces[i]->name;
2877         const char *type = port->cfg->interfaces[i]->type;
2878         if (strcmp(type, "null")) {
2879             sset_add(&new_ifaces, name);
2880         }
2881     }
2882
2883     /* Get rid of deleted interfaces. */
2884     LIST_FOR_EACH_SAFE (iface, next, port_elem, &port->ifaces) {
2885         if (!sset_contains(&new_ifaces, iface->name)) {
2886             iface_destroy(iface);
2887         }
2888     }
2889
2890     sset_destroy(&new_ifaces);
2891 }
2892
2893 static void
2894 port_destroy(struct port *port)
2895 {
2896     if (port) {
2897         struct bridge *br = port->bridge;
2898         struct iface *iface, *next;
2899
2900         if (br->ofproto) {
2901             ofproto_bundle_unregister(br->ofproto, port);
2902         }
2903
2904         LIST_FOR_EACH_SAFE (iface, next, port_elem, &port->ifaces) {
2905             iface_destroy(iface);
2906         }
2907
2908         hmap_remove(&br->ports, &port->hmap_node);
2909         free(port->name);
2910         free(port);
2911     }
2912 }
2913
2914 static struct port *
2915 port_lookup(const struct bridge *br, const char *name)
2916 {
2917     struct port *port;
2918
2919     HMAP_FOR_EACH_WITH_HASH (port, hmap_node, hash_string(name, 0),
2920                              &br->ports) {
2921         if (!strcmp(port->name, name)) {
2922             return port;
2923         }
2924     }
2925     return NULL;
2926 }
2927
2928 static bool
2929 enable_lacp(struct port *port, bool *activep)
2930 {
2931     if (!port->cfg->lacp) {
2932         /* XXX when LACP implementation has been sufficiently tested, enable by
2933          * default and make active on bonded ports. */
2934         return false;
2935     } else if (!strcmp(port->cfg->lacp, "off")) {
2936         return false;
2937     } else if (!strcmp(port->cfg->lacp, "active")) {
2938         *activep = true;
2939         return true;
2940     } else if (!strcmp(port->cfg->lacp, "passive")) {
2941         *activep = false;
2942         return true;
2943     } else {
2944         VLOG_WARN("port %s: unknown LACP mode %s",
2945                   port->name, port->cfg->lacp);
2946         return false;
2947     }
2948 }
2949
2950 static struct lacp_settings *
2951 port_configure_lacp(struct port *port, struct lacp_settings *s)
2952 {
2953     const char *lacp_time, *system_id;
2954     int priority;
2955
2956     if (!enable_lacp(port, &s->active)) {
2957         return NULL;
2958     }
2959
2960     s->name = port->name;
2961
2962     system_id = ovsrec_port_get_other_config_value(port->cfg, "lacp-system-id",
2963                                                    NULL);
2964     if (system_id) {
2965         if (sscanf(system_id, ETH_ADDR_SCAN_FMT,
2966                    ETH_ADDR_SCAN_ARGS(s->id)) != ETH_ADDR_SCAN_COUNT) {
2967             VLOG_WARN("port %s: LACP system ID (%s) must be an Ethernet"
2968                       " address.", port->name, system_id);
2969             return NULL;
2970         }
2971     } else {
2972         memcpy(s->id, port->bridge->ea, ETH_ADDR_LEN);
2973     }
2974
2975     if (eth_addr_is_zero(s->id)) {
2976         VLOG_WARN("port %s: Invalid zero LACP system ID.", port->name);
2977         return NULL;
2978     }
2979
2980     /* Prefer bondable links if unspecified. */
2981     priority = atoi(ovsrec_port_get_other_config_value(port->cfg,
2982                                                        "lacp-system-priority",
2983                                                        "0"));
2984     s->priority = (priority > 0 && priority <= UINT16_MAX
2985                    ? priority
2986                    : UINT16_MAX - !list_is_short(&port->ifaces));
2987
2988     lacp_time = ovsrec_port_get_other_config_value(port->cfg, "lacp-time",
2989                                                    "slow");
2990     s->fast = !strcasecmp(lacp_time, "fast");
2991     return s;
2992 }
2993
2994 static void
2995 iface_configure_lacp(struct iface *iface, struct lacp_slave_settings *s)
2996 {
2997     int priority, portid, key;
2998
2999     portid = atoi(ovsrec_interface_get_other_config_value(iface->cfg,
3000                                                           "lacp-port-id",
3001                                                           "0"));
3002     priority =
3003         atoi(ovsrec_interface_get_other_config_value(iface->cfg,
3004                                                      "lacp-port-priority",
3005                                                      "0"));
3006     key = atoi(ovsrec_interface_get_other_config_value(iface->cfg,
3007                                                        "lacp-aggregation-key",
3008                                                        "0"));
3009
3010     if (portid <= 0 || portid > UINT16_MAX) {
3011         portid = iface->ofp_port;
3012     }
3013
3014     if (priority <= 0 || priority > UINT16_MAX) {
3015         priority = UINT16_MAX;
3016     }
3017
3018     if (key < 0 || key > UINT16_MAX) {
3019         key = 0;
3020     }
3021
3022     s->name = iface->name;
3023     s->id = portid;
3024     s->priority = priority;
3025     s->key = key;
3026 }
3027
3028 static void
3029 port_configure_bond(struct port *port, struct bond_settings *s,
3030                     uint32_t *bond_stable_ids)
3031 {
3032     const char *detect_s;
3033     struct iface *iface;
3034     int miimon_interval;
3035     size_t i;
3036
3037     s->name = port->name;
3038     s->balance = BM_AB;
3039     if (port->cfg->bond_mode) {
3040         if (!bond_mode_from_string(&s->balance, port->cfg->bond_mode)) {
3041             VLOG_WARN("port %s: unknown bond_mode %s, defaulting to %s",
3042                       port->name, port->cfg->bond_mode,
3043                       bond_mode_to_string(s->balance));
3044         }
3045     } else {
3046         static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 1);
3047
3048         /* XXX: Post version 1.5.*, the default bond_mode changed from SLB to
3049          * active-backup. At some point we should remove this warning. */
3050         VLOG_WARN_RL(&rl, "port %s: Using the default bond_mode %s. Note that"
3051                      " in previous versions, the default bond_mode was"
3052                      " balance-slb", port->name,
3053                      bond_mode_to_string(s->balance));
3054     }
3055     if (s->balance == BM_SLB && port->bridge->cfg->n_flood_vlans) {
3056         VLOG_WARN("port %s: SLB bonds are incompatible with flood_vlans, "
3057                   "please use another bond type or disable flood_vlans",
3058                   port->name);
3059     }
3060
3061     miimon_interval =
3062         atoi(ovsrec_port_get_other_config_value(port->cfg,
3063                                                 "bond-miimon-interval", "0"));
3064     if (miimon_interval <= 0) {
3065         miimon_interval = 200;
3066     }
3067
3068     detect_s = ovsrec_port_get_other_config_value(port->cfg,
3069                                                   "bond-detect-mode",
3070                                                   "carrier");
3071     if (!strcmp(detect_s, "carrier")) {
3072         miimon_interval = 0;
3073     } else if (strcmp(detect_s, "miimon")) {
3074         VLOG_WARN("port %s: unsupported bond-detect-mode %s, "
3075                   "defaulting to carrier", port->name, detect_s);
3076         miimon_interval = 0;
3077     }
3078
3079     s->up_delay = MAX(0, port->cfg->bond_updelay);
3080     s->down_delay = MAX(0, port->cfg->bond_downdelay);
3081     s->basis = atoi(ovsrec_port_get_other_config_value(port->cfg,
3082                                                        "bond-hash-basis",
3083                                                        "0"));
3084     s->rebalance_interval = atoi(
3085         ovsrec_port_get_other_config_value(port->cfg,
3086                                            "bond-rebalance-interval",
3087                                            "10000"));
3088     if (s->rebalance_interval && s->rebalance_interval < 1000) {
3089         s->rebalance_interval = 1000;
3090     }
3091
3092     s->fake_iface = port->cfg->bond_fake_iface;
3093
3094     i = 0;
3095     LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
3096         long long stable_id;
3097
3098         stable_id =
3099             atoll(ovsrec_interface_get_other_config_value(iface->cfg,
3100                                                           "bond-stable-id",
3101                                                           "0"));
3102         if (stable_id <= 0 || stable_id >= UINT32_MAX) {
3103             stable_id = iface->ofp_port;
3104         }
3105         bond_stable_ids[i++] = stable_id;
3106
3107         netdev_set_miimon_interval(iface->netdev, miimon_interval);
3108     }
3109 }
3110
3111 /* Returns true if 'port' is synthetic, that is, if we constructed it locally
3112  * instead of obtaining it from the database. */
3113 static bool
3114 port_is_synthetic(const struct port *port)
3115 {
3116     return ovsdb_idl_row_is_synthetic(&port->cfg->header_);
3117 }
3118 \f
3119 /* Interface functions. */
3120
3121 /* Returns the correct network device type for interface 'iface' in bridge
3122  * 'br'. */
3123 static const char *
3124 iface_get_type(const struct ovsrec_interface *iface,
3125                const struct ovsrec_bridge *br)
3126 {
3127     /* The local port always has type "internal".  Other ports take their type
3128      * from the database and default to "system" if none is specified. */
3129     return (!strcmp(iface->name, br->name) ? "internal"
3130             : iface->type[0] ? iface->type
3131             : "system");
3132 }
3133
3134 static void
3135 iface_destroy(struct iface *iface)
3136 {
3137     if (iface) {
3138         struct port *port = iface->port;
3139         struct bridge *br = port->bridge;
3140
3141         if (br->ofproto && iface->ofp_port >= 0) {
3142             ofproto_port_unregister(br->ofproto, iface->ofp_port);
3143         }
3144
3145         if (iface->ofp_port >= 0) {
3146             hmap_remove(&br->ifaces, &iface->ofp_port_node);
3147         }
3148
3149         list_remove(&iface->port_elem);
3150         hmap_remove(&br->iface_by_name, &iface->name_node);
3151
3152         netdev_close(iface->netdev);
3153
3154         free(iface->name);
3155         free(iface);
3156     }
3157 }
3158
3159 static struct iface *
3160 iface_lookup(const struct bridge *br, const char *name)
3161 {
3162     struct iface *iface;
3163
3164     HMAP_FOR_EACH_WITH_HASH (iface, name_node, hash_string(name, 0),
3165                              &br->iface_by_name) {
3166         if (!strcmp(iface->name, name)) {
3167             return iface;
3168         }
3169     }
3170
3171     return NULL;
3172 }
3173
3174 static struct iface *
3175 iface_find(const char *name)
3176 {
3177     const struct bridge *br;
3178
3179     HMAP_FOR_EACH (br, node, &all_bridges) {
3180         struct iface *iface = iface_lookup(br, name);
3181
3182         if (iface) {
3183             return iface;
3184         }
3185     }
3186     return NULL;
3187 }
3188
3189 static struct if_cfg *
3190 if_cfg_lookup(const struct bridge *br, const char *name)
3191 {
3192     struct if_cfg *if_cfg;
3193
3194     HMAP_FOR_EACH_WITH_HASH (if_cfg, hmap_node, hash_string(name, 0),
3195                              &br->if_cfg_todo) {
3196         if (!strcmp(if_cfg->cfg->name, name)) {
3197             return if_cfg;
3198         }
3199     }
3200
3201     return NULL;
3202 }
3203
3204 static struct iface *
3205 iface_from_ofp_port(const struct bridge *br, uint16_t ofp_port)
3206 {
3207     struct iface *iface;
3208
3209     HMAP_FOR_EACH_IN_BUCKET (iface, ofp_port_node,
3210                              hash_int(ofp_port, 0), &br->ifaces) {
3211         if (iface->ofp_port == ofp_port) {
3212             return iface;
3213         }
3214     }
3215     return NULL;
3216 }
3217
3218 /* Set Ethernet address of 'iface', if one is specified in the configuration
3219  * file. */
3220 static void
3221 iface_set_mac(struct iface *iface)
3222 {
3223     uint8_t ea[ETH_ADDR_LEN];
3224
3225     if (!strcmp(iface->type, "internal")
3226         && iface->cfg->mac && eth_addr_from_string(iface->cfg->mac, ea)) {
3227         if (iface->ofp_port == OFPP_LOCAL) {
3228             VLOG_ERR("interface %s: ignoring mac in Interface record "
3229                      "(use Bridge record to set local port's mac)",
3230                      iface->name);
3231         } else if (eth_addr_is_multicast(ea)) {
3232             VLOG_ERR("interface %s: cannot set MAC to multicast address",
3233                      iface->name);
3234         } else {
3235             int error = netdev_set_etheraddr(iface->netdev, ea);
3236             if (error) {
3237                 VLOG_ERR("interface %s: setting MAC failed (%s)",
3238                          iface->name, strerror(error));
3239             }
3240         }
3241     }
3242 }
3243
3244 /* Sets the ofport column of 'if_cfg' to 'ofport'. */
3245 static void
3246 iface_set_ofport(const struct ovsrec_interface *if_cfg, int64_t ofport)
3247 {
3248     if (if_cfg && !ovsdb_idl_row_is_synthetic(&if_cfg->header_)) {
3249         ovsrec_interface_set_ofport(if_cfg, &ofport, 1);
3250     }
3251 }
3252
3253 /* Clears all of the fields in 'if_cfg' that indicate interface status, and
3254  * sets the "ofport" field to -1.
3255  *
3256  * This is appropriate when 'if_cfg''s interface cannot be created or is
3257  * otherwise invalid. */
3258 static void
3259 iface_clear_db_record(const struct ovsrec_interface *if_cfg)
3260 {
3261     if (!ovsdb_idl_row_is_synthetic(&if_cfg->header_)) {
3262         iface_set_ofport(if_cfg, -1);
3263         ovsrec_interface_set_status(if_cfg, NULL, NULL, 0);
3264         ovsrec_interface_set_admin_state(if_cfg, NULL);
3265         ovsrec_interface_set_duplex(if_cfg, NULL);
3266         ovsrec_interface_set_link_speed(if_cfg, NULL, 0);
3267         ovsrec_interface_set_link_state(if_cfg, NULL);
3268         ovsrec_interface_set_mtu(if_cfg, NULL, 0);
3269         ovsrec_interface_set_cfm_fault(if_cfg, NULL, 0);
3270         ovsrec_interface_set_cfm_fault_status(if_cfg, NULL, 0);
3271         ovsrec_interface_set_cfm_remote_mpids(if_cfg, NULL, 0);
3272         ovsrec_interface_set_lacp_current(if_cfg, NULL, 0);
3273         ovsrec_interface_set_statistics(if_cfg, NULL, NULL, 0);
3274     }
3275 }
3276
3277 /* Adds the 'n' key-value pairs in 'keys' in 'values' to 'shash'. */
3278 static void
3279 smap_from_ovs_idl_map(char **keys, char **values, size_t n, struct smap *smap)
3280 {
3281     size_t i;
3282
3283     smap_init(smap);
3284     for (i = 0; i < n; i++) {
3285         smap_add(smap, keys[i], values[i]);
3286     }
3287 }
3288
3289 /* Creates 'keys' and 'values' arrays from 'shash'.
3290  *
3291  * Sets 'keys' and 'values' to heap allocated arrays representing the key-value
3292  * pairs in 'smap'.  The caller takes ownership of 'keys' and 'values'.  They
3293  * are populated with with strings taken directly from 'shash' and thus have
3294  * the same ownership of the key-value pairs in shash.
3295  */
3296 static void
3297 smap_to_ovs_idl_map(struct smap *smap,
3298                     char ***keys, char ***values, size_t *n)
3299 {
3300     size_t i, count;
3301     char **k, **v;
3302     struct smap_node *sn;
3303
3304     count = smap_count(smap);
3305
3306     k = xmalloc(count * sizeof *k);
3307     v = xmalloc(count * sizeof *v);
3308
3309     i = 0;
3310     SMAP_FOR_EACH(sn, smap) {
3311         k[i] = sn->key;
3312         v[i] = sn->value;
3313         i++;
3314     }
3315
3316     *n      = count;
3317     *keys   = k;
3318     *values = v;
3319 }
3320
3321 struct iface_delete_queues_cbdata {
3322     struct netdev *netdev;
3323     const struct ovsdb_datum *queues;
3324 };
3325
3326 static bool
3327 queue_ids_include(const struct ovsdb_datum *queues, int64_t target)
3328 {
3329     union ovsdb_atom atom;
3330
3331     atom.integer = target;
3332     return ovsdb_datum_find_key(queues, &atom, OVSDB_TYPE_INTEGER) != UINT_MAX;
3333 }
3334
3335 static void
3336 iface_delete_queues(unsigned int queue_id,
3337                     const struct smap *details OVS_UNUSED, void *cbdata_)
3338 {
3339     struct iface_delete_queues_cbdata *cbdata = cbdata_;
3340
3341     if (!queue_ids_include(cbdata->queues, queue_id)) {
3342         netdev_delete_queue(cbdata->netdev, queue_id);
3343     }
3344 }
3345
3346 static void
3347 iface_configure_qos(struct iface *iface, const struct ovsrec_qos *qos)
3348 {
3349     struct ofpbuf queues_buf;
3350
3351     ofpbuf_init(&queues_buf, 0);
3352
3353     if (!qos || qos->type[0] == '\0' || qos->n_queues < 1) {
3354         netdev_set_qos(iface->netdev, NULL, NULL);
3355     } else {
3356         struct iface_delete_queues_cbdata cbdata;
3357         struct smap details;
3358         bool queue_zero;
3359         size_t i;
3360
3361         /* Configure top-level Qos for 'iface'. */
3362         smap_from_ovs_idl_map(qos->key_other_config, qos->value_other_config,
3363                               qos->n_other_config, &details);
3364         netdev_set_qos(iface->netdev, qos->type, &details);
3365         smap_destroy(&details);
3366
3367         /* Deconfigure queues that were deleted. */
3368         cbdata.netdev = iface->netdev;
3369         cbdata.queues = ovsrec_qos_get_queues(qos, OVSDB_TYPE_INTEGER,
3370                                               OVSDB_TYPE_UUID);
3371         netdev_dump_queues(iface->netdev, iface_delete_queues, &cbdata);
3372
3373         /* Configure queues for 'iface'. */
3374         queue_zero = false;
3375         for (i = 0; i < qos->n_queues; i++) {
3376             const struct ovsrec_queue *queue = qos->value_queues[i];
3377             unsigned int queue_id = qos->key_queues[i];
3378
3379             if (queue_id == 0) {
3380                 queue_zero = true;
3381             }
3382
3383             if (queue->n_dscp == 1) {
3384                 struct ofproto_port_queue *port_queue;
3385
3386                 port_queue = ofpbuf_put_uninit(&queues_buf,
3387                                                sizeof *port_queue);
3388                 port_queue->queue = queue_id;
3389                 port_queue->dscp = queue->dscp[0];
3390             }
3391
3392             smap_from_ovs_idl_map(queue->key_other_config,
3393                                   queue->value_other_config,
3394                                   queue->n_other_config, &details);
3395             netdev_set_queue(iface->netdev, queue_id, &details);
3396             smap_destroy(&details);
3397         }
3398         if (!queue_zero) {
3399             smap_init(&details);
3400             netdev_set_queue(iface->netdev, 0, &details);
3401             smap_destroy(&details);
3402         }
3403     }
3404
3405     if (iface->ofp_port >= 0) {
3406         const struct ofproto_port_queue *port_queues = queues_buf.data;
3407         size_t n_queues = queues_buf.size / sizeof *port_queues;
3408
3409         ofproto_port_set_queues(iface->port->bridge->ofproto, iface->ofp_port,
3410                                 port_queues, n_queues);
3411     }
3412
3413     netdev_set_policing(iface->netdev,
3414                         iface->cfg->ingress_policing_rate,
3415                         iface->cfg->ingress_policing_burst);
3416
3417     ofpbuf_uninit(&queues_buf);
3418 }
3419
3420 static void
3421 iface_configure_cfm(struct iface *iface)
3422 {
3423     const struct ovsrec_interface *cfg = iface->cfg;
3424     const char *extended_str, *opstate_str;
3425     const char *cfm_ccm_vlan;
3426     struct cfm_settings s;
3427
3428     if (!cfg->n_cfm_mpid) {
3429         ofproto_port_clear_cfm(iface->port->bridge->ofproto, iface->ofp_port);
3430         return;
3431     }
3432
3433     s.mpid = *cfg->cfm_mpid;
3434     s.interval = atoi(ovsrec_interface_get_other_config_value(iface->cfg,
3435                                                               "cfm_interval",
3436                                                               "0"));
3437     cfm_ccm_vlan = ovsrec_interface_get_other_config_value(iface->cfg,
3438                                                            "cfm_ccm_vlan",
3439                                                            "0");
3440     s.ccm_pcp = atoi(ovsrec_interface_get_other_config_value(iface->cfg,
3441                                                              "cfm_ccm_pcp",
3442                                                              "0"));
3443     if (s.interval <= 0) {
3444         s.interval = 1000;
3445     }
3446
3447     if (!strcasecmp("random", cfm_ccm_vlan)) {
3448         s.ccm_vlan = CFM_RANDOM_VLAN;
3449     } else {
3450         s.ccm_vlan = atoi(cfm_ccm_vlan);
3451         if (s.ccm_vlan == CFM_RANDOM_VLAN) {
3452             s.ccm_vlan = 0;
3453         }
3454     }
3455
3456     extended_str = ovsrec_interface_get_other_config_value(iface->cfg,
3457                                                            "cfm_extended",
3458                                                            "false");
3459     s.extended = !strcasecmp("true", extended_str);
3460
3461     opstate_str = ovsrec_interface_get_other_config_value(iface->cfg,
3462                                                           "cfm_opstate",
3463                                                           "up");
3464     s.opup = !strcasecmp("up", opstate_str);
3465
3466     ofproto_port_set_cfm(iface->port->bridge->ofproto, iface->ofp_port, &s);
3467 }
3468
3469 /* Returns true if 'iface' is synthetic, that is, if we constructed it locally
3470  * instead of obtaining it from the database. */
3471 static bool
3472 iface_is_synthetic(const struct iface *iface)
3473 {
3474     return ovsdb_idl_row_is_synthetic(&iface->cfg->header_);
3475 }
3476
3477 \f
3478 /* Port mirroring. */
3479
3480 static struct mirror *
3481 mirror_find_by_uuid(struct bridge *br, const struct uuid *uuid)
3482 {
3483     struct mirror *m;
3484
3485     HMAP_FOR_EACH_IN_BUCKET (m, hmap_node, uuid_hash(uuid), &br->mirrors) {
3486         if (uuid_equals(uuid, &m->uuid)) {
3487             return m;
3488         }
3489     }
3490     return NULL;
3491 }
3492
3493 static void
3494 bridge_configure_mirrors(struct bridge *br)
3495 {
3496     const struct ovsdb_datum *mc;
3497     unsigned long *flood_vlans;
3498     struct mirror *m, *next;
3499     size_t i;
3500
3501     /* Get rid of deleted mirrors. */
3502     mc = ovsrec_bridge_get_mirrors(br->cfg, OVSDB_TYPE_UUID);
3503     HMAP_FOR_EACH_SAFE (m, next, hmap_node, &br->mirrors) {
3504         union ovsdb_atom atom;
3505
3506         atom.uuid = m->uuid;
3507         if (ovsdb_datum_find_key(mc, &atom, OVSDB_TYPE_UUID) == UINT_MAX) {
3508             mirror_destroy(m);
3509         }
3510     }
3511
3512     /* Add new mirrors and reconfigure existing ones. */
3513     for (i = 0; i < br->cfg->n_mirrors; i++) {
3514         const struct ovsrec_mirror *cfg = br->cfg->mirrors[i];
3515         struct mirror *m = mirror_find_by_uuid(br, &cfg->header_.uuid);
3516         if (!m) {
3517             m = mirror_create(br, cfg);
3518         }
3519         m->cfg = cfg;
3520         if (!mirror_configure(m)) {
3521             mirror_destroy(m);
3522         }
3523     }
3524
3525     /* Update flooded vlans (for RSPAN). */
3526     flood_vlans = vlan_bitmap_from_array(br->cfg->flood_vlans,
3527                                          br->cfg->n_flood_vlans);
3528     ofproto_set_flood_vlans(br->ofproto, flood_vlans);
3529     bitmap_free(flood_vlans);
3530 }
3531
3532 static struct mirror *
3533 mirror_create(struct bridge *br, const struct ovsrec_mirror *cfg)
3534 {
3535     struct mirror *m;
3536
3537     m = xzalloc(sizeof *m);
3538     m->uuid = cfg->header_.uuid;
3539     hmap_insert(&br->mirrors, &m->hmap_node, uuid_hash(&m->uuid));
3540     m->bridge = br;
3541     m->name = xstrdup(cfg->name);
3542
3543     return m;
3544 }
3545
3546 static void
3547 mirror_destroy(struct mirror *m)
3548 {
3549     if (m) {
3550         struct bridge *br = m->bridge;
3551
3552         if (br->ofproto) {
3553             ofproto_mirror_unregister(br->ofproto, m);
3554         }
3555
3556         hmap_remove(&br->mirrors, &m->hmap_node);
3557         free(m->name);
3558         free(m);
3559     }
3560 }
3561
3562 static void
3563 mirror_collect_ports(struct mirror *m,
3564                      struct ovsrec_port **in_ports, int n_in_ports,
3565                      void ***out_portsp, size_t *n_out_portsp)
3566 {
3567     void **out_ports = xmalloc(n_in_ports * sizeof *out_ports);
3568     size_t n_out_ports = 0;
3569     size_t i;
3570
3571     for (i = 0; i < n_in_ports; i++) {
3572         const char *name = in_ports[i]->name;
3573         struct port *port = port_lookup(m->bridge, name);
3574         if (port) {
3575             out_ports[n_out_ports++] = port;
3576         } else {
3577             VLOG_WARN("bridge %s: mirror %s cannot match on nonexistent "
3578                       "port %s", m->bridge->name, m->name, name);
3579         }
3580     }
3581     *out_portsp = out_ports;
3582     *n_out_portsp = n_out_ports;
3583 }
3584
3585 static bool
3586 mirror_configure(struct mirror *m)
3587 {
3588     const struct ovsrec_mirror *cfg = m->cfg;
3589     struct ofproto_mirror_settings s;
3590
3591     /* Set name. */
3592     if (strcmp(cfg->name, m->name)) {
3593         free(m->name);
3594         m->name = xstrdup(cfg->name);
3595     }
3596     s.name = m->name;
3597
3598     /* Get output port or VLAN. */
3599     if (cfg->output_port) {
3600         s.out_bundle = port_lookup(m->bridge, cfg->output_port->name);
3601         if (!s.out_bundle) {
3602             VLOG_ERR("bridge %s: mirror %s outputs to port not on bridge",
3603                      m->bridge->name, m->name);
3604             return false;
3605         }
3606         s.out_vlan = UINT16_MAX;
3607
3608         if (cfg->output_vlan) {
3609             VLOG_ERR("bridge %s: mirror %s specifies both output port and "
3610                      "output vlan; ignoring output vlan",
3611                      m->bridge->name, m->name);
3612         }
3613     } else if (cfg->output_vlan) {
3614         /* The database should prevent invalid VLAN values. */
3615         s.out_bundle = NULL;
3616         s.out_vlan = *cfg->output_vlan;
3617     } else {
3618         VLOG_ERR("bridge %s: mirror %s does not specify output; ignoring",
3619                  m->bridge->name, m->name);
3620         return false;
3621     }
3622
3623     /* Get port selection. */
3624     if (cfg->select_all) {
3625         size_t n_ports = hmap_count(&m->bridge->ports);
3626         void **ports = xmalloc(n_ports * sizeof *ports);
3627         struct port *port;
3628         size_t i;
3629
3630         i = 0;
3631         HMAP_FOR_EACH (port, hmap_node, &m->bridge->ports) {
3632             ports[i++] = port;
3633         }
3634
3635         s.srcs = ports;
3636         s.n_srcs = n_ports;
3637
3638         s.dsts = ports;
3639         s.n_dsts = n_ports;
3640     } else {
3641         /* Get ports, dropping ports that don't exist.
3642          * The IDL ensures that there are no duplicates. */
3643         mirror_collect_ports(m, cfg->select_src_port, cfg->n_select_src_port,
3644                              &s.srcs, &s.n_srcs);
3645         mirror_collect_ports(m, cfg->select_dst_port, cfg->n_select_dst_port,
3646                              &s.dsts, &s.n_dsts);
3647     }
3648
3649     /* Get VLAN selection. */
3650     s.src_vlans = vlan_bitmap_from_array(cfg->select_vlan, cfg->n_select_vlan);
3651
3652     /* Configure. */
3653     ofproto_mirror_register(m->bridge->ofproto, m, &s);
3654
3655     /* Clean up. */
3656     if (s.srcs != s.dsts) {
3657         free(s.dsts);
3658     }
3659     free(s.srcs);
3660     free(s.src_vlans);
3661
3662     return true;
3663 }
3664 \f
3665 /* Linux VLAN device support (e.g. "eth0.10" for VLAN 10.)
3666  *
3667  * This is deprecated.  It is only for compatibility with broken device drivers
3668  * in old versions of Linux that do not properly support VLANs when VLAN
3669  * devices are not used.  When broken device drivers are no longer in
3670  * widespread use, we will delete these interfaces. */
3671
3672 static struct ovsrec_port **recs;
3673 static size_t n_recs, allocated_recs;
3674
3675 /* Adds 'rec' to a list of recs that have to be destroyed when the VLAN
3676  * splinters are reconfigured. */
3677 static void
3678 register_rec(struct ovsrec_port *rec)
3679 {
3680     if (n_recs >= allocated_recs) {
3681         recs = x2nrealloc(recs, &allocated_recs, sizeof *recs);
3682     }
3683     recs[n_recs++] = rec;
3684 }
3685
3686 /* Frees all of the ports registered with register_reg(). */
3687 static void
3688 free_registered_recs(void)
3689 {
3690     size_t i;
3691
3692     for (i = 0; i < n_recs; i++) {
3693         struct ovsrec_port *port = recs[i];
3694         size_t j;
3695
3696         for (j = 0; j < port->n_interfaces; j++) {
3697             struct ovsrec_interface *iface = port->interfaces[j];
3698             free(iface->name);
3699             free(iface);
3700         }
3701
3702         free(port->interfaces);
3703         free(port->name);
3704         free(port->tag);
3705         free(port->key_other_config);
3706         free(port->value_other_config[0]);
3707         free(port->value_other_config);
3708         free(port);
3709     }
3710     n_recs = 0;
3711 }
3712
3713 /* Returns true if VLAN splinters are enabled on 'iface_cfg', false
3714  * otherwise. */
3715 static bool
3716 vlan_splinters_is_enabled(const struct ovsrec_interface *iface_cfg)
3717 {
3718     const char *value;
3719
3720     value = ovsrec_interface_get_other_config_value(iface_cfg,
3721                                                     "enable-vlan-splinters",
3722                                                     "");
3723     return !strcmp(value, "true");
3724 }
3725
3726 /* Figures out the set of VLANs that are in use for the purpose of VLAN
3727  * splinters.
3728  *
3729  * If VLAN splinters are enabled on at least one interface and any VLANs are in
3730  * use, returns a 4096-bit bitmap with a 1-bit for each in-use VLAN (bits 0 and
3731  * 4095 will not be set).  The caller is responsible for freeing the bitmap,
3732  * with free().
3733  *
3734  * If VLANs splinters are not enabled on any interface or if no VLANs are in
3735  * use, returns NULL.
3736  *
3737  * Updates 'vlan_splinters_enabled_anywhere'. */
3738 static unsigned long int *
3739 collect_splinter_vlans(const struct ovsrec_open_vswitch *ovs_cfg)
3740 {
3741     unsigned long int *splinter_vlans;
3742     struct sset splinter_ifaces;
3743     const char *real_dev_name;
3744     struct shash *real_devs;
3745     struct shash_node *node;
3746     struct bridge *br;
3747     size_t i;
3748
3749     /* Free space allocated for synthesized ports and interfaces, since we're
3750      * in the process of reconstructing all of them. */
3751     free_registered_recs();
3752
3753     splinter_vlans = bitmap_allocate(4096);
3754     sset_init(&splinter_ifaces);
3755     vlan_splinters_enabled_anywhere = false;
3756     for (i = 0; i < ovs_cfg->n_bridges; i++) {
3757         struct ovsrec_bridge *br_cfg = ovs_cfg->bridges[i];
3758         size_t j;
3759
3760         for (j = 0; j < br_cfg->n_ports; j++) {
3761             struct ovsrec_port *port_cfg = br_cfg->ports[j];
3762             int k;
3763
3764             for (k = 0; k < port_cfg->n_interfaces; k++) {
3765                 struct ovsrec_interface *iface_cfg = port_cfg->interfaces[k];
3766
3767                 if (vlan_splinters_is_enabled(iface_cfg)) {
3768                     vlan_splinters_enabled_anywhere = true;
3769                     sset_add(&splinter_ifaces, iface_cfg->name);
3770                     vlan_bitmap_from_array__(port_cfg->trunks,
3771                                              port_cfg->n_trunks,
3772                                              splinter_vlans);
3773                 }
3774             }
3775
3776             if (port_cfg->tag && *port_cfg->tag > 0 && *port_cfg->tag < 4095) {
3777                 bitmap_set1(splinter_vlans, *port_cfg->tag);
3778             }
3779         }
3780     }
3781
3782     if (!vlan_splinters_enabled_anywhere) {
3783         free(splinter_vlans);
3784         sset_destroy(&splinter_ifaces);
3785         return NULL;
3786     }
3787
3788     HMAP_FOR_EACH (br, node, &all_bridges) {
3789         if (br->ofproto) {
3790             ofproto_get_vlan_usage(br->ofproto, splinter_vlans);
3791         }
3792     }
3793
3794     /* Don't allow VLANs 0 or 4095 to be splintered.  VLAN 0 should appear on
3795      * the real device.  VLAN 4095 is reserved and Linux doesn't allow a VLAN
3796      * device to be created for it. */
3797     bitmap_set0(splinter_vlans, 0);
3798     bitmap_set0(splinter_vlans, 4095);
3799
3800     /* Delete all VLAN devices that we don't need. */
3801     vlandev_refresh();
3802     real_devs = vlandev_get_real_devs();
3803     SHASH_FOR_EACH (node, real_devs) {
3804         const struct vlan_real_dev *real_dev = node->data;
3805         const struct vlan_dev *vlan_dev;
3806         bool real_dev_has_splinters;
3807
3808         real_dev_has_splinters = sset_contains(&splinter_ifaces,
3809                                                real_dev->name);
3810         HMAP_FOR_EACH (vlan_dev, hmap_node, &real_dev->vlan_devs) {
3811             if (!real_dev_has_splinters
3812                 || !bitmap_is_set(splinter_vlans, vlan_dev->vid)) {
3813                 struct netdev *netdev;
3814
3815                 if (!netdev_open(vlan_dev->name, "system", &netdev)) {
3816                     if (!netdev_get_in4(netdev, NULL, NULL) ||
3817                         !netdev_get_in6(netdev, NULL)) {
3818                         vlandev_del(vlan_dev->name);
3819                     } else {
3820                         /* It has an IP address configured, so we don't own
3821                          * it.  Don't delete it. */
3822                     }
3823                     netdev_close(netdev);
3824                 }
3825             }
3826
3827         }
3828     }
3829
3830     /* Add all VLAN devices that we need. */
3831     SSET_FOR_EACH (real_dev_name, &splinter_ifaces) {
3832         int vid;
3833
3834         BITMAP_FOR_EACH_1 (vid, 4096, splinter_vlans) {
3835             if (!vlandev_get_name(real_dev_name, vid)) {
3836                 vlandev_add(real_dev_name, vid);
3837             }
3838         }
3839     }
3840
3841     vlandev_refresh();
3842
3843     sset_destroy(&splinter_ifaces);
3844
3845     if (bitmap_scan(splinter_vlans, 0, 4096) >= 4096) {
3846         free(splinter_vlans);
3847         return NULL;
3848     }
3849     return splinter_vlans;
3850 }
3851
3852 /* Pushes the configure of VLAN splinter port 'port' (e.g. eth0.9) down to
3853  * ofproto.  */
3854 static void
3855 configure_splinter_port(struct port *port)
3856 {
3857     struct ofproto *ofproto = port->bridge->ofproto;
3858     uint16_t realdev_ofp_port;
3859     const char *realdev_name;
3860     struct iface *vlandev, *realdev;
3861
3862     ofproto_bundle_unregister(port->bridge->ofproto, port);
3863
3864     vlandev = CONTAINER_OF(list_front(&port->ifaces), struct iface,
3865                            port_elem);
3866
3867     realdev_name = ovsrec_port_get_other_config_value(port->cfg,
3868                                                       "realdev", NULL);
3869     realdev = iface_lookup(port->bridge, realdev_name);
3870     realdev_ofp_port = realdev ? realdev->ofp_port : 0;
3871
3872     ofproto_port_set_realdev(ofproto, vlandev->ofp_port, realdev_ofp_port,
3873                              *port->cfg->tag);
3874 }
3875
3876 static struct ovsrec_port *
3877 synthesize_splinter_port(const char *real_dev_name,
3878                          const char *vlan_dev_name, int vid)
3879 {
3880     struct ovsrec_interface *iface;
3881     struct ovsrec_port *port;
3882
3883     iface = xzalloc(sizeof *iface);
3884     iface->name = xstrdup(vlan_dev_name);
3885     iface->type = "system";
3886
3887     port = xzalloc(sizeof *port);
3888     port->interfaces = xmemdup(&iface, sizeof iface);
3889     port->n_interfaces = 1;
3890     port->name = xstrdup(vlan_dev_name);
3891     port->vlan_mode = "splinter";
3892     port->tag = xmalloc(sizeof *port->tag);
3893     *port->tag = vid;
3894     port->key_other_config = xmalloc(sizeof *port->key_other_config);
3895     port->key_other_config[0] = "realdev";
3896     port->value_other_config = xmalloc(sizeof *port->value_other_config);
3897     port->value_other_config[0] = xstrdup(real_dev_name);
3898     port->n_other_config = 1;
3899
3900     register_rec(port);
3901     return port;
3902 }
3903
3904 /* For each interface with 'br' that has VLAN splinters enabled, adds a
3905  * corresponding ovsrec_port to 'ports' for each splinter VLAN marked with a
3906  * 1-bit in the 'splinter_vlans' bitmap. */
3907 static void
3908 add_vlan_splinter_ports(struct bridge *br,
3909                         const unsigned long int *splinter_vlans,
3910                         struct shash *ports)
3911 {
3912     size_t i;
3913
3914     /* We iterate through 'br->cfg->ports' instead of 'ports' here because
3915      * we're modifying 'ports'. */
3916     for (i = 0; i < br->cfg->n_ports; i++) {
3917         const char *name = br->cfg->ports[i]->name;
3918         struct ovsrec_port *port_cfg = shash_find_data(ports, name);
3919         size_t j;
3920
3921         for (j = 0; j < port_cfg->n_interfaces; j++) {
3922             struct ovsrec_interface *iface_cfg = port_cfg->interfaces[j];
3923
3924             if (vlan_splinters_is_enabled(iface_cfg)) {
3925                 const char *real_dev_name;
3926                 uint16_t vid;
3927
3928                 real_dev_name = iface_cfg->name;
3929                 BITMAP_FOR_EACH_1 (vid, 4096, splinter_vlans) {
3930                     const char *vlan_dev_name;
3931
3932                     vlan_dev_name = vlandev_get_name(real_dev_name, vid);
3933                     if (vlan_dev_name
3934                         && !shash_find(ports, vlan_dev_name)) {
3935                         shash_add(ports, vlan_dev_name,
3936                                   synthesize_splinter_port(
3937                                       real_dev_name, vlan_dev_name, vid));
3938                     }
3939                 }
3940             }
3941         }
3942     }
3943 }
3944
3945 static void
3946 mirror_refresh_stats(struct mirror *m)
3947 {
3948     struct ofproto *ofproto = m->bridge->ofproto;
3949     uint64_t tx_packets, tx_bytes;
3950     char *keys[2];
3951     int64_t values[2];
3952     size_t stat_cnt = 0;
3953
3954     if (ofproto_mirror_get_stats(ofproto, m, &tx_packets, &tx_bytes)) {
3955         ovsrec_mirror_set_statistics(m->cfg, NULL, NULL, 0);
3956         return;
3957     }
3958
3959     if (tx_packets != UINT64_MAX) {
3960         keys[stat_cnt] = "tx_packets";
3961         values[stat_cnt] = tx_packets;
3962         stat_cnt++;
3963     }
3964     if (tx_bytes != UINT64_MAX) {
3965         keys[stat_cnt] = "tx_bytes";
3966         values[stat_cnt] = tx_bytes;
3967         stat_cnt++;
3968     }
3969
3970     ovsrec_mirror_set_statistics(m->cfg, keys, values, stat_cnt);
3971 }