vswitchd/bridge.c

   1 /* Copyright (c) 2008, 2009, 2010, 2011, 2012 Nicira Networks
   2  *
   3  * Licensed under the Apache License, Version 2.0 (the "License");
   4  * you may not use this file except in compliance with the License.
   5  * You may obtain a copy of the License at:
   6  *
   7  *     http://www.apache.org/licenses/LICENSE-2.0
   8  *
   9  * Unless required by applicable law or agreed to in writing, software
  10  * distributed under the License is distributed on an "AS IS" BASIS,
  11  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
  12  * See the License for the specific language governing permissions and
  13  * limitations under the License.
  14  */
  15
  16 #include <config.h>
  17 #include "bridge.h"
  18 #include <assert.h>
  19 #include <errno.h>
  20 #include <inttypes.h>
  21 #include <stdlib.h>
  22 #include "bitmap.h"
  23 #include "bond.h"
  24 #include "cfm.h"
  25 #include "coverage.h"
  26 #include "daemon.h"
  27 #include "dirs.h"
  28 #include "dynamic-string.h"
  29 #include "hash.h"
  30 #include "hmap.h"
  31 #include "hmapx.h"
  32 #include "jsonrpc.h"
  33 #include "lacp.h"
  34 #include "list.h"
  35 #include "mac-learning.h"
  36 #include "meta-flow.h"
  37 #include "netdev.h"
  38 #include "ofp-print.h"
  39 #include "ofpbuf.h"
  40 #include "ofproto/ofproto.h"
  41 #include "poll-loop.h"
  42 #include "sha1.h"
  43 #include "shash.h"
  44 #include "socket-util.h"
  45 #include "stream.h"
  46 #include "stream-ssl.h"
  47 #include "sset.h"
  48 #include "system-stats.h"
  49 #include "timeval.h"
  50 #include "util.h"
  51 #include "unixctl.h"
  52 #include "vlandev.h"
  53 #include "vswitchd/vswitch-idl.h"
  54 #include "xenserver.h"
  55 #include "vlog.h"
  56 #include "sflow_api.h"
  57 #include "vlan-bitmap.h"
  58
  59 VLOG_DEFINE_THIS_MODULE(bridge);
  60
  61 COVERAGE_DEFINE(bridge_reconfigure);
  62
  63 struct iface {
  64     /* These members are always valid. */
  65     struct list port_elem;      /* Element in struct port's "ifaces" list. */
  66     struct hmap_node name_node; /* In struct bridge's "iface_by_name" hmap. */
  67     struct port *port;          /* Containing port. */
  68     char *name;                 /* Host network device name. */
  69     tag_type tag;               /* Tag associated with this interface. */
  70
  71     /* These members are valid only after bridge_reconfigure() causes them to
  72      * be initialized. */
  73     struct hmap_node ofp_port_node; /* In struct bridge's "ifaces" hmap. */
  74     int ofp_port;               /* OpenFlow port number, -1 if unknown. */
  75     struct netdev *netdev;      /* Network device. */
  76     const char *type;           /* Usually same as cfg->type. */
  77     const struct ovsrec_interface *cfg;
  78 };
  79
  80 struct mirror {
  81     struct uuid uuid;           /* UUID of this "mirror" record in database. */
  82     struct hmap_node hmap_node; /* In struct bridge's "mirrors" hmap. */
  83     struct bridge *bridge;
  84     char *name;
  85     const struct ovsrec_mirror *cfg;
  86 };
  87
  88 struct port {
  89     struct bridge *bridge;
  90     struct hmap_node hmap_node; /* Element in struct bridge's "ports" hmap. */
  91     char *name;
  92
  93     const struct ovsrec_port *cfg;
  94
  95     /* An ordinary bridge port has 1 interface.
  96      * A bridge port for bonding has at least 2 interfaces. */
  97     struct list ifaces;         /* List of "struct iface"s. */
  98 };
  99
 100 struct bridge {
 101     struct hmap_node node;      /* In 'all_bridges'. */
 102     char *name;                 /* User-specified arbitrary name. */
 103     char *type;                 /* Datapath type. */
 104     uint8_t ea[ETH_ADDR_LEN];   /* Bridge Ethernet Address. */
 105     uint8_t default_ea[ETH_ADDR_LEN]; /* Default MAC. */
 106     const struct ovsrec_bridge *cfg;
 107
 108     /* OpenFlow switch processing. */
 109     struct ofproto *ofproto;    /* OpenFlow switch. */
 110
 111     /* Bridge ports. */
 112     struct hmap ports;          /* "struct port"s indexed by name. */
 113     struct hmap ifaces;         /* "struct iface"s indexed by ofp_port. */
 114     struct hmap iface_by_name;  /* "struct iface"s indexed by name. */
 115
 116     /* Port mirroring. */
 117     struct hmap mirrors;        /* "struct mirror" indexed by UUID. */
 118
 119     /* Synthetic local port if necessary. */
 120     struct ovsrec_port synth_local_port;
 121     struct ovsrec_interface synth_local_iface;
 122     struct ovsrec_interface *synth_local_ifacep;
 123 };
 124
 125 /* All bridges, indexed by name. */
 126 static struct hmap all_bridges = HMAP_INITIALIZER(&all_bridges);
 127
 128 /* OVSDB IDL used to obtain configuration. */
 129 static struct ovsdb_idl *idl;
 130
 131 /* Each time this timer expires, the bridge fetches systems and interface
 132  * statistics and pushes them into the database. */
 133 #define STATS_INTERVAL (5 * 1000) /* In milliseconds. */
 134 static long long int stats_timer = LLONG_MIN;
 135
 136 /* Stores the time after which rate limited statistics may be written to the
 137  * database.  Only updated when changes to the database require rate limiting.
 138  */
 139 #define DB_LIMIT_INTERVAL (1 * 1000) /* In milliseconds. */
 140 static long long int db_limiter = LLONG_MIN;
 141
 142 static void add_del_bridges(const struct ovsrec_open_vswitch *);
 143 static void bridge_del_ofprotos(void);
 144 static bool bridge_add_ofprotos(struct bridge *);
 145 static void bridge_create(const struct ovsrec_bridge *);
 146 static void bridge_destroy(struct bridge *);
 147 static struct bridge *bridge_lookup(const char *name);
 148 static unixctl_cb_func bridge_unixctl_dump_flows;
 149 static unixctl_cb_func bridge_unixctl_reconnect;
 150 static size_t bridge_get_controllers(const struct bridge *br,
 151                                      struct ovsrec_controller ***controllersp);
 152 static void bridge_add_del_ports(struct bridge *,
 153                                  const unsigned long int *splinter_vlans);
 154 static void bridge_add_ofproto_ports(struct bridge *);
 155 static void bridge_del_ofproto_ports(struct bridge *);
 156 static void bridge_refresh_ofp_port(struct bridge *);
 157 static void bridge_configure_datapath_id(struct bridge *);
 158 static void bridge_configure_flow_eviction_threshold(struct bridge *);
 159 static void bridge_configure_netflow(struct bridge *);
 160 static void bridge_configure_forward_bpdu(struct bridge *);
 161 static void bridge_configure_mac_idle_time(struct bridge *);
 162 static void bridge_configure_sflow(struct bridge *, int *sflow_bridge_number);
 163 static void bridge_configure_stp(struct bridge *);
 164 static void bridge_configure_tables(struct bridge *);
 165 static void bridge_configure_remotes(struct bridge *,
 166                                      const struct sockaddr_in *managers,
 167                                      size_t n_managers);
 168 static void bridge_pick_local_hw_addr(struct bridge *,
 169                                       uint8_t ea[ETH_ADDR_LEN],
 170                                       struct iface **hw_addr_iface);
 171 static uint64_t bridge_pick_datapath_id(struct bridge *,
 172                                         const uint8_t bridge_ea[ETH_ADDR_LEN],
 173                                         struct iface *hw_addr_iface);
 174 static const char *bridge_get_other_config(const struct ovsrec_bridge *,
 175                                             const char *key);
 176 static const char *get_port_other_config(const struct ovsrec_port *,
 177                                          const char *key,
 178                                          const char *default_value);
 179 static uint64_t dpid_from_hash(const void *, size_t nbytes);
 180 static bool bridge_has_bond_fake_iface(const struct bridge *,
 181                                        const char *name);
 182 static bool port_is_bond_fake_iface(const struct port *);
 183
 184 static unixctl_cb_func qos_unixctl_show;
 185
 186 static struct port *port_create(struct bridge *, const struct ovsrec_port *);
 187 static void port_add_ifaces(struct port *);
 188 static void port_del_ifaces(struct port *);
 189 static void port_destroy(struct port *);
 190 static struct port *port_lookup(const struct bridge *, const char *name);
 191 static void port_configure(struct port *);
 192 static struct lacp_settings *port_configure_lacp(struct port *,
 193                                                  struct lacp_settings *);
 194 static void port_configure_bond(struct port *, struct bond_settings *,
 195                                 uint32_t *bond_stable_ids);
 196 static bool port_is_synthetic(const struct port *);
 197
 198 static void bridge_configure_mirrors(struct bridge *);
 199 static struct mirror *mirror_create(struct bridge *,
 200                                     const struct ovsrec_mirror *);
 201 static void mirror_destroy(struct mirror *);
 202 static bool mirror_configure(struct mirror *);
 203 static void mirror_refresh_stats(struct mirror *);
 204
 205 static void iface_configure_lacp(struct iface *, struct lacp_slave_settings *);
 206 static struct iface *iface_create(struct port *port,
 207                                   const struct ovsrec_interface *if_cfg);
 208 static void iface_destroy(struct iface *);
 209 static struct iface *iface_lookup(const struct bridge *, const char *name);
 210 static struct iface *iface_find(const char *name);
 211 static struct iface *iface_from_ofp_port(const struct bridge *,
 212                                          uint16_t ofp_port);
 213 static void iface_set_mac(struct iface *);
 214 static void iface_set_ofport(const struct ovsrec_interface *, int64_t ofport);
 215 static void iface_clear_db_record(const struct ovsrec_interface *if_cfg);
 216 static void iface_configure_qos(struct iface *, const struct ovsrec_qos *);
 217 static void iface_configure_cfm(struct iface *);
 218 static void iface_refresh_cfm_stats(struct iface *);
 219 static void iface_refresh_stats(struct iface *);
 220 static void iface_refresh_status(struct iface *);
 221 static bool iface_is_synthetic(const struct iface *);
 222 static const char *get_interface_other_config(const struct ovsrec_interface *,
 223                                               const char *key,
 224                                               const char *default_value);
 225
 226 static void shash_from_ovs_idl_map(char **keys, char **values, size_t n,
 227                                    struct shash *);
 228 static void shash_to_ovs_idl_map(struct shash *,
 229                                  char ***keys, char ***values, size_t *n);
 230
 231 /* Linux VLAN device support (e.g. "eth0.10" for VLAN 10.)
 232  *
 233  * This is deprecated.  It is only for compatibility with broken device drivers
 234  * in old versions of Linux that do not properly support VLANs when VLAN
 235  * devices are not used.  When broken device drivers are no longer in
 236  * widespread use, we will delete these interfaces. */
 237
 238 /* True if VLAN splinters are enabled on any interface, false otherwise.*/
 239 static bool vlan_splinters_enabled_anywhere;
 240
 241 static bool vlan_splinters_is_enabled(const struct ovsrec_interface *);
 242 static unsigned long int *collect_splinter_vlans(
 243     const struct ovsrec_open_vswitch *);
 244 static void configure_splinter_port(struct port *);
 245 static void add_vlan_splinter_ports(struct bridge *,
 246                                     const unsigned long int *splinter_vlans,
 247                                     struct shash *ports);
 248 \f
 249 /* Public functions. */
 250
 251 /* Initializes the bridge module, configuring it to obtain its configuration
 252  * from an OVSDB server accessed over 'remote', which should be a string in a
 253  * form acceptable to ovsdb_idl_create(). */
 254 void
 255 bridge_init(const char *remote)
 256 {
 257     /* Create connection to database. */
 258     idl = ovsdb_idl_create(remote, &ovsrec_idl_class, true);
 259     ovsdb_idl_set_lock(idl, "ovs_vswitchd");
 260
 261     ovsdb_idl_omit_alert(idl, &ovsrec_open_vswitch_col_cur_cfg);
 262     ovsdb_idl_omit_alert(idl, &ovsrec_open_vswitch_col_statistics);
 263     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_external_ids);
 264     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_ovs_version);
 265     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_db_version);
 266     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_system_type);
 267     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_system_version);
 268
 269     ovsdb_idl_omit_alert(idl, &ovsrec_bridge_col_datapath_id);
 270     ovsdb_idl_omit_alert(idl, &ovsrec_bridge_col_status);
 271     ovsdb_idl_omit(idl, &ovsrec_bridge_col_external_ids);
 272
 273     ovsdb_idl_omit_alert(idl, &ovsrec_port_col_status);
 274     ovsdb_idl_omit_alert(idl, &ovsrec_port_col_statistics);
 275     ovsdb_idl_omit(idl, &ovsrec_port_col_external_ids);
 276     ovsdb_idl_omit(idl, &ovsrec_port_col_fake_bridge);
 277
 278     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_admin_state);
 279     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_duplex);
 280     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_link_speed);
 281     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_link_state);
 282     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_link_resets);
 283     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_mtu);
 284     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_ofport);
 285     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_statistics);
 286     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_status);
 287     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_fault);
 288     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_remote_mpids);
 289     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_lacp_current);
 290     ovsdb_idl_omit(idl, &ovsrec_interface_col_external_ids);
 291
 292     ovsdb_idl_omit_alert(idl, &ovsrec_controller_col_is_connected);
 293     ovsdb_idl_omit_alert(idl, &ovsrec_controller_col_role);
 294     ovsdb_idl_omit_alert(idl, &ovsrec_controller_col_status);
 295     ovsdb_idl_omit(idl, &ovsrec_controller_col_external_ids);
 296
 297     ovsdb_idl_omit(idl, &ovsrec_qos_col_external_ids);
 298
 299     ovsdb_idl_omit(idl, &ovsrec_queue_col_external_ids);
 300
 301     ovsdb_idl_omit(idl, &ovsrec_mirror_col_external_ids);
 302     ovsdb_idl_omit_alert(idl, &ovsrec_mirror_col_statistics);
 303
 304     ovsdb_idl_omit(idl, &ovsrec_netflow_col_external_ids);
 305
 306     ovsdb_idl_omit(idl, &ovsrec_sflow_col_external_ids);
 307
 308     ovsdb_idl_omit(idl, &ovsrec_manager_col_external_ids);
 309     ovsdb_idl_omit(idl, &ovsrec_manager_col_inactivity_probe);
 310     ovsdb_idl_omit(idl, &ovsrec_manager_col_is_connected);
 311     ovsdb_idl_omit(idl, &ovsrec_manager_col_max_backoff);
 312     ovsdb_idl_omit(idl, &ovsrec_manager_col_status);
 313
 314     ovsdb_idl_omit(idl, &ovsrec_ssl_col_external_ids);
 315
 316     /* Register unixctl commands. */
 317     unixctl_command_register("qos/show", "interface", 1, 1,
 318                              qos_unixctl_show, NULL);
 319     unixctl_command_register("bridge/dump-flows", "bridge", 1, 1,
 320                              bridge_unixctl_dump_flows, NULL);
 321     unixctl_command_register("bridge/reconnect", "[bridge]", 0, 1,
 322                              bridge_unixctl_reconnect, NULL);
 323     lacp_init();
 324     bond_init();
 325     cfm_init();
 326     stp_init();
 327 }
 328
 329 void
 330 bridge_exit(void)
 331 {
 332     struct bridge *br, *next_br;
 333
 334     HMAP_FOR_EACH_SAFE (br, next_br, node, &all_bridges) {
 335         bridge_destroy(br);
 336     }
 337     ovsdb_idl_destroy(idl);
 338 }
 339
 340 /* Looks at the list of managers in 'ovs_cfg' and extracts their remote IP
 341  * addresses and ports into '*managersp' and '*n_managersp'.  The caller is
 342  * responsible for freeing '*managersp' (with free()).
 343  *
 344  * You may be asking yourself "why does ovs-vswitchd care?", because
 345  * ovsdb-server is responsible for connecting to the managers, and ovs-vswitchd
 346  * should not be and in fact is not directly involved in that.  But
 347  * ovs-vswitchd needs to make sure that ovsdb-server can reach the managers, so
 348  * it has to tell in-band control where the managers are to enable that.
 349  * (Thus, only managers connected in-band are collected.)
 350  */
 351 static void
 352 collect_in_band_managers(const struct ovsrec_open_vswitch *ovs_cfg,
 353                          struct sockaddr_in **managersp, size_t *n_managersp)
 354 {
 355     struct sockaddr_in *managers = NULL;
 356     size_t n_managers = 0;
 357     struct sset targets;
 358     size_t i;
 359
 360     /* Collect all of the potential targets from the "targets" columns of the
 361      * rows pointed to by "manager_options", excluding any that are
 362      * out-of-band. */
 363     sset_init(&targets);
 364     for (i = 0; i < ovs_cfg->n_manager_options; i++) {
 365         struct ovsrec_manager *m = ovs_cfg->manager_options[i];
 366
 367         if (m->connection_mode && !strcmp(m->connection_mode, "out-of-band")) {
 368             sset_find_and_delete(&targets, m->target);
 369         } else {
 370             sset_add(&targets, m->target);
 371         }
 372     }
 373
 374     /* Now extract the targets' IP addresses. */
 375     if (!sset_is_empty(&targets)) {
 376         const char *target;
 377
 378         managers = xmalloc(sset_count(&targets) * sizeof *managers);
 379         SSET_FOR_EACH (target, &targets) {
 380             struct sockaddr_in *sin = &managers[n_managers];
 381
 382             if (stream_parse_target_with_default_ports(target,
 383                                                        JSONRPC_TCP_PORT,
 384                                                        JSONRPC_SSL_PORT,
 385                                                        sin)) {
 386                 n_managers++;
 387             }
 388         }
 389     }
 390     sset_destroy(&targets);
 391
 392     *managersp = managers;
 393     *n_managersp = n_managers;
 394 }
 395
 396 static void
 397 bridge_reconfigure(const struct ovsrec_open_vswitch *ovs_cfg)
 398 {
 399     unsigned long int *splinter_vlans;
 400     struct sockaddr_in *managers;
 401     struct bridge *br, *next;
 402     int sflow_bridge_number;
 403     size_t n_managers;
 404
 405     COVERAGE_INC(bridge_reconfigure);
 406
 407     /* Create and destroy "struct bridge"s, "struct port"s, and "struct
 408      * iface"s according to 'ovs_cfg', with only very minimal configuration
 409      * otherwise.
 410      *
 411      * This is mostly an update to bridge data structures.  Very little is
 412      * pushed down to ofproto or lower layers. */
 413     add_del_bridges(ovs_cfg);
 414     splinter_vlans = collect_splinter_vlans(ovs_cfg);
 415     HMAP_FOR_EACH (br, node, &all_bridges) {
 416         bridge_add_del_ports(br, splinter_vlans);
 417     }
 418     free(splinter_vlans);
 419
 420     /* Delete all datapaths and datapath ports that are no longer configured.
 421      *
 422      * The kernel will reject any attempt to add a given port to a datapath if
 423      * that port already belongs to a different datapath, so we must do all
 424      * port deletions before any port additions.  A datapath always has a
 425      * "local port" so we must delete not-configured datapaths too. */
 426     bridge_del_ofprotos();
 427     HMAP_FOR_EACH (br, node, &all_bridges) {
 428         if (br->ofproto) {
 429             bridge_del_ofproto_ports(br);
 430         }
 431     }
 432
 433     /* Create datapaths and datapath ports that are missing.
 434      *
 435      * After this is done, we have our final set of bridges, ports, and
 436      * interfaces.  Every "struct bridge" has an ofproto, every "struct port"
 437      * has at least one iface, every "struct iface" has a valid ofp_port and
 438      * netdev. */
 439     HMAP_FOR_EACH_SAFE (br, next, node, &all_bridges) {
 440         if (!br->ofproto && !bridge_add_ofprotos(br)) {
 441             bridge_destroy(br);
 442         }
 443     }
 444     HMAP_FOR_EACH (br, node, &all_bridges) {
 445         bridge_refresh_ofp_port(br);
 446         bridge_add_ofproto_ports(br);
 447     }
 448
 449     /* Complete the configuration. */
 450     sflow_bridge_number = 0;
 451     collect_in_band_managers(ovs_cfg, &managers, &n_managers);
 452     HMAP_FOR_EACH (br, node, &all_bridges) {
 453         struct port *port;
 454
 455         /* We need the datapath ID early to allow LACP ports to use it as the
 456          * default system ID. */
 457         bridge_configure_datapath_id(br);
 458
 459         HMAP_FOR_EACH (port, hmap_node, &br->ports) {
 460             struct iface *iface;
 461
 462             port_configure(port);
 463
 464             LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
 465                 iface_configure_cfm(iface);
 466                 iface_configure_qos(iface, port->cfg->qos);
 467                 iface_set_mac(iface);
 468             }
 469         }
 470         bridge_configure_mirrors(br);
 471         bridge_configure_flow_eviction_threshold(br);
 472         bridge_configure_forward_bpdu(br);
 473         bridge_configure_mac_idle_time(br);
 474         bridge_configure_remotes(br, managers, n_managers);
 475         bridge_configure_netflow(br);
 476         bridge_configure_sflow(br, &sflow_bridge_number);
 477         bridge_configure_stp(br);
 478         bridge_configure_tables(br);
 479     }
 480     free(managers);
 481
 482     /* ovs-vswitchd has completed initialization, so allow the process that
 483      * forked us to exit successfully. */
 484     daemonize_complete();
 485 }
 486
 487 /* Iterate over all ofprotos and delete any of them that do not have a
 488  * configured bridge or that are the wrong type. */
 489 static void
 490 bridge_del_ofprotos(void)
 491 {
 492     struct sset names;
 493     struct sset types;
 494     const char *type;
 495
 496     sset_init(&names);
 497     sset_init(&types);
 498     ofproto_enumerate_types(&types);
 499     SSET_FOR_EACH (type, &types) {
 500         const char *name;
 501
 502         ofproto_enumerate_names(type, &names);
 503         SSET_FOR_EACH (name, &names) {
 504             struct bridge *br = bridge_lookup(name);
 505             if (!br || strcmp(type, br->type)) {
 506                 ofproto_delete(name, type);
 507             }
 508         }
 509     }
 510     sset_destroy(&names);
 511     sset_destroy(&types);
 512 }
 513
 514 static bool
 515 bridge_add_ofprotos(struct bridge *br)
 516 {
 517     int error = ofproto_create(br->name, br->type, &br->ofproto);
 518     if (error) {
 519         VLOG_ERR("failed to create bridge %s: %s", br->name, strerror(error));
 520         return false;
 521     }
 522     return true;
 523 }
 524
 525 static void
 526 port_configure(struct port *port)
 527 {
 528     const struct ovsrec_port *cfg = port->cfg;
 529     struct bond_settings bond_settings;
 530     struct lacp_settings lacp_settings;
 531     struct ofproto_bundle_settings s;
 532     struct iface *iface;
 533
 534     if (cfg->vlan_mode && !strcmp(cfg->vlan_mode, "splinter")) {
 535         configure_splinter_port(port);
 536         return;
 537     }
 538
 539     /* Get name. */
 540     s.name = port->name;
 541
 542     /* Get slaves. */
 543     s.n_slaves = 0;
 544     s.slaves = xmalloc(list_size(&port->ifaces) * sizeof *s.slaves);
 545     LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
 546         s.slaves[s.n_slaves++] = iface->ofp_port;
 547     }
 548
 549     /* Get VLAN tag. */
 550     s.vlan = -1;
 551     if (cfg->tag && *cfg->tag >= 0 && *cfg->tag <= 4095) {
 552         s.vlan = *cfg->tag;
 553     }
 554
 555     /* Get VLAN trunks. */
 556     s.trunks = NULL;
 557     if (cfg->n_trunks) {
 558         s.trunks = vlan_bitmap_from_array(cfg->trunks, cfg->n_trunks);
 559     }
 560
 561     /* Get VLAN mode. */
 562     if (cfg->vlan_mode) {
 563         if (!strcmp(cfg->vlan_mode, "access")) {
 564             s.vlan_mode = PORT_VLAN_ACCESS;
 565         } else if (!strcmp(cfg->vlan_mode, "trunk")) {
 566             s.vlan_mode = PORT_VLAN_TRUNK;
 567         } else if (!strcmp(cfg->vlan_mode, "native-tagged")) {
 568             s.vlan_mode = PORT_VLAN_NATIVE_TAGGED;
 569         } else if (!strcmp(cfg->vlan_mode, "native-untagged")) {
 570             s.vlan_mode = PORT_VLAN_NATIVE_UNTAGGED;
 571         } else {
 572             /* This "can't happen" because ovsdb-server should prevent it. */
 573             VLOG_ERR("unknown VLAN mode %s", cfg->vlan_mode);
 574             s.vlan_mode = PORT_VLAN_TRUNK;
 575         }
 576     } else {
 577         if (s.vlan >= 0) {
 578             s.vlan_mode = PORT_VLAN_ACCESS;
 579             if (cfg->n_trunks) {
 580                 VLOG_ERR("port %s: ignoring trunks in favor of implicit vlan",
 581                          port->name);
 582             }
 583         } else {
 584             s.vlan_mode = PORT_VLAN_TRUNK;
 585         }
 586     }
 587     s.use_priority_tags = !strcmp("true", get_port_other_config(
 588                                       cfg, "priority-tags", ""));
 589
 590     /* Get LACP settings. */
 591     s.lacp = port_configure_lacp(port, &lacp_settings);
 592     if (s.lacp) {
 593         size_t i = 0;
 594
 595         s.lacp_slaves = xmalloc(s.n_slaves * sizeof *s.lacp_slaves);
 596         LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
 597             iface_configure_lacp(iface, &s.lacp_slaves[i++]);
 598         }
 599     } else {
 600         s.lacp_slaves = NULL;
 601     }
 602
 603     /* Get bond settings. */
 604     if (s.n_slaves > 1) {
 605         s.bond = &bond_settings;
 606         s.bond_stable_ids = xmalloc(s.n_slaves * sizeof *s.bond_stable_ids);
 607         port_configure_bond(port, &bond_settings, s.bond_stable_ids);
 608     } else {
 609         s.bond = NULL;
 610         s.bond_stable_ids = NULL;
 611
 612         LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
 613             netdev_set_miimon_interval(iface->netdev, 0);
 614         }
 615     }
 616
 617     /* Register. */
 618     ofproto_bundle_register(port->bridge->ofproto, port, &s);
 619
 620     /* Clean up. */
 621     free(s.slaves);
 622     free(s.trunks);
 623     free(s.lacp_slaves);
 624     free(s.bond_stable_ids);
 625 }
 626
 627 /* Pick local port hardware address and datapath ID for 'br'. */
 628 static void
 629 bridge_configure_datapath_id(struct bridge *br)
 630 {
 631     uint8_t ea[ETH_ADDR_LEN];
 632     uint64_t dpid;
 633     struct iface *local_iface;
 634     struct iface *hw_addr_iface;
 635     char *dpid_string;
 636
 637     bridge_pick_local_hw_addr(br, ea, &hw_addr_iface);
 638     local_iface = iface_from_ofp_port(br, OFPP_LOCAL);
 639     if (local_iface) {
 640         int error = netdev_set_etheraddr(local_iface->netdev, ea);
 641         if (error) {
 642             static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
 643             VLOG_ERR_RL(&rl, "bridge %s: failed to set bridge "
 644                         "Ethernet address: %s",
 645                         br->name, strerror(error));
 646         }
 647     }
 648     memcpy(br->ea, ea, ETH_ADDR_LEN);
 649
 650     dpid = bridge_pick_datapath_id(br, ea, hw_addr_iface);
 651     ofproto_set_datapath_id(br->ofproto, dpid);
 652
 653     dpid_string = xasprintf("%016"PRIx64, dpid);
 654     ovsrec_bridge_set_datapath_id(br->cfg, dpid_string);
 655     free(dpid_string);
 656 }
 657
 658 /* Set NetFlow configuration on 'br'. */
 659 static void
 660 bridge_configure_netflow(struct bridge *br)
 661 {
 662     struct ovsrec_netflow *cfg = br->cfg->netflow;
 663     struct netflow_options opts;
 664
 665     if (!cfg) {
 666         ofproto_set_netflow(br->ofproto, NULL);
 667         return;
 668     }
 669
 670     memset(&opts, 0, sizeof opts);
 671
 672     /* Get default NetFlow configuration from datapath.
 673      * Apply overrides from 'cfg'. */
 674     ofproto_get_netflow_ids(br->ofproto, &opts.engine_type, &opts.engine_id);
 675     if (cfg->engine_type) {
 676         opts.engine_type = *cfg->engine_type;
 677     }
 678     if (cfg->engine_id) {
 679         opts.engine_id = *cfg->engine_id;
 680     }
 681
 682     /* Configure active timeout interval. */
 683     opts.active_timeout = cfg->active_timeout;
 684     if (!opts.active_timeout) {
 685         opts.active_timeout = -1;
 686     } else if (opts.active_timeout < 0) {
 687         VLOG_WARN("bridge %s: active timeout interval set to negative "
 688                   "value, using default instead (%d seconds)", br->name,
 689                   NF_ACTIVE_TIMEOUT_DEFAULT);
 690         opts.active_timeout = -1;
 691     }
 692
 693     /* Add engine ID to interface number to disambiguate bridgs? */
 694     opts.add_id_to_iface = cfg->add_id_to_interface;
 695     if (opts.add_id_to_iface) {
 696         if (opts.engine_id > 0x7f) {
 697             VLOG_WARN("bridge %s: NetFlow port mangling may conflict with "
 698                       "another vswitch, choose an engine id less than 128",
 699                       br->name);
 700         }
 701         if (hmap_count(&br->ports) > 508) {
 702             VLOG_WARN("bridge %s: NetFlow port mangling will conflict with "
 703                       "another port when more than 508 ports are used",
 704                       br->name);
 705         }
 706     }
 707
 708     /* Collectors. */
 709     sset_init(&opts.collectors);
 710     sset_add_array(&opts.collectors, cfg->targets, cfg->n_targets);
 711
 712     /* Configure. */
 713     if (ofproto_set_netflow(br->ofproto, &opts)) {
 714         VLOG_ERR("bridge %s: problem setting netflow collectors", br->name);
 715     }
 716     sset_destroy(&opts.collectors);
 717 }
 718
 719 /* Set sFlow configuration on 'br'. */
 720 static void
 721 bridge_configure_sflow(struct bridge *br, int *sflow_bridge_number)
 722 {
 723     const struct ovsrec_sflow *cfg = br->cfg->sflow;
 724     struct ovsrec_controller **controllers;
 725     struct ofproto_sflow_options oso;
 726     size_t n_controllers;
 727     size_t i;
 728
 729     if (!cfg) {
 730         ofproto_set_sflow(br->ofproto, NULL);
 731         return;
 732     }
 733
 734     memset(&oso, 0, sizeof oso);
 735
 736     sset_init(&oso.targets);
 737     sset_add_array(&oso.targets, cfg->targets, cfg->n_targets);
 738
 739     oso.sampling_rate = SFL_DEFAULT_SAMPLING_RATE;
 740     if (cfg->sampling) {
 741         oso.sampling_rate = *cfg->sampling;
 742     }
 743
 744     oso.polling_interval = SFL_DEFAULT_POLLING_INTERVAL;
 745     if (cfg->polling) {
 746         oso.polling_interval = *cfg->polling;
 747     }
 748
 749     oso.header_len = SFL_DEFAULT_HEADER_SIZE;
 750     if (cfg->header) {
 751         oso.header_len = *cfg->header;
 752     }
 753
 754     oso.sub_id = (*sflow_bridge_number)++;
 755     oso.agent_device = cfg->agent;
 756
 757     oso.control_ip = NULL;
 758     n_controllers = bridge_get_controllers(br, &controllers);
 759     for (i = 0; i < n_controllers; i++) {
 760         if (controllers[i]->local_ip) {
 761             oso.control_ip = controllers[i]->local_ip;
 762             break;
 763         }
 764     }
 765     ofproto_set_sflow(br->ofproto, &oso);
 766
 767     sset_destroy(&oso.targets);
 768 }
 769
 770 static void
 771 port_configure_stp(const struct ofproto *ofproto, struct port *port,
 772                    struct ofproto_port_stp_settings *port_s,
 773                    int *port_num_counter, unsigned long *port_num_bitmap)
 774 {
 775     const char *config_str;
 776     struct iface *iface;
 777
 778     config_str = get_port_other_config(port->cfg, "stp-enable", NULL);
 779     if (config_str && !strcmp(config_str, "false")) {
 780         port_s->enable = false;
 781         return;
 782     } else {
 783         port_s->enable = true;
 784     }
 785
 786     /* STP over bonds is not supported. */
 787     if (!list_is_singleton(&port->ifaces)) {
 788         VLOG_ERR("port %s: cannot enable STP on bonds, disabling",
 789                  port->name);
 790         port_s->enable = false;
 791         return;
 792     }
 793
 794     iface = CONTAINER_OF(list_front(&port->ifaces), struct iface, port_elem);
 795
 796     /* Internal ports shouldn't participate in spanning tree, so
 797      * skip them. */
 798     if (!strcmp(iface->type, "internal")) {
 799         VLOG_DBG("port %s: disable STP on internal ports", port->name);
 800         port_s->enable = false;
 801         return;
 802     }
 803
 804     /* STP on mirror output ports is not supported. */
 805     if (ofproto_is_mirror_output_bundle(ofproto, port)) {
 806         VLOG_DBG("port %s: disable STP on mirror ports", port->name);
 807         port_s->enable = false;
 808         return;
 809     }
 810
 811     config_str = get_port_other_config(port->cfg, "stp-port-num", NULL);
 812     if (config_str) {
 813         unsigned long int port_num = strtoul(config_str, NULL, 0);
 814         int port_idx = port_num - 1;
 815
 816         if (port_num < 1 || port_num > STP_MAX_PORTS) {
 817             VLOG_ERR("port %s: invalid stp-port-num", port->name);
 818             port_s->enable = false;
 819             return;
 820         }
 821
 822         if (bitmap_is_set(port_num_bitmap, port_idx)) {
 823             VLOG_ERR("port %s: duplicate stp-port-num %lu, disabling",
 824                     port->name, port_num);
 825             port_s->enable = false;
 826             return;
 827         }
 828         bitmap_set1(port_num_bitmap, port_idx);
 829         port_s->port_num = port_idx;
 830     } else {
 831         if (*port_num_counter > STP_MAX_PORTS) {
 832             VLOG_ERR("port %s: too many STP ports, disabling", port->name);
 833             port_s->enable = false;
 834             return;
 835         }
 836
 837         port_s->port_num = (*port_num_counter)++;
 838     }
 839
 840     config_str = get_port_other_config(port->cfg, "stp-path-cost", NULL);
 841     if (config_str) {
 842         port_s->path_cost = strtoul(config_str, NULL, 10);
 843     } else {
 844         uint32_t current;
 845
 846         if (netdev_get_features(iface->netdev, &current, NULL, NULL, NULL)) {
 847             /* Couldn't get speed, so assume 100Mb/s. */
 848             port_s->path_cost = 19;
 849         } else {
 850             unsigned int mbps;
 851
 852             mbps = netdev_features_to_bps(current) / 1000000;
 853             port_s->path_cost = stp_convert_speed_to_cost(mbps);
 854         }
 855     }
 856
 857     config_str = get_port_other_config(port->cfg, "stp-port-priority", NULL);
 858     if (config_str) {
 859         port_s->priority = strtoul(config_str, NULL, 0);
 860     } else {
 861         port_s->priority = STP_DEFAULT_PORT_PRIORITY;
 862     }
 863 }
 864
 865 /* Set spanning tree configuration on 'br'. */
 866 static void
 867 bridge_configure_stp(struct bridge *br)
 868 {
 869     if (!br->cfg->stp_enable) {
 870         ofproto_set_stp(br->ofproto, NULL);
 871     } else {
 872         struct ofproto_stp_settings br_s;
 873         const char *config_str;
 874         struct port *port;
 875         int port_num_counter;
 876         unsigned long *port_num_bitmap;
 877
 878         config_str = bridge_get_other_config(br->cfg, "stp-system-id");
 879         if (config_str) {
 880             uint8_t ea[ETH_ADDR_LEN];
 881
 882             if (eth_addr_from_string(config_str, ea)) {
 883                 br_s.system_id = eth_addr_to_uint64(ea);
 884             } else {
 885                 br_s.system_id = eth_addr_to_uint64(br->ea);
 886                 VLOG_ERR("bridge %s: invalid stp-system-id, defaulting "
 887                          "to "ETH_ADDR_FMT, br->name, ETH_ADDR_ARGS(br->ea));
 888             }
 889         } else {
 890             br_s.system_id = eth_addr_to_uint64(br->ea);
 891         }
 892
 893         config_str = bridge_get_other_config(br->cfg, "stp-priority");
 894         if (config_str) {
 895             br_s.priority = strtoul(config_str, NULL, 0);
 896         } else {
 897             br_s.priority = STP_DEFAULT_BRIDGE_PRIORITY;
 898         }
 899
 900         config_str = bridge_get_other_config(br->cfg, "stp-hello-time");
 901         if (config_str) {
 902             br_s.hello_time = strtoul(config_str, NULL, 10) * 1000;
 903         } else {
 904             br_s.hello_time = STP_DEFAULT_HELLO_TIME;
 905         }
 906
 907         config_str = bridge_get_other_config(br->cfg, "stp-max-age");
 908         if (config_str) {
 909             br_s.max_age = strtoul(config_str, NULL, 10) * 1000;
 910         } else {
 911             br_s.max_age = STP_DEFAULT_MAX_AGE;
 912         }
 913
 914         config_str = bridge_get_other_config(br->cfg, "stp-forward-delay");
 915         if (config_str) {
 916             br_s.fwd_delay = strtoul(config_str, NULL, 10) * 1000;
 917         } else {
 918             br_s.fwd_delay = STP_DEFAULT_FWD_DELAY;
 919         }
 920
 921         /* Configure STP on the bridge. */
 922         if (ofproto_set_stp(br->ofproto, &br_s)) {
 923             VLOG_ERR("bridge %s: could not enable STP", br->name);
 924             return;
 925         }
 926
 927         /* Users must either set the port number with the "stp-port-num"
 928          * configuration on all ports or none.  If manual configuration
 929          * is not done, then we allocate them sequentially. */
 930         port_num_counter = 0;
 931         port_num_bitmap = bitmap_allocate(STP_MAX_PORTS);
 932         HMAP_FOR_EACH (port, hmap_node, &br->ports) {
 933             struct ofproto_port_stp_settings port_s;
 934             struct iface *iface;
 935
 936             port_configure_stp(br->ofproto, port, &port_s,
 937                                &port_num_counter, port_num_bitmap);
 938
 939             /* As bonds are not supported, just apply configuration to
 940              * all interfaces. */
 941             LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
 942                 if (ofproto_port_set_stp(br->ofproto, iface->ofp_port,
 943                                          &port_s)) {
 944                     VLOG_ERR("port %s: could not enable STP", port->name);
 945                     continue;
 946                 }
 947             }
 948         }
 949
 950         if (bitmap_scan(port_num_bitmap, 0, STP_MAX_PORTS) != STP_MAX_PORTS
 951                     && port_num_counter) {
 952             VLOG_ERR("bridge %s: must manually configure all STP port "
 953                      "IDs or none, disabling", br->name);
 954             ofproto_set_stp(br->ofproto, NULL);
 955         }
 956         bitmap_free(port_num_bitmap);
 957     }
 958 }
 959
 960 static bool
 961 bridge_has_bond_fake_iface(const struct bridge *br, const char *name)
 962 {
 963     const struct port *port = port_lookup(br, name);
 964     return port && port_is_bond_fake_iface(port);
 965 }
 966
 967 static bool
 968 port_is_bond_fake_iface(const struct port *port)
 969 {
 970     return port->cfg->bond_fake_iface && !list_is_short(&port->ifaces);
 971 }
 972
 973 static void
 974 add_del_bridges(const struct ovsrec_open_vswitch *cfg)
 975 {
 976     struct bridge *br, *next;
 977     struct shash new_br;
 978     size_t i;
 979
 980     /* Collect new bridges' names and types. */
 981     shash_init(&new_br);
 982     for (i = 0; i < cfg->n_bridges; i++) {
 983         static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
 984         const struct ovsrec_bridge *br_cfg = cfg->bridges[i];
 985
 986         if (strchr(br_cfg->name, '/')) {
 987             /* Prevent remote ovsdb-server users from accessing arbitrary
 988              * directories, e.g. consider a bridge named "../../../etc/". */
 989             VLOG_WARN_RL(&rl, "ignoring bridge with invalid name \"%s\"",
 990                          br_cfg->name);
 991         } else if (!shash_add_once(&new_br, br_cfg->name, br_cfg)) {
 992             VLOG_WARN_RL(&rl, "bridge %s specified twice", br_cfg->name);
 993         }
 994     }
 995
 996     /* Get rid of deleted bridges or those whose types have changed.
 997      * Update 'cfg' of bridges that still exist. */
 998     HMAP_FOR_EACH_SAFE (br, next, node, &all_bridges) {
 999         br->cfg = shash_find_data(&new_br, br->name);
1000         if (!br->cfg || strcmp(br->type, ofproto_normalize_type(
1001                                    br->cfg->datapath_type))) {
1002             bridge_destroy(br);
1003         }
1004     }
1005
1006     /* Add new bridges. */
1007     for (i = 0; i < cfg->n_bridges; i++) {
1008         const struct ovsrec_bridge *br_cfg = cfg->bridges[i];
1009         struct bridge *br = bridge_lookup(br_cfg->name);
1010         if (!br) {
1011             bridge_create(br_cfg);
1012         }
1013     }
1014
1015     shash_destroy(&new_br);
1016 }
1017
1018 /* Delete each ofproto port on 'br' that doesn't have a corresponding "struct
1019  * iface".
1020  *
1021  * The kernel will reject any attempt to add a given port to a datapath if that
1022  * port already belongs to a different datapath, so we must do all port
1023  * deletions before any port additions. */
1024 static void
1025 bridge_del_ofproto_ports(struct bridge *br)
1026 {
1027     struct ofproto_port_dump dump;
1028     struct ofproto_port ofproto_port;
1029
1030     OFPROTO_PORT_FOR_EACH (&ofproto_port, &dump, br->ofproto) {
1031         const char *name = ofproto_port.name;
1032         struct iface *iface;
1033         const char *type;
1034         int error;
1035
1036         /* Ignore the local port.  We can't change it anyhow. */
1037         if (!strcmp(name, br->name)) {
1038             continue;
1039         }
1040
1041         /* Get the type that 'ofproto_port' should have (ordinarily the
1042          * type of its corresponding iface) or NULL if it should be
1043          * deleted. */
1044         iface = iface_lookup(br, name);
1045         type = (iface ? iface->type
1046                 : bridge_has_bond_fake_iface(br, name) ? "internal"
1047                 : NULL);
1048
1049         /* If it's the wrong type then delete the ofproto port. */
1050         if (type
1051             && !strcmp(ofproto_port.type, type)
1052             && (!iface || !iface->netdev
1053                 || !strcmp(netdev_get_type(iface->netdev), type))) {
1054             continue;
1055         }
1056         error = ofproto_port_del(br->ofproto, ofproto_port.ofp_port);
1057         if (error) {
1058             VLOG_WARN("bridge %s: failed to remove %s interface (%s)",
1059                       br->name, name, strerror(error));
1060         }
1061         if (iface) {
1062             netdev_close(iface->netdev);
1063             iface->netdev = NULL;
1064         }
1065     }
1066 }
1067
1068 static void
1069 iface_set_ofp_port(struct iface *iface, int ofp_port)
1070 {
1071     struct bridge *br = iface->port->bridge;
1072
1073     assert(iface->ofp_port < 0 && ofp_port >= 0);
1074     iface->ofp_port = ofp_port;
1075     hmap_insert(&br->ifaces, &iface->ofp_port_node, hash_int(ofp_port, 0));
1076     iface_set_ofport(iface->cfg, ofp_port);
1077 }
1078
1079 static void
1080 bridge_refresh_ofp_port(struct bridge *br)
1081 {
1082     struct ofproto_port_dump dump;
1083     struct ofproto_port ofproto_port;
1084     struct port *port;
1085
1086     /* Clear all the "ofp_port"es. */
1087     hmap_clear(&br->ifaces);
1088     HMAP_FOR_EACH (port, hmap_node, &br->ports) {
1089         struct iface *iface;
1090
1091         LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
1092             iface->ofp_port = -1;
1093         }
1094     }
1095
1096     /* Obtain the correct "ofp_port"s from ofproto. */
1097     OFPROTO_PORT_FOR_EACH (&ofproto_port, &dump, br->ofproto) {
1098         struct iface *iface = iface_lookup(br, ofproto_port.name);
1099         if (iface) {
1100             if (iface->ofp_port >= 0) {
1101                 VLOG_WARN("bridge %s: interface %s reported twice",
1102                           br->name, ofproto_port.name);
1103             } else if (iface_from_ofp_port(br, ofproto_port.ofp_port)) {
1104                 VLOG_WARN("bridge %s: interface %"PRIu16" reported twice",
1105                           br->name, ofproto_port.ofp_port);
1106             } else {
1107                 iface_set_ofp_port(iface, ofproto_port.ofp_port);
1108             }
1109         }
1110     }
1111 }
1112
1113 /* Add an ofproto port for any "struct iface" that doesn't have one.
1114  * Delete any "struct iface" for which this fails.
1115  * Delete any "struct port" that thereby ends up with no ifaces. */
1116 static void
1117 bridge_add_ofproto_ports(struct bridge *br)
1118 {
1119     struct port *port, *next_port;
1120
1121     HMAP_FOR_EACH_SAFE (port, next_port, hmap_node, &br->ports) {
1122         struct iface *iface, *next_iface;
1123         struct ofproto_port ofproto_port;
1124
1125         LIST_FOR_EACH_SAFE (iface, next_iface, port_elem, &port->ifaces) {
1126             int error;
1127
1128             /* Open the netdev. */
1129             if (!iface->netdev) {
1130                 error = netdev_open(iface->name, iface->type, &iface->netdev);
1131                 if (error) {
1132                     VLOG_WARN("could not open network device %s (%s)",
1133                               iface->name, strerror(error));
1134                 }
1135
1136                 if (iface->netdev
1137                     && port->cfg->vlan_mode
1138                     && !strcmp(port->cfg->vlan_mode, "splinter")) {
1139                     netdev_turn_flags_on(iface->netdev, NETDEV_UP, true);
1140                 }
1141             } else {
1142                 error = 0;
1143             }
1144
1145             /* Configure the netdev. */
1146             if (iface->netdev) {
1147                 struct shash args;
1148
1149                 shash_init(&args);
1150                 shash_from_ovs_idl_map(iface->cfg->key_options,
1151                                        iface->cfg->value_options,
1152                                        iface->cfg->n_options, &args);
1153                 error = netdev_set_config(iface->netdev, &args);
1154                 shash_destroy(&args);
1155
1156                 if (error) {
1157                     VLOG_WARN("could not configure network device %s (%s)",
1158                               iface->name, strerror(error));
1159                     netdev_close(iface->netdev);
1160                     iface->netdev = NULL;
1161                 }
1162             }
1163
1164             /* Add the port, if necessary. */
1165             if (iface->netdev && iface->ofp_port < 0) {
1166                 uint16_t ofp_port;
1167                 int error;
1168
1169                 error = ofproto_port_add(br->ofproto, iface->netdev,
1170                                          &ofp_port);
1171                 if (!error) {
1172                     iface_set_ofp_port(iface, ofp_port);
1173                 } else {
1174                     netdev_close(iface->netdev);
1175                     iface->netdev = NULL;
1176                 }
1177             }
1178
1179             /* Populate stats columns in new Interface rows. */
1180             if (iface->netdev && !iface->cfg->mtu) {
1181                 iface_refresh_stats(iface);
1182                 iface_refresh_status(iface);
1183             }
1184
1185             /* Delete the iface if we failed. */
1186             if (iface->netdev && iface->ofp_port >= 0) {
1187                 VLOG_DBG("bridge %s: interface %s is on port %d",
1188                          br->name, iface->name, iface->ofp_port);
1189             } else {
1190                 if (iface->netdev) {
1191                     VLOG_ERR("bridge %s: missing %s interface, dropping",
1192                              br->name, iface->name);
1193                 } else {
1194                     /* We already reported a related error, don't bother
1195                      * duplicating it. */
1196                 }
1197                 iface_clear_db_record(iface->cfg);
1198                 iface_destroy(iface);
1199             }
1200         }
1201         if (list_is_empty(&port->ifaces)) {
1202             VLOG_WARN("%s port has no interfaces, dropping", port->name);
1203             port_destroy(port);
1204             continue;
1205         }
1206
1207         /* Add bond fake iface if necessary. */
1208         if (port_is_bond_fake_iface(port)) {
1209             if (ofproto_port_query_by_name(br->ofproto, port->name,
1210                                            &ofproto_port)) {
1211                 struct netdev *netdev;
1212                 int error;
1213
1214                 error = netdev_open(port->name, "internal", &netdev);
1215                 if (!error) {
1216                     ofproto_port_add(br->ofproto, netdev, NULL);
1217                     netdev_close(netdev);
1218                 } else {
1219                     VLOG_WARN("could not open network device %s (%s)",
1220                               port->name, strerror(error));
1221                 }
1222             } else {
1223                 /* Already exists, nothing to do. */
1224                 ofproto_port_destroy(&ofproto_port);
1225             }
1226         }
1227     }
1228 }
1229
1230 static const char *
1231 get_ovsrec_key_value(char **keys, char **values, size_t n, const char *key)
1232 {
1233     size_t i;
1234
1235     for (i = 0; i < n; i++) {
1236         if (!strcmp(keys[i], key)) {
1237             return values[i];
1238         }
1239     }
1240     return NULL;
1241 }
1242
1243 static const char *
1244 bridge_get_other_config(const struct ovsrec_bridge *br_cfg, const char *key)
1245 {
1246     return get_ovsrec_key_value(br_cfg->key_other_config,
1247                                 br_cfg->value_other_config,
1248                                 br_cfg->n_other_config, key);
1249 }
1250
1251 /* Set Flow eviction threshold */
1252 static void
1253 bridge_configure_flow_eviction_threshold(struct bridge *br)
1254 {
1255     const char *threshold_str;
1256     unsigned threshold;
1257
1258     threshold_str = bridge_get_other_config(br->cfg, "flow-eviction-threshold");
1259     if (threshold_str) {
1260         threshold = strtoul(threshold_str, NULL, 10);
1261     } else {
1262         threshold = OFPROTO_FLOW_EVICTON_THRESHOLD_DEFAULT;
1263     }
1264     ofproto_set_flow_eviction_threshold(br->ofproto, threshold);
1265 }
1266
1267 /* Set forward BPDU option. */
1268 static void
1269 bridge_configure_forward_bpdu(struct bridge *br)
1270 {
1271     const char *forward_bpdu_str;
1272     bool forward_bpdu = false;
1273
1274     forward_bpdu_str = bridge_get_other_config(br->cfg, "forward-bpdu");
1275     if (forward_bpdu_str && !strcmp(forward_bpdu_str, "true")) {
1276         forward_bpdu = true;
1277     }
1278     ofproto_set_forward_bpdu(br->ofproto, forward_bpdu);
1279 }
1280
1281 /* Set MAC aging time for 'br'. */
1282 static void
1283 bridge_configure_mac_idle_time(struct bridge *br)
1284 {
1285     const char *idle_time_str;
1286     int idle_time;
1287
1288     idle_time_str = bridge_get_other_config(br->cfg, "mac-aging-time");
1289     idle_time = (idle_time_str && atoi(idle_time_str)
1290                  ? atoi(idle_time_str)
1291                  : MAC_ENTRY_DEFAULT_IDLE_TIME);
1292     ofproto_set_mac_idle_time(br->ofproto, idle_time);
1293 }
1294
1295 static void
1296 bridge_pick_local_hw_addr(struct bridge *br, uint8_t ea[ETH_ADDR_LEN],
1297                           struct iface **hw_addr_iface)
1298 {
1299     struct hmapx mirror_output_ports;
1300     const char *hwaddr;
1301     struct port *port;
1302     bool found_addr = false;
1303     int error;
1304     int i;
1305
1306     *hw_addr_iface = NULL;
1307
1308     /* Did the user request a particular MAC? */
1309     hwaddr = bridge_get_other_config(br->cfg, "hwaddr");
1310     if (hwaddr && eth_addr_from_string(hwaddr, ea)) {
1311         if (eth_addr_is_multicast(ea)) {
1312             VLOG_ERR("bridge %s: cannot set MAC address to multicast "
1313                      "address "ETH_ADDR_FMT, br->name, ETH_ADDR_ARGS(ea));
1314         } else if (eth_addr_is_zero(ea)) {
1315             VLOG_ERR("bridge %s: cannot set MAC address to zero", br->name);
1316         } else {
1317             return;
1318         }
1319     }
1320
1321     /* Mirror output ports don't participate in picking the local hardware
1322      * address.  ofproto can't help us find out whether a given port is a
1323      * mirror output because we haven't configured mirrors yet, so we need to
1324      * accumulate them ourselves. */
1325     hmapx_init(&mirror_output_ports);
1326     for (i = 0; i < br->cfg->n_mirrors; i++) {
1327         struct ovsrec_mirror *m = br->cfg->mirrors[i];
1328         if (m->output_port) {
1329             hmapx_add(&mirror_output_ports, m->output_port);
1330         }
1331     }
1332
1333     /* Otherwise choose the minimum non-local MAC address among all of the
1334      * interfaces. */
1335     HMAP_FOR_EACH (port, hmap_node, &br->ports) {
1336         uint8_t iface_ea[ETH_ADDR_LEN];
1337         struct iface *candidate;
1338         struct iface *iface;
1339
1340         /* Mirror output ports don't participate. */
1341         if (hmapx_contains(&mirror_output_ports, port->cfg)) {
1342             continue;
1343         }
1344
1345         /* Choose the MAC address to represent the port. */
1346         iface = NULL;
1347         if (port->cfg->mac && eth_addr_from_string(port->cfg->mac, iface_ea)) {
1348             /* Find the interface with this Ethernet address (if any) so that
1349              * we can provide the correct devname to the caller. */
1350             LIST_FOR_EACH (candidate, port_elem, &port->ifaces) {
1351                 uint8_t candidate_ea[ETH_ADDR_LEN];
1352                 if (!netdev_get_etheraddr(candidate->netdev, candidate_ea)
1353                     && eth_addr_equals(iface_ea, candidate_ea)) {
1354                     iface = candidate;
1355                 }
1356             }
1357         } else {
1358             /* Choose the interface whose MAC address will represent the port.
1359              * The Linux kernel bonding code always chooses the MAC address of
1360              * the first slave added to a bond, and the Fedora networking
1361              * scripts always add slaves to a bond in alphabetical order, so
1362              * for compatibility we choose the interface with the name that is
1363              * first in alphabetical order. */
1364             LIST_FOR_EACH (candidate, port_elem, &port->ifaces) {
1365                 if (!iface || strcmp(candidate->name, iface->name) < 0) {
1366                     iface = candidate;
1367                 }
1368             }
1369
1370             /* The local port doesn't count (since we're trying to choose its
1371              * MAC address anyway). */
1372             if (iface->ofp_port == OFPP_LOCAL) {
1373                 continue;
1374             }
1375
1376             /* Grab MAC. */
1377             error = netdev_get_etheraddr(iface->netdev, iface_ea);
1378             if (error) {
1379                 continue;
1380             }
1381         }
1382
1383         /* Compare against our current choice. */
1384         if (!eth_addr_is_multicast(iface_ea) &&
1385             !eth_addr_is_local(iface_ea) &&
1386             !eth_addr_is_reserved(iface_ea) &&
1387             !eth_addr_is_zero(iface_ea) &&
1388             (!found_addr || eth_addr_compare_3way(iface_ea, ea) < 0))
1389         {
1390             memcpy(ea, iface_ea, ETH_ADDR_LEN);
1391             *hw_addr_iface = iface;
1392             found_addr = true;
1393         }
1394     }
1395     if (found_addr) {
1396         VLOG_DBG("bridge %s: using bridge Ethernet address "ETH_ADDR_FMT,
1397                  br->name, ETH_ADDR_ARGS(ea));
1398     } else {
1399         memcpy(ea, br->default_ea, ETH_ADDR_LEN);
1400         *hw_addr_iface = NULL;
1401         VLOG_WARN("bridge %s: using default bridge Ethernet "
1402                   "address "ETH_ADDR_FMT, br->name, ETH_ADDR_ARGS(ea));
1403     }
1404
1405     hmapx_destroy(&mirror_output_ports);
1406 }
1407
1408 /* Choose and returns the datapath ID for bridge 'br' given that the bridge
1409  * Ethernet address is 'bridge_ea'.  If 'bridge_ea' is the Ethernet address of
1410  * an interface on 'br', then that interface must be passed in as
1411  * 'hw_addr_iface'; if 'bridge_ea' was derived some other way, then
1412  * 'hw_addr_iface' must be passed in as a null pointer. */
1413 static uint64_t
1414 bridge_pick_datapath_id(struct bridge *br,
1415                         const uint8_t bridge_ea[ETH_ADDR_LEN],
1416                         struct iface *hw_addr_iface)
1417 {
1418     /*
1419      * The procedure for choosing a bridge MAC address will, in the most
1420      * ordinary case, also choose a unique MAC that we can use as a datapath
1421      * ID.  In some special cases, though, multiple bridges will end up with
1422      * the same MAC address.  This is OK for the bridges, but it will confuse
1423      * the OpenFlow controller, because each datapath needs a unique datapath
1424      * ID.
1425      *
1426      * Datapath IDs must be unique.  It is also very desirable that they be
1427      * stable from one run to the next, so that policy set on a datapath
1428      * "sticks".
1429      */
1430     const char *datapath_id;
1431     uint64_t dpid;
1432
1433     datapath_id = bridge_get_other_config(br->cfg, "datapath-id");
1434     if (datapath_id && dpid_from_string(datapath_id, &dpid)) {
1435         return dpid;
1436     }
1437
1438     if (!hw_addr_iface) {
1439         /*
1440          * A purely internal bridge, that is, one that has no non-virtual
1441          * network devices on it at all, is difficult because it has no
1442          * natural unique identifier at all.
1443          *
1444          * When the host is a XenServer, we handle this case by hashing the
1445          * host's UUID with the name of the bridge.  Names of bridges are
1446          * persistent across XenServer reboots, although they can be reused if
1447          * an internal network is destroyed and then a new one is later
1448          * created, so this is fairly effective.
1449          *
1450          * When the host is not a XenServer, we punt by using a random MAC
1451          * address on each run.
1452          */
1453         const char *host_uuid = xenserver_get_host_uuid();
1454         if (host_uuid) {
1455             char *combined = xasprintf("%s,%s", host_uuid, br->name);
1456             dpid = dpid_from_hash(combined, strlen(combined));
1457             free(combined);
1458             return dpid;
1459         }
1460     }
1461
1462     return eth_addr_to_uint64(bridge_ea);
1463 }
1464
1465 static uint64_t
1466 dpid_from_hash(const void *data, size_t n)
1467 {
1468     uint8_t hash[SHA1_DIGEST_SIZE];
1469
1470     BUILD_ASSERT_DECL(sizeof hash >= ETH_ADDR_LEN);
1471     sha1_bytes(data, n, hash);
1472     eth_addr_mark_random(hash);
1473     return eth_addr_to_uint64(hash);
1474 }
1475
1476 static void
1477 iface_refresh_status(struct iface *iface)
1478 {
1479     struct shash sh;
1480
1481     enum netdev_flags flags;
1482     uint32_t current;
1483     int64_t bps;
1484     int mtu;
1485     int64_t mtu_64;
1486     int error;
1487
1488     if (iface_is_synthetic(iface)) {
1489         return;
1490     }
1491
1492     shash_init(&sh);
1493
1494     if (!netdev_get_status(iface->netdev, &sh)) {
1495         size_t n;
1496         char **keys, **values;
1497
1498         shash_to_ovs_idl_map(&sh, &keys, &values, &n);
1499         ovsrec_interface_set_status(iface->cfg, keys, values, n);
1500
1501         free(keys);
1502         free(values);
1503     } else {
1504         ovsrec_interface_set_status(iface->cfg, NULL, NULL, 0);
1505     }
1506
1507     shash_destroy_free_data(&sh);
1508
1509     error = netdev_get_flags(iface->netdev, &flags);
1510     if (!error) {
1511         ovsrec_interface_set_admin_state(iface->cfg, flags & NETDEV_UP ? "up" : "down");
1512     }
1513     else {
1514         ovsrec_interface_set_admin_state(iface->cfg, NULL);
1515     }
1516
1517     error = netdev_get_features(iface->netdev, &current, NULL, NULL, NULL);
1518     if (!error) {
1519         ovsrec_interface_set_duplex(iface->cfg,
1520                                     netdev_features_is_full_duplex(current)
1521                                     ? "full" : "half");
1522         /* warning: uint64_t -> int64_t conversion */
1523         bps = netdev_features_to_bps(current);
1524         ovsrec_interface_set_link_speed(iface->cfg, &bps, 1);
1525     }
1526     else {
1527         ovsrec_interface_set_duplex(iface->cfg, NULL);
1528         ovsrec_interface_set_link_speed(iface->cfg, NULL, 0);
1529     }
1530
1531     error = netdev_get_mtu(iface->netdev, &mtu);
1532     if (!error) {
1533         mtu_64 = mtu;
1534         ovsrec_interface_set_mtu(iface->cfg, &mtu_64, 1);
1535     }
1536     else {
1537         ovsrec_interface_set_mtu(iface->cfg, NULL, 0);
1538     }
1539 }
1540
1541 /* Writes 'iface''s CFM statistics to the database. */
1542 static void
1543 iface_refresh_cfm_stats(struct iface *iface)
1544 {
1545     const struct ovsrec_interface *cfg = iface->cfg;
1546     int fault, error;
1547     const uint64_t *rmps;
1548     size_t n_rmps;
1549
1550     if (iface_is_synthetic(iface)) {
1551         return;
1552     }
1553
1554     fault = ofproto_port_get_cfm_fault(iface->port->bridge->ofproto,
1555                                        iface->ofp_port);
1556     if (fault >= 0) {
1557         bool fault_bool = fault;
1558         ovsrec_interface_set_cfm_fault(cfg, &fault_bool, 1);
1559     } else {
1560         ovsrec_interface_set_cfm_fault(cfg, NULL, 0);
1561     }
1562
1563     error = ofproto_port_get_cfm_remote_mpids(iface->port->bridge->ofproto,
1564                                               iface->ofp_port, &rmps, &n_rmps);
1565     if (error >= 0) {
1566         ovsrec_interface_set_cfm_remote_mpids(cfg, (const int64_t *)rmps,
1567                                               n_rmps);
1568     } else {
1569         ovsrec_interface_set_cfm_remote_mpids(cfg, NULL, 0);
1570     }
1571 }
1572
1573 static void
1574 iface_refresh_stats(struct iface *iface)
1575 {
1576 #define IFACE_STATS                             \
1577     IFACE_STAT(rx_packets,      "rx_packets")   \
1578     IFACE_STAT(tx_packets,      "tx_packets")   \
1579     IFACE_STAT(rx_bytes,        "rx_bytes")     \
1580     IFACE_STAT(tx_bytes,        "tx_bytes")     \
1581     IFACE_STAT(rx_dropped,      "rx_dropped")   \
1582     IFACE_STAT(tx_dropped,      "tx_dropped")   \
1583     IFACE_STAT(rx_errors,       "rx_errors")    \
1584     IFACE_STAT(tx_errors,       "tx_errors")    \
1585     IFACE_STAT(rx_frame_errors, "rx_frame_err") \
1586     IFACE_STAT(rx_over_errors,  "rx_over_err")  \
1587     IFACE_STAT(rx_crc_errors,   "rx_crc_err")   \
1588     IFACE_STAT(collisions,      "collisions")
1589
1590 #define IFACE_STAT(MEMBER, NAME) NAME,
1591     static char *keys[] = { IFACE_STATS };
1592 #undef IFACE_STAT
1593     int64_t values[ARRAY_SIZE(keys)];
1594     int i;
1595
1596     struct netdev_stats stats;
1597
1598     if (iface_is_synthetic(iface)) {
1599         return;
1600     }
1601
1602     /* Intentionally ignore return value, since errors will set 'stats' to
1603      * all-1s, and we will deal with that correctly below. */
1604     netdev_get_stats(iface->netdev, &stats);
1605
1606     /* Copy statistics into values[] array. */
1607     i = 0;
1608 #define IFACE_STAT(MEMBER, NAME) values[i++] = stats.MEMBER;
1609     IFACE_STATS;
1610 #undef IFACE_STAT
1611     assert(i == ARRAY_SIZE(keys));
1612
1613     ovsrec_interface_set_statistics(iface->cfg, keys, values, ARRAY_SIZE(keys));
1614 #undef IFACE_STATS
1615 }
1616
1617 static void
1618 br_refresh_stp_status(struct bridge *br)
1619 {
1620     struct ofproto *ofproto = br->ofproto;
1621     struct ofproto_stp_status status;
1622     char *keys[3], *values[3];
1623     size_t i;
1624
1625     if (ofproto_get_stp_status(ofproto, &status)) {
1626         return;
1627     }
1628
1629     if (!status.enabled) {
1630         ovsrec_bridge_set_status(br->cfg, NULL, NULL, 0);
1631         return;
1632     }
1633
1634     keys[0] = "stp_bridge_id",
1635     values[0] = xasprintf(STP_ID_FMT, STP_ID_ARGS(status.bridge_id));
1636     keys[1] = "stp_designated_root",
1637     values[1] = xasprintf(STP_ID_FMT, STP_ID_ARGS(status.designated_root));
1638     keys[2] = "stp_root_path_cost",
1639     values[2] = xasprintf("%d", status.root_path_cost);
1640
1641     ovsrec_bridge_set_status(br->cfg, keys, values, ARRAY_SIZE(values));
1642
1643     for (i = 0; i < ARRAY_SIZE(values); i++) {
1644         free(values[i]);
1645     }
1646 }
1647
1648 static void
1649 port_refresh_stp_status(struct port *port)
1650 {
1651     struct ofproto *ofproto = port->bridge->ofproto;
1652     struct iface *iface;
1653     struct ofproto_port_stp_status status;
1654     char *keys[4];
1655     char *str_values[4];
1656     int64_t int_values[3];
1657     size_t i;
1658
1659     if (port_is_synthetic(port)) {
1660         return;
1661     }
1662
1663     /* STP doesn't currently support bonds. */
1664     if (!list_is_singleton(&port->ifaces)) {
1665         ovsrec_port_set_status(port->cfg, NULL, NULL, 0);
1666         return;
1667     }
1668
1669     iface = CONTAINER_OF(list_front(&port->ifaces), struct iface, port_elem);
1670
1671     if (ofproto_port_get_stp_status(ofproto, iface->ofp_port, &status)) {
1672         return;
1673     }
1674
1675     if (!status.enabled) {
1676         ovsrec_port_set_status(port->cfg, NULL, NULL, 0);
1677         ovsrec_port_set_statistics(port->cfg, NULL, NULL, 0);
1678         return;
1679     }
1680
1681     /* Set Status column. */
1682     keys[0] = "stp_port_id";
1683     str_values[0] = xasprintf(STP_PORT_ID_FMT, status.port_id);
1684     keys[1] = "stp_state";
1685     str_values[1] = xstrdup(stp_state_name(status.state));
1686     keys[2] = "stp_sec_in_state";
1687     str_values[2] = xasprintf("%u", status.sec_in_state);
1688     keys[3] = "stp_role";
1689     str_values[3] = xstrdup(stp_role_name(status.role));
1690
1691     ovsrec_port_set_status(port->cfg, keys, str_values,
1692                            ARRAY_SIZE(str_values));
1693
1694     for (i = 0; i < ARRAY_SIZE(str_values); i++) {
1695         free(str_values[i]);
1696     }
1697
1698     /* Set Statistics column. */
1699     keys[0] = "stp_tx_count";
1700     int_values[0] = status.tx_count;
1701     keys[1] = "stp_rx_count";
1702     int_values[1] = status.rx_count;
1703     keys[2] = "stp_error_count";
1704     int_values[2] = status.error_count;
1705
1706     ovsrec_port_set_statistics(port->cfg, keys, int_values,
1707                                ARRAY_SIZE(int_values));
1708 }
1709
1710 static bool
1711 enable_system_stats(const struct ovsrec_open_vswitch *cfg)
1712 {
1713     const char *enable;
1714
1715     /* Use other-config:enable-system-stats by preference. */
1716     enable = get_ovsrec_key_value(cfg->key_other_config,
1717                                   cfg->value_other_config,
1718                                   cfg->n_other_config,
1719                                   "enable-statistics");
1720     if (enable) {
1721         return !strcmp(enable, "true");
1722     }
1723
1724     /* Disable by default. */
1725     return false;
1726 }
1727
1728 static void
1729 refresh_system_stats(const struct ovsrec_open_vswitch *cfg)
1730 {
1731     struct ovsdb_datum datum;
1732     struct shash stats;
1733
1734     shash_init(&stats);
1735     if (enable_system_stats(cfg)) {
1736         get_system_stats(&stats);
1737     }
1738
1739     ovsdb_datum_from_shash(&datum, &stats);
1740     ovsdb_idl_txn_write(&cfg->header_, &ovsrec_open_vswitch_col_statistics,
1741                         &datum);
1742 }
1743
1744 static inline const char *
1745 nx_role_to_str(enum nx_role role)
1746 {
1747     switch (role) {
1748     case NX_ROLE_OTHER:
1749         return "other";
1750     case NX_ROLE_MASTER:
1751         return "master";
1752     case NX_ROLE_SLAVE:
1753         return "slave";
1754     default:
1755         return "*** INVALID ROLE ***";
1756     }
1757 }
1758
1759 static void
1760 refresh_controller_status(void)
1761 {
1762     struct bridge *br;
1763     struct shash info;
1764     const struct ovsrec_controller *cfg;
1765
1766     shash_init(&info);
1767
1768     /* Accumulate status for controllers on all bridges. */
1769     HMAP_FOR_EACH (br, node, &all_bridges) {
1770         ofproto_get_ofproto_controller_info(br->ofproto, &info);
1771     }
1772
1773     /* Update each controller in the database with current status. */
1774     OVSREC_CONTROLLER_FOR_EACH(cfg, idl) {
1775         struct ofproto_controller_info *cinfo =
1776             shash_find_data(&info, cfg->target);
1777
1778         if (cinfo) {
1779             ovsrec_controller_set_is_connected(cfg, cinfo->is_connected);
1780             ovsrec_controller_set_role(cfg, nx_role_to_str(cinfo->role));
1781             ovsrec_controller_set_status(cfg, (char **) cinfo->pairs.keys,
1782                                          (char **) cinfo->pairs.values,
1783                                          cinfo->pairs.n);
1784         } else {
1785             ovsrec_controller_set_is_connected(cfg, false);
1786             ovsrec_controller_set_role(cfg, NULL);
1787             ovsrec_controller_set_status(cfg, NULL, NULL, 0);
1788         }
1789     }
1790
1791     ofproto_free_ofproto_controller_info(&info);
1792 }
1793
1794 static void
1795 refresh_cfm_stats(void)
1796 {
1797     static struct ovsdb_idl_txn *txn = NULL;
1798
1799     if (!txn) {
1800         struct bridge *br;
1801
1802         txn = ovsdb_idl_txn_create(idl);
1803
1804         HMAP_FOR_EACH (br, node, &all_bridges) {
1805             struct iface *iface;
1806
1807             HMAP_FOR_EACH (iface, name_node, &br->iface_by_name) {
1808                 iface_refresh_cfm_stats(iface);
1809             }
1810         }
1811     }
1812
1813     if (ovsdb_idl_txn_commit(txn) != TXN_INCOMPLETE) {
1814         ovsdb_idl_txn_destroy(txn);
1815         txn = NULL;
1816     }
1817 }
1818
1819 /* Performs periodic activity required by bridges that needs to be done with
1820  * the least possible latency.
1821  *
1822  * It makes sense to call this function a couple of times per poll loop, to
1823  * provide a significant performance boost on some benchmarks with ofprotos
1824  * that use the ofproto-dpif implementation. */
1825 void
1826 bridge_run_fast(void)
1827 {
1828     struct bridge *br;
1829
1830     HMAP_FOR_EACH (br, node, &all_bridges) {
1831         ofproto_run_fast(br->ofproto);
1832     }
1833 }
1834
1835 void
1836 bridge_run(void)
1837 {
1838     const struct ovsrec_open_vswitch *cfg;
1839
1840     bool vlan_splinters_changed;
1841     bool database_changed;
1842     struct bridge *br;
1843
1844     /* (Re)configure if necessary. */
1845     database_changed = ovsdb_idl_run(idl);
1846     if (ovsdb_idl_is_lock_contended(idl)) {
1847         static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 1);
1848         struct bridge *br, *next_br;
1849
1850         VLOG_ERR_RL(&rl, "another ovs-vswitchd process is running, "
1851                     "disabling this process until it goes away");
1852
1853         HMAP_FOR_EACH_SAFE (br, next_br, node, &all_bridges) {
1854             bridge_destroy(br);
1855         }
1856         return;
1857     } else if (!ovsdb_idl_has_lock(idl)) {
1858         return;
1859     }
1860     cfg = ovsrec_open_vswitch_first(idl);
1861
1862     /* Let each bridge do the work that it needs to do. */
1863     HMAP_FOR_EACH (br, node, &all_bridges) {
1864         ofproto_run(br->ofproto);
1865     }
1866
1867     /* Re-configure SSL.  We do this on every trip through the main loop,
1868      * instead of just when the database changes, because the contents of the
1869      * key and certificate files can change without the database changing.
1870      *
1871      * We do this before bridge_reconfigure() because that function might
1872      * initiate SSL connections and thus requires SSL to be configured. */
1873     if (cfg && cfg->ssl) {
1874         const struct ovsrec_ssl *ssl = cfg->ssl;
1875
1876         stream_ssl_set_key_and_cert(ssl->private_key, ssl->certificate);
1877         stream_ssl_set_ca_cert_file(ssl->ca_cert, ssl->bootstrap_ca_cert);
1878     }
1879
1880     /* If VLAN splinters are in use, then we need to reconfigure if VLAN usage
1881      * has changed. */
1882     vlan_splinters_changed = false;
1883     if (vlan_splinters_enabled_anywhere) {
1884         HMAP_FOR_EACH (br, node, &all_bridges) {
1885             if (ofproto_has_vlan_usage_changed(br->ofproto)) {
1886                 vlan_splinters_changed = true;
1887                 break;
1888             }
1889         }
1890     }
1891
1892     if (database_changed || vlan_splinters_changed) {
1893         if (cfg) {
1894             struct ovsdb_idl_txn *txn = ovsdb_idl_txn_create(idl);
1895
1896             bridge_reconfigure(cfg);
1897
1898             ovsrec_open_vswitch_set_cur_cfg(cfg, cfg->next_cfg);
1899             ovsdb_idl_txn_commit(txn);
1900             ovsdb_idl_txn_destroy(txn); /* XXX */
1901         } else {
1902             /* We still need to reconfigure to avoid dangling pointers to
1903              * now-destroyed ovsrec structures inside bridge data. */
1904             static const struct ovsrec_open_vswitch null_cfg;
1905
1906             bridge_reconfigure(&null_cfg);
1907         }
1908     }
1909
1910     /* Refresh system and interface stats if necessary. */
1911     if (time_msec() >= stats_timer) {
1912         if (cfg) {
1913             struct ovsdb_idl_txn *txn;
1914
1915             txn = ovsdb_idl_txn_create(idl);
1916             HMAP_FOR_EACH (br, node, &all_bridges) {
1917                 struct port *port;
1918                 struct mirror *m;
1919
1920                 HMAP_FOR_EACH (port, hmap_node, &br->ports) {
1921                     struct iface *iface;
1922
1923                     LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
1924                         iface_refresh_stats(iface);
1925                         iface_refresh_status(iface);
1926                     }
1927                 }
1928
1929                 HMAP_FOR_EACH (m, hmap_node, &br->mirrors) {
1930                     mirror_refresh_stats(m);
1931                 }
1932
1933             }
1934             refresh_system_stats(cfg);
1935             refresh_controller_status();
1936             ovsdb_idl_txn_commit(txn);
1937             ovsdb_idl_txn_destroy(txn); /* XXX */
1938         }
1939
1940         stats_timer = time_msec() + STATS_INTERVAL;
1941     }
1942
1943     if (time_msec() >= db_limiter) {
1944         struct ovsdb_idl_txn *txn;
1945
1946         txn = ovsdb_idl_txn_create(idl);
1947         HMAP_FOR_EACH (br, node, &all_bridges) {
1948             struct iface *iface;
1949             struct port *port;
1950
1951             br_refresh_stp_status(br);
1952
1953             HMAP_FOR_EACH (port, hmap_node, &br->ports) {
1954                 port_refresh_stp_status(port);
1955             }
1956
1957             HMAP_FOR_EACH (iface, name_node, &br->iface_by_name) {
1958                 const char *link_state;
1959                 int64_t link_resets;
1960                 int current;
1961
1962                 if (iface_is_synthetic(iface)) {
1963                     continue;
1964                 }
1965
1966                 current = ofproto_port_is_lacp_current(br->ofproto,
1967                                                        iface->ofp_port);
1968                 if (current >= 0) {
1969                     bool bl = current;
1970                     ovsrec_interface_set_lacp_current(iface->cfg, &bl, 1);
1971                 } else {
1972                     ovsrec_interface_set_lacp_current(iface->cfg, NULL, 0);
1973                 }
1974
1975                 link_state = netdev_get_carrier(iface->netdev) ? "up" : "down";
1976                 ovsrec_interface_set_link_state(iface->cfg, link_state);
1977
1978                 link_resets = netdev_get_carrier_resets(iface->netdev);
1979                 ovsrec_interface_set_link_resets(iface->cfg, &link_resets, 1);
1980             }
1981         }
1982
1983         if (ovsdb_idl_txn_commit(txn) != TXN_UNCHANGED) {
1984             db_limiter = time_msec() + DB_LIMIT_INTERVAL;
1985         }
1986         ovsdb_idl_txn_destroy(txn);
1987     }
1988
1989     refresh_cfm_stats();
1990 }
1991
1992 void
1993 bridge_wait(void)
1994 {
1995     ovsdb_idl_wait(idl);
1996     if (!hmap_is_empty(&all_bridges)) {
1997         struct bridge *br;
1998
1999         HMAP_FOR_EACH (br, node, &all_bridges) {
2000             ofproto_wait(br->ofproto);
2001         }
2002         poll_timer_wait_until(stats_timer);
2003
2004         if (db_limiter > time_msec()) {
2005             poll_timer_wait_until(db_limiter);
2006         }
2007     }
2008 }
2009 \f
2010 /* QoS unixctl user interface functions. */
2011
2012 struct qos_unixctl_show_cbdata {
2013     struct ds *ds;
2014     struct iface *iface;
2015 };
2016
2017 static void
2018 qos_unixctl_show_cb(unsigned int queue_id,
2019                     const struct shash *details,
2020                     void *aux)
2021 {
2022     struct qos_unixctl_show_cbdata *data = aux;
2023     struct ds *ds = data->ds;
2024     struct iface *iface = data->iface;
2025     struct netdev_queue_stats stats;
2026     struct shash_node *node;
2027     int error;
2028
2029     ds_put_cstr(ds, "\n");
2030     if (queue_id) {
2031         ds_put_format(ds, "Queue %u:\n", queue_id);
2032     } else {
2033         ds_put_cstr(ds, "Default:\n");
2034     }
2035
2036     SHASH_FOR_EACH (node, details) {
2037         ds_put_format(ds, "\t%s: %s\n", node->name, (char *)node->data);
2038     }
2039
2040     error = netdev_get_queue_stats(iface->netdev, queue_id, &stats);
2041     if (!error) {
2042         if (stats.tx_packets != UINT64_MAX) {
2043             ds_put_format(ds, "\ttx_packets: %"PRIu64"\n", stats.tx_packets);
2044         }
2045
2046         if (stats.tx_bytes != UINT64_MAX) {
2047             ds_put_format(ds, "\ttx_bytes: %"PRIu64"\n", stats.tx_bytes);
2048         }
2049
2050         if (stats.tx_errors != UINT64_MAX) {
2051             ds_put_format(ds, "\ttx_errors: %"PRIu64"\n", stats.tx_errors);
2052         }
2053     } else {
2054         ds_put_format(ds, "\tFailed to get statistics for queue %u: %s",
2055                       queue_id, strerror(error));
2056     }
2057 }
2058
2059 static void
2060 qos_unixctl_show(struct unixctl_conn *conn, int argc OVS_UNUSED,
2061                  const char *argv[], void *aux OVS_UNUSED)
2062 {
2063     struct ds ds = DS_EMPTY_INITIALIZER;
2064     struct shash sh = SHASH_INITIALIZER(&sh);
2065     struct iface *iface;
2066     const char *type;
2067     struct shash_node *node;
2068     struct qos_unixctl_show_cbdata data;
2069     int error;
2070
2071     iface = iface_find(argv[1]);
2072     if (!iface) {
2073         unixctl_command_reply(conn, 501, "no such interface");
2074         return;
2075     }
2076
2077     netdev_get_qos(iface->netdev, &type, &sh);
2078
2079     if (*type != '\0') {
2080         ds_put_format(&ds, "QoS: %s %s\n", iface->name, type);
2081
2082         SHASH_FOR_EACH (node, &sh) {
2083             ds_put_format(&ds, "%s: %s\n", node->name, (char *)node->data);
2084         }
2085
2086         data.ds = &ds;
2087         data.iface = iface;
2088         error = netdev_dump_queues(iface->netdev, qos_unixctl_show_cb, &data);
2089
2090         if (error) {
2091             ds_put_format(&ds, "failed to dump queues: %s", strerror(error));
2092         }
2093         unixctl_command_reply(conn, 200, ds_cstr(&ds));
2094     } else {
2095         ds_put_format(&ds, "QoS not configured on %s\n", iface->name);
2096         unixctl_command_reply(conn, 501, ds_cstr(&ds));
2097     }
2098
2099     shash_destroy_free_data(&sh);
2100     ds_destroy(&ds);
2101 }
2102 \f
2103 /* Bridge reconfiguration functions. */
2104 static void
2105 bridge_create(const struct ovsrec_bridge *br_cfg)
2106 {
2107     struct bridge *br;
2108
2109     assert(!bridge_lookup(br_cfg->name));
2110     br = xzalloc(sizeof *br);
2111
2112     br->name = xstrdup(br_cfg->name);
2113     br->type = xstrdup(ofproto_normalize_type(br_cfg->datapath_type));
2114     br->cfg = br_cfg;
2115
2116     /* Derive the default Ethernet address from the bridge's UUID.  This should
2117      * be unique and it will be stable between ovs-vswitchd runs.  */
2118     memcpy(br->default_ea, &br_cfg->header_.uuid, ETH_ADDR_LEN);
2119     eth_addr_mark_random(br->default_ea);
2120
2121     hmap_init(&br->ports);
2122     hmap_init(&br->ifaces);
2123     hmap_init(&br->iface_by_name);
2124     hmap_init(&br->mirrors);
2125
2126     hmap_insert(&all_bridges, &br->node, hash_string(br->name, 0));
2127 }
2128
2129 static void
2130 bridge_destroy(struct bridge *br)
2131 {
2132     if (br) {
2133         struct mirror *mirror, *next_mirror;
2134         struct port *port, *next_port;
2135
2136         HMAP_FOR_EACH_SAFE (port, next_port, hmap_node, &br->ports) {
2137             port_destroy(port);
2138         }
2139         HMAP_FOR_EACH_SAFE (mirror, next_mirror, hmap_node, &br->mirrors) {
2140             mirror_destroy(mirror);
2141         }
2142         hmap_remove(&all_bridges, &br->node);
2143         ofproto_destroy(br->ofproto);
2144         hmap_destroy(&br->ifaces);
2145         hmap_destroy(&br->ports);
2146         hmap_destroy(&br->iface_by_name);
2147         hmap_destroy(&br->mirrors);
2148         free(br->name);
2149         free(br->type);
2150         free(br);
2151     }
2152 }
2153
2154 static struct bridge *
2155 bridge_lookup(const char *name)
2156 {
2157     struct bridge *br;
2158
2159     HMAP_FOR_EACH_WITH_HASH (br, node, hash_string(name, 0), &all_bridges) {
2160         if (!strcmp(br->name, name)) {
2161             return br;
2162         }
2163     }
2164     return NULL;
2165 }
2166
2167 /* Handle requests for a listing of all flows known by the OpenFlow
2168  * stack, including those normally hidden. */
2169 static void
2170 bridge_unixctl_dump_flows(struct unixctl_conn *conn, int argc OVS_UNUSED,
2171                           const char *argv[], void *aux OVS_UNUSED)
2172 {
2173     struct bridge *br;
2174     struct ds results;
2175
2176     br = bridge_lookup(argv[1]);
2177     if (!br) {
2178         unixctl_command_reply(conn, 501, "Unknown bridge");
2179         return;
2180     }
2181
2182     ds_init(&results);
2183     ofproto_get_all_flows(br->ofproto, &results);
2184
2185     unixctl_command_reply(conn, 200, ds_cstr(&results));
2186     ds_destroy(&results);
2187 }
2188
2189 /* "bridge/reconnect [BRIDGE]": makes BRIDGE drop all of its controller
2190  * connections and reconnect.  If BRIDGE is not specified, then all bridges
2191  * drop their controller connections and reconnect. */
2192 static void
2193 bridge_unixctl_reconnect(struct unixctl_conn *conn, int argc,
2194                          const char *argv[], void *aux OVS_UNUSED)
2195 {
2196     struct bridge *br;
2197     if (argc > 1) {
2198         br = bridge_lookup(argv[1]);
2199         if (!br) {
2200             unixctl_command_reply(conn, 501, "Unknown bridge");
2201             return;
2202         }
2203         ofproto_reconnect_controllers(br->ofproto);
2204     } else {
2205         HMAP_FOR_EACH (br, node, &all_bridges) {
2206             ofproto_reconnect_controllers(br->ofproto);
2207         }
2208     }
2209     unixctl_command_reply(conn, 200, NULL);
2210 }
2211
2212 static size_t
2213 bridge_get_controllers(const struct bridge *br,
2214                        struct ovsrec_controller ***controllersp)
2215 {
2216     struct ovsrec_controller **controllers;
2217     size_t n_controllers;
2218
2219     controllers = br->cfg->controller;
2220     n_controllers = br->cfg->n_controller;
2221
2222     if (n_controllers == 1 && !strcmp(controllers[0]->target, "none")) {
2223         controllers = NULL;
2224         n_controllers = 0;
2225     }
2226
2227     if (controllersp) {
2228         *controllersp = controllers;
2229     }
2230     return n_controllers;
2231 }
2232
2233 /* Adds and deletes "struct port"s and "struct iface"s under 'br' to match
2234  * those configured in 'br->cfg'. */
2235 static void
2236 bridge_add_del_ports(struct bridge *br,
2237                      const unsigned long int *splinter_vlans)
2238 {
2239     struct port *port, *next;
2240     struct shash_node *node;
2241     struct shash new_ports;
2242     size_t i;
2243
2244     /* Collect new ports. */
2245     shash_init(&new_ports);
2246     for (i = 0; i < br->cfg->n_ports; i++) {
2247         const char *name = br->cfg->ports[i]->name;
2248         if (!shash_add_once(&new_ports, name, br->cfg->ports[i])) {
2249             VLOG_WARN("bridge %s: %s specified twice as bridge port",
2250                       br->name, name);
2251         }
2252     }
2253     if (bridge_get_controllers(br, NULL)
2254         && !shash_find(&new_ports, br->name)) {
2255         VLOG_WARN("bridge %s: no port named %s, synthesizing one",
2256                   br->name, br->name);
2257
2258         br->synth_local_port.interfaces = &br->synth_local_ifacep;
2259         br->synth_local_port.n_interfaces = 1;
2260         br->synth_local_port.name = br->name;
2261
2262         br->synth_local_iface.name = br->name;
2263         br->synth_local_iface.type = "internal";
2264
2265         br->synth_local_ifacep = &br->synth_local_iface;
2266
2267         shash_add(&new_ports, br->name, &br->synth_local_port);
2268     }
2269
2270     if (splinter_vlans) {
2271         add_vlan_splinter_ports(br, splinter_vlans, &new_ports);
2272     }
2273
2274     /* Get rid of deleted ports.
2275      * Get rid of deleted interfaces on ports that still exist. */
2276     HMAP_FOR_EACH_SAFE (port, next, hmap_node, &br->ports) {
2277         port->cfg = shash_find_data(&new_ports, port->name);
2278         if (!port->cfg) {
2279             port_destroy(port);
2280         } else {
2281             port_del_ifaces(port);
2282         }
2283     }
2284
2285     /* Create new ports.
2286      * Add new interfaces to existing ports. */
2287     SHASH_FOR_EACH (node, &new_ports) {
2288         struct port *port = port_lookup(br, node->name);
2289         if (!port) {
2290             struct ovsrec_port *cfg = node->data;
2291             port = port_create(br, cfg);
2292         }
2293         port_add_ifaces(port);
2294         if (list_is_empty(&port->ifaces)) {
2295             VLOG_WARN("bridge %s: port %s has no interfaces, dropping",
2296                       br->name, port->name);
2297             port_destroy(port);
2298         }
2299     }
2300     shash_destroy(&new_ports);
2301 }
2302
2303 /* Initializes 'oc' appropriately as a management service controller for
2304  * 'br'.
2305  *
2306  * The caller must free oc->target when it is no longer needed. */
2307 static void
2308 bridge_ofproto_controller_for_mgmt(const struct bridge *br,
2309                                    struct ofproto_controller *oc)
2310 {
2311     oc->target = xasprintf("punix:%s/%s.mgmt", ovs_rundir(), br->name);
2312     oc->max_backoff = 0;
2313     oc->probe_interval = 60;
2314     oc->band = OFPROTO_OUT_OF_BAND;
2315     oc->rate_limit = 0;
2316     oc->burst_limit = 0;
2317 }
2318
2319 /* Converts ovsrec_controller 'c' into an ofproto_controller in 'oc'.  */
2320 static void
2321 bridge_ofproto_controller_from_ovsrec(const struct ovsrec_controller *c,
2322                                       struct ofproto_controller *oc)
2323 {
2324     oc->target = c->target;
2325     oc->max_backoff = c->max_backoff ? *c->max_backoff / 1000 : 8;
2326     oc->probe_interval = c->inactivity_probe ? *c->inactivity_probe / 1000 : 5;
2327     oc->band = (!c->connection_mode || !strcmp(c->connection_mode, "in-band")
2328                 ? OFPROTO_IN_BAND : OFPROTO_OUT_OF_BAND);
2329     oc->rate_limit = c->controller_rate_limit ? *c->controller_rate_limit : 0;
2330     oc->burst_limit = (c->controller_burst_limit
2331                        ? *c->controller_burst_limit : 0);
2332 }
2333
2334 /* Configures the IP stack for 'br''s local interface properly according to the
2335  * configuration in 'c'.  */
2336 static void
2337 bridge_configure_local_iface_netdev(struct bridge *br,
2338                                     struct ovsrec_controller *c)
2339 {
2340     struct netdev *netdev;
2341     struct in_addr mask, gateway;
2342
2343     struct iface *local_iface;
2344     struct in_addr ip;
2345
2346     /* If there's no local interface or no IP address, give up. */
2347     local_iface = iface_from_ofp_port(br, OFPP_LOCAL);
2348     if (!local_iface || !c->local_ip || !inet_aton(c->local_ip, &ip)) {
2349         return;
2350     }
2351
2352     /* Bring up the local interface. */
2353     netdev = local_iface->netdev;
2354     netdev_turn_flags_on(netdev, NETDEV_UP, true);
2355
2356     /* Configure the IP address and netmask. */
2357     if (!c->local_netmask
2358         || !inet_aton(c->local_netmask, &mask)
2359         || !mask.s_addr) {
2360         mask.s_addr = guess_netmask(ip.s_addr);
2361     }
2362     if (!netdev_set_in4(netdev, ip, mask)) {
2363         VLOG_INFO("bridge %s: configured IP address "IP_FMT", netmask "IP_FMT,
2364                   br->name, IP_ARGS(&ip.s_addr), IP_ARGS(&mask.s_addr));
2365     }
2366
2367     /* Configure the default gateway. */
2368     if (c->local_gateway
2369         && inet_aton(c->local_gateway, &gateway)
2370         && gateway.s_addr) {
2371         if (!netdev_add_router(netdev, gateway)) {
2372             VLOG_INFO("bridge %s: configured gateway "IP_FMT,
2373                       br->name, IP_ARGS(&gateway.s_addr));
2374         }
2375     }
2376 }
2377
2378 /* Returns true if 'a' and 'b' are the same except that any number of slashes
2379  * in either string are treated as equal to any number of slashes in the other,
2380  * e.g. "x///y" is equal to "x/y". */
2381 static bool
2382 equal_pathnames(const char *a, const char *b)
2383 {
2384     while (*a == *b) {
2385         if (*a == '/') {
2386             a += strspn(a, "/");
2387             b += strspn(b, "/");
2388         } else if (*a == '\0') {
2389             return true;
2390         } else {
2391             a++;
2392             b++;
2393         }
2394     }
2395     return false;
2396 }
2397
2398 static void
2399 bridge_configure_remotes(struct bridge *br,
2400                          const struct sockaddr_in *managers, size_t n_managers)
2401 {
2402     const char *disable_ib_str, *queue_id_str;
2403     bool disable_in_band = false;
2404     int queue_id;
2405
2406     struct ovsrec_controller **controllers;
2407     size_t n_controllers;
2408
2409     enum ofproto_fail_mode fail_mode;
2410
2411     struct ofproto_controller *ocs;
2412     size_t n_ocs;
2413     size_t i;
2414
2415     /* Check if we should disable in-band control on this bridge. */
2416     disable_ib_str = bridge_get_other_config(br->cfg, "disable-in-band");
2417     if (disable_ib_str && !strcmp(disable_ib_str, "true")) {
2418         disable_in_band = true;
2419     }
2420
2421     /* Set OpenFlow queue ID for in-band control. */
2422     queue_id_str = bridge_get_other_config(br->cfg, "in-band-queue");
2423     queue_id = queue_id_str ? strtol(queue_id_str, NULL, 10) : -1;
2424     ofproto_set_in_band_queue(br->ofproto, queue_id);
2425
2426     if (disable_in_band) {
2427         ofproto_set_extra_in_band_remotes(br->ofproto, NULL, 0);
2428     } else {
2429         ofproto_set_extra_in_band_remotes(br->ofproto, managers, n_managers);
2430     }
2431
2432     n_controllers = bridge_get_controllers(br, &controllers);
2433
2434     ocs = xmalloc((n_controllers + 1) * sizeof *ocs);
2435     n_ocs = 0;
2436
2437     bridge_ofproto_controller_for_mgmt(br, &ocs[n_ocs++]);
2438     for (i = 0; i < n_controllers; i++) {
2439         struct ovsrec_controller *c = controllers[i];
2440
2441         if (!strncmp(c->target, "punix:", 6)
2442             || !strncmp(c->target, "unix:", 5)) {
2443             static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
2444             char *whitelist;
2445
2446             whitelist = xasprintf("unix:%s/%s.controller",
2447                                   ovs_rundir(), br->name);
2448             if (!equal_pathnames(c->target, whitelist)) {
2449                 /* Prevent remote ovsdb-server users from accessing arbitrary
2450                  * Unix domain sockets and overwriting arbitrary local
2451                  * files. */
2452                 VLOG_ERR_RL(&rl, "bridge %s: Not adding Unix domain socket "
2453                             "controller \"%s\" due to possibility for remote "
2454                             "exploit.  Instead, specify whitelisted \"%s\" or "
2455                             "connect to \"unix:%s/%s.mgmt\" (which is always "
2456                             "available without special configuration).",
2457                             br->name, c->target, whitelist,
2458                             ovs_rundir(), br->name);
2459                 free(whitelist);
2460                 continue;
2461             }
2462
2463             free(whitelist);
2464         }
2465
2466         bridge_configure_local_iface_netdev(br, c);
2467         bridge_ofproto_controller_from_ovsrec(c, &ocs[n_ocs]);
2468         if (disable_in_band) {
2469             ocs[n_ocs].band = OFPROTO_OUT_OF_BAND;
2470         }
2471         n_ocs++;
2472     }
2473
2474     ofproto_set_controllers(br->ofproto, ocs, n_ocs);
2475     free(ocs[0].target); /* From bridge_ofproto_controller_for_mgmt(). */
2476     free(ocs);
2477
2478     /* Set the fail-mode. */
2479     fail_mode = !br->cfg->fail_mode
2480                 || !strcmp(br->cfg->fail_mode, "standalone")
2481                     ? OFPROTO_FAIL_STANDALONE
2482                     : OFPROTO_FAIL_SECURE;
2483     ofproto_set_fail_mode(br->ofproto, fail_mode);
2484
2485     /* Configure OpenFlow controller connection snooping. */
2486     if (!ofproto_has_snoops(br->ofproto)) {
2487         struct sset snoops;
2488
2489         sset_init(&snoops);
2490         sset_add_and_free(&snoops, xasprintf("punix:%s/%s.snoop",
2491                                              ovs_rundir(), br->name));
2492         ofproto_set_snoops(br->ofproto, &snoops);
2493         sset_destroy(&snoops);
2494     }
2495 }
2496
2497 static void
2498 bridge_configure_tables(struct bridge *br)
2499 {
2500     static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
2501     int n_tables;
2502     int i, j;
2503
2504     n_tables = ofproto_get_n_tables(br->ofproto);
2505     j = 0;
2506     for (i = 0; i < n_tables; i++) {
2507         struct ofproto_table_settings s;
2508
2509         s.name = NULL;
2510         s.max_flows = UINT_MAX;
2511         s.groups = NULL;
2512         s.n_groups = 0;
2513
2514         if (j < br->cfg->n_flow_tables && i == br->cfg->key_flow_tables[j]) {
2515             struct ovsrec_flow_table *cfg = br->cfg->value_flow_tables[j++];
2516
2517             s.name = cfg->name;
2518             if (cfg->n_flow_limit && *cfg->flow_limit < UINT_MAX) {
2519                 s.max_flows = *cfg->flow_limit;
2520             }
2521             if (cfg->overflow_policy
2522                 && !strcmp(cfg->overflow_policy, "evict")) {
2523                 size_t k;
2524
2525                 s.groups = xmalloc(cfg->n_groups * sizeof *s.groups);
2526                 for (k = 0; k < cfg->n_groups; k++) {
2527                     const char *string = cfg->groups[k];
2528                     char *msg;
2529
2530                     msg = mf_parse_subfield__(&s.groups[k], &string);
2531                     if (msg) {
2532                         VLOG_WARN_RL(&rl, "bridge %s table %d: error parsing "
2533                                      "'groups' (%s)", br->name, i, msg);
2534                         free(msg);
2535                     } else if (*string) {
2536                         VLOG_WARN_RL(&rl, "bridge %s table %d: 'groups' "
2537                                      "element '%s' contains trailing garbage",
2538                                      br->name, i, cfg->groups[k]);
2539                     } else {
2540                         s.n_groups++;
2541                     }
2542                 }
2543             }
2544         }
2545
2546         ofproto_configure_table(br->ofproto, i, &s);
2547
2548         free(s.groups);
2549     }
2550     for (; j < br->cfg->n_flow_tables; j++) {
2551         VLOG_WARN_RL(&rl, "bridge %s: ignoring configuration for flow table "
2552                      "%"PRId64" not supported by this datapath", br->name,
2553                      br->cfg->key_flow_tables[j]);
2554     }
2555 }
2556 \f
2557 /* Port functions. */
2558
2559 static struct port *
2560 port_create(struct bridge *br, const struct ovsrec_port *cfg)
2561 {
2562     struct port *port;
2563
2564     port = xzalloc(sizeof *port);
2565     port->bridge = br;
2566     port->name = xstrdup(cfg->name);
2567     port->cfg = cfg;
2568     list_init(&port->ifaces);
2569
2570     hmap_insert(&br->ports, &port->hmap_node, hash_string(port->name, 0));
2571
2572     VLOG_INFO("created port %s on bridge %s", port->name, br->name);
2573
2574     return port;
2575 }
2576
2577 static const char *
2578 get_port_other_config(const struct ovsrec_port *port, const char *key,
2579                       const char *default_value)
2580 {
2581     const char *value;
2582
2583     value = get_ovsrec_key_value(port->key_other_config,
2584                                  port->value_other_config,
2585                                  port->n_other_config, key);
2586     return value ? value : default_value;
2587 }
2588
2589 static const char *
2590 get_interface_other_config(const struct ovsrec_interface *iface,
2591                            const char *key, const char *default_value)
2592 {
2593     const char *value;
2594
2595     value = get_ovsrec_key_value(iface->key_other_config,
2596                                  iface->value_other_config,
2597                                  iface->n_other_config, key);
2598     return value ? value : default_value;
2599 }
2600
2601 /* Deletes interfaces from 'port' that are no longer configured for it. */
2602 static void
2603 port_del_ifaces(struct port *port)
2604 {
2605     struct iface *iface, *next;
2606     struct sset new_ifaces;
2607     size_t i;
2608
2609     /* Collect list of new interfaces. */
2610     sset_init(&new_ifaces);
2611     for (i = 0; i < port->cfg->n_interfaces; i++) {
2612         const char *name = port->cfg->interfaces[i]->name;
2613         const char *type = port->cfg->interfaces[i]->name;
2614         if (strcmp(type, "null")) {
2615             sset_add(&new_ifaces, name);
2616         }
2617     }
2618
2619     /* Get rid of deleted interfaces. */
2620     LIST_FOR_EACH_SAFE (iface, next, port_elem, &port->ifaces) {
2621         if (!sset_contains(&new_ifaces, iface->name)) {
2622             iface_destroy(iface);
2623         }
2624     }
2625
2626     sset_destroy(&new_ifaces);
2627 }
2628
2629 /* Adds new interfaces to 'port' and updates 'type' and 'cfg' members of
2630  * existing ones. */
2631 static void
2632 port_add_ifaces(struct port *port)
2633 {
2634     struct shash new_ifaces;
2635     struct shash_node *node;
2636     size_t i;
2637
2638     /* Collect new ifaces. */
2639     shash_init(&new_ifaces);
2640     for (i = 0; i < port->cfg->n_interfaces; i++) {
2641         const struct ovsrec_interface *cfg = port->cfg->interfaces[i];
2642         if (strcmp(cfg->type, "null")
2643             && !shash_add_once(&new_ifaces, cfg->name, cfg)) {
2644             VLOG_WARN("port %s: %s specified twice as port interface",
2645                       port->name, cfg->name);
2646             iface_clear_db_record(cfg);
2647         }
2648     }
2649
2650     /* Create new interfaces.
2651      * Update interface types and 'cfg' members. */
2652     SHASH_FOR_EACH (node, &new_ifaces) {
2653         const struct ovsrec_interface *cfg = node->data;
2654         const char *iface_name = node->name;
2655         struct iface *iface;
2656
2657         iface = iface_lookup(port->bridge, iface_name);
2658         if (!iface) {
2659             iface = iface_create(port, cfg);
2660         } else {
2661             iface->cfg = cfg;
2662         }
2663
2664         /* Determine interface type.  The local port always has type
2665          * "internal".  Other ports take their type from the database and
2666          * default to "system" if none is specified. */
2667         iface->type = (!strcmp(iface_name, port->bridge->name) ? "internal"
2668                        : cfg->type[0] ? cfg->type
2669                        : "system");
2670     }
2671     shash_destroy(&new_ifaces);
2672 }
2673
2674 static void
2675 port_destroy(struct port *port)
2676 {
2677     if (port) {
2678         struct bridge *br = port->bridge;
2679         struct iface *iface, *next;
2680
2681         if (br->ofproto) {
2682             ofproto_bundle_unregister(br->ofproto, port);
2683         }
2684
2685         LIST_FOR_EACH_SAFE (iface, next, port_elem, &port->ifaces) {
2686             iface_destroy(iface);
2687         }
2688
2689         hmap_remove(&br->ports, &port->hmap_node);
2690
2691         VLOG_INFO("destroyed port %s on bridge %s", port->name, br->name);
2692
2693         free(port->name);
2694         free(port);
2695     }
2696 }
2697
2698 static struct port *
2699 port_lookup(const struct bridge *br, const char *name)
2700 {
2701     struct port *port;
2702
2703     HMAP_FOR_EACH_WITH_HASH (port, hmap_node, hash_string(name, 0),
2704                              &br->ports) {
2705         if (!strcmp(port->name, name)) {
2706             return port;
2707         }
2708     }
2709     return NULL;
2710 }
2711
2712 static bool
2713 enable_lacp(struct port *port, bool *activep)
2714 {
2715     if (!port->cfg->lacp) {
2716         /* XXX when LACP implementation has been sufficiently tested, enable by
2717          * default and make active on bonded ports. */
2718         return false;
2719     } else if (!strcmp(port->cfg->lacp, "off")) {
2720         return false;
2721     } else if (!strcmp(port->cfg->lacp, "active")) {
2722         *activep = true;
2723         return true;
2724     } else if (!strcmp(port->cfg->lacp, "passive")) {
2725         *activep = false;
2726         return true;
2727     } else {
2728         VLOG_WARN("port %s: unknown LACP mode %s",
2729                   port->name, port->cfg->lacp);
2730         return false;
2731     }
2732 }
2733
2734 static struct lacp_settings *
2735 port_configure_lacp(struct port *port, struct lacp_settings *s)
2736 {
2737     const char *lacp_time, *system_id;
2738     long long int custom_time;
2739     int priority;
2740
2741     if (!enable_lacp(port, &s->active)) {
2742         return NULL;
2743     }
2744
2745     s->name = port->name;
2746
2747     system_id = get_port_other_config(port->cfg, "lacp-system-id", NULL);
2748     if (system_id) {
2749         if (sscanf(system_id, ETH_ADDR_SCAN_FMT,
2750                    ETH_ADDR_SCAN_ARGS(s->id)) != ETH_ADDR_SCAN_COUNT) {
2751             VLOG_WARN("port %s: LACP system ID (%s) must be an Ethernet"
2752                       " address.", port->name, system_id);
2753             return NULL;
2754         }
2755     } else {
2756         memcpy(s->id, port->bridge->ea, ETH_ADDR_LEN);
2757     }
2758
2759     if (eth_addr_is_zero(s->id)) {
2760         VLOG_WARN("port %s: Invalid zero LACP system ID.", port->name);
2761         return NULL;
2762     }
2763
2764     /* Prefer bondable links if unspecified. */
2765     priority = atoi(get_port_other_config(port->cfg, "lacp-system-priority",
2766                                           "0"));
2767     s->priority = (priority > 0 && priority <= UINT16_MAX
2768                    ? priority
2769                    : UINT16_MAX - !list_is_short(&port->ifaces));
2770
2771     s->heartbeat = !strcmp(get_port_other_config(port->cfg,
2772                                                  "lacp-heartbeat",
2773                                                  "false"), "true");
2774
2775     lacp_time = get_port_other_config(port->cfg, "lacp-time", "slow");
2776     custom_time = atoi(lacp_time);
2777     if (!strcmp(lacp_time, "fast")) {
2778         s->lacp_time = LACP_TIME_FAST;
2779     } else if (!strcmp(lacp_time, "slow")) {
2780         s->lacp_time = LACP_TIME_SLOW;
2781     } else if (custom_time > 0) {
2782         s->lacp_time = LACP_TIME_CUSTOM;
2783         s->custom_time = custom_time;
2784     } else {
2785         s->lacp_time = LACP_TIME_SLOW;
2786     }
2787
2788     return s;
2789 }
2790
2791 static void
2792 iface_configure_lacp(struct iface *iface, struct lacp_slave_settings *s)
2793 {
2794     int priority, portid, key;
2795
2796     portid = atoi(get_interface_other_config(iface->cfg, "lacp-port-id", "0"));
2797     priority = atoi(get_interface_other_config(iface->cfg,
2798                                                "lacp-port-priority", "0"));
2799     key = atoi(get_interface_other_config(iface->cfg, "lacp-aggregation-key",
2800                                           "0"));
2801
2802     if (portid <= 0 || portid > UINT16_MAX) {
2803         portid = iface->ofp_port;
2804     }
2805
2806     if (priority <= 0 || priority > UINT16_MAX) {
2807         priority = UINT16_MAX;
2808     }
2809
2810     if (key < 0 || key > UINT16_MAX) {
2811         key = 0;
2812     }
2813
2814     s->name = iface->name;
2815     s->id = portid;
2816     s->priority = priority;
2817     s->key = key;
2818 }
2819
2820 static void
2821 port_configure_bond(struct port *port, struct bond_settings *s,
2822                     uint32_t *bond_stable_ids)
2823 {
2824     const char *detect_s;
2825     struct iface *iface;
2826     int miimon_interval;
2827     size_t i;
2828
2829     s->name = port->name;
2830     s->balance = BM_AB;
2831     if (port->cfg->bond_mode) {
2832         if (!bond_mode_from_string(&s->balance, port->cfg->bond_mode)) {
2833             VLOG_WARN("port %s: unknown bond_mode %s, defaulting to %s",
2834                       port->name, port->cfg->bond_mode,
2835                       bond_mode_to_string(s->balance));
2836         }
2837     } else {
2838         static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 1);
2839
2840         /* XXX: Post version 1.5.*, the default bond_mode changed from SLB to
2841          * active-backup. At some point we should remove this warning. */
2842         VLOG_WARN_RL(&rl, "port %s: Using the default bond_mode %s. Note that"
2843                      " in previous versions, the default bond_mode was"
2844                      " balance-slb", port->name,
2845                      bond_mode_to_string(s->balance));
2846     }
2847     if (s->balance == BM_SLB && port->bridge->cfg->n_flood_vlans) {
2848         VLOG_WARN("port %s: SLB bonds are incompatible with flood_vlans, "
2849                   "please use another bond type or disable flood_vlans",
2850                   port->name);
2851     }
2852
2853     miimon_interval = atoi(get_port_other_config(port->cfg,
2854                                                  "bond-miimon-interval", "0"));
2855     if (miimon_interval <= 0) {
2856         miimon_interval = 200;
2857     }
2858
2859     detect_s = get_port_other_config(port->cfg, "bond-detect-mode", "carrier");
2860     if (!strcmp(detect_s, "carrier")) {
2861         miimon_interval = 0;
2862     } else if (strcmp(detect_s, "miimon")) {
2863         VLOG_WARN("port %s: unsupported bond-detect-mode %s, "
2864                   "defaulting to carrier", port->name, detect_s);
2865         miimon_interval = 0;
2866     }
2867
2868     s->up_delay = MAX(0, port->cfg->bond_updelay);
2869     s->down_delay = MAX(0, port->cfg->bond_downdelay);
2870     s->basis = atoi(get_port_other_config(port->cfg, "bond-hash-basis", "0"));
2871     s->rebalance_interval = atoi(
2872         get_port_other_config(port->cfg, "bond-rebalance-interval", "10000"));
2873     if (s->rebalance_interval && s->rebalance_interval < 1000) {
2874         s->rebalance_interval = 1000;
2875     }
2876
2877     s->fake_iface = port->cfg->bond_fake_iface;
2878
2879     i = 0;
2880     LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
2881         long long stable_id;
2882
2883         stable_id = atoll(get_interface_other_config(iface->cfg,
2884                                                      "bond-stable-id", "0"));
2885         if (stable_id <= 0 || stable_id >= UINT32_MAX) {
2886             stable_id = iface->ofp_port;
2887         }
2888         bond_stable_ids[i++] = stable_id;
2889
2890         netdev_set_miimon_interval(iface->netdev, miimon_interval);
2891     }
2892 }
2893
2894 /* Returns true if 'port' is synthetic, that is, if we constructed it locally
2895  * instead of obtaining it from the database. */
2896 static bool
2897 port_is_synthetic(const struct port *port)
2898 {
2899     return ovsdb_idl_row_is_synthetic(&port->cfg->header_);
2900 }
2901 \f
2902 /* Interface functions. */
2903
2904 static struct iface *
2905 iface_create(struct port *port, const struct ovsrec_interface *if_cfg)
2906 {
2907     struct bridge *br = port->bridge;
2908     struct iface *iface;
2909     char *name = if_cfg->name;
2910
2911     iface = xzalloc(sizeof *iface);
2912     iface->port = port;
2913     iface->name = xstrdup(name);
2914     iface->ofp_port = -1;
2915     iface->tag = tag_create_random();
2916     iface->netdev = NULL;
2917     iface->cfg = if_cfg;
2918
2919     hmap_insert(&br->iface_by_name, &iface->name_node, hash_string(name, 0));
2920
2921     list_push_back(&port->ifaces, &iface->port_elem);
2922
2923     VLOG_DBG("attached network device %s to port %s", iface->name, port->name);
2924
2925     return iface;
2926 }
2927
2928 static void
2929 iface_destroy(struct iface *iface)
2930 {
2931     if (iface) {
2932         struct port *port = iface->port;
2933         struct bridge *br = port->bridge;
2934
2935         if (br->ofproto && iface->ofp_port >= 0) {
2936             ofproto_port_unregister(br->ofproto, iface->ofp_port);
2937         }
2938
2939         if (iface->ofp_port >= 0) {
2940             hmap_remove(&br->ifaces, &iface->ofp_port_node);
2941         }
2942
2943         list_remove(&iface->port_elem);
2944         hmap_remove(&br->iface_by_name, &iface->name_node);
2945
2946         netdev_close(iface->netdev);
2947
2948         free(iface->name);
2949         free(iface);
2950     }
2951 }
2952
2953 static struct iface *
2954 iface_lookup(const struct bridge *br, const char *name)
2955 {
2956     struct iface *iface;
2957
2958     HMAP_FOR_EACH_WITH_HASH (iface, name_node, hash_string(name, 0),
2959                              &br->iface_by_name) {
2960         if (!strcmp(iface->name, name)) {
2961             return iface;
2962         }
2963     }
2964
2965     return NULL;
2966 }
2967
2968 static struct iface *
2969 iface_find(const char *name)
2970 {
2971     const struct bridge *br;
2972
2973     HMAP_FOR_EACH (br, node, &all_bridges) {
2974         struct iface *iface = iface_lookup(br, name);
2975
2976         if (iface) {
2977             return iface;
2978         }
2979     }
2980     return NULL;
2981 }
2982
2983 static struct iface *
2984 iface_from_ofp_port(const struct bridge *br, uint16_t ofp_port)
2985 {
2986     struct iface *iface;
2987
2988     HMAP_FOR_EACH_IN_BUCKET (iface, ofp_port_node,
2989                              hash_int(ofp_port, 0), &br->ifaces) {
2990         if (iface->ofp_port == ofp_port) {
2991             return iface;
2992         }
2993     }
2994     return NULL;
2995 }
2996
2997 /* Set Ethernet address of 'iface', if one is specified in the configuration
2998  * file. */
2999 static void
3000 iface_set_mac(struct iface *iface)
3001 {
3002     uint8_t ea[ETH_ADDR_LEN];
3003
3004     if (!strcmp(iface->type, "internal")
3005         && iface->cfg->mac && eth_addr_from_string(iface->cfg->mac, ea)) {
3006         if (iface->ofp_port == OFPP_LOCAL) {
3007             VLOG_ERR("interface %s: ignoring mac in Interface record "
3008                      "(use Bridge record to set local port's mac)",
3009                      iface->name);
3010         } else if (eth_addr_is_multicast(ea)) {
3011             VLOG_ERR("interface %s: cannot set MAC to multicast address",
3012                      iface->name);
3013         } else {
3014             int error = netdev_set_etheraddr(iface->netdev, ea);
3015             if (error) {
3016                 VLOG_ERR("interface %s: setting MAC failed (%s)",
3017                          iface->name, strerror(error));
3018             }
3019         }
3020     }
3021 }
3022
3023 /* Sets the ofport column of 'if_cfg' to 'ofport'. */
3024 static void
3025 iface_set_ofport(const struct ovsrec_interface *if_cfg, int64_t ofport)
3026 {
3027     if (if_cfg && !ovsdb_idl_row_is_synthetic(&if_cfg->header_)) {
3028         ovsrec_interface_set_ofport(if_cfg, &ofport, 1);
3029     }
3030 }
3031
3032 /* Clears all of the fields in 'if_cfg' that indicate interface status, and
3033  * sets the "ofport" field to -1.
3034  *
3035  * This is appropriate when 'if_cfg''s interface cannot be created or is
3036  * otherwise invalid. */
3037 static void
3038 iface_clear_db_record(const struct ovsrec_interface *if_cfg)
3039 {
3040     if (!ovsdb_idl_row_is_synthetic(&if_cfg->header_)) {
3041         iface_set_ofport(if_cfg, -1);
3042         ovsrec_interface_set_status(if_cfg, NULL, NULL, 0);
3043         ovsrec_interface_set_admin_state(if_cfg, NULL);
3044         ovsrec_interface_set_duplex(if_cfg, NULL);
3045         ovsrec_interface_set_link_speed(if_cfg, NULL, 0);
3046         ovsrec_interface_set_link_state(if_cfg, NULL);
3047         ovsrec_interface_set_mtu(if_cfg, NULL, 0);
3048         ovsrec_interface_set_cfm_fault(if_cfg, NULL, 0);
3049         ovsrec_interface_set_cfm_remote_mpids(if_cfg, NULL, 0);
3050         ovsrec_interface_set_lacp_current(if_cfg, NULL, 0);
3051         ovsrec_interface_set_statistics(if_cfg, NULL, NULL, 0);
3052     }
3053 }
3054
3055 /* Adds the 'n' key-value pairs in 'keys' in 'values' to 'shash'.
3056  *
3057  * The value strings in '*shash' are taken directly from values[], not copied,
3058  * so the caller should not modify or free them. */
3059 static void
3060 shash_from_ovs_idl_map(char **keys, char **values, size_t n,
3061                        struct shash *shash)
3062 {
3063     size_t i;
3064
3065     shash_init(shash);
3066     for (i = 0; i < n; i++) {
3067         shash_add(shash, keys[i], values[i]);
3068     }
3069 }
3070
3071 /* Creates 'keys' and 'values' arrays from 'shash'.
3072  *
3073  * Sets 'keys' and 'values' to heap allocated arrays representing the key-value
3074  * pairs in 'shash'.  The caller takes ownership of 'keys' and 'values'.  They
3075  * are populated with with strings taken directly from 'shash' and thus have
3076  * the same ownership of the key-value pairs in shash.
3077  */
3078 static void
3079 shash_to_ovs_idl_map(struct shash *shash,
3080                      char ***keys, char ***values, size_t *n)
3081 {
3082     size_t i, count;
3083     char **k, **v;
3084     struct shash_node *sn;
3085
3086     count = shash_count(shash);
3087
3088     k = xmalloc(count * sizeof *k);
3089     v = xmalloc(count * sizeof *v);
3090
3091     i = 0;
3092     SHASH_FOR_EACH(sn, shash) {
3093         k[i] = sn->name;
3094         v[i] = sn->data;
3095         i++;
3096     }
3097
3098     *n      = count;
3099     *keys   = k;
3100     *values = v;
3101 }
3102
3103 struct iface_delete_queues_cbdata {
3104     struct netdev *netdev;
3105     const struct ovsdb_datum *queues;
3106 };
3107
3108 static bool
3109 queue_ids_include(const struct ovsdb_datum *queues, int64_t target)
3110 {
3111     union ovsdb_atom atom;
3112
3113     atom.integer = target;
3114     return ovsdb_datum_find_key(queues, &atom, OVSDB_TYPE_INTEGER) != UINT_MAX;
3115 }
3116
3117 static void
3118 iface_delete_queues(unsigned int queue_id,
3119                     const struct shash *details OVS_UNUSED, void *cbdata_)
3120 {
3121     struct iface_delete_queues_cbdata *cbdata = cbdata_;
3122
3123     if (!queue_ids_include(cbdata->queues, queue_id)) {
3124         netdev_delete_queue(cbdata->netdev, queue_id);
3125     }
3126 }
3127
3128 static void
3129 iface_configure_qos(struct iface *iface, const struct ovsrec_qos *qos)
3130 {
3131     struct ofpbuf queues_buf;
3132
3133     ofpbuf_init(&queues_buf, 0);
3134
3135     if (!qos || qos->type[0] == '\0' || qos->n_queues < 1) {
3136         netdev_set_qos(iface->netdev, NULL, NULL);
3137     } else {
3138         struct iface_delete_queues_cbdata cbdata;
3139         struct shash details;
3140         bool queue_zero;
3141         size_t i;
3142
3143         /* Configure top-level Qos for 'iface'. */
3144         shash_from_ovs_idl_map(qos->key_other_config, qos->value_other_config,
3145                                qos->n_other_config, &details);
3146         netdev_set_qos(iface->netdev, qos->type, &details);
3147         shash_destroy(&details);
3148
3149         /* Deconfigure queues that were deleted. */
3150         cbdata.netdev = iface->netdev;
3151         cbdata.queues = ovsrec_qos_get_queues(qos, OVSDB_TYPE_INTEGER,
3152                                               OVSDB_TYPE_UUID);
3153         netdev_dump_queues(iface->netdev, iface_delete_queues, &cbdata);
3154
3155         /* Configure queues for 'iface'. */
3156         queue_zero = false;
3157         for (i = 0; i < qos->n_queues; i++) {
3158             const struct ovsrec_queue *queue = qos->value_queues[i];
3159             unsigned int queue_id = qos->key_queues[i];
3160
3161             if (queue_id == 0) {
3162                 queue_zero = true;
3163             }
3164
3165             if (queue->n_dscp == 1) {
3166                 struct ofproto_port_queue *port_queue;
3167
3168                 port_queue = ofpbuf_put_uninit(&queues_buf,
3169                                                sizeof *port_queue);
3170                 port_queue->queue = queue_id;
3171                 port_queue->dscp = queue->dscp[0];
3172             }
3173
3174             shash_from_ovs_idl_map(queue->key_other_config,
3175                                    queue->value_other_config,
3176                                    queue->n_other_config, &details);
3177             netdev_set_queue(iface->netdev, queue_id, &details);
3178             shash_destroy(&details);
3179         }
3180         if (!queue_zero) {
3181             static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 1);
3182             VLOG_WARN_RL(&rl, "interface %s: QoS configured without a default "
3183                          "queue (queue 0).  Packets not directed to a "
3184                          "correctly configured queue may be dropped.",
3185                          iface->name);
3186         }
3187     }
3188
3189     if (iface->ofp_port >= 0) {
3190         const struct ofproto_port_queue *port_queues = queues_buf.data;
3191         size_t n_queues = queues_buf.size / sizeof *port_queues;
3192
3193         ofproto_port_set_queues(iface->port->bridge->ofproto, iface->ofp_port,
3194                                 port_queues, n_queues);
3195     }
3196
3197     netdev_set_policing(iface->netdev,
3198                         iface->cfg->ingress_policing_rate,
3199                         iface->cfg->ingress_policing_burst);
3200
3201     ofpbuf_uninit(&queues_buf);
3202 }
3203
3204 static void
3205 iface_configure_cfm(struct iface *iface)
3206 {
3207     const struct ovsrec_interface *cfg = iface->cfg;
3208     const char *extended_str, *opstate_str;
3209     struct cfm_settings s;
3210
3211     if (!cfg->n_cfm_mpid) {
3212         ofproto_port_clear_cfm(iface->port->bridge->ofproto, iface->ofp_port);
3213         return;
3214     }
3215
3216     s.mpid = *cfg->cfm_mpid;
3217     s.interval = atoi(get_interface_other_config(iface->cfg, "cfm_interval",
3218                                                  "0"));
3219     s.ccm_vlan = atoi(get_interface_other_config(iface->cfg, "cfm_ccm_vlan",
3220                                                  "0"));
3221     s.ccm_pcp = atoi(get_interface_other_config(iface->cfg, "cfm_ccm_pcp",
3222                                                 "0"));
3223     if (s.interval <= 0) {
3224         s.interval = 1000;
3225     }
3226
3227     extended_str = get_interface_other_config(iface->cfg, "cfm_extended",
3228                                               "false");
3229     s.extended = !strcasecmp("true", extended_str);
3230
3231     opstate_str = get_interface_other_config(iface->cfg, "cfm_opstate", "up");
3232     s.opup = !strcasecmp("up", opstate_str);
3233
3234     ofproto_port_set_cfm(iface->port->bridge->ofproto, iface->ofp_port, &s);
3235 }
3236
3237 /* Returns true if 'iface' is synthetic, that is, if we constructed it locally
3238  * instead of obtaining it from the database. */
3239 static bool
3240 iface_is_synthetic(const struct iface *iface)
3241 {
3242     return ovsdb_idl_row_is_synthetic(&iface->cfg->header_);
3243 }
3244 \f
3245 /* Port mirroring. */
3246
3247 static struct mirror *
3248 mirror_find_by_uuid(struct bridge *br, const struct uuid *uuid)
3249 {
3250     struct mirror *m;
3251
3252     HMAP_FOR_EACH_IN_BUCKET (m, hmap_node, uuid_hash(uuid), &br->mirrors) {
3253         if (uuid_equals(uuid, &m->uuid)) {
3254             return m;
3255         }
3256     }
3257     return NULL;
3258 }
3259
3260 static void
3261 bridge_configure_mirrors(struct bridge *br)
3262 {
3263     const struct ovsdb_datum *mc;
3264     unsigned long *flood_vlans;
3265     struct mirror *m, *next;
3266     size_t i;
3267
3268     /* Get rid of deleted mirrors. */
3269     mc = ovsrec_bridge_get_mirrors(br->cfg, OVSDB_TYPE_UUID);
3270     HMAP_FOR_EACH_SAFE (m, next, hmap_node, &br->mirrors) {
3271         union ovsdb_atom atom;
3272
3273         atom.uuid = m->uuid;
3274         if (ovsdb_datum_find_key(mc, &atom, OVSDB_TYPE_UUID) == UINT_MAX) {
3275             mirror_destroy(m);
3276         }
3277     }
3278
3279     /* Add new mirrors and reconfigure existing ones. */
3280     for (i = 0; i < br->cfg->n_mirrors; i++) {
3281         const struct ovsrec_mirror *cfg = br->cfg->mirrors[i];
3282         struct mirror *m = mirror_find_by_uuid(br, &cfg->header_.uuid);
3283         if (!m) {
3284             m = mirror_create(br, cfg);
3285         }
3286         m->cfg = cfg;
3287         if (!mirror_configure(m)) {
3288             mirror_destroy(m);
3289         }
3290     }
3291
3292     /* Update flooded vlans (for RSPAN). */
3293     flood_vlans = vlan_bitmap_from_array(br->cfg->flood_vlans,
3294                                          br->cfg->n_flood_vlans);
3295     ofproto_set_flood_vlans(br->ofproto, flood_vlans);
3296     bitmap_free(flood_vlans);
3297 }
3298
3299 static struct mirror *
3300 mirror_create(struct bridge *br, const struct ovsrec_mirror *cfg)
3301 {
3302     struct mirror *m;
3303
3304     m = xzalloc(sizeof *m);
3305     m->uuid = cfg->header_.uuid;
3306     hmap_insert(&br->mirrors, &m->hmap_node, uuid_hash(&m->uuid));
3307     m->bridge = br;
3308     m->name = xstrdup(cfg->name);
3309
3310     return m;
3311 }
3312
3313 static void
3314 mirror_destroy(struct mirror *m)
3315 {
3316     if (m) {
3317         struct bridge *br = m->bridge;
3318
3319         if (br->ofproto) {
3320             ofproto_mirror_unregister(br->ofproto, m);
3321         }
3322
3323         hmap_remove(&br->mirrors, &m->hmap_node);
3324         free(m->name);
3325         free(m);
3326     }
3327 }
3328
3329 static void
3330 mirror_collect_ports(struct mirror *m,
3331                      struct ovsrec_port **in_ports, int n_in_ports,
3332                      void ***out_portsp, size_t *n_out_portsp)
3333 {
3334     void **out_ports = xmalloc(n_in_ports * sizeof *out_ports);
3335     size_t n_out_ports = 0;
3336     size_t i;
3337
3338     for (i = 0; i < n_in_ports; i++) {
3339         const char *name = in_ports[i]->name;
3340         struct port *port = port_lookup(m->bridge, name);
3341         if (port) {
3342             out_ports[n_out_ports++] = port;
3343         } else {
3344             VLOG_WARN("bridge %s: mirror %s cannot match on nonexistent "
3345                       "port %s", m->bridge->name, m->name, name);
3346         }
3347     }
3348     *out_portsp = out_ports;
3349     *n_out_portsp = n_out_ports;
3350 }
3351
3352 static bool
3353 mirror_configure(struct mirror *m)
3354 {
3355     const struct ovsrec_mirror *cfg = m->cfg;
3356     struct ofproto_mirror_settings s;
3357
3358     /* Set name. */
3359     if (strcmp(cfg->name, m->name)) {
3360         free(m->name);
3361         m->name = xstrdup(cfg->name);
3362     }
3363     s.name = m->name;
3364
3365     /* Get output port or VLAN. */
3366     if (cfg->output_port) {
3367         s.out_bundle = port_lookup(m->bridge, cfg->output_port->name);
3368         if (!s.out_bundle) {
3369             VLOG_ERR("bridge %s: mirror %s outputs to port not on bridge",
3370                      m->bridge->name, m->name);
3371             return false;
3372         }
3373         s.out_vlan = UINT16_MAX;
3374
3375         if (cfg->output_vlan) {
3376             VLOG_ERR("bridge %s: mirror %s specifies both output port and "
3377                      "output vlan; ignoring output vlan",
3378                      m->bridge->name, m->name);
3379         }
3380     } else if (cfg->output_vlan) {
3381         /* The database should prevent invalid VLAN values. */
3382         s.out_bundle = NULL;
3383         s.out_vlan = *cfg->output_vlan;
3384     } else {
3385         VLOG_ERR("bridge %s: mirror %s does not specify output; ignoring",
3386                  m->bridge->name, m->name);
3387         return false;
3388     }
3389
3390     /* Get port selection. */
3391     if (cfg->select_all) {
3392         size_t n_ports = hmap_count(&m->bridge->ports);
3393         void **ports = xmalloc(n_ports * sizeof *ports);
3394         struct port *port;
3395         size_t i;
3396
3397         i = 0;
3398         HMAP_FOR_EACH (port, hmap_node, &m->bridge->ports) {
3399             ports[i++] = port;
3400         }
3401
3402         s.srcs = ports;
3403         s.n_srcs = n_ports;
3404
3405         s.dsts = ports;
3406         s.n_dsts = n_ports;
3407     } else {
3408         /* Get ports, dropping ports that don't exist.
3409          * The IDL ensures that there are no duplicates. */
3410         mirror_collect_ports(m, cfg->select_src_port, cfg->n_select_src_port,
3411                              &s.srcs, &s.n_srcs);
3412         mirror_collect_ports(m, cfg->select_dst_port, cfg->n_select_dst_port,
3413                              &s.dsts, &s.n_dsts);
3414     }
3415
3416     /* Get VLAN selection. */
3417     s.src_vlans = vlan_bitmap_from_array(cfg->select_vlan, cfg->n_select_vlan);
3418
3419     /* Configure. */
3420     ofproto_mirror_register(m->bridge->ofproto, m, &s);
3421
3422     /* Clean up. */
3423     if (s.srcs != s.dsts) {
3424         free(s.dsts);
3425     }
3426     free(s.srcs);
3427     free(s.src_vlans);
3428
3429     return true;
3430 }
3431 \f
3432 /* Linux VLAN device support (e.g. "eth0.10" for VLAN 10.)
3433  *
3434  * This is deprecated.  It is only for compatibility with broken device drivers
3435  * in old versions of Linux that do not properly support VLANs when VLAN
3436  * devices are not used.  When broken device drivers are no longer in
3437  * widespread use, we will delete these interfaces. */
3438
3439 static void **blocks;
3440 static size_t n_blocks, allocated_blocks;
3441
3442 /* Adds 'block' to a list of blocks that have to be freed with free() when the
3443  * VLAN splinters are reconfigured. */
3444 static void
3445 register_block(void *block)
3446 {
3447     if (n_blocks >= allocated_blocks) {
3448         blocks = x2nrealloc(blocks, &allocated_blocks, sizeof *blocks);
3449     }
3450     blocks[n_blocks++] = block;
3451 }
3452
3453 /* Frees all of the blocks registered with register_block(). */
3454 static void
3455 free_registered_blocks(void)
3456 {
3457     size_t i;
3458
3459     for (i = 0; i < n_blocks; i++) {
3460         free(blocks[i]);
3461     }
3462     n_blocks = 0;
3463 }
3464
3465 /* Returns true if VLAN splinters are enabled on 'iface_cfg', false
3466  * otherwise. */
3467 static bool
3468 vlan_splinters_is_enabled(const struct ovsrec_interface *iface_cfg)
3469 {
3470     const char *value;
3471
3472     value = get_interface_other_config(iface_cfg, "enable-vlan-splinters", "");
3473     return !strcmp(value, "true");
3474 }
3475
3476 /* Figures out the set of VLANs that are in use for the purpose of VLAN
3477  * splinters.
3478  *
3479  * If VLAN splinters are enabled on at least one interface and any VLANs are in
3480  * use, returns a 4096-bit bitmap with a 1-bit for each in-use VLAN (bits 0 and
3481  * 4095 will not be set).  The caller is responsible for freeing the bitmap,
3482  * with free().
3483  *
3484  * If VLANs splinters are not enabled on any interface or if no VLANs are in
3485  * use, returns NULL.
3486  *
3487  * Updates 'vlan_splinters_enabled_anywhere'. */
3488 static unsigned long int *
3489 collect_splinter_vlans(const struct ovsrec_open_vswitch *ovs_cfg)
3490 {
3491     unsigned long int *splinter_vlans;
3492     struct sset splinter_ifaces;
3493     const char *real_dev_name;
3494     struct shash *real_devs;
3495     struct shash_node *node;
3496     struct bridge *br;
3497     size_t i;
3498
3499     /* Free space allocated for synthesized ports and interfaces, since we're
3500      * in the process of reconstructing all of them. */
3501     free_registered_blocks();
3502
3503     splinter_vlans = bitmap_allocate(4096);
3504     sset_init(&splinter_ifaces);
3505     vlan_splinters_enabled_anywhere = false;
3506     for (i = 0; i < ovs_cfg->n_bridges; i++) {
3507         struct ovsrec_bridge *br_cfg = ovs_cfg->bridges[i];
3508         size_t j;
3509
3510         for (j = 0; j < br_cfg->n_ports; j++) {
3511             struct ovsrec_port *port_cfg = br_cfg->ports[j];
3512             int k;
3513
3514             for (k = 0; k < port_cfg->n_interfaces; k++) {
3515                 struct ovsrec_interface *iface_cfg = port_cfg->interfaces[k];
3516
3517                 if (vlan_splinters_is_enabled(iface_cfg)) {
3518                     vlan_splinters_enabled_anywhere = true;
3519                     sset_add(&splinter_ifaces, iface_cfg->name);
3520                     vlan_bitmap_from_array__(port_cfg->trunks,
3521                                              port_cfg->n_trunks,
3522                                              splinter_vlans);
3523                 }
3524             }
3525
3526             if (port_cfg->tag && *port_cfg->tag > 0 && *port_cfg->tag < 4095) {
3527                 bitmap_set1(splinter_vlans, *port_cfg->tag);
3528             }
3529         }
3530     }
3531
3532     if (!vlan_splinters_enabled_anywhere) {
3533         free(splinter_vlans);
3534         sset_destroy(&splinter_ifaces);
3535         return NULL;
3536     }
3537
3538     HMAP_FOR_EACH (br, node, &all_bridges) {
3539         if (br->ofproto) {
3540             ofproto_get_vlan_usage(br->ofproto, splinter_vlans);
3541         }
3542     }
3543
3544     /* Don't allow VLANs 0 or 4095 to be splintered.  VLAN 0 should appear on
3545      * the real device.  VLAN 4095 is reserved and Linux doesn't allow a VLAN
3546      * device to be created for it. */
3547     bitmap_set0(splinter_vlans, 0);
3548     bitmap_set0(splinter_vlans, 4095);
3549
3550     /* Delete all VLAN devices that we don't need. */
3551     vlandev_refresh();
3552     real_devs = vlandev_get_real_devs();
3553     SHASH_FOR_EACH (node, real_devs) {
3554         const struct vlan_real_dev *real_dev = node->data;
3555         const struct vlan_dev *vlan_dev;
3556         bool real_dev_has_splinters;
3557
3558         real_dev_has_splinters = sset_contains(&splinter_ifaces,
3559                                                real_dev->name);
3560         HMAP_FOR_EACH (vlan_dev, hmap_node, &real_dev->vlan_devs) {
3561             if (!real_dev_has_splinters
3562                 || !bitmap_is_set(splinter_vlans, vlan_dev->vid)) {
3563                 struct netdev *netdev;
3564
3565                 if (!netdev_open(vlan_dev->name, "system", &netdev)) {
3566                     if (!netdev_get_in4(netdev, NULL, NULL) ||
3567                         !netdev_get_in6(netdev, NULL)) {
3568                         vlandev_del(vlan_dev->name);
3569                     } else {
3570                         /* It has an IP address configured, so we don't own
3571                          * it.  Don't delete it. */
3572                     }
3573                     netdev_close(netdev);
3574                 }
3575             }
3576
3577         }
3578     }
3579
3580     /* Add all VLAN devices that we need. */
3581     SSET_FOR_EACH (real_dev_name, &splinter_ifaces) {
3582         int vid;
3583
3584         BITMAP_FOR_EACH_1 (vid, 4096, splinter_vlans) {
3585             if (!vlandev_get_name(real_dev_name, vid)) {
3586                 vlandev_add(real_dev_name, vid);
3587             }
3588         }
3589     }
3590
3591     vlandev_refresh();
3592
3593     sset_destroy(&splinter_ifaces);
3594
3595     if (bitmap_scan(splinter_vlans, 0, 4096) >= 4096) {
3596         free(splinter_vlans);
3597         return NULL;
3598     }
3599     return splinter_vlans;
3600 }
3601
3602 /* Pushes the configure of VLAN splinter port 'port' (e.g. eth0.9) down to
3603  * ofproto.  */
3604 static void
3605 configure_splinter_port(struct port *port)
3606 {
3607     struct ofproto *ofproto = port->bridge->ofproto;
3608     uint16_t realdev_ofp_port;
3609     const char *realdev_name;
3610     struct iface *vlandev, *realdev;
3611
3612     ofproto_bundle_unregister(port->bridge->ofproto, port);
3613
3614     vlandev = CONTAINER_OF(list_front(&port->ifaces), struct iface,
3615                            port_elem);
3616
3617     realdev_name = get_port_other_config(port->cfg, "realdev", NULL);
3618     realdev = iface_lookup(port->bridge, realdev_name);
3619     realdev_ofp_port = realdev ? realdev->ofp_port : 0;
3620
3621     ofproto_port_set_realdev(ofproto, vlandev->ofp_port, realdev_ofp_port,
3622                              *port->cfg->tag);
3623 }
3624
3625 static struct ovsrec_port *
3626 synthesize_splinter_port(const char *real_dev_name,
3627                          const char *vlan_dev_name, int vid)
3628 {
3629     struct ovsrec_interface *iface;
3630     struct ovsrec_port *port;
3631
3632     iface = xzalloc(sizeof *iface);
3633     iface->name = xstrdup(vlan_dev_name);
3634     iface->type = "system";
3635
3636     port = xzalloc(sizeof *port);
3637     port->interfaces = xmemdup(&iface, sizeof iface);
3638     port->n_interfaces = 1;
3639     port->name = xstrdup(vlan_dev_name);
3640     port->vlan_mode = "splinter";
3641     port->tag = xmalloc(sizeof *port->tag);
3642     *port->tag = vid;
3643     port->key_other_config = xmalloc(sizeof *port->key_other_config);
3644     port->key_other_config[0] = "realdev";
3645     port->value_other_config = xmalloc(sizeof *port->value_other_config);
3646     port->value_other_config[0] = xstrdup(real_dev_name);
3647     port->n_other_config = 1;
3648
3649     register_block(iface);
3650     register_block(iface->name);
3651     register_block(port);
3652     register_block(port->interfaces);
3653     register_block(port->name);
3654     register_block(port->tag);
3655     register_block(port->key_other_config);
3656     register_block(port->value_other_config);
3657     register_block(port->value_other_config[0]);
3658
3659     return port;
3660 }
3661
3662 /* For each interface with 'br' that has VLAN splinters enabled, adds a
3663  * corresponding ovsrec_port to 'ports' for each splinter VLAN marked with a
3664  * 1-bit in the 'splinter_vlans' bitmap. */
3665 static void
3666 add_vlan_splinter_ports(struct bridge *br,
3667                         const unsigned long int *splinter_vlans,
3668                         struct shash *ports)
3669 {
3670     size_t i;
3671
3672     /* We iterate through 'br->cfg->ports' instead of 'ports' here because
3673      * we're modifying 'ports'. */
3674     for (i = 0; i < br->cfg->n_ports; i++) {
3675         const char *name = br->cfg->ports[i]->name;
3676         struct ovsrec_port *port_cfg = shash_find_data(ports, name);
3677         size_t j;
3678
3679         for (j = 0; j < port_cfg->n_interfaces; j++) {
3680             struct ovsrec_interface *iface_cfg = port_cfg->interfaces[j];
3681
3682             if (vlan_splinters_is_enabled(iface_cfg)) {
3683                 const char *real_dev_name;
3684                 uint16_t vid;
3685
3686                 real_dev_name = iface_cfg->name;
3687                 BITMAP_FOR_EACH_1 (vid, 4096, splinter_vlans) {
3688                     const char *vlan_dev_name;
3689
3690                     vlan_dev_name = vlandev_get_name(real_dev_name, vid);
3691                     if (vlan_dev_name
3692                         && !shash_find(ports, vlan_dev_name)) {
3693                         shash_add(ports, vlan_dev_name,
3694                                   synthesize_splinter_port(
3695                                       real_dev_name, vlan_dev_name, vid));
3696                     }
3697                 }
3698             }
3699         }
3700     }
3701 }
3702
3703 static void
3704 mirror_refresh_stats(struct mirror *m)
3705 {
3706     struct ofproto *ofproto = m->bridge->ofproto;
3707     uint64_t tx_packets, tx_bytes;
3708     char *keys[2];
3709     int64_t values[2];
3710     size_t stat_cnt = 0;
3711
3712     if (ofproto_mirror_get_stats(ofproto, m, &tx_packets, &tx_bytes)) {
3713         ovsrec_mirror_set_statistics(m->cfg, NULL, NULL, 0);
3714         return;
3715     }
3716
3717     if (tx_packets != UINT64_MAX) {
3718         keys[stat_cnt] = "tx_packets";
3719         values[stat_cnt] = tx_packets;
3720         stat_cnt++;
3721     }
3722     if (tx_bytes != UINT64_MAX) {
3723         keys[stat_cnt] = "tx_bytes";
3724         values[stat_cnt] = tx_bytes;
3725         stat_cnt++;
3726     }
3727
3728     ovsrec_mirror_set_statistics(m->cfg, keys, values, stat_cnt);
3729 }