vswitchd/bridge.c

   1 /* Copyright (c) 2008, 2009, 2010, 2011 Nicira Networks
   2  *
   3  * Licensed under the Apache License, Version 2.0 (the "License");
   4  * you may not use this file except in compliance with the License.
   5  * You may obtain a copy of the License at:
   6  *
   7  *     http://www.apache.org/licenses/LICENSE-2.0
   8  *
   9  * Unless required by applicable law or agreed to in writing, software
  10  * distributed under the License is distributed on an "AS IS" BASIS,
  11  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
  12  * See the License for the specific language governing permissions and
  13  * limitations under the License.
  14  */
  15
  16 #include <config.h>
  17 #include "bridge.h"
  18 #include <assert.h>
  19 #include <errno.h>
  20 #include <inttypes.h>
  21 #include <stdlib.h>
  22 #include "bitmap.h"
  23 #include "bond.h"
  24 #include "cfm.h"
  25 #include "coverage.h"
  26 #include "daemon.h"
  27 #include "dirs.h"
  28 #include "dynamic-string.h"
  29 #include "hash.h"
  30 #include "hmap.h"
  31 #include "hmapx.h"
  32 #include "jsonrpc.h"
  33 #include "lacp.h"
  34 #include "list.h"
  35 #include "netdev.h"
  36 #include "ofp-print.h"
  37 #include "ofpbuf.h"
  38 #include "ofproto/ofproto.h"
  39 #include "poll-loop.h"
  40 #include "sha1.h"
  41 #include "shash.h"
  42 #include "socket-util.h"
  43 #include "stream-ssl.h"
  44 #include "sset.h"
  45 #include "system-stats.h"
  46 #include "timeval.h"
  47 #include "util.h"
  48 #include "unixctl.h"
  49 #include "vlandev.h"
  50 #include "vswitchd/vswitch-idl.h"
  51 #include "xenserver.h"
  52 #include "vlog.h"
  53 #include "sflow_api.h"
  54 #include "vlan-bitmap.h"
  55
  56 VLOG_DEFINE_THIS_MODULE(bridge);
  57
  58 COVERAGE_DEFINE(bridge_reconfigure);
  59
  60 struct iface {
  61     /* These members are always valid. */
  62     struct list port_elem;      /* Element in struct port's "ifaces" list. */
  63     struct hmap_node name_node; /* In struct bridge's "iface_by_name" hmap. */
  64     struct port *port;          /* Containing port. */
  65     char *name;                 /* Host network device name. */
  66     tag_type tag;               /* Tag associated with this interface. */
  67
  68     /* These members are valid only after bridge_reconfigure() causes them to
  69      * be initialized. */
  70     struct hmap_node ofp_port_node; /* In struct bridge's "ifaces" hmap. */
  71     int ofp_port;               /* OpenFlow port number, -1 if unknown. */
  72     struct netdev *netdev;      /* Network device. */
  73     const char *type;           /* Usually same as cfg->type. */
  74     const struct ovsrec_interface *cfg;
  75 };
  76
  77 struct mirror {
  78     struct uuid uuid;           /* UUID of this "mirror" record in database. */
  79     struct hmap_node hmap_node; /* In struct bridge's "mirrors" hmap. */
  80     struct bridge *bridge;
  81     char *name;
  82     const struct ovsrec_mirror *cfg;
  83 };
  84
  85 struct port {
  86     struct bridge *bridge;
  87     struct hmap_node hmap_node; /* Element in struct bridge's "ports" hmap. */
  88     char *name;
  89
  90     const struct ovsrec_port *cfg;
  91
  92     /* An ordinary bridge port has 1 interface.
  93      * A bridge port for bonding has at least 2 interfaces. */
  94     struct list ifaces;         /* List of "struct iface"s. */
  95 };
  96
  97 struct bridge {
  98     struct hmap_node node;      /* In 'all_bridges'. */
  99     char *name;                 /* User-specified arbitrary name. */
 100     char *type;                 /* Datapath type. */
 101     uint8_t ea[ETH_ADDR_LEN];   /* Bridge Ethernet Address. */
 102     uint8_t default_ea[ETH_ADDR_LEN]; /* Default MAC. */
 103     const struct ovsrec_bridge *cfg;
 104
 105     /* OpenFlow switch processing. */
 106     struct ofproto *ofproto;    /* OpenFlow switch. */
 107
 108     /* Bridge ports. */
 109     struct hmap ports;          /* "struct port"s indexed by name. */
 110     struct hmap ifaces;         /* "struct iface"s indexed by ofp_port. */
 111     struct hmap iface_by_name;  /* "struct iface"s indexed by name. */
 112
 113     /* Port mirroring. */
 114     struct hmap mirrors;        /* "struct mirror" indexed by UUID. */
 115
 116     /* Synthetic local port if necessary. */
 117     struct ovsrec_port synth_local_port;
 118     struct ovsrec_interface synth_local_iface;
 119     struct ovsrec_interface *synth_local_ifacep;
 120 };
 121
 122 /* All bridges, indexed by name. */
 123 static struct hmap all_bridges = HMAP_INITIALIZER(&all_bridges);
 124
 125 /* OVSDB IDL used to obtain configuration. */
 126 static struct ovsdb_idl *idl;
 127
 128 /* Each time this timer expires, the bridge fetches systems and interface
 129  * statistics and pushes them into the database. */
 130 #define STATS_INTERVAL (5 * 1000) /* In milliseconds. */
 131 static long long int stats_timer = LLONG_MIN;
 132
 133 /* Stores the time after which rate limited statistics may be written to the
 134  * database.  Only updated when changes to the database require rate limiting.
 135  */
 136 #define DB_LIMIT_INTERVAL (1 * 1000) /* In milliseconds. */
 137 static long long int db_limiter = LLONG_MIN;
 138
 139 static void add_del_bridges(const struct ovsrec_open_vswitch *);
 140 static void bridge_del_ofprotos(void);
 141 static bool bridge_add_ofprotos(struct bridge *);
 142 static void bridge_create(const struct ovsrec_bridge *);
 143 static void bridge_destroy(struct bridge *);
 144 static struct bridge *bridge_lookup(const char *name);
 145 static unixctl_cb_func bridge_unixctl_dump_flows;
 146 static unixctl_cb_func bridge_unixctl_reconnect;
 147 static size_t bridge_get_controllers(const struct bridge *br,
 148                                      struct ovsrec_controller ***controllersp);
 149 static void bridge_add_del_ports(struct bridge *,
 150                                  const unsigned long int *splinter_vlans);
 151 static void bridge_add_ofproto_ports(struct bridge *);
 152 static void bridge_del_ofproto_ports(struct bridge *);
 153 static void bridge_refresh_ofp_port(struct bridge *);
 154 static void bridge_configure_datapath_id(struct bridge *);
 155 static void bridge_configure_flow_eviction_threshold(struct bridge *);
 156 static void bridge_configure_netflow(struct bridge *);
 157 static void bridge_configure_forward_bpdu(struct bridge *);
 158 static void bridge_configure_sflow(struct bridge *, int *sflow_bridge_number);
 159 static void bridge_configure_stp(struct bridge *);
 160 static void bridge_configure_remotes(struct bridge *,
 161                                      const struct sockaddr_in *managers,
 162                                      size_t n_managers);
 163 static void bridge_pick_local_hw_addr(struct bridge *,
 164                                       uint8_t ea[ETH_ADDR_LEN],
 165                                       struct iface **hw_addr_iface);
 166 static uint64_t bridge_pick_datapath_id(struct bridge *,
 167                                         const uint8_t bridge_ea[ETH_ADDR_LEN],
 168                                         struct iface *hw_addr_iface);
 169 static const char *bridge_get_other_config(const struct ovsrec_bridge *,
 170                                             const char *key);
 171 static const char *get_port_other_config(const struct ovsrec_port *,
 172                                          const char *key,
 173                                          const char *default_value);
 174 static uint64_t dpid_from_hash(const void *, size_t nbytes);
 175 static bool bridge_has_bond_fake_iface(const struct bridge *,
 176                                        const char *name);
 177 static bool port_is_bond_fake_iface(const struct port *);
 178
 179 static unixctl_cb_func qos_unixctl_show;
 180
 181 static struct port *port_create(struct bridge *, const struct ovsrec_port *);
 182 static void port_add_ifaces(struct port *);
 183 static void port_del_ifaces(struct port *);
 184 static void port_destroy(struct port *);
 185 static struct port *port_lookup(const struct bridge *, const char *name);
 186 static void port_configure(struct port *);
 187 static struct lacp_settings *port_configure_lacp(struct port *,
 188                                                  struct lacp_settings *);
 189 static void port_configure_bond(struct port *, struct bond_settings *,
 190                                 uint32_t *bond_stable_ids);
 191 static bool port_is_synthetic(const struct port *);
 192
 193 static void bridge_configure_mirrors(struct bridge *);
 194 static struct mirror *mirror_create(struct bridge *,
 195                                     const struct ovsrec_mirror *);
 196 static void mirror_destroy(struct mirror *);
 197 static bool mirror_configure(struct mirror *);
 198 static void mirror_refresh_stats(struct mirror *);
 199
 200 static void iface_configure_lacp(struct iface *, struct lacp_slave_settings *);
 201 static struct iface *iface_create(struct port *port,
 202                                   const struct ovsrec_interface *if_cfg);
 203 static void iface_destroy(struct iface *);
 204 static struct iface *iface_lookup(const struct bridge *, const char *name);
 205 static struct iface *iface_find(const char *name);
 206 static struct iface *iface_from_ofp_port(const struct bridge *,
 207                                          uint16_t ofp_port);
 208 static void iface_set_mac(struct iface *);
 209 static void iface_set_ofport(const struct ovsrec_interface *, int64_t ofport);
 210 static void iface_clear_db_record(const struct ovsrec_interface *if_cfg);
 211 static void iface_configure_qos(struct iface *, const struct ovsrec_qos *);
 212 static void iface_configure_cfm(struct iface *);
 213 static void iface_refresh_cfm_stats(struct iface *);
 214 static void iface_refresh_stats(struct iface *);
 215 static void iface_refresh_status(struct iface *);
 216 static bool iface_is_synthetic(const struct iface *);
 217 static const char *get_interface_other_config(const struct ovsrec_interface *,
 218                                               const char *key,
 219                                               const char *default_value);
 220
 221 static void shash_from_ovs_idl_map(char **keys, char **values, size_t n,
 222                                    struct shash *);
 223 static void shash_to_ovs_idl_map(struct shash *,
 224                                  char ***keys, char ***values, size_t *n);
 225
 226 /* Linux VLAN device support (e.g. "eth0.10" for VLAN 10.)
 227  *
 228  * This is deprecated.  It is only for compatibility with broken device drivers
 229  * in old versions of Linux that do not properly support VLANs when VLAN
 230  * devices are not used.  When broken device drivers are no longer in
 231  * widespread use, we will delete these interfaces. */
 232
 233 /* True if VLAN splinters are enabled on any interface, false otherwise.*/
 234 static bool vlan_splinters_enabled_anywhere;
 235
 236 static bool vlan_splinters_is_enabled(const struct ovsrec_interface *);
 237 static unsigned long int *collect_splinter_vlans(
 238     const struct ovsrec_open_vswitch *);
 239 static void configure_splinter_port(struct port *);
 240 static void add_vlan_splinter_ports(struct bridge *,
 241                                     const unsigned long int *splinter_vlans,
 242                                     struct shash *ports);
 243 \f
 244 /* Public functions. */
 245
 246 /* Initializes the bridge module, configuring it to obtain its configuration
 247  * from an OVSDB server accessed over 'remote', which should be a string in a
 248  * form acceptable to ovsdb_idl_create(). */
 249 void
 250 bridge_init(const char *remote)
 251 {
 252     /* Create connection to database. */
 253     idl = ovsdb_idl_create(remote, &ovsrec_idl_class, true);
 254     ovsdb_idl_set_lock(idl, "ovs_vswitchd");
 255
 256     ovsdb_idl_omit_alert(idl, &ovsrec_open_vswitch_col_cur_cfg);
 257     ovsdb_idl_omit_alert(idl, &ovsrec_open_vswitch_col_statistics);
 258     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_external_ids);
 259     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_ovs_version);
 260     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_db_version);
 261     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_system_type);
 262     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_system_version);
 263
 264     ovsdb_idl_omit_alert(idl, &ovsrec_bridge_col_datapath_id);
 265     ovsdb_idl_omit_alert(idl, &ovsrec_bridge_col_status);
 266     ovsdb_idl_omit(idl, &ovsrec_bridge_col_external_ids);
 267
 268     ovsdb_idl_omit_alert(idl, &ovsrec_port_col_status);
 269     ovsdb_idl_omit_alert(idl, &ovsrec_port_col_statistics);
 270     ovsdb_idl_omit(idl, &ovsrec_port_col_external_ids);
 271     ovsdb_idl_omit(idl, &ovsrec_port_col_fake_bridge);
 272
 273     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_admin_state);
 274     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_duplex);
 275     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_link_speed);
 276     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_link_state);
 277     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_link_resets);
 278     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_mtu);
 279     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_ofport);
 280     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_statistics);
 281     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_status);
 282     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_fault);
 283     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_remote_mpids);
 284     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_lacp_current);
 285     ovsdb_idl_omit(idl, &ovsrec_interface_col_external_ids);
 286
 287     ovsdb_idl_omit_alert(idl, &ovsrec_controller_col_is_connected);
 288     ovsdb_idl_omit_alert(idl, &ovsrec_controller_col_role);
 289     ovsdb_idl_omit_alert(idl, &ovsrec_controller_col_status);
 290     ovsdb_idl_omit(idl, &ovsrec_controller_col_external_ids);
 291
 292     ovsdb_idl_omit(idl, &ovsrec_qos_col_external_ids);
 293
 294     ovsdb_idl_omit(idl, &ovsrec_queue_col_external_ids);
 295
 296     ovsdb_idl_omit(idl, &ovsrec_mirror_col_external_ids);
 297     ovsdb_idl_omit_alert(idl, &ovsrec_mirror_col_statistics);
 298
 299     ovsdb_idl_omit(idl, &ovsrec_netflow_col_external_ids);
 300
 301     ovsdb_idl_omit(idl, &ovsrec_sflow_col_external_ids);
 302
 303     ovsdb_idl_omit(idl, &ovsrec_manager_col_external_ids);
 304     ovsdb_idl_omit(idl, &ovsrec_manager_col_inactivity_probe);
 305     ovsdb_idl_omit(idl, &ovsrec_manager_col_is_connected);
 306     ovsdb_idl_omit(idl, &ovsrec_manager_col_max_backoff);
 307     ovsdb_idl_omit(idl, &ovsrec_manager_col_status);
 308
 309     ovsdb_idl_omit(idl, &ovsrec_ssl_col_external_ids);
 310
 311     /* Register unixctl commands. */
 312     unixctl_command_register("qos/show", "interface", qos_unixctl_show, NULL);
 313     unixctl_command_register("bridge/dump-flows", "bridge",
 314                              bridge_unixctl_dump_flows, NULL);
 315     unixctl_command_register("bridge/reconnect", "[bridge]",
 316                              bridge_unixctl_reconnect, NULL);
 317     lacp_init();
 318     bond_init();
 319     cfm_init();
 320 }
 321
 322 void
 323 bridge_exit(void)
 324 {
 325     struct bridge *br, *next_br;
 326
 327     HMAP_FOR_EACH_SAFE (br, next_br, node, &all_bridges) {
 328         bridge_destroy(br);
 329     }
 330     ovsdb_idl_destroy(idl);
 331 }
 332
 333 /* Looks at the list of managers in 'ovs_cfg' and extracts their remote IP
 334  * addresses and ports into '*managersp' and '*n_managersp'.  The caller is
 335  * responsible for freeing '*managersp' (with free()).
 336  *
 337  * You may be asking yourself "why does ovs-vswitchd care?", because
 338  * ovsdb-server is responsible for connecting to the managers, and ovs-vswitchd
 339  * should not be and in fact is not directly involved in that.  But
 340  * ovs-vswitchd needs to make sure that ovsdb-server can reach the managers, so
 341  * it has to tell in-band control where the managers are to enable that.
 342  * (Thus, only managers connected in-band are collected.)
 343  */
 344 static void
 345 collect_in_band_managers(const struct ovsrec_open_vswitch *ovs_cfg,
 346                          struct sockaddr_in **managersp, size_t *n_managersp)
 347 {
 348     struct sockaddr_in *managers = NULL;
 349     size_t n_managers = 0;
 350     struct sset targets;
 351     size_t i;
 352
 353     /* Collect all of the potential targets from the "targets" columns of the
 354      * rows pointed to by "manager_options", excluding any that are
 355      * out-of-band. */
 356     sset_init(&targets);
 357     for (i = 0; i < ovs_cfg->n_manager_options; i++) {
 358         struct ovsrec_manager *m = ovs_cfg->manager_options[i];
 359
 360         if (m->connection_mode && !strcmp(m->connection_mode, "out-of-band")) {
 361             sset_find_and_delete(&targets, m->target);
 362         } else {
 363             sset_add(&targets, m->target);
 364         }
 365     }
 366
 367     /* Now extract the targets' IP addresses. */
 368     if (!sset_is_empty(&targets)) {
 369         const char *target;
 370
 371         managers = xmalloc(sset_count(&targets) * sizeof *managers);
 372         SSET_FOR_EACH (target, &targets) {
 373             struct sockaddr_in *sin = &managers[n_managers];
 374
 375             if ((!strncmp(target, "tcp:", 4)
 376                  && inet_parse_active(target + 4, JSONRPC_TCP_PORT, sin)) ||
 377                 (!strncmp(target, "ssl:", 4)
 378                  && inet_parse_active(target + 4, JSONRPC_SSL_PORT, sin))) {
 379                 n_managers++;
 380             }
 381         }
 382     }
 383     sset_destroy(&targets);
 384
 385     *managersp = managers;
 386     *n_managersp = n_managers;
 387 }
 388
 389 static void
 390 bridge_reconfigure(const struct ovsrec_open_vswitch *ovs_cfg)
 391 {
 392     unsigned long int *splinter_vlans;
 393     struct sockaddr_in *managers;
 394     struct bridge *br, *next;
 395     int sflow_bridge_number;
 396     size_t n_managers;
 397
 398     COVERAGE_INC(bridge_reconfigure);
 399
 400     /* Create and destroy "struct bridge"s, "struct port"s, and "struct
 401      * iface"s according to 'ovs_cfg', with only very minimal configuration
 402      * otherwise.
 403      *
 404      * This is mostly an update to bridge data structures.  Very little is
 405      * pushed down to ofproto or lower layers. */
 406     add_del_bridges(ovs_cfg);
 407     splinter_vlans = collect_splinter_vlans(ovs_cfg);
 408     HMAP_FOR_EACH (br, node, &all_bridges) {
 409         bridge_add_del_ports(br, splinter_vlans);
 410     }
 411     free(splinter_vlans);
 412
 413     /* Delete all datapaths and datapath ports that are no longer configured.
 414      *
 415      * The kernel will reject any attempt to add a given port to a datapath if
 416      * that port already belongs to a different datapath, so we must do all
 417      * port deletions before any port additions.  A datapath always has a
 418      * "local port" so we must delete not-configured datapaths too. */
 419     bridge_del_ofprotos();
 420     HMAP_FOR_EACH (br, node, &all_bridges) {
 421         if (br->ofproto) {
 422             bridge_del_ofproto_ports(br);
 423         }
 424     }
 425
 426     /* Create datapaths and datapath ports that are missing.
 427      *
 428      * After this is done, we have our final set of bridges, ports, and
 429      * interfaces.  Every "struct bridge" has an ofproto, every "struct port"
 430      * has at least one iface, every "struct iface" has a valid ofp_port and
 431      * netdev. */
 432     HMAP_FOR_EACH_SAFE (br, next, node, &all_bridges) {
 433         if (!br->ofproto && !bridge_add_ofprotos(br)) {
 434             bridge_destroy(br);
 435         }
 436     }
 437     HMAP_FOR_EACH (br, node, &all_bridges) {
 438         bridge_refresh_ofp_port(br);
 439         bridge_add_ofproto_ports(br);
 440     }
 441
 442     /* Complete the configuration. */
 443     sflow_bridge_number = 0;
 444     collect_in_band_managers(ovs_cfg, &managers, &n_managers);
 445     HMAP_FOR_EACH (br, node, &all_bridges) {
 446         struct port *port;
 447
 448         /* We need the datapath ID early to allow LACP ports to use it as the
 449          * default system ID. */
 450         bridge_configure_datapath_id(br);
 451
 452         HMAP_FOR_EACH (port, hmap_node, &br->ports) {
 453             struct iface *iface;
 454
 455             port_configure(port);
 456
 457             LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
 458                 iface_configure_cfm(iface);
 459                 iface_configure_qos(iface, port->cfg->qos);
 460                 iface_set_mac(iface);
 461             }
 462         }
 463         bridge_configure_mirrors(br);
 464         bridge_configure_flow_eviction_threshold(br);
 465         bridge_configure_forward_bpdu(br);
 466         bridge_configure_remotes(br, managers, n_managers);
 467         bridge_configure_netflow(br);
 468         bridge_configure_sflow(br, &sflow_bridge_number);
 469         bridge_configure_stp(br);
 470     }
 471     free(managers);
 472
 473     /* ovs-vswitchd has completed initialization, so allow the process that
 474      * forked us to exit successfully. */
 475     daemonize_complete();
 476 }
 477
 478 /* Iterate over all ofprotos and delete any of them that do not have a
 479  * configured bridge or that are the wrong type. */
 480 static void
 481 bridge_del_ofprotos(void)
 482 {
 483     struct sset names;
 484     struct sset types;
 485     const char *type;
 486
 487     sset_init(&names);
 488     sset_init(&types);
 489     ofproto_enumerate_types(&types);
 490     SSET_FOR_EACH (type, &types) {
 491         const char *name;
 492
 493         ofproto_enumerate_names(type, &names);
 494         SSET_FOR_EACH (name, &names) {
 495             struct bridge *br = bridge_lookup(name);
 496             if (!br || strcmp(type, br->type)) {
 497                 ofproto_delete(name, type);
 498             }
 499         }
 500     }
 501     sset_destroy(&names);
 502     sset_destroy(&types);
 503 }
 504
 505 static bool
 506 bridge_add_ofprotos(struct bridge *br)
 507 {
 508     int error = ofproto_create(br->name, br->type, &br->ofproto);
 509     if (error) {
 510         VLOG_ERR("failed to create bridge %s: %s", br->name, strerror(error));
 511         return false;
 512     }
 513     return true;
 514 }
 515
 516 static void
 517 port_configure(struct port *port)
 518 {
 519     const struct ovsrec_port *cfg = port->cfg;
 520     struct bond_settings bond_settings;
 521     struct lacp_settings lacp_settings;
 522     struct ofproto_bundle_settings s;
 523     struct iface *iface;
 524
 525     if (cfg->vlan_mode && !strcmp(cfg->vlan_mode, "splinter")) {
 526         configure_splinter_port(port);
 527         return;
 528     }
 529
 530     /* Get name. */
 531     s.name = port->name;
 532
 533     /* Get slaves. */
 534     s.n_slaves = 0;
 535     s.slaves = xmalloc(list_size(&port->ifaces) * sizeof *s.slaves);
 536     LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
 537         s.slaves[s.n_slaves++] = iface->ofp_port;
 538     }
 539
 540     /* Get VLAN tag. */
 541     s.vlan = -1;
 542     if (cfg->tag && *cfg->tag >= 0 && *cfg->tag <= 4095) {
 543         s.vlan = *cfg->tag;
 544     }
 545
 546     /* Get VLAN trunks. */
 547     s.trunks = NULL;
 548     if (cfg->n_trunks) {
 549         s.trunks = vlan_bitmap_from_array(cfg->trunks, cfg->n_trunks);
 550     }
 551
 552     /* Get VLAN mode. */
 553     if (cfg->vlan_mode) {
 554         if (!strcmp(cfg->vlan_mode, "access")) {
 555             s.vlan_mode = PORT_VLAN_ACCESS;
 556         } else if (!strcmp(cfg->vlan_mode, "trunk")) {
 557             s.vlan_mode = PORT_VLAN_TRUNK;
 558         } else if (!strcmp(cfg->vlan_mode, "native-tagged")) {
 559             s.vlan_mode = PORT_VLAN_NATIVE_TAGGED;
 560         } else if (!strcmp(cfg->vlan_mode, "native-untagged")) {
 561             s.vlan_mode = PORT_VLAN_NATIVE_UNTAGGED;
 562         } else {
 563             /* This "can't happen" because ovsdb-server should prevent it. */
 564             VLOG_ERR("unknown VLAN mode %s", cfg->vlan_mode);
 565             s.vlan_mode = PORT_VLAN_TRUNK;
 566         }
 567     } else {
 568         if (s.vlan >= 0) {
 569             s.vlan_mode = PORT_VLAN_ACCESS;
 570             if (cfg->n_trunks) {
 571                 VLOG_ERR("port %s: ignoring trunks in favor of implicit vlan",
 572                          port->name);
 573             }
 574         } else {
 575             s.vlan_mode = PORT_VLAN_TRUNK;
 576         }
 577     }
 578     s.use_priority_tags = !strcmp("true", get_port_other_config(
 579                                       cfg, "priority-tags", ""));
 580
 581     /* Get LACP settings. */
 582     s.lacp = port_configure_lacp(port, &lacp_settings);
 583     if (s.lacp) {
 584         size_t i = 0;
 585
 586         s.lacp_slaves = xmalloc(s.n_slaves * sizeof *s.lacp_slaves);
 587         LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
 588             iface_configure_lacp(iface, &s.lacp_slaves[i++]);
 589         }
 590     } else {
 591         s.lacp_slaves = NULL;
 592     }
 593
 594     /* Get bond settings. */
 595     if (s.n_slaves > 1) {
 596         s.bond = &bond_settings;
 597         s.bond_stable_ids = xmalloc(s.n_slaves * sizeof *s.bond_stable_ids);
 598         port_configure_bond(port, &bond_settings, s.bond_stable_ids);
 599     } else {
 600         s.bond = NULL;
 601         s.bond_stable_ids = NULL;
 602
 603         LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
 604             netdev_set_miimon_interval(iface->netdev, 0);
 605         }
 606     }
 607
 608     /* Register. */
 609     ofproto_bundle_register(port->bridge->ofproto, port, &s);
 610
 611     /* Clean up. */
 612     free(s.slaves);
 613     free(s.trunks);
 614     free(s.lacp_slaves);
 615     free(s.bond_stable_ids);
 616 }
 617
 618 /* Pick local port hardware address and datapath ID for 'br'. */
 619 static void
 620 bridge_configure_datapath_id(struct bridge *br)
 621 {
 622     uint8_t ea[ETH_ADDR_LEN];
 623     uint64_t dpid;
 624     struct iface *local_iface;
 625     struct iface *hw_addr_iface;
 626     char *dpid_string;
 627
 628     bridge_pick_local_hw_addr(br, ea, &hw_addr_iface);
 629     local_iface = iface_from_ofp_port(br, OFPP_LOCAL);
 630     if (local_iface) {
 631         int error = netdev_set_etheraddr(local_iface->netdev, ea);
 632         if (error) {
 633             static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
 634             VLOG_ERR_RL(&rl, "bridge %s: failed to set bridge "
 635                         "Ethernet address: %s",
 636                         br->name, strerror(error));
 637         }
 638     }
 639     memcpy(br->ea, ea, ETH_ADDR_LEN);
 640
 641     dpid = bridge_pick_datapath_id(br, ea, hw_addr_iface);
 642     ofproto_set_datapath_id(br->ofproto, dpid);
 643
 644     dpid_string = xasprintf("%016"PRIx64, dpid);
 645     ovsrec_bridge_set_datapath_id(br->cfg, dpid_string);
 646     free(dpid_string);
 647 }
 648
 649 /* Set NetFlow configuration on 'br'. */
 650 static void
 651 bridge_configure_netflow(struct bridge *br)
 652 {
 653     struct ovsrec_netflow *cfg = br->cfg->netflow;
 654     struct netflow_options opts;
 655
 656     if (!cfg) {
 657         ofproto_set_netflow(br->ofproto, NULL);
 658         return;
 659     }
 660
 661     memset(&opts, 0, sizeof opts);
 662
 663     /* Get default NetFlow configuration from datapath.
 664      * Apply overrides from 'cfg'. */
 665     ofproto_get_netflow_ids(br->ofproto, &opts.engine_type, &opts.engine_id);
 666     if (cfg->engine_type) {
 667         opts.engine_type = *cfg->engine_type;
 668     }
 669     if (cfg->engine_id) {
 670         opts.engine_id = *cfg->engine_id;
 671     }
 672
 673     /* Configure active timeout interval. */
 674     opts.active_timeout = cfg->active_timeout;
 675     if (!opts.active_timeout) {
 676         opts.active_timeout = -1;
 677     } else if (opts.active_timeout < 0) {
 678         VLOG_WARN("bridge %s: active timeout interval set to negative "
 679                   "value, using default instead (%d seconds)", br->name,
 680                   NF_ACTIVE_TIMEOUT_DEFAULT);
 681         opts.active_timeout = -1;
 682     }
 683
 684     /* Add engine ID to interface number to disambiguate bridgs? */
 685     opts.add_id_to_iface = cfg->add_id_to_interface;
 686     if (opts.add_id_to_iface) {
 687         if (opts.engine_id > 0x7f) {
 688             VLOG_WARN("bridge %s: NetFlow port mangling may conflict with "
 689                       "another vswitch, choose an engine id less than 128",
 690                       br->name);
 691         }
 692         if (hmap_count(&br->ports) > 508) {
 693             VLOG_WARN("bridge %s: NetFlow port mangling will conflict with "
 694                       "another port when more than 508 ports are used",
 695                       br->name);
 696         }
 697     }
 698
 699     /* Collectors. */
 700     sset_init(&opts.collectors);
 701     sset_add_array(&opts.collectors, cfg->targets, cfg->n_targets);
 702
 703     /* Configure. */
 704     if (ofproto_set_netflow(br->ofproto, &opts)) {
 705         VLOG_ERR("bridge %s: problem setting netflow collectors", br->name);
 706     }
 707     sset_destroy(&opts.collectors);
 708 }
 709
 710 /* Set sFlow configuration on 'br'. */
 711 static void
 712 bridge_configure_sflow(struct bridge *br, int *sflow_bridge_number)
 713 {
 714     const struct ovsrec_sflow *cfg = br->cfg->sflow;
 715     struct ovsrec_controller **controllers;
 716     struct ofproto_sflow_options oso;
 717     size_t n_controllers;
 718     size_t i;
 719
 720     if (!cfg) {
 721         ofproto_set_sflow(br->ofproto, NULL);
 722         return;
 723     }
 724
 725     memset(&oso, 0, sizeof oso);
 726
 727     sset_init(&oso.targets);
 728     sset_add_array(&oso.targets, cfg->targets, cfg->n_targets);
 729
 730     oso.sampling_rate = SFL_DEFAULT_SAMPLING_RATE;
 731     if (cfg->sampling) {
 732         oso.sampling_rate = *cfg->sampling;
 733     }
 734
 735     oso.polling_interval = SFL_DEFAULT_POLLING_INTERVAL;
 736     if (cfg->polling) {
 737         oso.polling_interval = *cfg->polling;
 738     }
 739
 740     oso.header_len = SFL_DEFAULT_HEADER_SIZE;
 741     if (cfg->header) {
 742         oso.header_len = *cfg->header;
 743     }
 744
 745     oso.sub_id = (*sflow_bridge_number)++;
 746     oso.agent_device = cfg->agent;
 747
 748     oso.control_ip = NULL;
 749     n_controllers = bridge_get_controllers(br, &controllers);
 750     for (i = 0; i < n_controllers; i++) {
 751         if (controllers[i]->local_ip) {
 752             oso.control_ip = controllers[i]->local_ip;
 753             break;
 754         }
 755     }
 756     ofproto_set_sflow(br->ofproto, &oso);
 757
 758     sset_destroy(&oso.targets);
 759 }
 760
 761 static void
 762 port_configure_stp(const struct ofproto *ofproto, struct port *port,
 763                    struct ofproto_port_stp_settings *port_s,
 764                    int *port_num_counter, unsigned long *port_num_bitmap)
 765 {
 766     const char *config_str;
 767     struct iface *iface;
 768
 769     config_str = get_port_other_config(port->cfg, "stp-enable", NULL);
 770     if (config_str && !strcmp(config_str, "false")) {
 771         port_s->enable = false;
 772         return;
 773     } else {
 774         port_s->enable = true;
 775     }
 776
 777     /* STP over bonds is not supported. */
 778     if (!list_is_singleton(&port->ifaces)) {
 779         VLOG_ERR("port %s: cannot enable STP on bonds, disabling",
 780                  port->name);
 781         port_s->enable = false;
 782         return;
 783     }
 784
 785     iface = CONTAINER_OF(list_front(&port->ifaces), struct iface, port_elem);
 786
 787     /* Internal ports shouldn't participate in spanning tree, so
 788      * skip them. */
 789     if (!strcmp(iface->type, "internal")) {
 790         VLOG_DBG("port %s: disable STP on internal ports", port->name);
 791         port_s->enable = false;
 792         return;
 793     }
 794
 795     /* STP on mirror output ports is not supported. */
 796     if (ofproto_is_mirror_output_bundle(ofproto, port)) {
 797         VLOG_DBG("port %s: disable STP on mirror ports", port->name);
 798         port_s->enable = false;
 799         return;
 800     }
 801
 802     config_str = get_port_other_config(port->cfg, "stp-port-num", NULL);
 803     if (config_str) {
 804         unsigned long int port_num = strtoul(config_str, NULL, 0);
 805         int port_idx = port_num - 1;
 806
 807         if (port_num < 1 || port_num > STP_MAX_PORTS) {
 808             VLOG_ERR("port %s: invalid stp-port-num", port->name);
 809             port_s->enable = false;
 810             return;
 811         }
 812
 813         if (bitmap_is_set(port_num_bitmap, port_idx)) {
 814             VLOG_ERR("port %s: duplicate stp-port-num %lu, disabling",
 815                     port->name, port_num);
 816             port_s->enable = false;
 817             return;
 818         }
 819         bitmap_set1(port_num_bitmap, port_idx);
 820         port_s->port_num = port_idx;
 821     } else {
 822         if (*port_num_counter > STP_MAX_PORTS) {
 823             VLOG_ERR("port %s: too many STP ports, disabling", port->name);
 824             port_s->enable = false;
 825             return;
 826         }
 827
 828         port_s->port_num = (*port_num_counter)++;
 829     }
 830
 831     config_str = get_port_other_config(port->cfg, "stp-path-cost", NULL);
 832     if (config_str) {
 833         port_s->path_cost = strtoul(config_str, NULL, 10);
 834     } else {
 835         uint32_t current;
 836
 837         if (netdev_get_features(iface->netdev, &current, NULL, NULL, NULL)) {
 838             /* Couldn't get speed, so assume 100Mb/s. */
 839             port_s->path_cost = 19;
 840         } else {
 841             unsigned int mbps;
 842
 843             mbps = netdev_features_to_bps(current) / 1000000;
 844             port_s->path_cost = stp_convert_speed_to_cost(mbps);
 845         }
 846     }
 847
 848     config_str = get_port_other_config(port->cfg, "stp-port-priority", NULL);
 849     if (config_str) {
 850         port_s->priority = strtoul(config_str, NULL, 0);
 851     } else {
 852         port_s->priority = STP_DEFAULT_PORT_PRIORITY;
 853     }
 854 }
 855
 856 /* Set spanning tree configuration on 'br'. */
 857 static void
 858 bridge_configure_stp(struct bridge *br)
 859 {
 860     if (!br->cfg->stp_enable) {
 861         ofproto_set_stp(br->ofproto, NULL);
 862     } else {
 863         struct ofproto_stp_settings br_s;
 864         const char *config_str;
 865         struct port *port;
 866         int port_num_counter;
 867         unsigned long *port_num_bitmap;
 868
 869         config_str = bridge_get_other_config(br->cfg, "stp-system-id");
 870         if (config_str) {
 871             uint8_t ea[ETH_ADDR_LEN];
 872
 873             if (eth_addr_from_string(config_str, ea)) {
 874                 br_s.system_id = eth_addr_to_uint64(ea);
 875             } else {
 876                 br_s.system_id = eth_addr_to_uint64(br->ea);
 877                 VLOG_ERR("bridge %s: invalid stp-system-id, defaulting "
 878                          "to "ETH_ADDR_FMT, br->name, ETH_ADDR_ARGS(br->ea));
 879             }
 880         } else {
 881             br_s.system_id = eth_addr_to_uint64(br->ea);
 882         }
 883
 884         config_str = bridge_get_other_config(br->cfg, "stp-priority");
 885         if (config_str) {
 886             br_s.priority = strtoul(config_str, NULL, 0);
 887         } else {
 888             br_s.priority = STP_DEFAULT_BRIDGE_PRIORITY;
 889         }
 890
 891         config_str = bridge_get_other_config(br->cfg, "stp-hello-time");
 892         if (config_str) {
 893             br_s.hello_time = strtoul(config_str, NULL, 10) * 1000;
 894         } else {
 895             br_s.hello_time = STP_DEFAULT_HELLO_TIME;
 896         }
 897
 898         config_str = bridge_get_other_config(br->cfg, "stp-max-age");
 899         if (config_str) {
 900             br_s.max_age = strtoul(config_str, NULL, 10) * 1000;
 901         } else {
 902             br_s.max_age = STP_DEFAULT_MAX_AGE;
 903         }
 904
 905         config_str = bridge_get_other_config(br->cfg, "stp-forward-delay");
 906         if (config_str) {
 907             br_s.fwd_delay = strtoul(config_str, NULL, 10) * 1000;
 908         } else {
 909             br_s.fwd_delay = STP_DEFAULT_FWD_DELAY;
 910         }
 911
 912         /* Configure STP on the bridge. */
 913         if (ofproto_set_stp(br->ofproto, &br_s)) {
 914             VLOG_ERR("bridge %s: could not enable STP", br->name);
 915             return;
 916         }
 917
 918         /* Users must either set the port number with the "stp-port-num"
 919          * configuration on all ports or none.  If manual configuration
 920          * is not done, then we allocate them sequentially. */
 921         port_num_counter = 0;
 922         port_num_bitmap = bitmap_allocate(STP_MAX_PORTS);
 923         HMAP_FOR_EACH (port, hmap_node, &br->ports) {
 924             struct ofproto_port_stp_settings port_s;
 925             struct iface *iface;
 926
 927             port_configure_stp(br->ofproto, port, &port_s,
 928                                &port_num_counter, port_num_bitmap);
 929
 930             /* As bonds are not supported, just apply configuration to
 931              * all interfaces. */
 932             LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
 933                 if (ofproto_port_set_stp(br->ofproto, iface->ofp_port,
 934                                          &port_s)) {
 935                     VLOG_ERR("port %s: could not enable STP", port->name);
 936                     continue;
 937                 }
 938             }
 939         }
 940
 941         if (bitmap_scan(port_num_bitmap, 0, STP_MAX_PORTS) != STP_MAX_PORTS
 942                     && port_num_counter) {
 943             VLOG_ERR("bridge %s: must manually configure all STP port "
 944                      "IDs or none, disabling", br->name);
 945             ofproto_set_stp(br->ofproto, NULL);
 946         }
 947         bitmap_free(port_num_bitmap);
 948     }
 949 }
 950
 951 static bool
 952 bridge_has_bond_fake_iface(const struct bridge *br, const char *name)
 953 {
 954     const struct port *port = port_lookup(br, name);
 955     return port && port_is_bond_fake_iface(port);
 956 }
 957
 958 static bool
 959 port_is_bond_fake_iface(const struct port *port)
 960 {
 961     return port->cfg->bond_fake_iface && !list_is_short(&port->ifaces);
 962 }
 963
 964 static void
 965 add_del_bridges(const struct ovsrec_open_vswitch *cfg)
 966 {
 967     struct bridge *br, *next;
 968     struct shash new_br;
 969     size_t i;
 970
 971     /* Collect new bridges' names and types. */
 972     shash_init(&new_br);
 973     for (i = 0; i < cfg->n_bridges; i++) {
 974         static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
 975         const struct ovsrec_bridge *br_cfg = cfg->bridges[i];
 976
 977         if (strchr(br_cfg->name, '/')) {
 978             /* Prevent remote ovsdb-server users from accessing arbitrary
 979              * directories, e.g. consider a bridge named "../../../etc/". */
 980             VLOG_WARN_RL(&rl, "ignoring bridge with invalid name \"%s\"",
 981                          br_cfg->name);
 982         } else if (!shash_add_once(&new_br, br_cfg->name, br_cfg)) {
 983             VLOG_WARN_RL(&rl, "bridge %s specified twice", br_cfg->name);
 984         }
 985     }
 986
 987     /* Get rid of deleted bridges or those whose types have changed.
 988      * Update 'cfg' of bridges that still exist. */
 989     HMAP_FOR_EACH_SAFE (br, next, node, &all_bridges) {
 990         br->cfg = shash_find_data(&new_br, br->name);
 991         if (!br->cfg || strcmp(br->type, ofproto_normalize_type(
 992                                    br->cfg->datapath_type))) {
 993             bridge_destroy(br);
 994         }
 995     }
 996
 997     /* Add new bridges. */
 998     for (i = 0; i < cfg->n_bridges; i++) {
 999         const struct ovsrec_bridge *br_cfg = cfg->bridges[i];
1000         struct bridge *br = bridge_lookup(br_cfg->name);
1001         if (!br) {
1002             bridge_create(br_cfg);
1003         }
1004     }
1005
1006     shash_destroy(&new_br);
1007 }
1008
1009 /* Delete each ofproto port on 'br' that doesn't have a corresponding "struct
1010  * iface".
1011  *
1012  * The kernel will reject any attempt to add a given port to a datapath if that
1013  * port already belongs to a different datapath, so we must do all port
1014  * deletions before any port additions. */
1015 static void
1016 bridge_del_ofproto_ports(struct bridge *br)
1017 {
1018     struct ofproto_port_dump dump;
1019     struct ofproto_port ofproto_port;
1020
1021     OFPROTO_PORT_FOR_EACH (&ofproto_port, &dump, br->ofproto) {
1022         const char *name = ofproto_port.name;
1023         struct iface *iface;
1024         const char *type;
1025         int error;
1026
1027         /* Ignore the local port.  We can't change it anyhow. */
1028         if (!strcmp(name, br->name)) {
1029             continue;
1030         }
1031
1032         /* Get the type that 'ofproto_port' should have (ordinarily the
1033          * type of its corresponding iface) or NULL if it should be
1034          * deleted. */
1035         iface = iface_lookup(br, name);
1036         type = (iface ? iface->type
1037                 : bridge_has_bond_fake_iface(br, name) ? "internal"
1038                 : NULL);
1039
1040         /* If it's the wrong type then delete the ofproto port. */
1041         if (type
1042             && !strcmp(ofproto_port.type, type)
1043             && (!iface || !iface->netdev
1044                 || !strcmp(netdev_get_type(iface->netdev), type))) {
1045             continue;
1046         }
1047         error = ofproto_port_del(br->ofproto, ofproto_port.ofp_port);
1048         if (error) {
1049             VLOG_WARN("bridge %s: failed to remove %s interface (%s)",
1050                       br->name, name, strerror(error));
1051         }
1052         if (iface) {
1053             netdev_close(iface->netdev);
1054             iface->netdev = NULL;
1055         }
1056     }
1057 }
1058
1059 static void
1060 iface_set_ofp_port(struct iface *iface, int ofp_port)
1061 {
1062     struct bridge *br = iface->port->bridge;
1063
1064     assert(iface->ofp_port < 0 && ofp_port >= 0);
1065     iface->ofp_port = ofp_port;
1066     hmap_insert(&br->ifaces, &iface->ofp_port_node, hash_int(ofp_port, 0));
1067     iface_set_ofport(iface->cfg, ofp_port);
1068 }
1069
1070 static void
1071 bridge_refresh_ofp_port(struct bridge *br)
1072 {
1073     struct ofproto_port_dump dump;
1074     struct ofproto_port ofproto_port;
1075     struct port *port;
1076
1077     /* Clear all the "ofp_port"es. */
1078     hmap_clear(&br->ifaces);
1079     HMAP_FOR_EACH (port, hmap_node, &br->ports) {
1080         struct iface *iface;
1081
1082         LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
1083             iface->ofp_port = -1;
1084         }
1085     }
1086
1087     /* Obtain the correct "ofp_port"s from ofproto. */
1088     OFPROTO_PORT_FOR_EACH (&ofproto_port, &dump, br->ofproto) {
1089         struct iface *iface = iface_lookup(br, ofproto_port.name);
1090         if (iface) {
1091             if (iface->ofp_port >= 0) {
1092                 VLOG_WARN("bridge %s: interface %s reported twice",
1093                           br->name, ofproto_port.name);
1094             } else if (iface_from_ofp_port(br, ofproto_port.ofp_port)) {
1095                 VLOG_WARN("bridge %s: interface %"PRIu16" reported twice",
1096                           br->name, ofproto_port.ofp_port);
1097             } else {
1098                 iface_set_ofp_port(iface, ofproto_port.ofp_port);
1099             }
1100         }
1101     }
1102 }
1103
1104 /* Add an ofproto port for any "struct iface" that doesn't have one.
1105  * Delete any "struct iface" for which this fails.
1106  * Delete any "struct port" that thereby ends up with no ifaces. */
1107 static void
1108 bridge_add_ofproto_ports(struct bridge *br)
1109 {
1110     struct port *port, *next_port;
1111
1112     HMAP_FOR_EACH_SAFE (port, next_port, hmap_node, &br->ports) {
1113         struct iface *iface, *next_iface;
1114         struct ofproto_port ofproto_port;
1115
1116         LIST_FOR_EACH_SAFE (iface, next_iface, port_elem, &port->ifaces) {
1117             int error;
1118
1119             /* Open the netdev. */
1120             if (!iface->netdev) {
1121                 error = netdev_open(iface->name, iface->type, &iface->netdev);
1122                 if (error) {
1123                     VLOG_WARN("could not open network device %s (%s)",
1124                               iface->name, strerror(error));
1125                 }
1126
1127                 if (iface->netdev
1128                     && port->cfg->vlan_mode
1129                     && !strcmp(port->cfg->vlan_mode, "splinter")) {
1130                     netdev_turn_flags_on(iface->netdev, NETDEV_UP, true);
1131                 }
1132             } else {
1133                 error = 0;
1134             }
1135
1136             /* Configure the netdev. */
1137             if (iface->netdev) {
1138                 struct shash args;
1139
1140                 shash_init(&args);
1141                 shash_from_ovs_idl_map(iface->cfg->key_options,
1142                                        iface->cfg->value_options,
1143                                        iface->cfg->n_options, &args);
1144                 error = netdev_set_config(iface->netdev, &args);
1145                 shash_destroy(&args);
1146
1147                 if (error) {
1148                     VLOG_WARN("could not configure network device %s (%s)",
1149                               iface->name, strerror(error));
1150                     netdev_close(iface->netdev);
1151                     iface->netdev = NULL;
1152                 }
1153             }
1154
1155             /* Add the port, if necessary. */
1156             if (iface->netdev && iface->ofp_port < 0) {
1157                 uint16_t ofp_port;
1158                 int error;
1159
1160                 error = ofproto_port_add(br->ofproto, iface->netdev,
1161                                          &ofp_port);
1162                 if (!error) {
1163                     iface_set_ofp_port(iface, ofp_port);
1164                 } else {
1165                     netdev_close(iface->netdev);
1166                     iface->netdev = NULL;
1167                 }
1168             }
1169
1170             /* Populate stats columns in new Interface rows. */
1171             if (iface->netdev && !iface->cfg->mtu) {
1172                 iface_refresh_stats(iface);
1173                 iface_refresh_status(iface);
1174             }
1175
1176             /* Delete the iface if we failed. */
1177             if (iface->netdev && iface->ofp_port >= 0) {
1178                 VLOG_DBG("bridge %s: interface %s is on port %d",
1179                          br->name, iface->name, iface->ofp_port);
1180             } else {
1181                 if (iface->netdev) {
1182                     VLOG_ERR("bridge %s: missing %s interface, dropping",
1183                              br->name, iface->name);
1184                 } else {
1185                     /* We already reported a related error, don't bother
1186                      * duplicating it. */
1187                 }
1188                 iface_clear_db_record(iface->cfg);
1189                 iface_destroy(iface);
1190             }
1191         }
1192         if (list_is_empty(&port->ifaces)) {
1193             VLOG_WARN("%s port has no interfaces, dropping", port->name);
1194             port_destroy(port);
1195             continue;
1196         }
1197
1198         /* Add bond fake iface if necessary. */
1199         if (port_is_bond_fake_iface(port)) {
1200             if (ofproto_port_query_by_name(br->ofproto, port->name,
1201                                            &ofproto_port)) {
1202                 struct netdev *netdev;
1203                 int error;
1204
1205                 error = netdev_open(port->name, "internal", &netdev);
1206                 if (!error) {
1207                     ofproto_port_add(br->ofproto, netdev, NULL);
1208                     netdev_close(netdev);
1209                 } else {
1210                     VLOG_WARN("could not open network device %s (%s)",
1211                               port->name, strerror(error));
1212                 }
1213             } else {
1214                 /* Already exists, nothing to do. */
1215                 ofproto_port_destroy(&ofproto_port);
1216             }
1217         }
1218     }
1219 }
1220
1221 static const char *
1222 get_ovsrec_key_value(char **keys, char **values, size_t n, const char *key)
1223 {
1224     size_t i;
1225
1226     for (i = 0; i < n; i++) {
1227         if (!strcmp(keys[i], key)) {
1228             return values[i];
1229         }
1230     }
1231     return NULL;
1232 }
1233
1234 static const char *
1235 bridge_get_other_config(const struct ovsrec_bridge *br_cfg, const char *key)
1236 {
1237     return get_ovsrec_key_value(br_cfg->key_other_config,
1238                                 br_cfg->value_other_config,
1239                                 br_cfg->n_other_config, key);
1240 }
1241
1242 /* Set Flow eviction threshold */
1243 static void
1244 bridge_configure_flow_eviction_threshold(struct bridge *br)
1245 {
1246     const char *threshold_str;
1247     unsigned threshold;
1248
1249     threshold_str = bridge_get_other_config(br->cfg, "flow-eviction-threshold");
1250     if (threshold_str) {
1251         threshold = strtoul(threshold_str, NULL, 10);
1252     } else {
1253         threshold = OFPROTO_FLOW_EVICTON_THRESHOLD_DEFAULT;
1254     }
1255     ofproto_set_flow_eviction_threshold(br->ofproto, threshold);
1256 }
1257
1258 /* Set forward BPDU option. */
1259 static void
1260 bridge_configure_forward_bpdu(struct bridge *br)
1261 {
1262     const char *forward_bpdu_str;
1263     bool forward_bpdu = false;
1264
1265     forward_bpdu_str = bridge_get_other_config(br->cfg, "forward-bpdu");
1266     if (forward_bpdu_str && !strcmp(forward_bpdu_str, "true")) {
1267         forward_bpdu = true;
1268     }
1269     ofproto_set_forward_bpdu(br->ofproto, forward_bpdu);
1270 }
1271
1272 static void
1273 bridge_pick_local_hw_addr(struct bridge *br, uint8_t ea[ETH_ADDR_LEN],
1274                           struct iface **hw_addr_iface)
1275 {
1276     struct hmapx mirror_output_ports;
1277     const char *hwaddr;
1278     struct port *port;
1279     bool found_addr = false;
1280     int error;
1281     int i;
1282
1283     *hw_addr_iface = NULL;
1284
1285     /* Did the user request a particular MAC? */
1286     hwaddr = bridge_get_other_config(br->cfg, "hwaddr");
1287     if (hwaddr && eth_addr_from_string(hwaddr, ea)) {
1288         if (eth_addr_is_multicast(ea)) {
1289             VLOG_ERR("bridge %s: cannot set MAC address to multicast "
1290                      "address "ETH_ADDR_FMT, br->name, ETH_ADDR_ARGS(ea));
1291         } else if (eth_addr_is_zero(ea)) {
1292             VLOG_ERR("bridge %s: cannot set MAC address to zero", br->name);
1293         } else {
1294             return;
1295         }
1296     }
1297
1298     /* Mirror output ports don't participate in picking the local hardware
1299      * address.  ofproto can't help us find out whether a given port is a
1300      * mirror output because we haven't configured mirrors yet, so we need to
1301      * accumulate them ourselves. */
1302     hmapx_init(&mirror_output_ports);
1303     for (i = 0; i < br->cfg->n_mirrors; i++) {
1304         struct ovsrec_mirror *m = br->cfg->mirrors[i];
1305         if (m->output_port) {
1306             hmapx_add(&mirror_output_ports, m->output_port);
1307         }
1308     }
1309
1310     /* Otherwise choose the minimum non-local MAC address among all of the
1311      * interfaces. */
1312     HMAP_FOR_EACH (port, hmap_node, &br->ports) {
1313         uint8_t iface_ea[ETH_ADDR_LEN];
1314         struct iface *candidate;
1315         struct iface *iface;
1316
1317         /* Mirror output ports don't participate. */
1318         if (hmapx_contains(&mirror_output_ports, port->cfg)) {
1319             continue;
1320         }
1321
1322         /* Choose the MAC address to represent the port. */
1323         iface = NULL;
1324         if (port->cfg->mac && eth_addr_from_string(port->cfg->mac, iface_ea)) {
1325             /* Find the interface with this Ethernet address (if any) so that
1326              * we can provide the correct devname to the caller. */
1327             LIST_FOR_EACH (candidate, port_elem, &port->ifaces) {
1328                 uint8_t candidate_ea[ETH_ADDR_LEN];
1329                 if (!netdev_get_etheraddr(candidate->netdev, candidate_ea)
1330                     && eth_addr_equals(iface_ea, candidate_ea)) {
1331                     iface = candidate;
1332                 }
1333             }
1334         } else {
1335             /* Choose the interface whose MAC address will represent the port.
1336              * The Linux kernel bonding code always chooses the MAC address of
1337              * the first slave added to a bond, and the Fedora networking
1338              * scripts always add slaves to a bond in alphabetical order, so
1339              * for compatibility we choose the interface with the name that is
1340              * first in alphabetical order. */
1341             LIST_FOR_EACH (candidate, port_elem, &port->ifaces) {
1342                 if (!iface || strcmp(candidate->name, iface->name) < 0) {
1343                     iface = candidate;
1344                 }
1345             }
1346
1347             /* The local port doesn't count (since we're trying to choose its
1348              * MAC address anyway). */
1349             if (iface->ofp_port == OFPP_LOCAL) {
1350                 continue;
1351             }
1352
1353             /* Grab MAC. */
1354             error = netdev_get_etheraddr(iface->netdev, iface_ea);
1355             if (error) {
1356                 continue;
1357             }
1358         }
1359
1360         /* Compare against our current choice. */
1361         if (!eth_addr_is_multicast(iface_ea) &&
1362             !eth_addr_is_local(iface_ea) &&
1363             !eth_addr_is_reserved(iface_ea) &&
1364             !eth_addr_is_zero(iface_ea) &&
1365             (!found_addr || eth_addr_compare_3way(iface_ea, ea) < 0))
1366         {
1367             memcpy(ea, iface_ea, ETH_ADDR_LEN);
1368             *hw_addr_iface = iface;
1369             found_addr = true;
1370         }
1371     }
1372     if (found_addr) {
1373         VLOG_DBG("bridge %s: using bridge Ethernet address "ETH_ADDR_FMT,
1374                  br->name, ETH_ADDR_ARGS(ea));
1375     } else {
1376         memcpy(ea, br->default_ea, ETH_ADDR_LEN);
1377         *hw_addr_iface = NULL;
1378         VLOG_WARN("bridge %s: using default bridge Ethernet "
1379                   "address "ETH_ADDR_FMT, br->name, ETH_ADDR_ARGS(ea));
1380     }
1381
1382     hmapx_destroy(&mirror_output_ports);
1383 }
1384
1385 /* Choose and returns the datapath ID for bridge 'br' given that the bridge
1386  * Ethernet address is 'bridge_ea'.  If 'bridge_ea' is the Ethernet address of
1387  * an interface on 'br', then that interface must be passed in as
1388  * 'hw_addr_iface'; if 'bridge_ea' was derived some other way, then
1389  * 'hw_addr_iface' must be passed in as a null pointer. */
1390 static uint64_t
1391 bridge_pick_datapath_id(struct bridge *br,
1392                         const uint8_t bridge_ea[ETH_ADDR_LEN],
1393                         struct iface *hw_addr_iface)
1394 {
1395     /*
1396      * The procedure for choosing a bridge MAC address will, in the most
1397      * ordinary case, also choose a unique MAC that we can use as a datapath
1398      * ID.  In some special cases, though, multiple bridges will end up with
1399      * the same MAC address.  This is OK for the bridges, but it will confuse
1400      * the OpenFlow controller, because each datapath needs a unique datapath
1401      * ID.
1402      *
1403      * Datapath IDs must be unique.  It is also very desirable that they be
1404      * stable from one run to the next, so that policy set on a datapath
1405      * "sticks".
1406      */
1407     const char *datapath_id;
1408     uint64_t dpid;
1409
1410     datapath_id = bridge_get_other_config(br->cfg, "datapath-id");
1411     if (datapath_id && dpid_from_string(datapath_id, &dpid)) {
1412         return dpid;
1413     }
1414
1415     if (!hw_addr_iface) {
1416         /*
1417          * A purely internal bridge, that is, one that has no non-virtual
1418          * network devices on it at all, is difficult because it has no
1419          * natural unique identifier at all.
1420          *
1421          * When the host is a XenServer, we handle this case by hashing the
1422          * host's UUID with the name of the bridge.  Names of bridges are
1423          * persistent across XenServer reboots, although they can be reused if
1424          * an internal network is destroyed and then a new one is later
1425          * created, so this is fairly effective.
1426          *
1427          * When the host is not a XenServer, we punt by using a random MAC
1428          * address on each run.
1429          */
1430         const char *host_uuid = xenserver_get_host_uuid();
1431         if (host_uuid) {
1432             char *combined = xasprintf("%s,%s", host_uuid, br->name);
1433             dpid = dpid_from_hash(combined, strlen(combined));
1434             free(combined);
1435             return dpid;
1436         }
1437     }
1438
1439     return eth_addr_to_uint64(bridge_ea);
1440 }
1441
1442 static uint64_t
1443 dpid_from_hash(const void *data, size_t n)
1444 {
1445     uint8_t hash[SHA1_DIGEST_SIZE];
1446
1447     BUILD_ASSERT_DECL(sizeof hash >= ETH_ADDR_LEN);
1448     sha1_bytes(data, n, hash);
1449     eth_addr_mark_random(hash);
1450     return eth_addr_to_uint64(hash);
1451 }
1452
1453 static void
1454 iface_refresh_status(struct iface *iface)
1455 {
1456     struct shash sh;
1457
1458     enum netdev_flags flags;
1459     uint32_t current;
1460     int64_t bps;
1461     int mtu;
1462     int64_t mtu_64;
1463     int error;
1464
1465     if (iface_is_synthetic(iface)) {
1466         return;
1467     }
1468
1469     shash_init(&sh);
1470
1471     if (!netdev_get_status(iface->netdev, &sh)) {
1472         size_t n;
1473         char **keys, **values;
1474
1475         shash_to_ovs_idl_map(&sh, &keys, &values, &n);
1476         ovsrec_interface_set_status(iface->cfg, keys, values, n);
1477
1478         free(keys);
1479         free(values);
1480     } else {
1481         ovsrec_interface_set_status(iface->cfg, NULL, NULL, 0);
1482     }
1483
1484     shash_destroy_free_data(&sh);
1485
1486     error = netdev_get_flags(iface->netdev, &flags);
1487     if (!error) {
1488         ovsrec_interface_set_admin_state(iface->cfg, flags & NETDEV_UP ? "up" : "down");
1489     }
1490     else {
1491         ovsrec_interface_set_admin_state(iface->cfg, NULL);
1492     }
1493
1494     error = netdev_get_features(iface->netdev, &current, NULL, NULL, NULL);
1495     if (!error) {
1496         ovsrec_interface_set_duplex(iface->cfg,
1497                                     netdev_features_is_full_duplex(current)
1498                                     ? "full" : "half");
1499         /* warning: uint64_t -> int64_t conversion */
1500         bps = netdev_features_to_bps(current);
1501         ovsrec_interface_set_link_speed(iface->cfg, &bps, 1);
1502     }
1503     else {
1504         ovsrec_interface_set_duplex(iface->cfg, NULL);
1505         ovsrec_interface_set_link_speed(iface->cfg, NULL, 0);
1506     }
1507
1508     error = netdev_get_mtu(iface->netdev, &mtu);
1509     if (!error) {
1510         mtu_64 = mtu;
1511         ovsrec_interface_set_mtu(iface->cfg, &mtu_64, 1);
1512     }
1513     else {
1514         ovsrec_interface_set_mtu(iface->cfg, NULL, 0);
1515     }
1516 }
1517
1518 /* Writes 'iface''s CFM statistics to the database. */
1519 static void
1520 iface_refresh_cfm_stats(struct iface *iface)
1521 {
1522     const struct ovsrec_interface *cfg = iface->cfg;
1523     int fault, error;
1524     const uint64_t *rmps;
1525     size_t n_rmps;
1526
1527     if (iface_is_synthetic(iface)) {
1528         return;
1529     }
1530
1531     fault = ofproto_port_get_cfm_fault(iface->port->bridge->ofproto,
1532                                        iface->ofp_port);
1533     if (fault >= 0) {
1534         bool fault_bool = fault;
1535         ovsrec_interface_set_cfm_fault(cfg, &fault_bool, 1);
1536     } else {
1537         ovsrec_interface_set_cfm_fault(cfg, NULL, 0);
1538     }
1539
1540     error = ofproto_port_get_cfm_remote_mpids(iface->port->bridge->ofproto,
1541                                               iface->ofp_port, &rmps, &n_rmps);
1542     if (error >= 0) {
1543         ovsrec_interface_set_cfm_remote_mpids(cfg, (const int64_t *)rmps,
1544                                               n_rmps);
1545     } else {
1546         ovsrec_interface_set_cfm_remote_mpids(cfg, NULL, 0);
1547     }
1548 }
1549
1550 static void
1551 iface_refresh_stats(struct iface *iface)
1552 {
1553 #define IFACE_STATS                             \
1554     IFACE_STAT(rx_packets,      "rx_packets")   \
1555     IFACE_STAT(tx_packets,      "tx_packets")   \
1556     IFACE_STAT(rx_bytes,        "rx_bytes")     \
1557     IFACE_STAT(tx_bytes,        "tx_bytes")     \
1558     IFACE_STAT(rx_dropped,      "rx_dropped")   \
1559     IFACE_STAT(tx_dropped,      "tx_dropped")   \
1560     IFACE_STAT(rx_errors,       "rx_errors")    \
1561     IFACE_STAT(tx_errors,       "tx_errors")    \
1562     IFACE_STAT(rx_frame_errors, "rx_frame_err") \
1563     IFACE_STAT(rx_over_errors,  "rx_over_err")  \
1564     IFACE_STAT(rx_crc_errors,   "rx_crc_err")   \
1565     IFACE_STAT(collisions,      "collisions")
1566
1567 #define IFACE_STAT(MEMBER, NAME) NAME,
1568     static char *keys[] = { IFACE_STATS };
1569 #undef IFACE_STAT
1570     int64_t values[ARRAY_SIZE(keys)];
1571     int i;
1572
1573     struct netdev_stats stats;
1574
1575     if (iface_is_synthetic(iface)) {
1576         return;
1577     }
1578
1579     /* Intentionally ignore return value, since errors will set 'stats' to
1580      * all-1s, and we will deal with that correctly below. */
1581     netdev_get_stats(iface->netdev, &stats);
1582
1583     /* Copy statistics into values[] array. */
1584     i = 0;
1585 #define IFACE_STAT(MEMBER, NAME) values[i++] = stats.MEMBER;
1586     IFACE_STATS;
1587 #undef IFACE_STAT
1588     assert(i == ARRAY_SIZE(keys));
1589
1590     ovsrec_interface_set_statistics(iface->cfg, keys, values, ARRAY_SIZE(keys));
1591 #undef IFACE_STATS
1592 }
1593
1594 static void
1595 br_refresh_stp_status(struct bridge *br)
1596 {
1597     struct ofproto *ofproto = br->ofproto;
1598     struct ofproto_stp_status status;
1599     char *keys[3], *values[3];
1600     size_t i;
1601
1602     if (ofproto_get_stp_status(ofproto, &status)) {
1603         return;
1604     }
1605
1606     if (!status.enabled) {
1607         ovsrec_bridge_set_status(br->cfg, NULL, NULL, 0);
1608         return;
1609     }
1610
1611     keys[0] = "stp_bridge_id",
1612     values[0] = xasprintf(STP_ID_FMT, STP_ID_ARGS(status.bridge_id));
1613     keys[1] = "stp_designated_root",
1614     values[1] = xasprintf(STP_ID_FMT, STP_ID_ARGS(status.designated_root));
1615     keys[2] = "stp_root_path_cost",
1616     values[2] = xasprintf("%d", status.root_path_cost);
1617
1618     ovsrec_bridge_set_status(br->cfg, keys, values, ARRAY_SIZE(values));
1619
1620     for (i = 0; i < ARRAY_SIZE(values); i++) {
1621         free(values[i]);
1622     }
1623 }
1624
1625 static void
1626 port_refresh_stp_status(struct port *port)
1627 {
1628     struct ofproto *ofproto = port->bridge->ofproto;
1629     struct iface *iface;
1630     struct ofproto_port_stp_status status;
1631     char *keys[4];
1632     char *str_values[4];
1633     int64_t int_values[3];
1634     size_t i;
1635
1636     if (port_is_synthetic(port)) {
1637         return;
1638     }
1639
1640     /* STP doesn't currently support bonds. */
1641     if (!list_is_singleton(&port->ifaces)) {
1642         ovsrec_port_set_status(port->cfg, NULL, NULL, 0);
1643         return;
1644     }
1645
1646     iface = CONTAINER_OF(list_front(&port->ifaces), struct iface, port_elem);
1647
1648     if (ofproto_port_get_stp_status(ofproto, iface->ofp_port, &status)) {
1649         return;
1650     }
1651
1652     if (!status.enabled) {
1653         ovsrec_port_set_status(port->cfg, NULL, NULL, 0);
1654         ovsrec_port_set_statistics(port->cfg, NULL, NULL, 0);
1655         return;
1656     }
1657
1658     /* Set Status column. */
1659     keys[0] = "stp_port_id";
1660     str_values[0] = xasprintf(STP_PORT_ID_FMT, status.port_id);
1661     keys[1] = "stp_state";
1662     str_values[1] = xstrdup(stp_state_name(status.state));
1663     keys[2] = "stp_sec_in_state";
1664     str_values[2] = xasprintf("%u", status.sec_in_state);
1665     keys[3] = "stp_role";
1666     str_values[3] = xstrdup(stp_role_name(status.role));
1667
1668     ovsrec_port_set_status(port->cfg, keys, str_values,
1669                            ARRAY_SIZE(str_values));
1670
1671     for (i = 0; i < ARRAY_SIZE(str_values); i++) {
1672         free(str_values[i]);
1673     }
1674
1675     /* Set Statistics column. */
1676     keys[0] = "stp_tx_count";
1677     int_values[0] = status.tx_count;
1678     keys[1] = "stp_rx_count";
1679     int_values[1] = status.rx_count;
1680     keys[2] = "stp_error_count";
1681     int_values[2] = status.error_count;
1682
1683     ovsrec_port_set_statistics(port->cfg, keys, int_values,
1684                                ARRAY_SIZE(int_values));
1685 }
1686
1687 static bool
1688 enable_system_stats(const struct ovsrec_open_vswitch *cfg)
1689 {
1690     const char *enable;
1691
1692     /* Use other-config:enable-system-stats by preference. */
1693     enable = get_ovsrec_key_value(cfg->key_other_config,
1694                                   cfg->value_other_config,
1695                                   cfg->n_other_config,
1696                                   "enable-statistics");
1697     if (enable) {
1698         return !strcmp(enable, "true");
1699     }
1700
1701     /* Disable by default. */
1702     return false;
1703 }
1704
1705 static void
1706 refresh_system_stats(const struct ovsrec_open_vswitch *cfg)
1707 {
1708     struct ovsdb_datum datum;
1709     struct shash stats;
1710
1711     shash_init(&stats);
1712     if (enable_system_stats(cfg)) {
1713         get_system_stats(&stats);
1714     }
1715
1716     ovsdb_datum_from_shash(&datum, &stats);
1717     ovsdb_idl_txn_write(&cfg->header_, &ovsrec_open_vswitch_col_statistics,
1718                         &datum);
1719 }
1720
1721 static inline const char *
1722 nx_role_to_str(enum nx_role role)
1723 {
1724     switch (role) {
1725     case NX_ROLE_OTHER:
1726         return "other";
1727     case NX_ROLE_MASTER:
1728         return "master";
1729     case NX_ROLE_SLAVE:
1730         return "slave";
1731     default:
1732         return "*** INVALID ROLE ***";
1733     }
1734 }
1735
1736 static void
1737 refresh_controller_status(void)
1738 {
1739     struct bridge *br;
1740     struct shash info;
1741     const struct ovsrec_controller *cfg;
1742
1743     shash_init(&info);
1744
1745     /* Accumulate status for controllers on all bridges. */
1746     HMAP_FOR_EACH (br, node, &all_bridges) {
1747         ofproto_get_ofproto_controller_info(br->ofproto, &info);
1748     }
1749
1750     /* Update each controller in the database with current status. */
1751     OVSREC_CONTROLLER_FOR_EACH(cfg, idl) {
1752         struct ofproto_controller_info *cinfo =
1753             shash_find_data(&info, cfg->target);
1754
1755         if (cinfo) {
1756             ovsrec_controller_set_is_connected(cfg, cinfo->is_connected);
1757             ovsrec_controller_set_role(cfg, nx_role_to_str(cinfo->role));
1758             ovsrec_controller_set_status(cfg, (char **) cinfo->pairs.keys,
1759                                          (char **) cinfo->pairs.values,
1760                                          cinfo->pairs.n);
1761         } else {
1762             ovsrec_controller_set_is_connected(cfg, false);
1763             ovsrec_controller_set_role(cfg, NULL);
1764             ovsrec_controller_set_status(cfg, NULL, NULL, 0);
1765         }
1766     }
1767
1768     ofproto_free_ofproto_controller_info(&info);
1769 }
1770
1771 static void
1772 refresh_cfm_stats(void)
1773 {
1774     static struct ovsdb_idl_txn *txn = NULL;
1775
1776     if (!txn) {
1777         struct bridge *br;
1778
1779         txn = ovsdb_idl_txn_create(idl);
1780
1781         HMAP_FOR_EACH (br, node, &all_bridges) {
1782             struct iface *iface;
1783
1784             HMAP_FOR_EACH (iface, name_node, &br->iface_by_name) {
1785                 iface_refresh_cfm_stats(iface);
1786             }
1787         }
1788     }
1789
1790     if (ovsdb_idl_txn_commit(txn) != TXN_INCOMPLETE) {
1791         ovsdb_idl_txn_destroy(txn);
1792         txn = NULL;
1793     }
1794 }
1795
1796 /* Performs periodic activity required by bridges that needs to be done with
1797  * the least possible latency.
1798  *
1799  * It makes sense to call this function a couple of times per poll loop, to
1800  * provide a significant performance boost on some benchmarks with ofprotos
1801  * that use the ofproto-dpif implementation. */
1802 void
1803 bridge_run_fast(void)
1804 {
1805     struct bridge *br;
1806
1807     HMAP_FOR_EACH (br, node, &all_bridges) {
1808         ofproto_run_fast(br->ofproto);
1809     }
1810 }
1811
1812 void
1813 bridge_run(void)
1814 {
1815     const struct ovsrec_open_vswitch *cfg;
1816
1817     bool vlan_splinters_changed;
1818     bool database_changed;
1819     struct bridge *br;
1820
1821     /* (Re)configure if necessary. */
1822     database_changed = ovsdb_idl_run(idl);
1823     if (ovsdb_idl_is_lock_contended(idl)) {
1824         static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 1);
1825         struct bridge *br, *next_br;
1826
1827         VLOG_ERR_RL(&rl, "another ovs-vswitchd process is running, "
1828                     "disabling this process until it goes away");
1829
1830         HMAP_FOR_EACH_SAFE (br, next_br, node, &all_bridges) {
1831             bridge_destroy(br);
1832         }
1833         return;
1834     } else if (!ovsdb_idl_has_lock(idl)) {
1835         return;
1836     }
1837     cfg = ovsrec_open_vswitch_first(idl);
1838
1839     /* Let each bridge do the work that it needs to do. */
1840     HMAP_FOR_EACH (br, node, &all_bridges) {
1841         ofproto_run(br->ofproto);
1842     }
1843
1844     /* Re-configure SSL.  We do this on every trip through the main loop,
1845      * instead of just when the database changes, because the contents of the
1846      * key and certificate files can change without the database changing.
1847      *
1848      * We do this before bridge_reconfigure() because that function might
1849      * initiate SSL connections and thus requires SSL to be configured. */
1850     if (cfg && cfg->ssl) {
1851         const struct ovsrec_ssl *ssl = cfg->ssl;
1852
1853         stream_ssl_set_key_and_cert(ssl->private_key, ssl->certificate);
1854         stream_ssl_set_ca_cert_file(ssl->ca_cert, ssl->bootstrap_ca_cert);
1855     }
1856
1857     /* If VLAN splinters are in use, then we need to reconfigure if VLAN usage
1858      * has changed. */
1859     vlan_splinters_changed = false;
1860     if (vlan_splinters_enabled_anywhere) {
1861         HMAP_FOR_EACH (br, node, &all_bridges) {
1862             if (ofproto_has_vlan_usage_changed(br->ofproto)) {
1863                 vlan_splinters_changed = true;
1864                 break;
1865             }
1866         }
1867     }
1868
1869     if (database_changed || vlan_splinters_changed) {
1870         if (cfg) {
1871             struct ovsdb_idl_txn *txn = ovsdb_idl_txn_create(idl);
1872
1873             bridge_reconfigure(cfg);
1874
1875             ovsrec_open_vswitch_set_cur_cfg(cfg, cfg->next_cfg);
1876             ovsdb_idl_txn_commit(txn);
1877             ovsdb_idl_txn_destroy(txn); /* XXX */
1878         } else {
1879             /* We still need to reconfigure to avoid dangling pointers to
1880              * now-destroyed ovsrec structures inside bridge data. */
1881             static const struct ovsrec_open_vswitch null_cfg;
1882
1883             bridge_reconfigure(&null_cfg);
1884         }
1885     }
1886
1887     /* Refresh system and interface stats if necessary. */
1888     if (time_msec() >= stats_timer) {
1889         if (cfg) {
1890             struct ovsdb_idl_txn *txn;
1891
1892             txn = ovsdb_idl_txn_create(idl);
1893             HMAP_FOR_EACH (br, node, &all_bridges) {
1894                 struct port *port;
1895                 struct mirror *m;
1896
1897                 HMAP_FOR_EACH (port, hmap_node, &br->ports) {
1898                     struct iface *iface;
1899
1900                     LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
1901                         iface_refresh_stats(iface);
1902                         iface_refresh_status(iface);
1903                     }
1904                 }
1905
1906                 HMAP_FOR_EACH (m, hmap_node, &br->mirrors) {
1907                     mirror_refresh_stats(m);
1908                 }
1909
1910             }
1911             refresh_system_stats(cfg);
1912             refresh_controller_status();
1913             ovsdb_idl_txn_commit(txn);
1914             ovsdb_idl_txn_destroy(txn); /* XXX */
1915         }
1916
1917         stats_timer = time_msec() + STATS_INTERVAL;
1918     }
1919
1920     if (time_msec() >= db_limiter) {
1921         struct ovsdb_idl_txn *txn;
1922
1923         txn = ovsdb_idl_txn_create(idl);
1924         HMAP_FOR_EACH (br, node, &all_bridges) {
1925             struct iface *iface;
1926             struct port *port;
1927
1928             br_refresh_stp_status(br);
1929
1930             HMAP_FOR_EACH (port, hmap_node, &br->ports) {
1931                 port_refresh_stp_status(port);
1932             }
1933
1934             HMAP_FOR_EACH (iface, name_node, &br->iface_by_name) {
1935                 const char *link_state;
1936                 int64_t link_resets;
1937                 int current;
1938
1939                 if (iface_is_synthetic(iface)) {
1940                     continue;
1941                 }
1942
1943                 current = ofproto_port_is_lacp_current(br->ofproto,
1944                                                        iface->ofp_port);
1945                 if (current >= 0) {
1946                     bool bl = current;
1947                     ovsrec_interface_set_lacp_current(iface->cfg, &bl, 1);
1948                 } else {
1949                     ovsrec_interface_set_lacp_current(iface->cfg, NULL, 0);
1950                 }
1951
1952                 link_state = netdev_get_carrier(iface->netdev) ? "up" : "down";
1953                 ovsrec_interface_set_link_state(iface->cfg, link_state);
1954
1955                 link_resets = netdev_get_carrier_resets(iface->netdev);
1956                 ovsrec_interface_set_link_resets(iface->cfg, &link_resets, 1);
1957             }
1958         }
1959
1960         if (ovsdb_idl_txn_commit(txn) != TXN_UNCHANGED) {
1961             db_limiter = time_msec() + DB_LIMIT_INTERVAL;
1962         }
1963         ovsdb_idl_txn_destroy(txn);
1964     }
1965
1966     refresh_cfm_stats();
1967 }
1968
1969 void
1970 bridge_wait(void)
1971 {
1972     ovsdb_idl_wait(idl);
1973     if (!hmap_is_empty(&all_bridges)) {
1974         struct bridge *br;
1975
1976         HMAP_FOR_EACH (br, node, &all_bridges) {
1977             ofproto_wait(br->ofproto);
1978         }
1979         poll_timer_wait_until(stats_timer);
1980
1981         if (db_limiter > time_msec()) {
1982             poll_timer_wait_until(db_limiter);
1983         }
1984     }
1985 }
1986 \f
1987 /* QoS unixctl user interface functions. */
1988
1989 struct qos_unixctl_show_cbdata {
1990     struct ds *ds;
1991     struct iface *iface;
1992 };
1993
1994 static void
1995 qos_unixctl_show_cb(unsigned int queue_id,
1996                     const struct shash *details,
1997                     void *aux)
1998 {
1999     struct qos_unixctl_show_cbdata *data = aux;
2000     struct ds *ds = data->ds;
2001     struct iface *iface = data->iface;
2002     struct netdev_queue_stats stats;
2003     struct shash_node *node;
2004     int error;
2005
2006     ds_put_cstr(ds, "\n");
2007     if (queue_id) {
2008         ds_put_format(ds, "Queue %u:\n", queue_id);
2009     } else {
2010         ds_put_cstr(ds, "Default:\n");
2011     }
2012
2013     SHASH_FOR_EACH (node, details) {
2014         ds_put_format(ds, "\t%s: %s\n", node->name, (char *)node->data);
2015     }
2016
2017     error = netdev_get_queue_stats(iface->netdev, queue_id, &stats);
2018     if (!error) {
2019         if (stats.tx_packets != UINT64_MAX) {
2020             ds_put_format(ds, "\ttx_packets: %"PRIu64"\n", stats.tx_packets);
2021         }
2022
2023         if (stats.tx_bytes != UINT64_MAX) {
2024             ds_put_format(ds, "\ttx_bytes: %"PRIu64"\n", stats.tx_bytes);
2025         }
2026
2027         if (stats.tx_errors != UINT64_MAX) {
2028             ds_put_format(ds, "\ttx_errors: %"PRIu64"\n", stats.tx_errors);
2029         }
2030     } else {
2031         ds_put_format(ds, "\tFailed to get statistics for queue %u: %s",
2032                       queue_id, strerror(error));
2033     }
2034 }
2035
2036 static void
2037 qos_unixctl_show(struct unixctl_conn *conn,
2038                  const char *args, void *aux OVS_UNUSED)
2039 {
2040     struct ds ds = DS_EMPTY_INITIALIZER;
2041     struct shash sh = SHASH_INITIALIZER(&sh);
2042     struct iface *iface;
2043     const char *type;
2044     struct shash_node *node;
2045     struct qos_unixctl_show_cbdata data;
2046     int error;
2047
2048     iface = iface_find(args);
2049     if (!iface) {
2050         unixctl_command_reply(conn, 501, "no such interface");
2051         return;
2052     }
2053
2054     netdev_get_qos(iface->netdev, &type, &sh);
2055
2056     if (*type != '\0') {
2057         ds_put_format(&ds, "QoS: %s %s\n", iface->name, type);
2058
2059         SHASH_FOR_EACH (node, &sh) {
2060             ds_put_format(&ds, "%s: %s\n", node->name, (char *)node->data);
2061         }
2062
2063         data.ds = &ds;
2064         data.iface = iface;
2065         error = netdev_dump_queues(iface->netdev, qos_unixctl_show_cb, &data);
2066
2067         if (error) {
2068             ds_put_format(&ds, "failed to dump queues: %s", strerror(error));
2069         }
2070         unixctl_command_reply(conn, 200, ds_cstr(&ds));
2071     } else {
2072         ds_put_format(&ds, "QoS not configured on %s\n", iface->name);
2073         unixctl_command_reply(conn, 501, ds_cstr(&ds));
2074     }
2075
2076     shash_destroy_free_data(&sh);
2077     ds_destroy(&ds);
2078 }
2079 \f
2080 /* Bridge reconfiguration functions. */
2081 static void
2082 bridge_create(const struct ovsrec_bridge *br_cfg)
2083 {
2084     struct bridge *br;
2085
2086     assert(!bridge_lookup(br_cfg->name));
2087     br = xzalloc(sizeof *br);
2088
2089     br->name = xstrdup(br_cfg->name);
2090     br->type = xstrdup(ofproto_normalize_type(br_cfg->datapath_type));
2091     br->cfg = br_cfg;
2092
2093     /* Derive the default Ethernet address from the bridge's UUID.  This should
2094      * be unique and it will be stable between ovs-vswitchd runs.  */
2095     memcpy(br->default_ea, &br_cfg->header_.uuid, ETH_ADDR_LEN);
2096     eth_addr_mark_random(br->default_ea);
2097
2098     hmap_init(&br->ports);
2099     hmap_init(&br->ifaces);
2100     hmap_init(&br->iface_by_name);
2101     hmap_init(&br->mirrors);
2102
2103     hmap_insert(&all_bridges, &br->node, hash_string(br->name, 0));
2104 }
2105
2106 static void
2107 bridge_destroy(struct bridge *br)
2108 {
2109     if (br) {
2110         struct mirror *mirror, *next_mirror;
2111         struct port *port, *next_port;
2112
2113         HMAP_FOR_EACH_SAFE (port, next_port, hmap_node, &br->ports) {
2114             port_destroy(port);
2115         }
2116         HMAP_FOR_EACH_SAFE (mirror, next_mirror, hmap_node, &br->mirrors) {
2117             mirror_destroy(mirror);
2118         }
2119         hmap_remove(&all_bridges, &br->node);
2120         ofproto_destroy(br->ofproto);
2121         hmap_destroy(&br->ifaces);
2122         hmap_destroy(&br->ports);
2123         hmap_destroy(&br->iface_by_name);
2124         hmap_destroy(&br->mirrors);
2125         free(br->name);
2126         free(br->type);
2127         free(br);
2128     }
2129 }
2130
2131 static struct bridge *
2132 bridge_lookup(const char *name)
2133 {
2134     struct bridge *br;
2135
2136     HMAP_FOR_EACH_WITH_HASH (br, node, hash_string(name, 0), &all_bridges) {
2137         if (!strcmp(br->name, name)) {
2138             return br;
2139         }
2140     }
2141     return NULL;
2142 }
2143
2144 /* Handle requests for a listing of all flows known by the OpenFlow
2145  * stack, including those normally hidden. */
2146 static void
2147 bridge_unixctl_dump_flows(struct unixctl_conn *conn,
2148                           const char *args, void *aux OVS_UNUSED)
2149 {
2150     struct bridge *br;
2151     struct ds results;
2152
2153     br = bridge_lookup(args);
2154     if (!br) {
2155         unixctl_command_reply(conn, 501, "Unknown bridge");
2156         return;
2157     }
2158
2159     ds_init(&results);
2160     ofproto_get_all_flows(br->ofproto, &results);
2161
2162     unixctl_command_reply(conn, 200, ds_cstr(&results));
2163     ds_destroy(&results);
2164 }
2165
2166 /* "bridge/reconnect [BRIDGE]": makes BRIDGE drop all of its controller
2167  * connections and reconnect.  If BRIDGE is not specified, then all bridges
2168  * drop their controller connections and reconnect. */
2169 static void
2170 bridge_unixctl_reconnect(struct unixctl_conn *conn,
2171                          const char *args, void *aux OVS_UNUSED)
2172 {
2173     struct bridge *br;
2174     if (args[0] != '\0') {
2175         br = bridge_lookup(args);
2176         if (!br) {
2177             unixctl_command_reply(conn, 501, "Unknown bridge");
2178             return;
2179         }
2180         ofproto_reconnect_controllers(br->ofproto);
2181     } else {
2182         HMAP_FOR_EACH (br, node, &all_bridges) {
2183             ofproto_reconnect_controllers(br->ofproto);
2184         }
2185     }
2186     unixctl_command_reply(conn, 200, NULL);
2187 }
2188
2189 static size_t
2190 bridge_get_controllers(const struct bridge *br,
2191                        struct ovsrec_controller ***controllersp)
2192 {
2193     struct ovsrec_controller **controllers;
2194     size_t n_controllers;
2195
2196     controllers = br->cfg->controller;
2197     n_controllers = br->cfg->n_controller;
2198
2199     if (n_controllers == 1 && !strcmp(controllers[0]->target, "none")) {
2200         controllers = NULL;
2201         n_controllers = 0;
2202     }
2203
2204     if (controllersp) {
2205         *controllersp = controllers;
2206     }
2207     return n_controllers;
2208 }
2209
2210 /* Adds and deletes "struct port"s and "struct iface"s under 'br' to match
2211  * those configured in 'br->cfg'. */
2212 static void
2213 bridge_add_del_ports(struct bridge *br,
2214                      const unsigned long int *splinter_vlans)
2215 {
2216     struct port *port, *next;
2217     struct shash_node *node;
2218     struct shash new_ports;
2219     size_t i;
2220
2221     /* Collect new ports. */
2222     shash_init(&new_ports);
2223     for (i = 0; i < br->cfg->n_ports; i++) {
2224         const char *name = br->cfg->ports[i]->name;
2225         if (!shash_add_once(&new_ports, name, br->cfg->ports[i])) {
2226             VLOG_WARN("bridge %s: %s specified twice as bridge port",
2227                       br->name, name);
2228         }
2229     }
2230     if (bridge_get_controllers(br, NULL)
2231         && !shash_find(&new_ports, br->name)) {
2232         VLOG_WARN("bridge %s: no port named %s, synthesizing one",
2233                   br->name, br->name);
2234
2235         br->synth_local_port.interfaces = &br->synth_local_ifacep;
2236         br->synth_local_port.n_interfaces = 1;
2237         br->synth_local_port.name = br->name;
2238
2239         br->synth_local_iface.name = br->name;
2240         br->synth_local_iface.type = "internal";
2241
2242         br->synth_local_ifacep = &br->synth_local_iface;
2243
2244         shash_add(&new_ports, br->name, &br->synth_local_port);
2245     }
2246
2247     if (splinter_vlans) {
2248         add_vlan_splinter_ports(br, splinter_vlans, &new_ports);
2249     }
2250
2251     /* Get rid of deleted ports.
2252      * Get rid of deleted interfaces on ports that still exist. */
2253     HMAP_FOR_EACH_SAFE (port, next, hmap_node, &br->ports) {
2254         port->cfg = shash_find_data(&new_ports, port->name);
2255         if (!port->cfg) {
2256             port_destroy(port);
2257         } else {
2258             port_del_ifaces(port);
2259         }
2260     }
2261
2262     /* Create new ports.
2263      * Add new interfaces to existing ports. */
2264     SHASH_FOR_EACH (node, &new_ports) {
2265         struct port *port = port_lookup(br, node->name);
2266         if (!port) {
2267             struct ovsrec_port *cfg = node->data;
2268             port = port_create(br, cfg);
2269         }
2270         port_add_ifaces(port);
2271         if (list_is_empty(&port->ifaces)) {
2272             VLOG_WARN("bridge %s: port %s has no interfaces, dropping",
2273                       br->name, port->name);
2274             port_destroy(port);
2275         }
2276     }
2277     shash_destroy(&new_ports);
2278 }
2279
2280 /* Initializes 'oc' appropriately as a management service controller for
2281  * 'br'.
2282  *
2283  * The caller must free oc->target when it is no longer needed. */
2284 static void
2285 bridge_ofproto_controller_for_mgmt(const struct bridge *br,
2286                                    struct ofproto_controller *oc)
2287 {
2288     oc->target = xasprintf("punix:%s/%s.mgmt", ovs_rundir(), br->name);
2289     oc->max_backoff = 0;
2290     oc->probe_interval = 60;
2291     oc->band = OFPROTO_OUT_OF_BAND;
2292     oc->rate_limit = 0;
2293     oc->burst_limit = 0;
2294 }
2295
2296 /* Converts ovsrec_controller 'c' into an ofproto_controller in 'oc'.  */
2297 static void
2298 bridge_ofproto_controller_from_ovsrec(const struct ovsrec_controller *c,
2299                                       struct ofproto_controller *oc)
2300 {
2301     oc->target = c->target;
2302     oc->max_backoff = c->max_backoff ? *c->max_backoff / 1000 : 8;
2303     oc->probe_interval = c->inactivity_probe ? *c->inactivity_probe / 1000 : 5;
2304     oc->band = (!c->connection_mode || !strcmp(c->connection_mode, "in-band")
2305                 ? OFPROTO_IN_BAND : OFPROTO_OUT_OF_BAND);
2306     oc->rate_limit = c->controller_rate_limit ? *c->controller_rate_limit : 0;
2307     oc->burst_limit = (c->controller_burst_limit
2308                        ? *c->controller_burst_limit : 0);
2309 }
2310
2311 /* Configures the IP stack for 'br''s local interface properly according to the
2312  * configuration in 'c'.  */
2313 static void
2314 bridge_configure_local_iface_netdev(struct bridge *br,
2315                                     struct ovsrec_controller *c)
2316 {
2317     struct netdev *netdev;
2318     struct in_addr mask, gateway;
2319
2320     struct iface *local_iface;
2321     struct in_addr ip;
2322
2323     /* If there's no local interface or no IP address, give up. */
2324     local_iface = iface_from_ofp_port(br, OFPP_LOCAL);
2325     if (!local_iface || !c->local_ip || !inet_aton(c->local_ip, &ip)) {
2326         return;
2327     }
2328
2329     /* Bring up the local interface. */
2330     netdev = local_iface->netdev;
2331     netdev_turn_flags_on(netdev, NETDEV_UP, true);
2332
2333     /* Configure the IP address and netmask. */
2334     if (!c->local_netmask
2335         || !inet_aton(c->local_netmask, &mask)
2336         || !mask.s_addr) {
2337         mask.s_addr = guess_netmask(ip.s_addr);
2338     }
2339     if (!netdev_set_in4(netdev, ip, mask)) {
2340         VLOG_INFO("bridge %s: configured IP address "IP_FMT", netmask "IP_FMT,
2341                   br->name, IP_ARGS(&ip.s_addr), IP_ARGS(&mask.s_addr));
2342     }
2343
2344     /* Configure the default gateway. */
2345     if (c->local_gateway
2346         && inet_aton(c->local_gateway, &gateway)
2347         && gateway.s_addr) {
2348         if (!netdev_add_router(netdev, gateway)) {
2349             VLOG_INFO("bridge %s: configured gateway "IP_FMT,
2350                       br->name, IP_ARGS(&gateway.s_addr));
2351         }
2352     }
2353 }
2354
2355 /* Returns true if 'a' and 'b' are the same except that any number of slashes
2356  * in either string are treated as equal to any number of slashes in the other,
2357  * e.g. "x///y" is equal to "x/y". */
2358 static bool
2359 equal_pathnames(const char *a, const char *b)
2360 {
2361     while (*a == *b) {
2362         if (*a == '/') {
2363             a += strspn(a, "/");
2364             b += strspn(b, "/");
2365         } else if (*a == '\0') {
2366             return true;
2367         } else {
2368             a++;
2369             b++;
2370         }
2371     }
2372     return false;
2373 }
2374
2375 static void
2376 bridge_configure_remotes(struct bridge *br,
2377                          const struct sockaddr_in *managers, size_t n_managers)
2378 {
2379     const char *disable_ib_str, *queue_id_str;
2380     bool disable_in_band = false;
2381     int queue_id;
2382
2383     struct ovsrec_controller **controllers;
2384     size_t n_controllers;
2385
2386     enum ofproto_fail_mode fail_mode;
2387
2388     struct ofproto_controller *ocs;
2389     size_t n_ocs;
2390     size_t i;
2391
2392     /* Check if we should disable in-band control on this bridge. */
2393     disable_ib_str = bridge_get_other_config(br->cfg, "disable-in-band");
2394     if (disable_ib_str && !strcmp(disable_ib_str, "true")) {
2395         disable_in_band = true;
2396     }
2397
2398     /* Set OpenFlow queue ID for in-band control. */
2399     queue_id_str = bridge_get_other_config(br->cfg, "in-band-queue");
2400     queue_id = queue_id_str ? strtol(queue_id_str, NULL, 10) : -1;
2401     ofproto_set_in_band_queue(br->ofproto, queue_id);
2402
2403     if (disable_in_band) {
2404         ofproto_set_extra_in_band_remotes(br->ofproto, NULL, 0);
2405     } else {
2406         ofproto_set_extra_in_band_remotes(br->ofproto, managers, n_managers);
2407     }
2408
2409     n_controllers = bridge_get_controllers(br, &controllers);
2410
2411     ocs = xmalloc((n_controllers + 1) * sizeof *ocs);
2412     n_ocs = 0;
2413
2414     bridge_ofproto_controller_for_mgmt(br, &ocs[n_ocs++]);
2415     for (i = 0; i < n_controllers; i++) {
2416         struct ovsrec_controller *c = controllers[i];
2417
2418         if (!strncmp(c->target, "punix:", 6)
2419             || !strncmp(c->target, "unix:", 5)) {
2420             static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
2421             char *whitelist;
2422
2423             whitelist = xasprintf("unix:%s/%s.controller",
2424                                   ovs_rundir(), br->name);
2425             if (!equal_pathnames(c->target, whitelist)) {
2426                 /* Prevent remote ovsdb-server users from accessing arbitrary
2427                  * Unix domain sockets and overwriting arbitrary local
2428                  * files. */
2429                 VLOG_ERR_RL(&rl, "bridge %s: Not adding Unix domain socket "
2430                             "controller \"%s\" due to possibility for remote "
2431                             "exploit.  Instead, specify whitelisted \"%s\" or "
2432                             "connect to \"unix:%s/%s.mgmt\" (which is always "
2433                             "available without special configuration).",
2434                             br->name, c->target, whitelist,
2435                             ovs_rundir(), br->name);
2436                 free(whitelist);
2437                 continue;
2438             }
2439
2440             free(whitelist);
2441         }
2442
2443         bridge_configure_local_iface_netdev(br, c);
2444         bridge_ofproto_controller_from_ovsrec(c, &ocs[n_ocs]);
2445         if (disable_in_band) {
2446             ocs[n_ocs].band = OFPROTO_OUT_OF_BAND;
2447         }
2448         n_ocs++;
2449     }
2450
2451     ofproto_set_controllers(br->ofproto, ocs, n_ocs);
2452     free(ocs[0].target); /* From bridge_ofproto_controller_for_mgmt(). */
2453     free(ocs);
2454
2455     /* Set the fail-mode. */
2456     fail_mode = !br->cfg->fail_mode
2457                 || !strcmp(br->cfg->fail_mode, "standalone")
2458                     ? OFPROTO_FAIL_STANDALONE
2459                     : OFPROTO_FAIL_SECURE;
2460     ofproto_set_fail_mode(br->ofproto, fail_mode);
2461
2462     /* Configure OpenFlow controller connection snooping. */
2463     if (!ofproto_has_snoops(br->ofproto)) {
2464         struct sset snoops;
2465
2466         sset_init(&snoops);
2467         sset_add_and_free(&snoops, xasprintf("punix:%s/%s.snoop",
2468                                              ovs_rundir(), br->name));
2469         ofproto_set_snoops(br->ofproto, &snoops);
2470         sset_destroy(&snoops);
2471     }
2472 }
2473 \f
2474 /* Port functions. */
2475
2476 static struct port *
2477 port_create(struct bridge *br, const struct ovsrec_port *cfg)
2478 {
2479     struct port *port;
2480
2481     port = xzalloc(sizeof *port);
2482     port->bridge = br;
2483     port->name = xstrdup(cfg->name);
2484     port->cfg = cfg;
2485     list_init(&port->ifaces);
2486
2487     hmap_insert(&br->ports, &port->hmap_node, hash_string(port->name, 0));
2488
2489     VLOG_INFO("created port %s on bridge %s", port->name, br->name);
2490
2491     return port;
2492 }
2493
2494 static const char *
2495 get_port_other_config(const struct ovsrec_port *port, const char *key,
2496                       const char *default_value)
2497 {
2498     const char *value;
2499
2500     value = get_ovsrec_key_value(port->key_other_config,
2501                                  port->value_other_config,
2502                                  port->n_other_config, key);
2503     return value ? value : default_value;
2504 }
2505
2506 static const char *
2507 get_interface_other_config(const struct ovsrec_interface *iface,
2508                            const char *key, const char *default_value)
2509 {
2510     const char *value;
2511
2512     value = get_ovsrec_key_value(iface->key_other_config,
2513                                  iface->value_other_config,
2514                                  iface->n_other_config, key);
2515     return value ? value : default_value;
2516 }
2517
2518 /* Deletes interfaces from 'port' that are no longer configured for it. */
2519 static void
2520 port_del_ifaces(struct port *port)
2521 {
2522     struct iface *iface, *next;
2523     struct sset new_ifaces;
2524     size_t i;
2525
2526     /* Collect list of new interfaces. */
2527     sset_init(&new_ifaces);
2528     for (i = 0; i < port->cfg->n_interfaces; i++) {
2529         const char *name = port->cfg->interfaces[i]->name;
2530         const char *type = port->cfg->interfaces[i]->name;
2531         if (strcmp(type, "null")) {
2532             sset_add(&new_ifaces, name);
2533         }
2534     }
2535
2536     /* Get rid of deleted interfaces. */
2537     LIST_FOR_EACH_SAFE (iface, next, port_elem, &port->ifaces) {
2538         if (!sset_contains(&new_ifaces, iface->name)) {
2539             iface_destroy(iface);
2540         }
2541     }
2542
2543     sset_destroy(&new_ifaces);
2544 }
2545
2546 /* Adds new interfaces to 'port' and updates 'type' and 'cfg' members of
2547  * existing ones. */
2548 static void
2549 port_add_ifaces(struct port *port)
2550 {
2551     struct shash new_ifaces;
2552     struct shash_node *node;
2553     size_t i;
2554
2555     /* Collect new ifaces. */
2556     shash_init(&new_ifaces);
2557     for (i = 0; i < port->cfg->n_interfaces; i++) {
2558         const struct ovsrec_interface *cfg = port->cfg->interfaces[i];
2559         if (strcmp(cfg->type, "null")
2560             && !shash_add_once(&new_ifaces, cfg->name, cfg)) {
2561             VLOG_WARN("port %s: %s specified twice as port interface",
2562                       port->name, cfg->name);
2563             iface_clear_db_record(cfg);
2564         }
2565     }
2566
2567     /* Create new interfaces.
2568      * Update interface types and 'cfg' members. */
2569     SHASH_FOR_EACH (node, &new_ifaces) {
2570         const struct ovsrec_interface *cfg = node->data;
2571         const char *iface_name = node->name;
2572         struct iface *iface;
2573
2574         iface = iface_lookup(port->bridge, iface_name);
2575         if (!iface) {
2576             iface = iface_create(port, cfg);
2577         } else {
2578             iface->cfg = cfg;
2579         }
2580
2581         /* Determine interface type.  The local port always has type
2582          * "internal".  Other ports take their type from the database and
2583          * default to "system" if none is specified. */
2584         iface->type = (!strcmp(iface_name, port->bridge->name) ? "internal"
2585                        : cfg->type[0] ? cfg->type
2586                        : "system");
2587     }
2588     shash_destroy(&new_ifaces);
2589 }
2590
2591 static void
2592 port_destroy(struct port *port)
2593 {
2594     if (port) {
2595         struct bridge *br = port->bridge;
2596         struct iface *iface, *next;
2597
2598         if (br->ofproto) {
2599             ofproto_bundle_unregister(br->ofproto, port);
2600         }
2601
2602         LIST_FOR_EACH_SAFE (iface, next, port_elem, &port->ifaces) {
2603             iface_destroy(iface);
2604         }
2605
2606         hmap_remove(&br->ports, &port->hmap_node);
2607
2608         VLOG_INFO("destroyed port %s on bridge %s", port->name, br->name);
2609
2610         free(port->name);
2611         free(port);
2612     }
2613 }
2614
2615 static struct port *
2616 port_lookup(const struct bridge *br, const char *name)
2617 {
2618     struct port *port;
2619
2620     HMAP_FOR_EACH_WITH_HASH (port, hmap_node, hash_string(name, 0),
2621                              &br->ports) {
2622         if (!strcmp(port->name, name)) {
2623             return port;
2624         }
2625     }
2626     return NULL;
2627 }
2628
2629 static bool
2630 enable_lacp(struct port *port, bool *activep)
2631 {
2632     if (!port->cfg->lacp) {
2633         /* XXX when LACP implementation has been sufficiently tested, enable by
2634          * default and make active on bonded ports. */
2635         return false;
2636     } else if (!strcmp(port->cfg->lacp, "off")) {
2637         return false;
2638     } else if (!strcmp(port->cfg->lacp, "active")) {
2639         *activep = true;
2640         return true;
2641     } else if (!strcmp(port->cfg->lacp, "passive")) {
2642         *activep = false;
2643         return true;
2644     } else {
2645         VLOG_WARN("port %s: unknown LACP mode %s",
2646                   port->name, port->cfg->lacp);
2647         return false;
2648     }
2649 }
2650
2651 static struct lacp_settings *
2652 port_configure_lacp(struct port *port, struct lacp_settings *s)
2653 {
2654     const char *lacp_time, *system_id;
2655     long long int custom_time;
2656     int priority;
2657
2658     if (!enable_lacp(port, &s->active)) {
2659         return NULL;
2660     }
2661
2662     s->name = port->name;
2663
2664     system_id = get_port_other_config(port->cfg, "lacp-system-id", NULL);
2665     if (!system_id
2666         || sscanf(system_id, ETH_ADDR_SCAN_FMT,
2667                   ETH_ADDR_SCAN_ARGS(s->id)) != ETH_ADDR_SCAN_COUNT) {
2668         memcpy(s->id, port->bridge->ea, ETH_ADDR_LEN);
2669     }
2670
2671     if (eth_addr_is_zero(s->id)) {
2672         VLOG_WARN("port %s: Invalid zero LACP system ID.", port->name);
2673         return NULL;
2674     }
2675
2676     /* Prefer bondable links if unspecified. */
2677     priority = atoi(get_port_other_config(port->cfg, "lacp-system-priority",
2678                                           "0"));
2679     s->priority = (priority > 0 && priority <= UINT16_MAX
2680                    ? priority
2681                    : UINT16_MAX - !list_is_short(&port->ifaces));
2682
2683     s->heartbeat = !strcmp(get_port_other_config(port->cfg,
2684                                                  "lacp-heartbeat",
2685                                                  "false"), "true");
2686
2687     lacp_time = get_port_other_config(port->cfg, "lacp-time", "slow");
2688     custom_time = atoi(lacp_time);
2689     if (!strcmp(lacp_time, "fast")) {
2690         s->lacp_time = LACP_TIME_FAST;
2691     } else if (!strcmp(lacp_time, "slow")) {
2692         s->lacp_time = LACP_TIME_SLOW;
2693     } else if (custom_time > 0) {
2694         s->lacp_time = LACP_TIME_CUSTOM;
2695         s->custom_time = custom_time;
2696     } else {
2697         s->lacp_time = LACP_TIME_SLOW;
2698     }
2699
2700     return s;
2701 }
2702
2703 static void
2704 iface_configure_lacp(struct iface *iface, struct lacp_slave_settings *s)
2705 {
2706     int priority, portid, key;
2707
2708     portid = atoi(get_interface_other_config(iface->cfg, "lacp-port-id", "0"));
2709     priority = atoi(get_interface_other_config(iface->cfg,
2710                                                "lacp-port-priority", "0"));
2711     key = atoi(get_interface_other_config(iface->cfg, "lacp-aggregation-key",
2712                                           "0"));
2713
2714     if (portid <= 0 || portid > UINT16_MAX) {
2715         portid = iface->ofp_port;
2716     }
2717
2718     if (priority <= 0 || priority > UINT16_MAX) {
2719         priority = UINT16_MAX;
2720     }
2721
2722     if (key < 0 || key > UINT16_MAX) {
2723         key = 0;
2724     }
2725
2726     s->name = iface->name;
2727     s->id = portid;
2728     s->priority = priority;
2729     s->key = key;
2730 }
2731
2732 static void
2733 port_configure_bond(struct port *port, struct bond_settings *s,
2734                     uint32_t *bond_stable_ids)
2735 {
2736     const char *detect_s;
2737     struct iface *iface;
2738     int miimon_interval;
2739     size_t i;
2740
2741     s->name = port->name;
2742     s->balance = BM_SLB;
2743     if (port->cfg->bond_mode
2744         && !bond_mode_from_string(&s->balance, port->cfg->bond_mode)) {
2745         VLOG_WARN("port %s: unknown bond_mode %s, defaulting to %s",
2746                   port->name, port->cfg->bond_mode,
2747                   bond_mode_to_string(s->balance));
2748     }
2749     if (s->balance == BM_SLB && port->bridge->cfg->n_flood_vlans) {
2750         VLOG_WARN("port %s: SLB bonds are incompatible with flood_vlans, "
2751                   "please use another bond type or disable flood_vlans",
2752                   port->name);
2753     }
2754
2755     miimon_interval = atoi(get_port_other_config(port->cfg,
2756                                                  "bond-miimon-interval", "0"));
2757     if (miimon_interval <= 0) {
2758         miimon_interval = 200;
2759     }
2760
2761     detect_s = get_port_other_config(port->cfg, "bond-detect-mode", "carrier");
2762     if (!strcmp(detect_s, "carrier")) {
2763         miimon_interval = 0;
2764     } else if (strcmp(detect_s, "miimon")) {
2765         VLOG_WARN("port %s: unsupported bond-detect-mode %s, "
2766                   "defaulting to carrier", port->name, detect_s);
2767         miimon_interval = 0;
2768     }
2769
2770     s->up_delay = MAX(0, port->cfg->bond_updelay);
2771     s->down_delay = MAX(0, port->cfg->bond_downdelay);
2772     s->basis = atoi(get_port_other_config(port->cfg, "bond-hash-basis", "0"));
2773     s->rebalance_interval = atoi(
2774         get_port_other_config(port->cfg, "bond-rebalance-interval", "10000"));
2775     if (s->rebalance_interval < 1000) {
2776         s->rebalance_interval = 1000;
2777     }
2778
2779     s->fake_iface = port->cfg->bond_fake_iface;
2780
2781     i = 0;
2782     LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
2783         long long stable_id;
2784
2785         stable_id = atoll(get_interface_other_config(iface->cfg,
2786                                                      "bond-stable-id", "0"));
2787         if (stable_id <= 0 || stable_id >= UINT32_MAX) {
2788             stable_id = iface->ofp_port;
2789         }
2790         bond_stable_ids[i++] = stable_id;
2791
2792         netdev_set_miimon_interval(iface->netdev, miimon_interval);
2793     }
2794 }
2795
2796 /* Returns true if 'port' is synthetic, that is, if we constructed it locally
2797  * instead of obtaining it from the database. */
2798 static bool
2799 port_is_synthetic(const struct port *port)
2800 {
2801     return ovsdb_idl_row_is_synthetic(&port->cfg->header_);
2802 }
2803 \f
2804 /* Interface functions. */
2805
2806 static struct iface *
2807 iface_create(struct port *port, const struct ovsrec_interface *if_cfg)
2808 {
2809     struct bridge *br = port->bridge;
2810     struct iface *iface;
2811     char *name = if_cfg->name;
2812
2813     iface = xzalloc(sizeof *iface);
2814     iface->port = port;
2815     iface->name = xstrdup(name);
2816     iface->ofp_port = -1;
2817     iface->tag = tag_create_random();
2818     iface->netdev = NULL;
2819     iface->cfg = if_cfg;
2820
2821     hmap_insert(&br->iface_by_name, &iface->name_node, hash_string(name, 0));
2822
2823     list_push_back(&port->ifaces, &iface->port_elem);
2824
2825     VLOG_DBG("attached network device %s to port %s", iface->name, port->name);
2826
2827     return iface;
2828 }
2829
2830 static void
2831 iface_destroy(struct iface *iface)
2832 {
2833     if (iface) {
2834         struct port *port = iface->port;
2835         struct bridge *br = port->bridge;
2836
2837         if (br->ofproto && iface->ofp_port >= 0) {
2838             ofproto_port_unregister(br->ofproto, iface->ofp_port);
2839         }
2840
2841         if (iface->ofp_port >= 0) {
2842             hmap_remove(&br->ifaces, &iface->ofp_port_node);
2843         }
2844
2845         list_remove(&iface->port_elem);
2846         hmap_remove(&br->iface_by_name, &iface->name_node);
2847
2848         netdev_close(iface->netdev);
2849
2850         free(iface->name);
2851         free(iface);
2852     }
2853 }
2854
2855 static struct iface *
2856 iface_lookup(const struct bridge *br, const char *name)
2857 {
2858     struct iface *iface;
2859
2860     HMAP_FOR_EACH_WITH_HASH (iface, name_node, hash_string(name, 0),
2861                              &br->iface_by_name) {
2862         if (!strcmp(iface->name, name)) {
2863             return iface;
2864         }
2865     }
2866
2867     return NULL;
2868 }
2869
2870 static struct iface *
2871 iface_find(const char *name)
2872 {
2873     const struct bridge *br;
2874
2875     HMAP_FOR_EACH (br, node, &all_bridges) {
2876         struct iface *iface = iface_lookup(br, name);
2877
2878         if (iface) {
2879             return iface;
2880         }
2881     }
2882     return NULL;
2883 }
2884
2885 static struct iface *
2886 iface_from_ofp_port(const struct bridge *br, uint16_t ofp_port)
2887 {
2888     struct iface *iface;
2889
2890     HMAP_FOR_EACH_IN_BUCKET (iface, ofp_port_node,
2891                              hash_int(ofp_port, 0), &br->ifaces) {
2892         if (iface->ofp_port == ofp_port) {
2893             return iface;
2894         }
2895     }
2896     return NULL;
2897 }
2898
2899 /* Set Ethernet address of 'iface', if one is specified in the configuration
2900  * file. */
2901 static void
2902 iface_set_mac(struct iface *iface)
2903 {
2904     uint8_t ea[ETH_ADDR_LEN];
2905
2906     if (!strcmp(iface->type, "internal")
2907         && iface->cfg->mac && eth_addr_from_string(iface->cfg->mac, ea)) {
2908         if (iface->ofp_port == OFPP_LOCAL) {
2909             VLOG_ERR("interface %s: ignoring mac in Interface record "
2910                      "(use Bridge record to set local port's mac)",
2911                      iface->name);
2912         } else if (eth_addr_is_multicast(ea)) {
2913             VLOG_ERR("interface %s: cannot set MAC to multicast address",
2914                      iface->name);
2915         } else {
2916             int error = netdev_set_etheraddr(iface->netdev, ea);
2917             if (error) {
2918                 VLOG_ERR("interface %s: setting MAC failed (%s)",
2919                          iface->name, strerror(error));
2920             }
2921         }
2922     }
2923 }
2924
2925 /* Sets the ofport column of 'if_cfg' to 'ofport'. */
2926 static void
2927 iface_set_ofport(const struct ovsrec_interface *if_cfg, int64_t ofport)
2928 {
2929     if (if_cfg && !ovsdb_idl_row_is_synthetic(&if_cfg->header_)) {
2930         ovsrec_interface_set_ofport(if_cfg, &ofport, 1);
2931     }
2932 }
2933
2934 /* Clears all of the fields in 'if_cfg' that indicate interface status, and
2935  * sets the "ofport" field to -1.
2936  *
2937  * This is appropriate when 'if_cfg''s interface cannot be created or is
2938  * otherwise invalid. */
2939 static void
2940 iface_clear_db_record(const struct ovsrec_interface *if_cfg)
2941 {
2942     if (!ovsdb_idl_row_is_synthetic(&if_cfg->header_)) {
2943         iface_set_ofport(if_cfg, -1);
2944         ovsrec_interface_set_status(if_cfg, NULL, NULL, 0);
2945         ovsrec_interface_set_admin_state(if_cfg, NULL);
2946         ovsrec_interface_set_duplex(if_cfg, NULL);
2947         ovsrec_interface_set_link_speed(if_cfg, NULL, 0);
2948         ovsrec_interface_set_link_state(if_cfg, NULL);
2949         ovsrec_interface_set_mtu(if_cfg, NULL, 0);
2950         ovsrec_interface_set_cfm_fault(if_cfg, NULL, 0);
2951         ovsrec_interface_set_cfm_remote_mpids(if_cfg, NULL, 0);
2952         ovsrec_interface_set_lacp_current(if_cfg, NULL, 0);
2953         ovsrec_interface_set_statistics(if_cfg, NULL, NULL, 0);
2954     }
2955 }
2956
2957 /* Adds the 'n' key-value pairs in 'keys' in 'values' to 'shash'.
2958  *
2959  * The value strings in '*shash' are taken directly from values[], not copied,
2960  * so the caller should not modify or free them. */
2961 static void
2962 shash_from_ovs_idl_map(char **keys, char **values, size_t n,
2963                        struct shash *shash)
2964 {
2965     size_t i;
2966
2967     shash_init(shash);
2968     for (i = 0; i < n; i++) {
2969         shash_add(shash, keys[i], values[i]);
2970     }
2971 }
2972
2973 /* Creates 'keys' and 'values' arrays from 'shash'.
2974  *
2975  * Sets 'keys' and 'values' to heap allocated arrays representing the key-value
2976  * pairs in 'shash'.  The caller takes ownership of 'keys' and 'values'.  They
2977  * are populated with with strings taken directly from 'shash' and thus have
2978  * the same ownership of the key-value pairs in shash.
2979  */
2980 static void
2981 shash_to_ovs_idl_map(struct shash *shash,
2982                      char ***keys, char ***values, size_t *n)
2983 {
2984     size_t i, count;
2985     char **k, **v;
2986     struct shash_node *sn;
2987
2988     count = shash_count(shash);
2989
2990     k = xmalloc(count * sizeof *k);
2991     v = xmalloc(count * sizeof *v);
2992
2993     i = 0;
2994     SHASH_FOR_EACH(sn, shash) {
2995         k[i] = sn->name;
2996         v[i] = sn->data;
2997         i++;
2998     }
2999
3000     *n      = count;
3001     *keys   = k;
3002     *values = v;
3003 }
3004
3005 struct iface_delete_queues_cbdata {
3006     struct netdev *netdev;
3007     const struct ovsdb_datum *queues;
3008 };
3009
3010 static bool
3011 queue_ids_include(const struct ovsdb_datum *queues, int64_t target)
3012 {
3013     union ovsdb_atom atom;
3014
3015     atom.integer = target;
3016     return ovsdb_datum_find_key(queues, &atom, OVSDB_TYPE_INTEGER) != UINT_MAX;
3017 }
3018
3019 static void
3020 iface_delete_queues(unsigned int queue_id,
3021                     const struct shash *details OVS_UNUSED, void *cbdata_)
3022 {
3023     struct iface_delete_queues_cbdata *cbdata = cbdata_;
3024
3025     if (!queue_ids_include(cbdata->queues, queue_id)) {
3026         netdev_delete_queue(cbdata->netdev, queue_id);
3027     }
3028 }
3029
3030 static void
3031 iface_configure_qos(struct iface *iface, const struct ovsrec_qos *qos)
3032 {
3033     struct ofpbuf queues_buf;
3034
3035     ofpbuf_init(&queues_buf, 0);
3036
3037     if (!qos || qos->type[0] == '\0' || qos->n_queues < 1) {
3038         netdev_set_qos(iface->netdev, NULL, NULL);
3039     } else {
3040         struct iface_delete_queues_cbdata cbdata;
3041         struct shash details;
3042         bool queue_zero;
3043         size_t i;
3044
3045         /* Configure top-level Qos for 'iface'. */
3046         shash_from_ovs_idl_map(qos->key_other_config, qos->value_other_config,
3047                                qos->n_other_config, &details);
3048         netdev_set_qos(iface->netdev, qos->type, &details);
3049         shash_destroy(&details);
3050
3051         /* Deconfigure queues that were deleted. */
3052         cbdata.netdev = iface->netdev;
3053         cbdata.queues = ovsrec_qos_get_queues(qos, OVSDB_TYPE_INTEGER,
3054                                               OVSDB_TYPE_UUID);
3055         netdev_dump_queues(iface->netdev, iface_delete_queues, &cbdata);
3056
3057         /* Configure queues for 'iface'. */
3058         queue_zero = false;
3059         for (i = 0; i < qos->n_queues; i++) {
3060             const struct ovsrec_queue *queue = qos->value_queues[i];
3061             unsigned int queue_id = qos->key_queues[i];
3062
3063             if (queue_id == 0) {
3064                 queue_zero = true;
3065             }
3066
3067             if (queue->n_dscp == 1) {
3068                 struct ofproto_port_queue *port_queue;
3069
3070                 port_queue = ofpbuf_put_uninit(&queues_buf,
3071                                                sizeof *port_queue);
3072                 port_queue->queue = queue_id;
3073                 port_queue->dscp = queue->dscp[0];
3074             }
3075
3076             shash_from_ovs_idl_map(queue->key_other_config,
3077                                    queue->value_other_config,
3078                                    queue->n_other_config, &details);
3079             netdev_set_queue(iface->netdev, queue_id, &details);
3080             shash_destroy(&details);
3081         }
3082         if (!queue_zero) {
3083             static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 1);
3084             VLOG_WARN_RL(&rl, "interface %s: QoS configured without a default "
3085                          "queue (queue 0).  Packets not directed to a "
3086                          "correctly configured queue may be dropped.",
3087                          iface->name);
3088         }
3089     }
3090
3091     if (iface->ofp_port >= 0) {
3092         const struct ofproto_port_queue *port_queues = queues_buf.data;
3093         size_t n_queues = queues_buf.size / sizeof *port_queues;
3094
3095         ofproto_port_set_queues(iface->port->bridge->ofproto, iface->ofp_port,
3096                                 port_queues, n_queues);
3097     }
3098
3099     netdev_set_policing(iface->netdev,
3100                         iface->cfg->ingress_policing_rate,
3101                         iface->cfg->ingress_policing_burst);
3102
3103     ofpbuf_uninit(&queues_buf);
3104 }
3105
3106 static void
3107 iface_configure_cfm(struct iface *iface)
3108 {
3109     const struct ovsrec_interface *cfg = iface->cfg;
3110     const char *extended_str, *opstate_str;
3111     struct cfm_settings s;
3112
3113     if (!cfg->n_cfm_mpid) {
3114         ofproto_port_clear_cfm(iface->port->bridge->ofproto, iface->ofp_port);
3115         return;
3116     }
3117
3118     s.mpid = *cfg->cfm_mpid;
3119     s.interval = atoi(get_interface_other_config(iface->cfg, "cfm_interval",
3120                                                  "0"));
3121     s.ccm_vlan = atoi(get_interface_other_config(iface->cfg, "cfm_ccm_vlan",
3122                                                  "0"));
3123     if (s.interval <= 0) {
3124         s.interval = 1000;
3125     }
3126
3127     extended_str = get_interface_other_config(iface->cfg, "cfm_extended",
3128                                               "false");
3129     s.extended = !strcasecmp("true", extended_str);
3130
3131     opstate_str = get_interface_other_config(iface->cfg, "cfm_opstate", "up");
3132     s.opup = !strcasecmp("up", opstate_str);
3133
3134     ofproto_port_set_cfm(iface->port->bridge->ofproto, iface->ofp_port, &s);
3135 }
3136
3137 /* Returns true if 'iface' is synthetic, that is, if we constructed it locally
3138  * instead of obtaining it from the database. */
3139 static bool
3140 iface_is_synthetic(const struct iface *iface)
3141 {
3142     return ovsdb_idl_row_is_synthetic(&iface->cfg->header_);
3143 }
3144 \f
3145 /* Port mirroring. */
3146
3147 static struct mirror *
3148 mirror_find_by_uuid(struct bridge *br, const struct uuid *uuid)
3149 {
3150     struct mirror *m;
3151
3152     HMAP_FOR_EACH_IN_BUCKET (m, hmap_node, uuid_hash(uuid), &br->mirrors) {
3153         if (uuid_equals(uuid, &m->uuid)) {
3154             return m;
3155         }
3156     }
3157     return NULL;
3158 }
3159
3160 static void
3161 bridge_configure_mirrors(struct bridge *br)
3162 {
3163     const struct ovsdb_datum *mc;
3164     unsigned long *flood_vlans;
3165     struct mirror *m, *next;
3166     size_t i;
3167
3168     /* Get rid of deleted mirrors. */
3169     mc = ovsrec_bridge_get_mirrors(br->cfg, OVSDB_TYPE_UUID);
3170     HMAP_FOR_EACH_SAFE (m, next, hmap_node, &br->mirrors) {
3171         union ovsdb_atom atom;
3172
3173         atom.uuid = m->uuid;
3174         if (ovsdb_datum_find_key(mc, &atom, OVSDB_TYPE_UUID) == UINT_MAX) {
3175             mirror_destroy(m);
3176         }
3177     }
3178
3179     /* Add new mirrors and reconfigure existing ones. */
3180     for (i = 0; i < br->cfg->n_mirrors; i++) {
3181         const struct ovsrec_mirror *cfg = br->cfg->mirrors[i];
3182         struct mirror *m = mirror_find_by_uuid(br, &cfg->header_.uuid);
3183         if (!m) {
3184             m = mirror_create(br, cfg);
3185         }
3186         m->cfg = cfg;
3187         if (!mirror_configure(m)) {
3188             mirror_destroy(m);
3189         }
3190     }
3191
3192     /* Update flooded vlans (for RSPAN). */
3193     flood_vlans = vlan_bitmap_from_array(br->cfg->flood_vlans,
3194                                          br->cfg->n_flood_vlans);
3195     ofproto_set_flood_vlans(br->ofproto, flood_vlans);
3196     bitmap_free(flood_vlans);
3197 }
3198
3199 static struct mirror *
3200 mirror_create(struct bridge *br, const struct ovsrec_mirror *cfg)
3201 {
3202     struct mirror *m;
3203
3204     m = xzalloc(sizeof *m);
3205     m->uuid = cfg->header_.uuid;
3206     hmap_insert(&br->mirrors, &m->hmap_node, uuid_hash(&m->uuid));
3207     m->bridge = br;
3208     m->name = xstrdup(cfg->name);
3209
3210     return m;
3211 }
3212
3213 static void
3214 mirror_destroy(struct mirror *m)
3215 {
3216     if (m) {
3217         struct bridge *br = m->bridge;
3218
3219         if (br->ofproto) {
3220             ofproto_mirror_unregister(br->ofproto, m);
3221         }
3222
3223         hmap_remove(&br->mirrors, &m->hmap_node);
3224         free(m->name);
3225         free(m);
3226     }
3227 }
3228
3229 static void
3230 mirror_collect_ports(struct mirror *m,
3231                      struct ovsrec_port **in_ports, int n_in_ports,
3232                      void ***out_portsp, size_t *n_out_portsp)
3233 {
3234     void **out_ports = xmalloc(n_in_ports * sizeof *out_ports);
3235     size_t n_out_ports = 0;
3236     size_t i;
3237
3238     for (i = 0; i < n_in_ports; i++) {
3239         const char *name = in_ports[i]->name;
3240         struct port *port = port_lookup(m->bridge, name);
3241         if (port) {
3242             out_ports[n_out_ports++] = port;
3243         } else {
3244             VLOG_WARN("bridge %s: mirror %s cannot match on nonexistent "
3245                       "port %s", m->bridge->name, m->name, name);
3246         }
3247     }
3248     *out_portsp = out_ports;
3249     *n_out_portsp = n_out_ports;
3250 }
3251
3252 static bool
3253 mirror_configure(struct mirror *m)
3254 {
3255     const struct ovsrec_mirror *cfg = m->cfg;
3256     struct ofproto_mirror_settings s;
3257
3258     /* Set name. */
3259     if (strcmp(cfg->name, m->name)) {
3260         free(m->name);
3261         m->name = xstrdup(cfg->name);
3262     }
3263     s.name = m->name;
3264
3265     /* Get output port or VLAN. */
3266     if (cfg->output_port) {
3267         s.out_bundle = port_lookup(m->bridge, cfg->output_port->name);
3268         if (!s.out_bundle) {
3269             VLOG_ERR("bridge %s: mirror %s outputs to port not on bridge",
3270                      m->bridge->name, m->name);
3271             return false;
3272         }
3273         s.out_vlan = UINT16_MAX;
3274
3275         if (cfg->output_vlan) {
3276             VLOG_ERR("bridge %s: mirror %s specifies both output port and "
3277                      "output vlan; ignoring output vlan",
3278                      m->bridge->name, m->name);
3279         }
3280     } else if (cfg->output_vlan) {
3281         /* The database should prevent invalid VLAN values. */
3282         s.out_bundle = NULL;
3283         s.out_vlan = *cfg->output_vlan;
3284     } else {
3285         VLOG_ERR("bridge %s: mirror %s does not specify output; ignoring",
3286                  m->bridge->name, m->name);
3287         return false;
3288     }
3289
3290     /* Get port selection. */
3291     if (cfg->select_all) {
3292         size_t n_ports = hmap_count(&m->bridge->ports);
3293         void **ports = xmalloc(n_ports * sizeof *ports);
3294         struct port *port;
3295         size_t i;
3296
3297         i = 0;
3298         HMAP_FOR_EACH (port, hmap_node, &m->bridge->ports) {
3299             ports[i++] = port;
3300         }
3301
3302         s.srcs = ports;
3303         s.n_srcs = n_ports;
3304
3305         s.dsts = ports;
3306         s.n_dsts = n_ports;
3307     } else {
3308         /* Get ports, dropping ports that don't exist.
3309          * The IDL ensures that there are no duplicates. */
3310         mirror_collect_ports(m, cfg->select_src_port, cfg->n_select_src_port,
3311                              &s.srcs, &s.n_srcs);
3312         mirror_collect_ports(m, cfg->select_dst_port, cfg->n_select_dst_port,
3313                              &s.dsts, &s.n_dsts);
3314     }
3315
3316     /* Get VLAN selection. */
3317     s.src_vlans = vlan_bitmap_from_array(cfg->select_vlan, cfg->n_select_vlan);
3318
3319     /* Configure. */
3320     ofproto_mirror_register(m->bridge->ofproto, m, &s);
3321
3322     /* Clean up. */
3323     if (s.srcs != s.dsts) {
3324         free(s.dsts);
3325     }
3326     free(s.srcs);
3327     free(s.src_vlans);
3328
3329     return true;
3330 }
3331 \f
3332 /* Linux VLAN device support (e.g. "eth0.10" for VLAN 10.)
3333  *
3334  * This is deprecated.  It is only for compatibility with broken device drivers
3335  * in old versions of Linux that do not properly support VLANs when VLAN
3336  * devices are not used.  When broken device drivers are no longer in
3337  * widespread use, we will delete these interfaces. */
3338
3339 static void **blocks;
3340 static size_t n_blocks, allocated_blocks;
3341
3342 /* Adds 'block' to a list of blocks that have to be freed with free() when the
3343  * VLAN splinters are reconfigured. */
3344 static void
3345 register_block(void *block)
3346 {
3347     if (n_blocks >= allocated_blocks) {
3348         blocks = x2nrealloc(blocks, &allocated_blocks, sizeof *blocks);
3349     }
3350     blocks[n_blocks++] = block;
3351 }
3352
3353 /* Frees all of the blocks registered with register_block(). */
3354 static void
3355 free_registered_blocks(void)
3356 {
3357     size_t i;
3358
3359     for (i = 0; i < n_blocks; i++) {
3360         free(blocks[i]);
3361     }
3362     n_blocks = 0;
3363 }
3364
3365 /* Returns true if VLAN splinters are enabled on 'iface_cfg', false
3366  * otherwise. */
3367 static bool
3368 vlan_splinters_is_enabled(const struct ovsrec_interface *iface_cfg)
3369 {
3370     const char *value;
3371
3372     value = get_interface_other_config(iface_cfg, "enable-vlan-splinters", "");
3373     return !strcmp(value, "true");
3374 }
3375
3376 /* Figures out the set of VLANs that are in use for the purpose of VLAN
3377  * splinters.
3378  *
3379  * If VLAN splinters are enabled on at least one interface and any VLANs are in
3380  * use, returns a 4096-bit bitmap with a 1-bit for each in-use VLAN (bits 0 and
3381  * 4095 will not be set).  The caller is responsible for freeing the bitmap,
3382  * with free().
3383  *
3384  * If VLANs splinters are not enabled on any interface or if no VLANs are in
3385  * use, returns NULL.
3386  *
3387  * Updates 'vlan_splinters_enabled_anywhere'. */
3388 static unsigned long int *
3389 collect_splinter_vlans(const struct ovsrec_open_vswitch *ovs_cfg)
3390 {
3391     unsigned long int *splinter_vlans;
3392     struct sset splinter_ifaces;
3393     const char *real_dev_name;
3394     struct shash *real_devs;
3395     struct shash_node *node;
3396     struct bridge *br;
3397     size_t i;
3398
3399     /* Free space allocated for synthesized ports and interfaces, since we're
3400      * in the process of reconstructing all of them. */
3401     free_registered_blocks();
3402
3403     splinter_vlans = NULL;
3404     sset_init(&splinter_ifaces);
3405     for (i = 0; i < ovs_cfg->n_bridges; i++) {
3406         struct ovsrec_bridge *br_cfg = ovs_cfg->bridges[i];
3407         size_t j;
3408
3409         for (j = 0; j < br_cfg->n_ports; j++) {
3410             struct ovsrec_port *port_cfg = br_cfg->ports[j];
3411             int k;
3412
3413             for (k = 0; k < port_cfg->n_interfaces; k++) {
3414                 struct ovsrec_interface *iface_cfg = port_cfg->interfaces[k];
3415
3416                 if (vlan_splinters_is_enabled(iface_cfg)) {
3417                     sset_add(&splinter_ifaces, iface_cfg->name);
3418
3419                     if (!splinter_vlans) {
3420                         splinter_vlans = bitmap_allocate(4096);
3421                     }
3422                     vlan_bitmap_from_array__(port_cfg->trunks,
3423                                              port_cfg->n_trunks,
3424                                              splinter_vlans);
3425                 }
3426             }
3427         }
3428     }
3429
3430     vlan_splinters_enabled_anywhere = splinter_vlans != NULL;
3431     if (!splinter_vlans) {
3432         sset_destroy(&splinter_ifaces);
3433         return NULL;
3434     }
3435
3436     HMAP_FOR_EACH (br, node, &all_bridges) {
3437         if (br->ofproto) {
3438             ofproto_get_vlan_usage(br->ofproto, splinter_vlans);
3439         }
3440     }
3441
3442     /* Don't allow VLANs 0 or 4095 to be splintered.  VLAN 0 should appear on
3443      * the real device.  VLAN 4095 is reserved and Linux doesn't allow a VLAN
3444      * device to be created for it. */
3445     bitmap_set0(splinter_vlans, 0);
3446     bitmap_set0(splinter_vlans, 4095);
3447
3448     /* Delete all VLAN devices that we don't need. */
3449     vlandev_refresh();
3450     real_devs = vlandev_get_real_devs();
3451     SHASH_FOR_EACH (node, real_devs) {
3452         const struct vlan_real_dev *real_dev = node->data;
3453         const struct vlan_dev *vlan_dev;
3454         bool real_dev_has_splinters;
3455
3456         real_dev_has_splinters = sset_contains(&splinter_ifaces,
3457                                                real_dev->name);
3458         HMAP_FOR_EACH (vlan_dev, hmap_node, &real_dev->vlan_devs) {
3459             if (!real_dev_has_splinters
3460                 || !bitmap_is_set(splinter_vlans, vlan_dev->vid)) {
3461                 struct netdev *netdev;
3462
3463                 if (!netdev_open(vlan_dev->name, "system", &netdev)) {
3464                     if (!netdev_get_in4(netdev, NULL, NULL) ||
3465                         !netdev_get_in6(netdev, NULL)) {
3466                         vlandev_del(vlan_dev->name);
3467                     } else {
3468                         /* It has an IP address configured, so we don't own
3469                          * it.  Don't delete it. */
3470                     }
3471                     netdev_close(netdev);
3472                 }
3473             }
3474
3475         }
3476     }
3477
3478     /* Add all VLAN devices that we need. */
3479     SSET_FOR_EACH (real_dev_name, &splinter_ifaces) {
3480         int vid;
3481
3482         BITMAP_FOR_EACH_1 (vid, 4096, splinter_vlans) {
3483             if (!vlandev_get_name(real_dev_name, vid)) {
3484                 vlandev_add(real_dev_name, vid);
3485             }
3486         }
3487     }
3488
3489     vlandev_refresh();
3490
3491     sset_destroy(&splinter_ifaces);
3492
3493     if (bitmap_scan(splinter_vlans, 0, 4096) >= 4096) {
3494         free(splinter_vlans);
3495         return NULL;
3496     }
3497     return splinter_vlans;
3498 }
3499
3500 /* Pushes the configure of VLAN splinter port 'port' (e.g. eth0.9) down to
3501  * ofproto.  */
3502 static void
3503 configure_splinter_port(struct port *port)
3504 {
3505     struct ofproto *ofproto = port->bridge->ofproto;
3506     uint16_t realdev_ofp_port;
3507     const char *realdev_name;
3508     struct iface *vlandev, *realdev;
3509
3510     ofproto_bundle_unregister(port->bridge->ofproto, port);
3511
3512     vlandev = CONTAINER_OF(list_front(&port->ifaces), struct iface,
3513                            port_elem);
3514
3515     realdev_name = get_port_other_config(port->cfg, "realdev", NULL);
3516     realdev = iface_lookup(port->bridge, realdev_name);
3517     realdev_ofp_port = realdev ? realdev->ofp_port : 0;
3518
3519     ofproto_port_set_realdev(ofproto, vlandev->ofp_port, realdev_ofp_port,
3520                              *port->cfg->tag);
3521 }
3522
3523 static struct ovsrec_port *
3524 synthesize_splinter_port(const char *real_dev_name,
3525                          const char *vlan_dev_name, int vid)
3526 {
3527     struct ovsrec_interface *iface;
3528     struct ovsrec_port *port;
3529
3530     iface = xzalloc(sizeof *iface);
3531     iface->name = xstrdup(vlan_dev_name);
3532     iface->type = "system";
3533
3534     port = xzalloc(sizeof *port);
3535     port->interfaces = xmemdup(&iface, sizeof iface);
3536     port->n_interfaces = 1;
3537     port->name = xstrdup(vlan_dev_name);
3538     port->vlan_mode = "splinter";
3539     port->tag = xmalloc(sizeof *port->tag);
3540     *port->tag = vid;
3541     port->key_other_config = xmalloc(sizeof *port->key_other_config);
3542     port->key_other_config[0] = "realdev";
3543     port->value_other_config = xmalloc(sizeof *port->value_other_config);
3544     port->value_other_config[0] = xstrdup(real_dev_name);
3545     port->n_other_config = 1;
3546
3547     register_block(iface);
3548     register_block(iface->name);
3549     register_block(port);
3550     register_block(port->interfaces);
3551     register_block(port->name);
3552     register_block(port->tag);
3553     register_block(port->key_other_config);
3554     register_block(port->value_other_config);
3555     register_block(port->value_other_config[0]);
3556
3557     return port;
3558 }
3559
3560 /* For each interface with 'br' that has VLAN splinters enabled, adds a
3561  * corresponding ovsrec_port to 'ports' for each splinter VLAN marked with a
3562  * 1-bit in the 'splinter_vlans' bitmap. */
3563 static void
3564 add_vlan_splinter_ports(struct bridge *br,
3565                         const unsigned long int *splinter_vlans,
3566                         struct shash *ports)
3567 {
3568     size_t i;
3569
3570     /* We iterate through 'br->cfg->ports' instead of 'ports' here because
3571      * we're modifying 'ports'. */
3572     for (i = 0; i < br->cfg->n_ports; i++) {
3573         const char *name = br->cfg->ports[i]->name;
3574         struct ovsrec_port *port_cfg = shash_find_data(ports, name);
3575         size_t j;
3576
3577         for (j = 0; j < port_cfg->n_interfaces; j++) {
3578             struct ovsrec_interface *iface_cfg = port_cfg->interfaces[j];
3579
3580             if (vlan_splinters_is_enabled(iface_cfg)) {
3581                 const char *real_dev_name;
3582                 uint16_t vid;
3583
3584                 real_dev_name = iface_cfg->name;
3585                 BITMAP_FOR_EACH_1 (vid, 4096, splinter_vlans) {
3586                     const char *vlan_dev_name;
3587
3588                     vlan_dev_name = vlandev_get_name(real_dev_name, vid);
3589                     if (vlan_dev_name
3590                         && !shash_find(ports, vlan_dev_name)) {
3591                         shash_add(ports, vlan_dev_name,
3592                                   synthesize_splinter_port(
3593                                       real_dev_name, vlan_dev_name, vid));
3594                     }
3595                 }
3596             }
3597         }
3598     }
3599 }
3600
3601 static void
3602 mirror_refresh_stats(struct mirror *m)
3603 {
3604     struct ofproto *ofproto = m->bridge->ofproto;
3605     uint64_t tx_packets, tx_bytes;
3606     char *keys[2];
3607     int64_t values[2];
3608     size_t stat_cnt = 0;
3609
3610     if (ofproto_mirror_get_stats(ofproto, m, &tx_packets, &tx_bytes)) {
3611         ovsrec_mirror_set_statistics(m->cfg, NULL, NULL, 0);
3612         return;
3613     }
3614
3615     if (tx_packets != UINT64_MAX) {
3616         keys[stat_cnt] = "tx_packets";
3617         values[stat_cnt] = tx_packets;
3618         stat_cnt++;
3619     }
3620     if (tx_bytes != UINT64_MAX) {
3621         keys[stat_cnt] = "tx_bytes";
3622         values[stat_cnt] = tx_bytes;
3623         stat_cnt++;
3624     }
3625
3626     ovsrec_mirror_set_statistics(m->cfg, keys, values, stat_cnt);
3627 }