vswitchd/bridge.c

   1 /* Copyright (c) 2008, 2009, 2010, 2011 Nicira Networks
   2  *
   3  * Licensed under the Apache License, Version 2.0 (the "License");
   4  * you may not use this file except in compliance with the License.
   5  * You may obtain a copy of the License at:
   6  *
   7  *     http://www.apache.org/licenses/LICENSE-2.0
   8  *
   9  * Unless required by applicable law or agreed to in writing, software
  10  * distributed under the License is distributed on an "AS IS" BASIS,
  11  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
  12  * See the License for the specific language governing permissions and
  13  * limitations under the License.
  14  */
  15
  16 #include <config.h>
  17 #include "bridge.h"
  18 #include <assert.h>
  19 #include <errno.h>
  20 #include <inttypes.h>
  21 #include <stdlib.h>
  22 #include "bitmap.h"
  23 #include "bond.h"
  24 #include "cfm.h"
  25 #include "coverage.h"
  26 #include "daemon.h"
  27 #include "dirs.h"
  28 #include "dynamic-string.h"
  29 #include "hash.h"
  30 #include "hmap.h"
  31 #include "jsonrpc.h"
  32 #include "lacp.h"
  33 #include "list.h"
  34 #include "netdev.h"
  35 #include "ofp-print.h"
  36 #include "ofpbuf.h"
  37 #include "ofproto/ofproto.h"
  38 #include "poll-loop.h"
  39 #include "sha1.h"
  40 #include "shash.h"
  41 #include "socket-util.h"
  42 #include "stream-ssl.h"
  43 #include "sset.h"
  44 #include "system-stats.h"
  45 #include "timeval.h"
  46 #include "util.h"
  47 #include "unixctl.h"
  48 #include "vlandev.h"
  49 #include "vswitchd/vswitch-idl.h"
  50 #include "xenserver.h"
  51 #include "vlog.h"
  52 #include "sflow_api.h"
  53 #include "vlan-bitmap.h"
  54
  55 VLOG_DEFINE_THIS_MODULE(bridge);
  56
  57 COVERAGE_DEFINE(bridge_reconfigure);
  58
  59 struct iface {
  60     /* These members are always valid. */
  61     struct list port_elem;      /* Element in struct port's "ifaces" list. */
  62     struct hmap_node name_node; /* In struct bridge's "iface_by_name" hmap. */
  63     struct port *port;          /* Containing port. */
  64     char *name;                 /* Host network device name. */
  65     tag_type tag;               /* Tag associated with this interface. */
  66
  67     /* These members are valid only after bridge_reconfigure() causes them to
  68      * be initialized. */
  69     struct hmap_node ofp_port_node; /* In struct bridge's "ifaces" hmap. */
  70     int ofp_port;               /* OpenFlow port number, -1 if unknown. */
  71     struct netdev *netdev;      /* Network device. */
  72     const char *type;           /* Usually same as cfg->type. */
  73     const struct ovsrec_interface *cfg;
  74 };
  75
  76 struct mirror {
  77     struct uuid uuid;           /* UUID of this "mirror" record in database. */
  78     struct hmap_node hmap_node; /* In struct bridge's "mirrors" hmap. */
  79     struct bridge *bridge;
  80     char *name;
  81     const struct ovsrec_mirror *cfg;
  82 };
  83
  84 struct port {
  85     struct bridge *bridge;
  86     struct hmap_node hmap_node; /* Element in struct bridge's "ports" hmap. */
  87     char *name;
  88
  89     const struct ovsrec_port *cfg;
  90
  91     /* An ordinary bridge port has 1 interface.
  92      * A bridge port for bonding has at least 2 interfaces. */
  93     struct list ifaces;         /* List of "struct iface"s. */
  94 };
  95
  96 struct bridge {
  97     struct hmap_node node;      /* In 'all_bridges'. */
  98     char *name;                 /* User-specified arbitrary name. */
  99     char *type;                 /* Datapath type. */
 100     uint8_t ea[ETH_ADDR_LEN];   /* Bridge Ethernet Address. */
 101     uint8_t default_ea[ETH_ADDR_LEN]; /* Default MAC. */
 102     const struct ovsrec_bridge *cfg;
 103
 104     /* OpenFlow switch processing. */
 105     struct ofproto *ofproto;    /* OpenFlow switch. */
 106
 107     /* Bridge ports. */
 108     struct hmap ports;          /* "struct port"s indexed by name. */
 109     struct hmap ifaces;         /* "struct iface"s indexed by ofp_port. */
 110     struct hmap iface_by_name;  /* "struct iface"s indexed by name. */
 111
 112     /* Port mirroring. */
 113     struct hmap mirrors;        /* "struct mirror" indexed by UUID. */
 114
 115     /* Synthetic local port if necessary. */
 116     struct ovsrec_port synth_local_port;
 117     struct ovsrec_interface synth_local_iface;
 118     struct ovsrec_interface *synth_local_ifacep;
 119 };
 120
 121 /* All bridges, indexed by name. */
 122 static struct hmap all_bridges = HMAP_INITIALIZER(&all_bridges);
 123
 124 /* OVSDB IDL used to obtain configuration. */
 125 static struct ovsdb_idl *idl;
 126
 127 /* Each time this timer expires, the bridge fetches systems and interface
 128  * statistics and pushes them into the database. */
 129 #define STATS_INTERVAL (5 * 1000) /* In milliseconds. */
 130 static long long int stats_timer = LLONG_MIN;
 131
 132 /* Stores the time after which rate limited statistics may be written to the
 133  * database.  Only updated when changes to the database require rate limiting.
 134  */
 135 #define DB_LIMIT_INTERVAL (1 * 1000) /* In milliseconds. */
 136 static long long int db_limiter = LLONG_MIN;
 137
 138 static void add_del_bridges(const struct ovsrec_open_vswitch *);
 139 static void bridge_del_ofprotos(void);
 140 static bool bridge_add_ofprotos(struct bridge *);
 141 static void bridge_create(const struct ovsrec_bridge *);
 142 static void bridge_destroy(struct bridge *);
 143 static struct bridge *bridge_lookup(const char *name);
 144 static unixctl_cb_func bridge_unixctl_dump_flows;
 145 static unixctl_cb_func bridge_unixctl_reconnect;
 146 static size_t bridge_get_controllers(const struct bridge *br,
 147                                      struct ovsrec_controller ***controllersp);
 148 static void bridge_add_del_ports(struct bridge *,
 149                                  const unsigned long int *splinter_vlans);
 150 static void bridge_add_ofproto_ports(struct bridge *);
 151 static void bridge_del_ofproto_ports(struct bridge *);
 152 static void bridge_refresh_ofp_port(struct bridge *);
 153 static void bridge_configure_datapath_id(struct bridge *);
 154 static void bridge_configure_flow_eviction_threshold(struct bridge *);
 155 static void bridge_configure_netflow(struct bridge *);
 156 static void bridge_configure_forward_bpdu(struct bridge *);
 157 static void bridge_configure_sflow(struct bridge *, int *sflow_bridge_number);
 158 static void bridge_configure_stp(struct bridge *);
 159 static void bridge_configure_remotes(struct bridge *,
 160                                      const struct sockaddr_in *managers,
 161                                      size_t n_managers);
 162 static void bridge_pick_local_hw_addr(struct bridge *,
 163                                       uint8_t ea[ETH_ADDR_LEN],
 164                                       struct iface **hw_addr_iface);
 165 static uint64_t bridge_pick_datapath_id(struct bridge *,
 166                                         const uint8_t bridge_ea[ETH_ADDR_LEN],
 167                                         struct iface *hw_addr_iface);
 168 static const char *bridge_get_other_config(const struct ovsrec_bridge *,
 169                                             const char *key);
 170 static const char *get_port_other_config(const struct ovsrec_port *,
 171                                          const char *key,
 172                                          const char *default_value);
 173 static uint64_t dpid_from_hash(const void *, size_t nbytes);
 174 static bool bridge_has_bond_fake_iface(const struct bridge *,
 175                                        const char *name);
 176 static bool port_is_bond_fake_iface(const struct port *);
 177
 178 static unixctl_cb_func qos_unixctl_show;
 179
 180 static struct port *port_create(struct bridge *, const struct ovsrec_port *);
 181 static void port_add_ifaces(struct port *);
 182 static void port_del_ifaces(struct port *);
 183 static void port_destroy(struct port *);
 184 static struct port *port_lookup(const struct bridge *, const char *name);
 185 static void port_configure(struct port *);
 186 static struct lacp_settings *port_configure_lacp(struct port *,
 187                                                  struct lacp_settings *);
 188 static void port_configure_bond(struct port *, struct bond_settings *,
 189                                 uint32_t *bond_stable_ids);
 190 static bool port_is_synthetic(const struct port *);
 191
 192 static void bridge_configure_mirrors(struct bridge *);
 193 static struct mirror *mirror_create(struct bridge *,
 194                                     const struct ovsrec_mirror *);
 195 static void mirror_destroy(struct mirror *);
 196 static bool mirror_configure(struct mirror *);
 197 static void mirror_refresh_stats(struct mirror *);
 198
 199 static void iface_configure_lacp(struct iface *, struct lacp_slave_settings *);
 200 static struct iface *iface_create(struct port *port,
 201                                   const struct ovsrec_interface *if_cfg);
 202 static void iface_destroy(struct iface *);
 203 static struct iface *iface_lookup(const struct bridge *, const char *name);
 204 static struct iface *iface_find(const char *name);
 205 static struct iface *iface_from_ofp_port(const struct bridge *,
 206                                          uint16_t ofp_port);
 207 static void iface_set_mac(struct iface *);
 208 static void iface_set_ofport(const struct ovsrec_interface *, int64_t ofport);
 209 static void iface_clear_db_record(const struct ovsrec_interface *if_cfg);
 210 static void iface_configure_qos(struct iface *, const struct ovsrec_qos *);
 211 static void iface_configure_cfm(struct iface *);
 212 static void iface_refresh_cfm_stats(struct iface *);
 213 static void iface_refresh_stats(struct iface *);
 214 static void iface_refresh_status(struct iface *);
 215 static bool iface_is_synthetic(const struct iface *);
 216 static const char *get_interface_other_config(const struct ovsrec_interface *,
 217                                               const char *key,
 218                                               const char *default_value);
 219
 220 static void shash_from_ovs_idl_map(char **keys, char **values, size_t n,
 221                                    struct shash *);
 222 static void shash_to_ovs_idl_map(struct shash *,
 223                                  char ***keys, char ***values, size_t *n);
 224
 225 /* Linux VLAN device support (e.g. "eth0.10" for VLAN 10.)
 226  *
 227  * This is deprecated.  It is only for compatibility with broken device drivers
 228  * in old versions of Linux that do not properly support VLANs when VLAN
 229  * devices are not used.  When broken device drivers are no longer in
 230  * widespread use, we will delete these interfaces. */
 231
 232 /* True if VLAN splinters are enabled on any interface, false otherwise.*/
 233 static bool vlan_splinters_enabled_anywhere;
 234
 235 static bool vlan_splinters_is_enabled(const struct ovsrec_interface *);
 236 static unsigned long int *collect_splinter_vlans(
 237     const struct ovsrec_open_vswitch *);
 238 static void configure_splinter_port(struct port *);
 239 static void add_vlan_splinter_ports(struct bridge *,
 240                                     const unsigned long int *splinter_vlans,
 241                                     struct shash *ports);
 242 \f
 243 /* Public functions. */
 244
 245 /* Initializes the bridge module, configuring it to obtain its configuration
 246  * from an OVSDB server accessed over 'remote', which should be a string in a
 247  * form acceptable to ovsdb_idl_create(). */
 248 void
 249 bridge_init(const char *remote)
 250 {
 251     /* Create connection to database. */
 252     idl = ovsdb_idl_create(remote, &ovsrec_idl_class, true);
 253     ovsdb_idl_set_lock(idl, "ovs_vswitchd");
 254
 255     ovsdb_idl_omit_alert(idl, &ovsrec_open_vswitch_col_cur_cfg);
 256     ovsdb_idl_omit_alert(idl, &ovsrec_open_vswitch_col_statistics);
 257     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_external_ids);
 258     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_ovs_version);
 259     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_db_version);
 260     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_system_type);
 261     ovsdb_idl_omit(idl, &ovsrec_open_vswitch_col_system_version);
 262
 263     ovsdb_idl_omit_alert(idl, &ovsrec_bridge_col_datapath_id);
 264     ovsdb_idl_omit_alert(idl, &ovsrec_bridge_col_status);
 265     ovsdb_idl_omit(idl, &ovsrec_bridge_col_external_ids);
 266
 267     ovsdb_idl_omit_alert(idl, &ovsrec_port_col_status);
 268     ovsdb_idl_omit_alert(idl, &ovsrec_port_col_statistics);
 269     ovsdb_idl_omit(idl, &ovsrec_port_col_external_ids);
 270     ovsdb_idl_omit(idl, &ovsrec_port_col_fake_bridge);
 271
 272     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_admin_state);
 273     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_duplex);
 274     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_link_speed);
 275     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_link_state);
 276     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_link_resets);
 277     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_mtu);
 278     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_ofport);
 279     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_statistics);
 280     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_status);
 281     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_fault);
 282     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_cfm_remote_mpids);
 283     ovsdb_idl_omit_alert(idl, &ovsrec_interface_col_lacp_current);
 284     ovsdb_idl_omit(idl, &ovsrec_interface_col_external_ids);
 285
 286     ovsdb_idl_omit_alert(idl, &ovsrec_controller_col_is_connected);
 287     ovsdb_idl_omit_alert(idl, &ovsrec_controller_col_role);
 288     ovsdb_idl_omit_alert(idl, &ovsrec_controller_col_status);
 289     ovsdb_idl_omit(idl, &ovsrec_controller_col_external_ids);
 290
 291     ovsdb_idl_omit(idl, &ovsrec_qos_col_external_ids);
 292
 293     ovsdb_idl_omit(idl, &ovsrec_queue_col_external_ids);
 294
 295     ovsdb_idl_omit(idl, &ovsrec_mirror_col_external_ids);
 296     ovsdb_idl_omit_alert(idl, &ovsrec_mirror_col_statistics);
 297
 298     ovsdb_idl_omit(idl, &ovsrec_netflow_col_external_ids);
 299
 300     ovsdb_idl_omit(idl, &ovsrec_sflow_col_external_ids);
 301
 302     ovsdb_idl_omit(idl, &ovsrec_manager_col_external_ids);
 303     ovsdb_idl_omit(idl, &ovsrec_manager_col_inactivity_probe);
 304     ovsdb_idl_omit(idl, &ovsrec_manager_col_is_connected);
 305     ovsdb_idl_omit(idl, &ovsrec_manager_col_max_backoff);
 306     ovsdb_idl_omit(idl, &ovsrec_manager_col_status);
 307
 308     ovsdb_idl_omit(idl, &ovsrec_ssl_col_external_ids);
 309
 310     /* Register unixctl commands. */
 311     unixctl_command_register("qos/show", "interface", qos_unixctl_show, NULL);
 312     unixctl_command_register("bridge/dump-flows", "bridge",
 313                              bridge_unixctl_dump_flows, NULL);
 314     unixctl_command_register("bridge/reconnect", "[bridge]",
 315                              bridge_unixctl_reconnect, NULL);
 316     lacp_init();
 317     bond_init();
 318     cfm_init();
 319 }
 320
 321 void
 322 bridge_exit(void)
 323 {
 324     struct bridge *br, *next_br;
 325
 326     HMAP_FOR_EACH_SAFE (br, next_br, node, &all_bridges) {
 327         bridge_destroy(br);
 328     }
 329     ovsdb_idl_destroy(idl);
 330 }
 331
 332 /* Looks at the list of managers in 'ovs_cfg' and extracts their remote IP
 333  * addresses and ports into '*managersp' and '*n_managersp'.  The caller is
 334  * responsible for freeing '*managersp' (with free()).
 335  *
 336  * You may be asking yourself "why does ovs-vswitchd care?", because
 337  * ovsdb-server is responsible for connecting to the managers, and ovs-vswitchd
 338  * should not be and in fact is not directly involved in that.  But
 339  * ovs-vswitchd needs to make sure that ovsdb-server can reach the managers, so
 340  * it has to tell in-band control where the managers are to enable that.
 341  * (Thus, only managers connected in-band are collected.)
 342  */
 343 static void
 344 collect_in_band_managers(const struct ovsrec_open_vswitch *ovs_cfg,
 345                          struct sockaddr_in **managersp, size_t *n_managersp)
 346 {
 347     struct sockaddr_in *managers = NULL;
 348     size_t n_managers = 0;
 349     struct sset targets;
 350     size_t i;
 351
 352     /* Collect all of the potential targets from the "targets" columns of the
 353      * rows pointed to by "manager_options", excluding any that are
 354      * out-of-band. */
 355     sset_init(&targets);
 356     for (i = 0; i < ovs_cfg->n_manager_options; i++) {
 357         struct ovsrec_manager *m = ovs_cfg->manager_options[i];
 358
 359         if (m->connection_mode && !strcmp(m->connection_mode, "out-of-band")) {
 360             sset_find_and_delete(&targets, m->target);
 361         } else {
 362             sset_add(&targets, m->target);
 363         }
 364     }
 365
 366     /* Now extract the targets' IP addresses. */
 367     if (!sset_is_empty(&targets)) {
 368         const char *target;
 369
 370         managers = xmalloc(sset_count(&targets) * sizeof *managers);
 371         SSET_FOR_EACH (target, &targets) {
 372             struct sockaddr_in *sin = &managers[n_managers];
 373
 374             if ((!strncmp(target, "tcp:", 4)
 375                  && inet_parse_active(target + 4, JSONRPC_TCP_PORT, sin)) ||
 376                 (!strncmp(target, "ssl:", 4)
 377                  && inet_parse_active(target + 4, JSONRPC_SSL_PORT, sin))) {
 378                 n_managers++;
 379             }
 380         }
 381     }
 382     sset_destroy(&targets);
 383
 384     *managersp = managers;
 385     *n_managersp = n_managers;
 386 }
 387
 388 static void
 389 bridge_reconfigure(const struct ovsrec_open_vswitch *ovs_cfg)
 390 {
 391     unsigned long int *splinter_vlans;
 392     struct sockaddr_in *managers;
 393     struct bridge *br, *next;
 394     int sflow_bridge_number;
 395     size_t n_managers;
 396
 397     COVERAGE_INC(bridge_reconfigure);
 398
 399     /* Create and destroy "struct bridge"s, "struct port"s, and "struct
 400      * iface"s according to 'ovs_cfg', with only very minimal configuration
 401      * otherwise.
 402      *
 403      * This is mostly an update to bridge data structures.  Very little is
 404      * pushed down to ofproto or lower layers. */
 405     add_del_bridges(ovs_cfg);
 406     splinter_vlans = collect_splinter_vlans(ovs_cfg);
 407     HMAP_FOR_EACH (br, node, &all_bridges) {
 408         bridge_add_del_ports(br, splinter_vlans);
 409     }
 410     free(splinter_vlans);
 411
 412     /* Delete all datapaths and datapath ports that are no longer configured.
 413      *
 414      * The kernel will reject any attempt to add a given port to a datapath if
 415      * that port already belongs to a different datapath, so we must do all
 416      * port deletions before any port additions.  A datapath always has a
 417      * "local port" so we must delete not-configured datapaths too. */
 418     bridge_del_ofprotos();
 419     HMAP_FOR_EACH (br, node, &all_bridges) {
 420         if (br->ofproto) {
 421             bridge_del_ofproto_ports(br);
 422         }
 423     }
 424
 425     /* Create datapaths and datapath ports that are missing.
 426      *
 427      * After this is done, we have our final set of bridges, ports, and
 428      * interfaces.  Every "struct bridge" has an ofproto, every "struct port"
 429      * has at least one iface, every "struct iface" has a valid ofp_port and
 430      * netdev. */
 431     HMAP_FOR_EACH_SAFE (br, next, node, &all_bridges) {
 432         if (!br->ofproto && !bridge_add_ofprotos(br)) {
 433             bridge_destroy(br);
 434         }
 435     }
 436     HMAP_FOR_EACH (br, node, &all_bridges) {
 437         bridge_refresh_ofp_port(br);
 438         bridge_add_ofproto_ports(br);
 439     }
 440
 441     /* Complete the configuration. */
 442     sflow_bridge_number = 0;
 443     collect_in_band_managers(ovs_cfg, &managers, &n_managers);
 444     HMAP_FOR_EACH (br, node, &all_bridges) {
 445         struct port *port;
 446
 447         HMAP_FOR_EACH (port, hmap_node, &br->ports) {
 448             struct iface *iface;
 449
 450             port_configure(port);
 451
 452             LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
 453                 iface_configure_cfm(iface);
 454                 iface_configure_qos(iface, port->cfg->qos);
 455                 iface_set_mac(iface);
 456             }
 457         }
 458         bridge_configure_mirrors(br);
 459         bridge_configure_datapath_id(br);
 460         bridge_configure_flow_eviction_threshold(br);
 461         bridge_configure_forward_bpdu(br);
 462         bridge_configure_remotes(br, managers, n_managers);
 463         bridge_configure_netflow(br);
 464         bridge_configure_sflow(br, &sflow_bridge_number);
 465         bridge_configure_stp(br);
 466     }
 467     free(managers);
 468
 469     /* ovs-vswitchd has completed initialization, so allow the process that
 470      * forked us to exit successfully. */
 471     daemonize_complete();
 472 }
 473
 474 /* Iterate over all ofprotos and delete any of them that do not have a
 475  * configured bridge or that are the wrong type. */
 476 static void
 477 bridge_del_ofprotos(void)
 478 {
 479     struct sset names;
 480     struct sset types;
 481     const char *type;
 482
 483     sset_init(&names);
 484     sset_init(&types);
 485     ofproto_enumerate_types(&types);
 486     SSET_FOR_EACH (type, &types) {
 487         const char *name;
 488
 489         ofproto_enumerate_names(type, &names);
 490         SSET_FOR_EACH (name, &names) {
 491             struct bridge *br = bridge_lookup(name);
 492             if (!br || strcmp(type, br->type)) {
 493                 ofproto_delete(name, type);
 494             }
 495         }
 496     }
 497     sset_destroy(&names);
 498     sset_destroy(&types);
 499 }
 500
 501 static bool
 502 bridge_add_ofprotos(struct bridge *br)
 503 {
 504     int error = ofproto_create(br->name, br->type, &br->ofproto);
 505     if (error) {
 506         VLOG_ERR("failed to create bridge %s: %s", br->name, strerror(error));
 507         return false;
 508     }
 509     return true;
 510 }
 511
 512 static void
 513 port_configure(struct port *port)
 514 {
 515     const struct ovsrec_port *cfg = port->cfg;
 516     struct bond_settings bond_settings;
 517     struct lacp_settings lacp_settings;
 518     struct ofproto_bundle_settings s;
 519     struct iface *iface;
 520
 521     if (cfg->vlan_mode && !strcmp(cfg->vlan_mode, "splinter")) {
 522         configure_splinter_port(port);
 523         return;
 524     }
 525
 526     /* Get name. */
 527     s.name = port->name;
 528
 529     /* Get slaves. */
 530     s.n_slaves = 0;
 531     s.slaves = xmalloc(list_size(&port->ifaces) * sizeof *s.slaves);
 532     LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
 533         s.slaves[s.n_slaves++] = iface->ofp_port;
 534     }
 535
 536     /* Get VLAN tag. */
 537     s.vlan = -1;
 538     if (cfg->tag) {
 539         if (list_is_short(&port->ifaces)) {
 540             if (*cfg->tag >= 0 && *cfg->tag <= 4095) {
 541                 s.vlan = *cfg->tag;
 542             }
 543         } else {
 544             /* It's possible that bonded, VLAN-tagged ports make sense.  Maybe
 545              * they even work as-is.  But they have not been tested. */
 546             VLOG_WARN("port %s: VLAN tags not supported on bonded ports",
 547                       port->name);
 548         }
 549     }
 550
 551     /* Get VLAN trunks. */
 552     s.trunks = NULL;
 553     if (cfg->n_trunks) {
 554         s.trunks = vlan_bitmap_from_array(cfg->trunks, cfg->n_trunks);
 555     }
 556
 557     /* Get VLAN mode. */
 558     if (cfg->vlan_mode) {
 559         if (!strcmp(cfg->vlan_mode, "access")) {
 560             s.vlan_mode = PORT_VLAN_ACCESS;
 561         } else if (!strcmp(cfg->vlan_mode, "trunk")) {
 562             s.vlan_mode = PORT_VLAN_TRUNK;
 563         } else if (!strcmp(cfg->vlan_mode, "native-tagged")) {
 564             s.vlan_mode = PORT_VLAN_NATIVE_TAGGED;
 565         } else if (!strcmp(cfg->vlan_mode, "native-untagged")) {
 566             s.vlan_mode = PORT_VLAN_NATIVE_UNTAGGED;
 567         } else {
 568             /* This "can't happen" because ovsdb-server should prevent it. */
 569             VLOG_ERR("unknown VLAN mode %s", cfg->vlan_mode);
 570             s.vlan_mode = PORT_VLAN_TRUNK;
 571         }
 572     } else {
 573         if (s.vlan >= 0) {
 574             s.vlan_mode = PORT_VLAN_ACCESS;
 575             if (cfg->n_trunks) {
 576                 VLOG_ERR("port %s: ignoring trunks in favor of implicit vlan",
 577                          port->name);
 578             }
 579         } else {
 580             s.vlan_mode = PORT_VLAN_TRUNK;
 581         }
 582     }
 583     s.use_priority_tags = !strcmp("true", get_port_other_config(
 584                                       cfg, "priority-tags", ""));
 585
 586     /* Get LACP settings. */
 587     s.lacp = port_configure_lacp(port, &lacp_settings);
 588     if (s.lacp) {
 589         size_t i = 0;
 590
 591         s.lacp_slaves = xmalloc(s.n_slaves * sizeof *s.lacp_slaves);
 592         LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
 593             iface_configure_lacp(iface, &s.lacp_slaves[i++]);
 594         }
 595     } else {
 596         s.lacp_slaves = NULL;
 597     }
 598
 599     /* Get bond settings. */
 600     if (s.n_slaves > 1) {
 601         s.bond = &bond_settings;
 602         s.bond_stable_ids = xmalloc(s.n_slaves * sizeof *s.bond_stable_ids);
 603         port_configure_bond(port, &bond_settings, s.bond_stable_ids);
 604     } else {
 605         s.bond = NULL;
 606         s.bond_stable_ids = NULL;
 607
 608         LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
 609             netdev_set_miimon_interval(iface->netdev, 0);
 610         }
 611     }
 612
 613     /* Register. */
 614     ofproto_bundle_register(port->bridge->ofproto, port, &s);
 615
 616     /* Clean up. */
 617     free(s.slaves);
 618     free(s.trunks);
 619     free(s.lacp_slaves);
 620     free(s.bond_stable_ids);
 621 }
 622
 623 /* Pick local port hardware address and datapath ID for 'br'. */
 624 static void
 625 bridge_configure_datapath_id(struct bridge *br)
 626 {
 627     uint8_t ea[ETH_ADDR_LEN];
 628     uint64_t dpid;
 629     struct iface *local_iface;
 630     struct iface *hw_addr_iface;
 631     char *dpid_string;
 632
 633     bridge_pick_local_hw_addr(br, ea, &hw_addr_iface);
 634     local_iface = iface_from_ofp_port(br, OFPP_LOCAL);
 635     if (local_iface) {
 636         int error = netdev_set_etheraddr(local_iface->netdev, ea);
 637         if (error) {
 638             static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
 639             VLOG_ERR_RL(&rl, "bridge %s: failed to set bridge "
 640                         "Ethernet address: %s",
 641                         br->name, strerror(error));
 642         }
 643     }
 644     memcpy(br->ea, ea, ETH_ADDR_LEN);
 645
 646     dpid = bridge_pick_datapath_id(br, ea, hw_addr_iface);
 647     ofproto_set_datapath_id(br->ofproto, dpid);
 648
 649     dpid_string = xasprintf("%016"PRIx64, dpid);
 650     ovsrec_bridge_set_datapath_id(br->cfg, dpid_string);
 651     free(dpid_string);
 652 }
 653
 654 /* Set NetFlow configuration on 'br'. */
 655 static void
 656 bridge_configure_netflow(struct bridge *br)
 657 {
 658     struct ovsrec_netflow *cfg = br->cfg->netflow;
 659     struct netflow_options opts;
 660
 661     if (!cfg) {
 662         ofproto_set_netflow(br->ofproto, NULL);
 663         return;
 664     }
 665
 666     memset(&opts, 0, sizeof opts);
 667
 668     /* Get default NetFlow configuration from datapath.
 669      * Apply overrides from 'cfg'. */
 670     ofproto_get_netflow_ids(br->ofproto, &opts.engine_type, &opts.engine_id);
 671     if (cfg->engine_type) {
 672         opts.engine_type = *cfg->engine_type;
 673     }
 674     if (cfg->engine_id) {
 675         opts.engine_id = *cfg->engine_id;
 676     }
 677
 678     /* Configure active timeout interval. */
 679     opts.active_timeout = cfg->active_timeout;
 680     if (!opts.active_timeout) {
 681         opts.active_timeout = -1;
 682     } else if (opts.active_timeout < 0) {
 683         VLOG_WARN("bridge %s: active timeout interval set to negative "
 684                   "value, using default instead (%d seconds)", br->name,
 685                   NF_ACTIVE_TIMEOUT_DEFAULT);
 686         opts.active_timeout = -1;
 687     }
 688
 689     /* Add engine ID to interface number to disambiguate bridgs? */
 690     opts.add_id_to_iface = cfg->add_id_to_interface;
 691     if (opts.add_id_to_iface) {
 692         if (opts.engine_id > 0x7f) {
 693             VLOG_WARN("bridge %s: NetFlow port mangling may conflict with "
 694                       "another vswitch, choose an engine id less than 128",
 695                       br->name);
 696         }
 697         if (hmap_count(&br->ports) > 508) {
 698             VLOG_WARN("bridge %s: NetFlow port mangling will conflict with "
 699                       "another port when more than 508 ports are used",
 700                       br->name);
 701         }
 702     }
 703
 704     /* Collectors. */
 705     sset_init(&opts.collectors);
 706     sset_add_array(&opts.collectors, cfg->targets, cfg->n_targets);
 707
 708     /* Configure. */
 709     if (ofproto_set_netflow(br->ofproto, &opts)) {
 710         VLOG_ERR("bridge %s: problem setting netflow collectors", br->name);
 711     }
 712     sset_destroy(&opts.collectors);
 713 }
 714
 715 /* Set sFlow configuration on 'br'. */
 716 static void
 717 bridge_configure_sflow(struct bridge *br, int *sflow_bridge_number)
 718 {
 719     const struct ovsrec_sflow *cfg = br->cfg->sflow;
 720     struct ovsrec_controller **controllers;
 721     struct ofproto_sflow_options oso;
 722     size_t n_controllers;
 723     size_t i;
 724
 725     if (!cfg) {
 726         ofproto_set_sflow(br->ofproto, NULL);
 727         return;
 728     }
 729
 730     memset(&oso, 0, sizeof oso);
 731
 732     sset_init(&oso.targets);
 733     sset_add_array(&oso.targets, cfg->targets, cfg->n_targets);
 734
 735     oso.sampling_rate = SFL_DEFAULT_SAMPLING_RATE;
 736     if (cfg->sampling) {
 737         oso.sampling_rate = *cfg->sampling;
 738     }
 739
 740     oso.polling_interval = SFL_DEFAULT_POLLING_INTERVAL;
 741     if (cfg->polling) {
 742         oso.polling_interval = *cfg->polling;
 743     }
 744
 745     oso.header_len = SFL_DEFAULT_HEADER_SIZE;
 746     if (cfg->header) {
 747         oso.header_len = *cfg->header;
 748     }
 749
 750     oso.sub_id = (*sflow_bridge_number)++;
 751     oso.agent_device = cfg->agent;
 752
 753     oso.control_ip = NULL;
 754     n_controllers = bridge_get_controllers(br, &controllers);
 755     for (i = 0; i < n_controllers; i++) {
 756         if (controllers[i]->local_ip) {
 757             oso.control_ip = controllers[i]->local_ip;
 758             break;
 759         }
 760     }
 761     ofproto_set_sflow(br->ofproto, &oso);
 762
 763     sset_destroy(&oso.targets);
 764 }
 765
 766 static void
 767 port_configure_stp(const struct ofproto *ofproto, struct port *port,
 768                    struct ofproto_port_stp_settings *port_s,
 769                    int *port_num_counter, unsigned long *port_num_bitmap)
 770 {
 771     const char *config_str;
 772     struct iface *iface;
 773
 774     config_str = get_port_other_config(port->cfg, "stp-enable", NULL);
 775     if (config_str && !strcmp(config_str, "false")) {
 776         port_s->enable = false;
 777         return;
 778     } else {
 779         port_s->enable = true;
 780     }
 781
 782     /* STP over bonds is not supported. */
 783     if (!list_is_singleton(&port->ifaces)) {
 784         VLOG_ERR("port %s: cannot enable STP on bonds, disabling",
 785                  port->name);
 786         port_s->enable = false;
 787         return;
 788     }
 789
 790     iface = CONTAINER_OF(list_front(&port->ifaces), struct iface, port_elem);
 791
 792     /* Internal ports shouldn't participate in spanning tree, so
 793      * skip them. */
 794     if (!strcmp(iface->type, "internal")) {
 795         VLOG_DBG("port %s: disable STP on internal ports", port->name);
 796         port_s->enable = false;
 797         return;
 798     }
 799
 800     /* STP on mirror output ports is not supported. */
 801     if (ofproto_is_mirror_output_bundle(ofproto, port)) {
 802         VLOG_DBG("port %s: disable STP on mirror ports", port->name);
 803         port_s->enable = false;
 804         return;
 805     }
 806
 807     config_str = get_port_other_config(port->cfg, "stp-port-num", NULL);
 808     if (config_str) {
 809         unsigned long int port_num = strtoul(config_str, NULL, 0);
 810         int port_idx = port_num - 1;
 811
 812         if (port_num < 1 || port_num > STP_MAX_PORTS) {
 813             VLOG_ERR("port %s: invalid stp-port-num", port->name);
 814             port_s->enable = false;
 815             return;
 816         }
 817
 818         if (bitmap_is_set(port_num_bitmap, port_idx)) {
 819             VLOG_ERR("port %s: duplicate stp-port-num %lu, disabling",
 820                     port->name, port_num);
 821             port_s->enable = false;
 822             return;
 823         }
 824         bitmap_set1(port_num_bitmap, port_idx);
 825         port_s->port_num = port_idx;
 826     } else {
 827         if (*port_num_counter > STP_MAX_PORTS) {
 828             VLOG_ERR("port %s: too many STP ports, disabling", port->name);
 829             port_s->enable = false;
 830             return;
 831         }
 832
 833         port_s->port_num = (*port_num_counter)++;
 834     }
 835
 836     config_str = get_port_other_config(port->cfg, "stp-path-cost", NULL);
 837     if (config_str) {
 838         port_s->path_cost = strtoul(config_str, NULL, 10);
 839     } else {
 840         uint32_t current;
 841
 842         if (netdev_get_features(iface->netdev, &current, NULL, NULL, NULL)) {
 843             /* Couldn't get speed, so assume 100Mb/s. */
 844             port_s->path_cost = 19;
 845         } else {
 846             unsigned int mbps;
 847
 848             mbps = netdev_features_to_bps(current) / 1000000;
 849             port_s->path_cost = stp_convert_speed_to_cost(mbps);
 850         }
 851     }
 852
 853     config_str = get_port_other_config(port->cfg, "stp-port-priority", NULL);
 854     if (config_str) {
 855         port_s->priority = strtoul(config_str, NULL, 0);
 856     } else {
 857         port_s->priority = STP_DEFAULT_PORT_PRIORITY;
 858     }
 859 }
 860
 861 /* Set spanning tree configuration on 'br'. */
 862 static void
 863 bridge_configure_stp(struct bridge *br)
 864 {
 865     if (!br->cfg->stp_enable) {
 866         ofproto_set_stp(br->ofproto, NULL);
 867     } else {
 868         struct ofproto_stp_settings br_s;
 869         const char *config_str;
 870         struct port *port;
 871         int port_num_counter;
 872         unsigned long *port_num_bitmap;
 873
 874         config_str = bridge_get_other_config(br->cfg, "stp-system-id");
 875         if (config_str) {
 876             uint8_t ea[ETH_ADDR_LEN];
 877
 878             if (eth_addr_from_string(config_str, ea)) {
 879                 br_s.system_id = eth_addr_to_uint64(ea);
 880             } else {
 881                 br_s.system_id = eth_addr_to_uint64(br->ea);
 882                 VLOG_ERR("bridge %s: invalid stp-system-id, defaulting "
 883                          "to "ETH_ADDR_FMT, br->name, ETH_ADDR_ARGS(br->ea));
 884             }
 885         } else {
 886             br_s.system_id = eth_addr_to_uint64(br->ea);
 887         }
 888
 889         config_str = bridge_get_other_config(br->cfg, "stp-priority");
 890         if (config_str) {
 891             br_s.priority = strtoul(config_str, NULL, 0);
 892         } else {
 893             br_s.priority = STP_DEFAULT_BRIDGE_PRIORITY;
 894         }
 895
 896         config_str = bridge_get_other_config(br->cfg, "stp-hello-time");
 897         if (config_str) {
 898             br_s.hello_time = strtoul(config_str, NULL, 10) * 1000;
 899         } else {
 900             br_s.hello_time = STP_DEFAULT_HELLO_TIME;
 901         }
 902
 903         config_str = bridge_get_other_config(br->cfg, "stp-max-age");
 904         if (config_str) {
 905             br_s.max_age = strtoul(config_str, NULL, 10) * 1000;
 906         } else {
 907             br_s.max_age = STP_DEFAULT_MAX_AGE;
 908         }
 909
 910         config_str = bridge_get_other_config(br->cfg, "stp-forward-delay");
 911         if (config_str) {
 912             br_s.fwd_delay = strtoul(config_str, NULL, 10) * 1000;
 913         } else {
 914             br_s.fwd_delay = STP_DEFAULT_FWD_DELAY;
 915         }
 916
 917         /* Configure STP on the bridge. */
 918         if (ofproto_set_stp(br->ofproto, &br_s)) {
 919             VLOG_ERR("bridge %s: could not enable STP", br->name);
 920             return;
 921         }
 922
 923         /* Users must either set the port number with the "stp-port-num"
 924          * configuration on all ports or none.  If manual configuration
 925          * is not done, then we allocate them sequentially. */
 926         port_num_counter = 0;
 927         port_num_bitmap = bitmap_allocate(STP_MAX_PORTS);
 928         HMAP_FOR_EACH (port, hmap_node, &br->ports) {
 929             struct ofproto_port_stp_settings port_s;
 930             struct iface *iface;
 931
 932             port_configure_stp(br->ofproto, port, &port_s,
 933                                &port_num_counter, port_num_bitmap);
 934
 935             /* As bonds are not supported, just apply configuration to
 936              * all interfaces. */
 937             LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
 938                 if (ofproto_port_set_stp(br->ofproto, iface->ofp_port,
 939                                          &port_s)) {
 940                     VLOG_ERR("port %s: could not enable STP", port->name);
 941                     continue;
 942                 }
 943             }
 944         }
 945
 946         if (bitmap_scan(port_num_bitmap, 0, STP_MAX_PORTS) != STP_MAX_PORTS
 947                     && port_num_counter) {
 948             VLOG_ERR("bridge %s: must manually configure all STP port "
 949                      "IDs or none, disabling", br->name);
 950             ofproto_set_stp(br->ofproto, NULL);
 951         }
 952         bitmap_free(port_num_bitmap);
 953     }
 954 }
 955
 956 static bool
 957 bridge_has_bond_fake_iface(const struct bridge *br, const char *name)
 958 {
 959     const struct port *port = port_lookup(br, name);
 960     return port && port_is_bond_fake_iface(port);
 961 }
 962
 963 static bool
 964 port_is_bond_fake_iface(const struct port *port)
 965 {
 966     return port->cfg->bond_fake_iface && !list_is_short(&port->ifaces);
 967 }
 968
 969 static void
 970 add_del_bridges(const struct ovsrec_open_vswitch *cfg)
 971 {
 972     struct bridge *br, *next;
 973     struct shash new_br;
 974     size_t i;
 975
 976     /* Collect new bridges' names and types. */
 977     shash_init(&new_br);
 978     for (i = 0; i < cfg->n_bridges; i++) {
 979         static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
 980         const struct ovsrec_bridge *br_cfg = cfg->bridges[i];
 981
 982         if (strchr(br_cfg->name, '/')) {
 983             /* Prevent remote ovsdb-server users from accessing arbitrary
 984              * directories, e.g. consider a bridge named "../../../etc/". */
 985             VLOG_WARN_RL(&rl, "ignoring bridge with invalid name \"%s\"",
 986                          br_cfg->name);
 987         } else if (!shash_add_once(&new_br, br_cfg->name, br_cfg)) {
 988             VLOG_WARN_RL(&rl, "bridge %s specified twice", br_cfg->name);
 989         }
 990     }
 991
 992     /* Get rid of deleted bridges or those whose types have changed.
 993      * Update 'cfg' of bridges that still exist. */
 994     HMAP_FOR_EACH_SAFE (br, next, node, &all_bridges) {
 995         br->cfg = shash_find_data(&new_br, br->name);
 996         if (!br->cfg || strcmp(br->type, ofproto_normalize_type(
 997                                    br->cfg->datapath_type))) {
 998             bridge_destroy(br);
 999         }
1000     }
1001
1002     /* Add new bridges. */
1003     for (i = 0; i < cfg->n_bridges; i++) {
1004         const struct ovsrec_bridge *br_cfg = cfg->bridges[i];
1005         struct bridge *br = bridge_lookup(br_cfg->name);
1006         if (!br) {
1007             bridge_create(br_cfg);
1008         }
1009     }
1010
1011     shash_destroy(&new_br);
1012 }
1013
1014 /* Delete each ofproto port on 'br' that doesn't have a corresponding "struct
1015  * iface".
1016  *
1017  * The kernel will reject any attempt to add a given port to a datapath if that
1018  * port already belongs to a different datapath, so we must do all port
1019  * deletions before any port additions. */
1020 static void
1021 bridge_del_ofproto_ports(struct bridge *br)
1022 {
1023     struct ofproto_port_dump dump;
1024     struct ofproto_port ofproto_port;
1025
1026     OFPROTO_PORT_FOR_EACH (&ofproto_port, &dump, br->ofproto) {
1027         const char *name = ofproto_port.name;
1028         struct iface *iface;
1029         const char *type;
1030         int error;
1031
1032         /* Ignore the local port.  We can't change it anyhow. */
1033         if (!strcmp(name, br->name)) {
1034             continue;
1035         }
1036
1037         /* Get the type that 'ofproto_port' should have (ordinarily the
1038          * type of its corresponding iface) or NULL if it should be
1039          * deleted. */
1040         iface = iface_lookup(br, name);
1041         type = (iface ? iface->type
1042                 : bridge_has_bond_fake_iface(br, name) ? "internal"
1043                 : NULL);
1044
1045         /* If it's the wrong type then delete the ofproto port. */
1046         if (type
1047             && !strcmp(ofproto_port.type, type)
1048             && (!iface || !iface->netdev
1049                 || !strcmp(netdev_get_type(iface->netdev), type))) {
1050             continue;
1051         }
1052         error = ofproto_port_del(br->ofproto, ofproto_port.ofp_port);
1053         if (error) {
1054             VLOG_WARN("bridge %s: failed to remove %s interface (%s)",
1055                       br->name, name, strerror(error));
1056         }
1057         if (iface) {
1058             netdev_close(iface->netdev);
1059             iface->netdev = NULL;
1060         }
1061     }
1062 }
1063
1064 static void
1065 iface_set_ofp_port(struct iface *iface, int ofp_port)
1066 {
1067     struct bridge *br = iface->port->bridge;
1068
1069     assert(iface->ofp_port < 0 && ofp_port >= 0);
1070     iface->ofp_port = ofp_port;
1071     hmap_insert(&br->ifaces, &iface->ofp_port_node, hash_int(ofp_port, 0));
1072     iface_set_ofport(iface->cfg, ofp_port);
1073 }
1074
1075 static void
1076 bridge_refresh_ofp_port(struct bridge *br)
1077 {
1078     struct ofproto_port_dump dump;
1079     struct ofproto_port ofproto_port;
1080     struct port *port;
1081
1082     /* Clear all the "ofp_port"es. */
1083     hmap_clear(&br->ifaces);
1084     HMAP_FOR_EACH (port, hmap_node, &br->ports) {
1085         struct iface *iface;
1086
1087         LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
1088             iface->ofp_port = -1;
1089         }
1090     }
1091
1092     /* Obtain the correct "ofp_port"s from ofproto. */
1093     OFPROTO_PORT_FOR_EACH (&ofproto_port, &dump, br->ofproto) {
1094         struct iface *iface = iface_lookup(br, ofproto_port.name);
1095         if (iface) {
1096             if (iface->ofp_port >= 0) {
1097                 VLOG_WARN("bridge %s: interface %s reported twice",
1098                           br->name, ofproto_port.name);
1099             } else if (iface_from_ofp_port(br, ofproto_port.ofp_port)) {
1100                 VLOG_WARN("bridge %s: interface %"PRIu16" reported twice",
1101                           br->name, ofproto_port.ofp_port);
1102             } else {
1103                 iface_set_ofp_port(iface, ofproto_port.ofp_port);
1104             }
1105         }
1106     }
1107 }
1108
1109 /* Add an ofproto port for any "struct iface" that doesn't have one.
1110  * Delete any "struct iface" for which this fails.
1111  * Delete any "struct port" that thereby ends up with no ifaces. */
1112 static void
1113 bridge_add_ofproto_ports(struct bridge *br)
1114 {
1115     struct port *port, *next_port;
1116
1117     HMAP_FOR_EACH_SAFE (port, next_port, hmap_node, &br->ports) {
1118         struct iface *iface, *next_iface;
1119         struct ofproto_port ofproto_port;
1120
1121         LIST_FOR_EACH_SAFE (iface, next_iface, port_elem, &port->ifaces) {
1122             int error;
1123
1124             /* Open the netdev. */
1125             if (!iface->netdev) {
1126                 error = netdev_open(iface->name, iface->type, &iface->netdev);
1127                 if (error) {
1128                     VLOG_WARN("could not open network device %s (%s)",
1129                               iface->name, strerror(error));
1130                 }
1131
1132                 if (iface->netdev
1133                     && port->cfg->vlan_mode
1134                     && !strcmp(port->cfg->vlan_mode, "splinter")) {
1135                     netdev_turn_flags_on(iface->netdev, NETDEV_UP, true);
1136                 }
1137             } else {
1138                 error = 0;
1139             }
1140
1141             /* Configure the netdev. */
1142             if (iface->netdev) {
1143                 struct shash args;
1144
1145                 shash_init(&args);
1146                 shash_from_ovs_idl_map(iface->cfg->key_options,
1147                                        iface->cfg->value_options,
1148                                        iface->cfg->n_options, &args);
1149                 error = netdev_set_config(iface->netdev, &args);
1150                 shash_destroy(&args);
1151
1152                 if (error) {
1153                     VLOG_WARN("could not configure network device %s (%s)",
1154                               iface->name, strerror(error));
1155                     netdev_close(iface->netdev);
1156                     iface->netdev = NULL;
1157                 }
1158             }
1159
1160             /* Add the port, if necessary. */
1161             if (iface->netdev && iface->ofp_port < 0) {
1162                 uint16_t ofp_port;
1163                 int error;
1164
1165                 error = ofproto_port_add(br->ofproto, iface->netdev,
1166                                          &ofp_port);
1167                 if (!error) {
1168                     iface_set_ofp_port(iface, ofp_port);
1169                 } else {
1170                     netdev_close(iface->netdev);
1171                     iface->netdev = NULL;
1172                 }
1173             }
1174
1175             /* Populate stats columns in new Interface rows. */
1176             if (iface->netdev && !iface->cfg->mtu) {
1177                 iface_refresh_stats(iface);
1178                 iface_refresh_status(iface);
1179             }
1180
1181             /* Delete the iface if we failed. */
1182             if (iface->netdev && iface->ofp_port >= 0) {
1183                 VLOG_DBG("bridge %s: interface %s is on port %d",
1184                          br->name, iface->name, iface->ofp_port);
1185             } else {
1186                 if (iface->netdev) {
1187                     VLOG_ERR("bridge %s: missing %s interface, dropping",
1188                              br->name, iface->name);
1189                 } else {
1190                     /* We already reported a related error, don't bother
1191                      * duplicating it. */
1192                 }
1193                 iface_clear_db_record(iface->cfg);
1194                 iface_destroy(iface);
1195             }
1196         }
1197         if (list_is_empty(&port->ifaces)) {
1198             VLOG_WARN("%s port has no interfaces, dropping", port->name);
1199             port_destroy(port);
1200             continue;
1201         }
1202
1203         /* Add bond fake iface if necessary. */
1204         if (port_is_bond_fake_iface(port)) {
1205             if (ofproto_port_query_by_name(br->ofproto, port->name,
1206                                            &ofproto_port)) {
1207                 struct netdev *netdev;
1208                 int error;
1209
1210                 error = netdev_open(port->name, "internal", &netdev);
1211                 if (!error) {
1212                     ofproto_port_add(br->ofproto, netdev, NULL);
1213                     netdev_close(netdev);
1214                 } else {
1215                     VLOG_WARN("could not open network device %s (%s)",
1216                               port->name, strerror(error));
1217                 }
1218             } else {
1219                 /* Already exists, nothing to do. */
1220                 ofproto_port_destroy(&ofproto_port);
1221             }
1222         }
1223     }
1224 }
1225
1226 static const char *
1227 get_ovsrec_key_value(char **keys, char **values, size_t n, const char *key)
1228 {
1229     size_t i;
1230
1231     for (i = 0; i < n; i++) {
1232         if (!strcmp(keys[i], key)) {
1233             return values[i];
1234         }
1235     }
1236     return NULL;
1237 }
1238
1239 static const char *
1240 bridge_get_other_config(const struct ovsrec_bridge *br_cfg, const char *key)
1241 {
1242     return get_ovsrec_key_value(br_cfg->key_other_config,
1243                                 br_cfg->value_other_config,
1244                                 br_cfg->n_other_config, key);
1245 }
1246
1247 /* Set Flow eviction threshold */
1248 static void
1249 bridge_configure_flow_eviction_threshold(struct bridge *br)
1250 {
1251     const char *threshold_str;
1252     unsigned threshold;
1253
1254     threshold_str = bridge_get_other_config(br->cfg, "flow-eviction-threshold");
1255     if (threshold_str) {
1256         threshold = strtoul(threshold_str, NULL, 10);
1257     } else {
1258         threshold = OFPROTO_FLOW_EVICTON_THRESHOLD_DEFAULT;
1259     }
1260     ofproto_set_flow_eviction_threshold(br->ofproto, threshold);
1261 }
1262
1263 /* Set forward BPDU option. */
1264 static void
1265 bridge_configure_forward_bpdu(struct bridge *br)
1266 {
1267     const char *forward_bpdu_str;
1268     bool forward_bpdu = false;
1269
1270     forward_bpdu_str = bridge_get_other_config(br->cfg, "forward-bpdu");
1271     if (forward_bpdu_str && !strcmp(forward_bpdu_str, "true")) {
1272         forward_bpdu = true;
1273     }
1274     ofproto_set_forward_bpdu(br->ofproto, forward_bpdu);
1275 }
1276
1277 static void
1278 bridge_pick_local_hw_addr(struct bridge *br, uint8_t ea[ETH_ADDR_LEN],
1279                           struct iface **hw_addr_iface)
1280 {
1281     const char *hwaddr;
1282     struct port *port;
1283     bool found_addr = false;
1284     int error;
1285
1286     *hw_addr_iface = NULL;
1287
1288     /* Did the user request a particular MAC? */
1289     hwaddr = bridge_get_other_config(br->cfg, "hwaddr");
1290     if (hwaddr && eth_addr_from_string(hwaddr, ea)) {
1291         if (eth_addr_is_multicast(ea)) {
1292             VLOG_ERR("bridge %s: cannot set MAC address to multicast "
1293                      "address "ETH_ADDR_FMT, br->name, ETH_ADDR_ARGS(ea));
1294         } else if (eth_addr_is_zero(ea)) {
1295             VLOG_ERR("bridge %s: cannot set MAC address to zero", br->name);
1296         } else {
1297             return;
1298         }
1299     }
1300
1301     /* Otherwise choose the minimum non-local MAC address among all of the
1302      * interfaces. */
1303     HMAP_FOR_EACH (port, hmap_node, &br->ports) {
1304         uint8_t iface_ea[ETH_ADDR_LEN];
1305         struct iface *candidate;
1306         struct iface *iface;
1307
1308         /* Mirror output ports don't participate. */
1309         if (ofproto_is_mirror_output_bundle(br->ofproto, port)) {
1310             continue;
1311         }
1312
1313         /* Choose the MAC address to represent the port. */
1314         iface = NULL;
1315         if (port->cfg->mac && eth_addr_from_string(port->cfg->mac, iface_ea)) {
1316             /* Find the interface with this Ethernet address (if any) so that
1317              * we can provide the correct devname to the caller. */
1318             LIST_FOR_EACH (candidate, port_elem, &port->ifaces) {
1319                 uint8_t candidate_ea[ETH_ADDR_LEN];
1320                 if (!netdev_get_etheraddr(candidate->netdev, candidate_ea)
1321                     && eth_addr_equals(iface_ea, candidate_ea)) {
1322                     iface = candidate;
1323                 }
1324             }
1325         } else {
1326             /* Choose the interface whose MAC address will represent the port.
1327              * The Linux kernel bonding code always chooses the MAC address of
1328              * the first slave added to a bond, and the Fedora networking
1329              * scripts always add slaves to a bond in alphabetical order, so
1330              * for compatibility we choose the interface with the name that is
1331              * first in alphabetical order. */
1332             LIST_FOR_EACH (candidate, port_elem, &port->ifaces) {
1333                 if (!iface || strcmp(candidate->name, iface->name) < 0) {
1334                     iface = candidate;
1335                 }
1336             }
1337
1338             /* The local port doesn't count (since we're trying to choose its
1339              * MAC address anyway). */
1340             if (iface->ofp_port == OFPP_LOCAL) {
1341                 continue;
1342             }
1343
1344             /* Grab MAC. */
1345             error = netdev_get_etheraddr(iface->netdev, iface_ea);
1346             if (error) {
1347                 continue;
1348             }
1349         }
1350
1351         /* Compare against our current choice. */
1352         if (!eth_addr_is_multicast(iface_ea) &&
1353             !eth_addr_is_local(iface_ea) &&
1354             !eth_addr_is_reserved(iface_ea) &&
1355             !eth_addr_is_zero(iface_ea) &&
1356             (!found_addr || eth_addr_compare_3way(iface_ea, ea) < 0))
1357         {
1358             memcpy(ea, iface_ea, ETH_ADDR_LEN);
1359             *hw_addr_iface = iface;
1360             found_addr = true;
1361         }
1362     }
1363     if (found_addr) {
1364         VLOG_DBG("bridge %s: using bridge Ethernet address "ETH_ADDR_FMT,
1365                  br->name, ETH_ADDR_ARGS(ea));
1366     } else {
1367         memcpy(ea, br->default_ea, ETH_ADDR_LEN);
1368         *hw_addr_iface = NULL;
1369         VLOG_WARN("bridge %s: using default bridge Ethernet "
1370                   "address "ETH_ADDR_FMT, br->name, ETH_ADDR_ARGS(ea));
1371     }
1372 }
1373
1374 /* Choose and returns the datapath ID for bridge 'br' given that the bridge
1375  * Ethernet address is 'bridge_ea'.  If 'bridge_ea' is the Ethernet address of
1376  * an interface on 'br', then that interface must be passed in as
1377  * 'hw_addr_iface'; if 'bridge_ea' was derived some other way, then
1378  * 'hw_addr_iface' must be passed in as a null pointer. */
1379 static uint64_t
1380 bridge_pick_datapath_id(struct bridge *br,
1381                         const uint8_t bridge_ea[ETH_ADDR_LEN],
1382                         struct iface *hw_addr_iface)
1383 {
1384     /*
1385      * The procedure for choosing a bridge MAC address will, in the most
1386      * ordinary case, also choose a unique MAC that we can use as a datapath
1387      * ID.  In some special cases, though, multiple bridges will end up with
1388      * the same MAC address.  This is OK for the bridges, but it will confuse
1389      * the OpenFlow controller, because each datapath needs a unique datapath
1390      * ID.
1391      *
1392      * Datapath IDs must be unique.  It is also very desirable that they be
1393      * stable from one run to the next, so that policy set on a datapath
1394      * "sticks".
1395      */
1396     const char *datapath_id;
1397     uint64_t dpid;
1398
1399     datapath_id = bridge_get_other_config(br->cfg, "datapath-id");
1400     if (datapath_id && dpid_from_string(datapath_id, &dpid)) {
1401         return dpid;
1402     }
1403
1404     if (!hw_addr_iface) {
1405         /*
1406          * A purely internal bridge, that is, one that has no non-virtual
1407          * network devices on it at all, is difficult because it has no
1408          * natural unique identifier at all.
1409          *
1410          * When the host is a XenServer, we handle this case by hashing the
1411          * host's UUID with the name of the bridge.  Names of bridges are
1412          * persistent across XenServer reboots, although they can be reused if
1413          * an internal network is destroyed and then a new one is later
1414          * created, so this is fairly effective.
1415          *
1416          * When the host is not a XenServer, we punt by using a random MAC
1417          * address on each run.
1418          */
1419         const char *host_uuid = xenserver_get_host_uuid();
1420         if (host_uuid) {
1421             char *combined = xasprintf("%s,%s", host_uuid, br->name);
1422             dpid = dpid_from_hash(combined, strlen(combined));
1423             free(combined);
1424             return dpid;
1425         }
1426     }
1427
1428     return eth_addr_to_uint64(bridge_ea);
1429 }
1430
1431 static uint64_t
1432 dpid_from_hash(const void *data, size_t n)
1433 {
1434     uint8_t hash[SHA1_DIGEST_SIZE];
1435
1436     BUILD_ASSERT_DECL(sizeof hash >= ETH_ADDR_LEN);
1437     sha1_bytes(data, n, hash);
1438     eth_addr_mark_random(hash);
1439     return eth_addr_to_uint64(hash);
1440 }
1441
1442 static void
1443 iface_refresh_status(struct iface *iface)
1444 {
1445     struct shash sh;
1446
1447     enum netdev_flags flags;
1448     uint32_t current;
1449     int64_t bps;
1450     int mtu;
1451     int64_t mtu_64;
1452     int error;
1453
1454     if (iface_is_synthetic(iface)) {
1455         return;
1456     }
1457
1458     shash_init(&sh);
1459
1460     if (!netdev_get_status(iface->netdev, &sh)) {
1461         size_t n;
1462         char **keys, **values;
1463
1464         shash_to_ovs_idl_map(&sh, &keys, &values, &n);
1465         ovsrec_interface_set_status(iface->cfg, keys, values, n);
1466
1467         free(keys);
1468         free(values);
1469     } else {
1470         ovsrec_interface_set_status(iface->cfg, NULL, NULL, 0);
1471     }
1472
1473     shash_destroy_free_data(&sh);
1474
1475     error = netdev_get_flags(iface->netdev, &flags);
1476     if (!error) {
1477         ovsrec_interface_set_admin_state(iface->cfg, flags & NETDEV_UP ? "up" : "down");
1478     }
1479     else {
1480         ovsrec_interface_set_admin_state(iface->cfg, NULL);
1481     }
1482
1483     error = netdev_get_features(iface->netdev, &current, NULL, NULL, NULL);
1484     if (!error) {
1485         ovsrec_interface_set_duplex(iface->cfg,
1486                                     netdev_features_is_full_duplex(current)
1487                                     ? "full" : "half");
1488         /* warning: uint64_t -> int64_t conversion */
1489         bps = netdev_features_to_bps(current);
1490         ovsrec_interface_set_link_speed(iface->cfg, &bps, 1);
1491     }
1492     else {
1493         ovsrec_interface_set_duplex(iface->cfg, NULL);
1494         ovsrec_interface_set_link_speed(iface->cfg, NULL, 0);
1495     }
1496
1497     error = netdev_get_mtu(iface->netdev, &mtu);
1498     if (!error) {
1499         mtu_64 = mtu;
1500         ovsrec_interface_set_mtu(iface->cfg, &mtu_64, 1);
1501     }
1502     else {
1503         ovsrec_interface_set_mtu(iface->cfg, NULL, 0);
1504     }
1505 }
1506
1507 /* Writes 'iface''s CFM statistics to the database. */
1508 static void
1509 iface_refresh_cfm_stats(struct iface *iface)
1510 {
1511     const struct ovsrec_interface *cfg = iface->cfg;
1512     int fault, error;
1513     const uint64_t *rmps;
1514     size_t n_rmps;
1515
1516     if (iface_is_synthetic(iface)) {
1517         return;
1518     }
1519
1520     fault = ofproto_port_get_cfm_fault(iface->port->bridge->ofproto,
1521                                        iface->ofp_port);
1522     if (fault >= 0) {
1523         bool fault_bool = fault;
1524         ovsrec_interface_set_cfm_fault(cfg, &fault_bool, 1);
1525     } else {
1526         ovsrec_interface_set_cfm_fault(cfg, NULL, 0);
1527     }
1528
1529     error = ofproto_port_get_cfm_remote_mpids(iface->port->bridge->ofproto,
1530                                               iface->ofp_port, &rmps, &n_rmps);
1531     if (error >= 0) {
1532         ovsrec_interface_set_cfm_remote_mpids(cfg, (const int64_t *)rmps,
1533                                               n_rmps);
1534     } else {
1535         ovsrec_interface_set_cfm_remote_mpids(cfg, NULL, 0);
1536     }
1537 }
1538
1539 static void
1540 iface_refresh_stats(struct iface *iface)
1541 {
1542 #define IFACE_STATS                             \
1543     IFACE_STAT(rx_packets,      "rx_packets")   \
1544     IFACE_STAT(tx_packets,      "tx_packets")   \
1545     IFACE_STAT(rx_bytes,        "rx_bytes")     \
1546     IFACE_STAT(tx_bytes,        "tx_bytes")     \
1547     IFACE_STAT(rx_dropped,      "rx_dropped")   \
1548     IFACE_STAT(tx_dropped,      "tx_dropped")   \
1549     IFACE_STAT(rx_errors,       "rx_errors")    \
1550     IFACE_STAT(tx_errors,       "tx_errors")    \
1551     IFACE_STAT(rx_frame_errors, "rx_frame_err") \
1552     IFACE_STAT(rx_over_errors,  "rx_over_err")  \
1553     IFACE_STAT(rx_crc_errors,   "rx_crc_err")   \
1554     IFACE_STAT(collisions,      "collisions")
1555
1556 #define IFACE_STAT(MEMBER, NAME) NAME,
1557     static char *keys[] = { IFACE_STATS };
1558 #undef IFACE_STAT
1559     int64_t values[ARRAY_SIZE(keys)];
1560     int i;
1561
1562     struct netdev_stats stats;
1563
1564     if (iface_is_synthetic(iface)) {
1565         return;
1566     }
1567
1568     /* Intentionally ignore return value, since errors will set 'stats' to
1569      * all-1s, and we will deal with that correctly below. */
1570     netdev_get_stats(iface->netdev, &stats);
1571
1572     /* Copy statistics into values[] array. */
1573     i = 0;
1574 #define IFACE_STAT(MEMBER, NAME) values[i++] = stats.MEMBER;
1575     IFACE_STATS;
1576 #undef IFACE_STAT
1577     assert(i == ARRAY_SIZE(keys));
1578
1579     ovsrec_interface_set_statistics(iface->cfg, keys, values, ARRAY_SIZE(keys));
1580 #undef IFACE_STATS
1581 }
1582
1583 static void
1584 br_refresh_stp_status(struct bridge *br)
1585 {
1586     struct ofproto *ofproto = br->ofproto;
1587     struct ofproto_stp_status status;
1588     char *keys[3], *values[3];
1589     size_t i;
1590
1591     if (ofproto_get_stp_status(ofproto, &status)) {
1592         return;
1593     }
1594
1595     if (!status.enabled) {
1596         ovsrec_bridge_set_status(br->cfg, NULL, NULL, 0);
1597         return;
1598     }
1599
1600     keys[0] = "stp_bridge_id",
1601     values[0] = xasprintf(STP_ID_FMT, STP_ID_ARGS(status.bridge_id));
1602     keys[1] = "stp_designated_root",
1603     values[1] = xasprintf(STP_ID_FMT, STP_ID_ARGS(status.designated_root));
1604     keys[2] = "stp_root_path_cost",
1605     values[2] = xasprintf("%d", status.root_path_cost);
1606
1607     ovsrec_bridge_set_status(br->cfg, keys, values, ARRAY_SIZE(values));
1608
1609     for (i = 0; i < ARRAY_SIZE(values); i++) {
1610         free(values[i]);
1611     }
1612 }
1613
1614 static void
1615 port_refresh_stp_status(struct port *port)
1616 {
1617     struct ofproto *ofproto = port->bridge->ofproto;
1618     struct iface *iface;
1619     struct ofproto_port_stp_status status;
1620     char *keys[4];
1621     char *str_values[4];
1622     int64_t int_values[3];
1623     size_t i;
1624
1625     if (port_is_synthetic(port)) {
1626         return;
1627     }
1628
1629     /* STP doesn't currently support bonds. */
1630     if (!list_is_singleton(&port->ifaces)) {
1631         ovsrec_port_set_status(port->cfg, NULL, NULL, 0);
1632         return;
1633     }
1634
1635     iface = CONTAINER_OF(list_front(&port->ifaces), struct iface, port_elem);
1636
1637     if (ofproto_port_get_stp_status(ofproto, iface->ofp_port, &status)) {
1638         return;
1639     }
1640
1641     if (!status.enabled) {
1642         ovsrec_port_set_status(port->cfg, NULL, NULL, 0);
1643         ovsrec_port_set_statistics(port->cfg, NULL, NULL, 0);
1644         return;
1645     }
1646
1647     /* Set Status column. */
1648     keys[0] = "stp_port_id";
1649     str_values[0] = xasprintf(STP_PORT_ID_FMT, status.port_id);
1650     keys[1] = "stp_state";
1651     str_values[1] = xstrdup(stp_state_name(status.state));
1652     keys[2] = "stp_sec_in_state";
1653     str_values[2] = xasprintf("%u", status.sec_in_state);
1654     keys[3] = "stp_role";
1655     str_values[3] = xstrdup(stp_role_name(status.role));
1656
1657     ovsrec_port_set_status(port->cfg, keys, str_values,
1658                            ARRAY_SIZE(str_values));
1659
1660     for (i = 0; i < ARRAY_SIZE(str_values); i++) {
1661         free(str_values[i]);
1662     }
1663
1664     /* Set Statistics column. */
1665     keys[0] = "stp_tx_count";
1666     int_values[0] = status.tx_count;
1667     keys[1] = "stp_rx_count";
1668     int_values[1] = status.rx_count;
1669     keys[2] = "stp_error_count";
1670     int_values[2] = status.error_count;
1671
1672     ovsrec_port_set_statistics(port->cfg, keys, int_values,
1673                                ARRAY_SIZE(int_values));
1674 }
1675
1676 static bool
1677 enable_system_stats(const struct ovsrec_open_vswitch *cfg)
1678 {
1679     const char *enable;
1680
1681     /* Use other-config:enable-system-stats by preference. */
1682     enable = get_ovsrec_key_value(cfg->key_other_config,
1683                                   cfg->value_other_config,
1684                                   cfg->n_other_config,
1685                                   "enable-statistics");
1686     if (enable) {
1687         return !strcmp(enable, "true");
1688     }
1689
1690     /* Disable by default. */
1691     return false;
1692 }
1693
1694 static void
1695 refresh_system_stats(const struct ovsrec_open_vswitch *cfg)
1696 {
1697     struct ovsdb_datum datum;
1698     struct shash stats;
1699
1700     shash_init(&stats);
1701     if (enable_system_stats(cfg)) {
1702         get_system_stats(&stats);
1703     }
1704
1705     ovsdb_datum_from_shash(&datum, &stats);
1706     ovsdb_idl_txn_write(&cfg->header_, &ovsrec_open_vswitch_col_statistics,
1707                         &datum);
1708 }
1709
1710 static inline const char *
1711 nx_role_to_str(enum nx_role role)
1712 {
1713     switch (role) {
1714     case NX_ROLE_OTHER:
1715         return "other";
1716     case NX_ROLE_MASTER:
1717         return "master";
1718     case NX_ROLE_SLAVE:
1719         return "slave";
1720     default:
1721         return "*** INVALID ROLE ***";
1722     }
1723 }
1724
1725 static void
1726 refresh_controller_status(void)
1727 {
1728     struct bridge *br;
1729     struct shash info;
1730     const struct ovsrec_controller *cfg;
1731
1732     shash_init(&info);
1733
1734     /* Accumulate status for controllers on all bridges. */
1735     HMAP_FOR_EACH (br, node, &all_bridges) {
1736         ofproto_get_ofproto_controller_info(br->ofproto, &info);
1737     }
1738
1739     /* Update each controller in the database with current status. */
1740     OVSREC_CONTROLLER_FOR_EACH(cfg, idl) {
1741         struct ofproto_controller_info *cinfo =
1742             shash_find_data(&info, cfg->target);
1743
1744         if (cinfo) {
1745             ovsrec_controller_set_is_connected(cfg, cinfo->is_connected);
1746             ovsrec_controller_set_role(cfg, nx_role_to_str(cinfo->role));
1747             ovsrec_controller_set_status(cfg, (char **) cinfo->pairs.keys,
1748                                          (char **) cinfo->pairs.values,
1749                                          cinfo->pairs.n);
1750         } else {
1751             ovsrec_controller_set_is_connected(cfg, false);
1752             ovsrec_controller_set_role(cfg, NULL);
1753             ovsrec_controller_set_status(cfg, NULL, NULL, 0);
1754         }
1755     }
1756
1757     ofproto_free_ofproto_controller_info(&info);
1758 }
1759
1760 static void
1761 refresh_cfm_stats(void)
1762 {
1763     static struct ovsdb_idl_txn *txn = NULL;
1764
1765     if (!txn) {
1766         struct bridge *br;
1767
1768         txn = ovsdb_idl_txn_create(idl);
1769
1770         HMAP_FOR_EACH (br, node, &all_bridges) {
1771             struct iface *iface;
1772
1773             HMAP_FOR_EACH (iface, name_node, &br->iface_by_name) {
1774                 iface_refresh_cfm_stats(iface);
1775             }
1776         }
1777     }
1778
1779     if (ovsdb_idl_txn_commit(txn) != TXN_INCOMPLETE) {
1780         ovsdb_idl_txn_destroy(txn);
1781         txn = NULL;
1782     }
1783 }
1784
1785 void
1786 bridge_run(void)
1787 {
1788     const struct ovsrec_open_vswitch *cfg;
1789
1790     bool vlan_splinters_changed;
1791     bool datapath_destroyed;
1792     bool database_changed;
1793     struct bridge *br;
1794
1795     /* (Re)configure if necessary. */
1796     database_changed = ovsdb_idl_run(idl);
1797     if (ovsdb_idl_is_lock_contended(idl)) {
1798         static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 1);
1799         struct bridge *br, *next_br;
1800
1801         VLOG_ERR_RL(&rl, "another ovs-vswitchd process is running, "
1802                     "disabling this process until it goes away");
1803
1804         HMAP_FOR_EACH_SAFE (br, next_br, node, &all_bridges) {
1805             bridge_destroy(br);
1806         }
1807         return;
1808     } else if (!ovsdb_idl_has_lock(idl)) {
1809         return;
1810     }
1811     cfg = ovsrec_open_vswitch_first(idl);
1812
1813     /* Let each bridge do the work that it needs to do. */
1814     datapath_destroyed = false;
1815     HMAP_FOR_EACH (br, node, &all_bridges) {
1816         int error = ofproto_run(br->ofproto);
1817         if (error) {
1818             static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
1819             VLOG_ERR_RL(&rl, "bridge %s: datapath was destroyed externally, "
1820                         "forcing reconfiguration", br->name);
1821             datapath_destroyed = true;
1822         }
1823     }
1824
1825     /* Re-configure SSL.  We do this on every trip through the main loop,
1826      * instead of just when the database changes, because the contents of the
1827      * key and certificate files can change without the database changing.
1828      *
1829      * We do this before bridge_reconfigure() because that function might
1830      * initiate SSL connections and thus requires SSL to be configured. */
1831     if (cfg && cfg->ssl) {
1832         const struct ovsrec_ssl *ssl = cfg->ssl;
1833
1834         stream_ssl_set_key_and_cert(ssl->private_key, ssl->certificate);
1835         stream_ssl_set_ca_cert_file(ssl->ca_cert, ssl->bootstrap_ca_cert);
1836     }
1837
1838     /* If VLAN splinters are in use, then we need to reconfigure if VLAN usage
1839      * has changed. */
1840     vlan_splinters_changed = false;
1841     if (vlan_splinters_enabled_anywhere) {
1842         HMAP_FOR_EACH (br, node, &all_bridges) {
1843             if (ofproto_has_vlan_usage_changed(br->ofproto)) {
1844                 vlan_splinters_changed = true;
1845                 break;
1846             }
1847         }
1848     }
1849
1850     if (database_changed || datapath_destroyed || vlan_splinters_changed) {
1851         if (cfg) {
1852             struct ovsdb_idl_txn *txn = ovsdb_idl_txn_create(idl);
1853
1854             bridge_reconfigure(cfg);
1855
1856             ovsrec_open_vswitch_set_cur_cfg(cfg, cfg->next_cfg);
1857             ovsdb_idl_txn_commit(txn);
1858             ovsdb_idl_txn_destroy(txn); /* XXX */
1859         } else {
1860             /* We still need to reconfigure to avoid dangling pointers to
1861              * now-destroyed ovsrec structures inside bridge data. */
1862             static const struct ovsrec_open_vswitch null_cfg;
1863
1864             bridge_reconfigure(&null_cfg);
1865         }
1866     }
1867
1868     /* Refresh system and interface stats if necessary. */
1869     if (time_msec() >= stats_timer) {
1870         if (cfg) {
1871             struct ovsdb_idl_txn *txn;
1872
1873             txn = ovsdb_idl_txn_create(idl);
1874             HMAP_FOR_EACH (br, node, &all_bridges) {
1875                 struct port *port;
1876                 struct mirror *m;
1877
1878                 HMAP_FOR_EACH (port, hmap_node, &br->ports) {
1879                     struct iface *iface;
1880
1881                     LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
1882                         iface_refresh_stats(iface);
1883                         iface_refresh_status(iface);
1884                     }
1885                 }
1886
1887                 HMAP_FOR_EACH (m, hmap_node, &br->mirrors) {
1888                     mirror_refresh_stats(m);
1889                 }
1890
1891             }
1892             refresh_system_stats(cfg);
1893             refresh_controller_status();
1894             ovsdb_idl_txn_commit(txn);
1895             ovsdb_idl_txn_destroy(txn); /* XXX */
1896         }
1897
1898         stats_timer = time_msec() + STATS_INTERVAL;
1899     }
1900
1901     if (time_msec() >= db_limiter) {
1902         struct ovsdb_idl_txn *txn;
1903
1904         txn = ovsdb_idl_txn_create(idl);
1905         HMAP_FOR_EACH (br, node, &all_bridges) {
1906             struct iface *iface;
1907             struct port *port;
1908
1909             br_refresh_stp_status(br);
1910
1911             HMAP_FOR_EACH (port, hmap_node, &br->ports) {
1912                 port_refresh_stp_status(port);
1913             }
1914
1915             HMAP_FOR_EACH (iface, name_node, &br->iface_by_name) {
1916                 const char *link_state;
1917                 int64_t link_resets;
1918                 int current;
1919
1920                 if (iface_is_synthetic(iface)) {
1921                     continue;
1922                 }
1923
1924                 current = ofproto_port_is_lacp_current(br->ofproto,
1925                                                        iface->ofp_port);
1926                 if (current >= 0) {
1927                     bool bl = current;
1928                     ovsrec_interface_set_lacp_current(iface->cfg, &bl, 1);
1929                 } else {
1930                     ovsrec_interface_set_lacp_current(iface->cfg, NULL, 0);
1931                 }
1932
1933                 link_state = netdev_get_carrier(iface->netdev) ? "up" : "down";
1934                 ovsrec_interface_set_link_state(iface->cfg, link_state);
1935
1936                 link_resets = netdev_get_carrier_resets(iface->netdev);
1937                 ovsrec_interface_set_link_resets(iface->cfg, &link_resets, 1);
1938             }
1939         }
1940
1941         if (ovsdb_idl_txn_commit(txn) != TXN_UNCHANGED) {
1942             db_limiter = time_msec() + DB_LIMIT_INTERVAL;
1943         }
1944         ovsdb_idl_txn_destroy(txn);
1945     }
1946
1947     refresh_cfm_stats();
1948 }
1949
1950 void
1951 bridge_wait(void)
1952 {
1953     ovsdb_idl_wait(idl);
1954     if (!hmap_is_empty(&all_bridges)) {
1955         struct bridge *br;
1956
1957         HMAP_FOR_EACH (br, node, &all_bridges) {
1958             ofproto_wait(br->ofproto);
1959         }
1960         poll_timer_wait_until(stats_timer);
1961
1962         if (db_limiter > time_msec()) {
1963             poll_timer_wait_until(db_limiter);
1964         }
1965     }
1966 }
1967 \f
1968 /* QoS unixctl user interface functions. */
1969
1970 struct qos_unixctl_show_cbdata {
1971     struct ds *ds;
1972     struct iface *iface;
1973 };
1974
1975 static void
1976 qos_unixctl_show_cb(unsigned int queue_id,
1977                     const struct shash *details,
1978                     void *aux)
1979 {
1980     struct qos_unixctl_show_cbdata *data = aux;
1981     struct ds *ds = data->ds;
1982     struct iface *iface = data->iface;
1983     struct netdev_queue_stats stats;
1984     struct shash_node *node;
1985     int error;
1986
1987     ds_put_cstr(ds, "\n");
1988     if (queue_id) {
1989         ds_put_format(ds, "Queue %u:\n", queue_id);
1990     } else {
1991         ds_put_cstr(ds, "Default:\n");
1992     }
1993
1994     SHASH_FOR_EACH (node, details) {
1995         ds_put_format(ds, "\t%s: %s\n", node->name, (char *)node->data);
1996     }
1997
1998     error = netdev_get_queue_stats(iface->netdev, queue_id, &stats);
1999     if (!error) {
2000         if (stats.tx_packets != UINT64_MAX) {
2001             ds_put_format(ds, "\ttx_packets: %"PRIu64"\n", stats.tx_packets);
2002         }
2003
2004         if (stats.tx_bytes != UINT64_MAX) {
2005             ds_put_format(ds, "\ttx_bytes: %"PRIu64"\n", stats.tx_bytes);
2006         }
2007
2008         if (stats.tx_errors != UINT64_MAX) {
2009             ds_put_format(ds, "\ttx_errors: %"PRIu64"\n", stats.tx_errors);
2010         }
2011     } else {
2012         ds_put_format(ds, "\tFailed to get statistics for queue %u: %s",
2013                       queue_id, strerror(error));
2014     }
2015 }
2016
2017 static void
2018 qos_unixctl_show(struct unixctl_conn *conn,
2019                  const char *args, void *aux OVS_UNUSED)
2020 {
2021     struct ds ds = DS_EMPTY_INITIALIZER;
2022     struct shash sh = SHASH_INITIALIZER(&sh);
2023     struct iface *iface;
2024     const char *type;
2025     struct shash_node *node;
2026     struct qos_unixctl_show_cbdata data;
2027     int error;
2028
2029     iface = iface_find(args);
2030     if (!iface) {
2031         unixctl_command_reply(conn, 501, "no such interface");
2032         return;
2033     }
2034
2035     netdev_get_qos(iface->netdev, &type, &sh);
2036
2037     if (*type != '\0') {
2038         ds_put_format(&ds, "QoS: %s %s\n", iface->name, type);
2039
2040         SHASH_FOR_EACH (node, &sh) {
2041             ds_put_format(&ds, "%s: %s\n", node->name, (char *)node->data);
2042         }
2043
2044         data.ds = &ds;
2045         data.iface = iface;
2046         error = netdev_dump_queues(iface->netdev, qos_unixctl_show_cb, &data);
2047
2048         if (error) {
2049             ds_put_format(&ds, "failed to dump queues: %s", strerror(error));
2050         }
2051         unixctl_command_reply(conn, 200, ds_cstr(&ds));
2052     } else {
2053         ds_put_format(&ds, "QoS not configured on %s\n", iface->name);
2054         unixctl_command_reply(conn, 501, ds_cstr(&ds));
2055     }
2056
2057     shash_destroy_free_data(&sh);
2058     ds_destroy(&ds);
2059 }
2060 \f
2061 /* Bridge reconfiguration functions. */
2062 static void
2063 bridge_create(const struct ovsrec_bridge *br_cfg)
2064 {
2065     struct bridge *br;
2066
2067     assert(!bridge_lookup(br_cfg->name));
2068     br = xzalloc(sizeof *br);
2069
2070     br->name = xstrdup(br_cfg->name);
2071     br->type = xstrdup(ofproto_normalize_type(br_cfg->datapath_type));
2072     br->cfg = br_cfg;
2073
2074     /* Derive the default Ethernet address from the bridge's UUID.  This should
2075      * be unique and it will be stable between ovs-vswitchd runs.  */
2076     memcpy(br->default_ea, &br_cfg->header_.uuid, ETH_ADDR_LEN);
2077     eth_addr_mark_random(br->default_ea);
2078
2079     hmap_init(&br->ports);
2080     hmap_init(&br->ifaces);
2081     hmap_init(&br->iface_by_name);
2082     hmap_init(&br->mirrors);
2083
2084     hmap_insert(&all_bridges, &br->node, hash_string(br->name, 0));
2085 }
2086
2087 static void
2088 bridge_destroy(struct bridge *br)
2089 {
2090     if (br) {
2091         struct mirror *mirror, *next_mirror;
2092         struct port *port, *next_port;
2093
2094         HMAP_FOR_EACH_SAFE (port, next_port, hmap_node, &br->ports) {
2095             port_destroy(port);
2096         }
2097         HMAP_FOR_EACH_SAFE (mirror, next_mirror, hmap_node, &br->mirrors) {
2098             mirror_destroy(mirror);
2099         }
2100         hmap_remove(&all_bridges, &br->node);
2101         ofproto_destroy(br->ofproto);
2102         hmap_destroy(&br->ifaces);
2103         hmap_destroy(&br->ports);
2104         hmap_destroy(&br->iface_by_name);
2105         hmap_destroy(&br->mirrors);
2106         free(br->name);
2107         free(br->type);
2108         free(br);
2109     }
2110 }
2111
2112 static struct bridge *
2113 bridge_lookup(const char *name)
2114 {
2115     struct bridge *br;
2116
2117     HMAP_FOR_EACH_WITH_HASH (br, node, hash_string(name, 0), &all_bridges) {
2118         if (!strcmp(br->name, name)) {
2119             return br;
2120         }
2121     }
2122     return NULL;
2123 }
2124
2125 /* Handle requests for a listing of all flows known by the OpenFlow
2126  * stack, including those normally hidden. */
2127 static void
2128 bridge_unixctl_dump_flows(struct unixctl_conn *conn,
2129                           const char *args, void *aux OVS_UNUSED)
2130 {
2131     struct bridge *br;
2132     struct ds results;
2133
2134     br = bridge_lookup(args);
2135     if (!br) {
2136         unixctl_command_reply(conn, 501, "Unknown bridge");
2137         return;
2138     }
2139
2140     ds_init(&results);
2141     ofproto_get_all_flows(br->ofproto, &results);
2142
2143     unixctl_command_reply(conn, 200, ds_cstr(&results));
2144     ds_destroy(&results);
2145 }
2146
2147 /* "bridge/reconnect [BRIDGE]": makes BRIDGE drop all of its controller
2148  * connections and reconnect.  If BRIDGE is not specified, then all bridges
2149  * drop their controller connections and reconnect. */
2150 static void
2151 bridge_unixctl_reconnect(struct unixctl_conn *conn,
2152                          const char *args, void *aux OVS_UNUSED)
2153 {
2154     struct bridge *br;
2155     if (args[0] != '\0') {
2156         br = bridge_lookup(args);
2157         if (!br) {
2158             unixctl_command_reply(conn, 501, "Unknown bridge");
2159             return;
2160         }
2161         ofproto_reconnect_controllers(br->ofproto);
2162     } else {
2163         HMAP_FOR_EACH (br, node, &all_bridges) {
2164             ofproto_reconnect_controllers(br->ofproto);
2165         }
2166     }
2167     unixctl_command_reply(conn, 200, NULL);
2168 }
2169
2170 static size_t
2171 bridge_get_controllers(const struct bridge *br,
2172                        struct ovsrec_controller ***controllersp)
2173 {
2174     struct ovsrec_controller **controllers;
2175     size_t n_controllers;
2176
2177     controllers = br->cfg->controller;
2178     n_controllers = br->cfg->n_controller;
2179
2180     if (n_controllers == 1 && !strcmp(controllers[0]->target, "none")) {
2181         controllers = NULL;
2182         n_controllers = 0;
2183     }
2184
2185     if (controllersp) {
2186         *controllersp = controllers;
2187     }
2188     return n_controllers;
2189 }
2190
2191 /* Adds and deletes "struct port"s and "struct iface"s under 'br' to match
2192  * those configured in 'br->cfg'. */
2193 static void
2194 bridge_add_del_ports(struct bridge *br,
2195                      const unsigned long int *splinter_vlans)
2196 {
2197     struct port *port, *next;
2198     struct shash_node *node;
2199     struct shash new_ports;
2200     size_t i;
2201
2202     /* Collect new ports. */
2203     shash_init(&new_ports);
2204     for (i = 0; i < br->cfg->n_ports; i++) {
2205         const char *name = br->cfg->ports[i]->name;
2206         if (!shash_add_once(&new_ports, name, br->cfg->ports[i])) {
2207             VLOG_WARN("bridge %s: %s specified twice as bridge port",
2208                       br->name, name);
2209         }
2210     }
2211     if (bridge_get_controllers(br, NULL)
2212         && !shash_find(&new_ports, br->name)) {
2213         VLOG_WARN("bridge %s: no port named %s, synthesizing one",
2214                   br->name, br->name);
2215
2216         br->synth_local_port.interfaces = &br->synth_local_ifacep;
2217         br->synth_local_port.n_interfaces = 1;
2218         br->synth_local_port.name = br->name;
2219
2220         br->synth_local_iface.name = br->name;
2221         br->synth_local_iface.type = "internal";
2222
2223         br->synth_local_ifacep = &br->synth_local_iface;
2224
2225         shash_add(&new_ports, br->name, &br->synth_local_port);
2226     }
2227
2228     if (splinter_vlans) {
2229         add_vlan_splinter_ports(br, splinter_vlans, &new_ports);
2230     }
2231
2232     /* Get rid of deleted ports.
2233      * Get rid of deleted interfaces on ports that still exist. */
2234     HMAP_FOR_EACH_SAFE (port, next, hmap_node, &br->ports) {
2235         port->cfg = shash_find_data(&new_ports, port->name);
2236         if (!port->cfg) {
2237             port_destroy(port);
2238         } else {
2239             port_del_ifaces(port);
2240         }
2241     }
2242
2243     /* Create new ports.
2244      * Add new interfaces to existing ports. */
2245     SHASH_FOR_EACH (node, &new_ports) {
2246         struct port *port = port_lookup(br, node->name);
2247         if (!port) {
2248             struct ovsrec_port *cfg = node->data;
2249             port = port_create(br, cfg);
2250         }
2251         port_add_ifaces(port);
2252         if (list_is_empty(&port->ifaces)) {
2253             VLOG_WARN("bridge %s: port %s has no interfaces, dropping",
2254                       br->name, port->name);
2255             port_destroy(port);
2256         }
2257     }
2258     shash_destroy(&new_ports);
2259 }
2260
2261 /* Initializes 'oc' appropriately as a management service controller for
2262  * 'br'.
2263  *
2264  * The caller must free oc->target when it is no longer needed. */
2265 static void
2266 bridge_ofproto_controller_for_mgmt(const struct bridge *br,
2267                                    struct ofproto_controller *oc)
2268 {
2269     oc->target = xasprintf("punix:%s/%s.mgmt", ovs_rundir(), br->name);
2270     oc->max_backoff = 0;
2271     oc->probe_interval = 60;
2272     oc->band = OFPROTO_OUT_OF_BAND;
2273     oc->rate_limit = 0;
2274     oc->burst_limit = 0;
2275 }
2276
2277 /* Converts ovsrec_controller 'c' into an ofproto_controller in 'oc'.  */
2278 static void
2279 bridge_ofproto_controller_from_ovsrec(const struct ovsrec_controller *c,
2280                                       struct ofproto_controller *oc)
2281 {
2282     oc->target = c->target;
2283     oc->max_backoff = c->max_backoff ? *c->max_backoff / 1000 : 8;
2284     oc->probe_interval = c->inactivity_probe ? *c->inactivity_probe / 1000 : 5;
2285     oc->band = (!c->connection_mode || !strcmp(c->connection_mode, "in-band")
2286                 ? OFPROTO_IN_BAND : OFPROTO_OUT_OF_BAND);
2287     oc->rate_limit = c->controller_rate_limit ? *c->controller_rate_limit : 0;
2288     oc->burst_limit = (c->controller_burst_limit
2289                        ? *c->controller_burst_limit : 0);
2290 }
2291
2292 /* Configures the IP stack for 'br''s local interface properly according to the
2293  * configuration in 'c'.  */
2294 static void
2295 bridge_configure_local_iface_netdev(struct bridge *br,
2296                                     struct ovsrec_controller *c)
2297 {
2298     struct netdev *netdev;
2299     struct in_addr mask, gateway;
2300
2301     struct iface *local_iface;
2302     struct in_addr ip;
2303
2304     /* If there's no local interface or no IP address, give up. */
2305     local_iface = iface_from_ofp_port(br, OFPP_LOCAL);
2306     if (!local_iface || !c->local_ip || !inet_aton(c->local_ip, &ip)) {
2307         return;
2308     }
2309
2310     /* Bring up the local interface. */
2311     netdev = local_iface->netdev;
2312     netdev_turn_flags_on(netdev, NETDEV_UP, true);
2313
2314     /* Configure the IP address and netmask. */
2315     if (!c->local_netmask
2316         || !inet_aton(c->local_netmask, &mask)
2317         || !mask.s_addr) {
2318         mask.s_addr = guess_netmask(ip.s_addr);
2319     }
2320     if (!netdev_set_in4(netdev, ip, mask)) {
2321         VLOG_INFO("bridge %s: configured IP address "IP_FMT", netmask "IP_FMT,
2322                   br->name, IP_ARGS(&ip.s_addr), IP_ARGS(&mask.s_addr));
2323     }
2324
2325     /* Configure the default gateway. */
2326     if (c->local_gateway
2327         && inet_aton(c->local_gateway, &gateway)
2328         && gateway.s_addr) {
2329         if (!netdev_add_router(netdev, gateway)) {
2330             VLOG_INFO("bridge %s: configured gateway "IP_FMT,
2331                       br->name, IP_ARGS(&gateway.s_addr));
2332         }
2333     }
2334 }
2335
2336 /* Returns true if 'a' and 'b' are the same except that any number of slashes
2337  * in either string are treated as equal to any number of slashes in the other,
2338  * e.g. "x///y" is equal to "x/y". */
2339 static bool
2340 equal_pathnames(const char *a, const char *b)
2341 {
2342     while (*a == *b) {
2343         if (*a == '/') {
2344             a += strspn(a, "/");
2345             b += strspn(b, "/");
2346         } else if (*a == '\0') {
2347             return true;
2348         } else {
2349             a++;
2350             b++;
2351         }
2352     }
2353     return false;
2354 }
2355
2356 static void
2357 bridge_configure_remotes(struct bridge *br,
2358                          const struct sockaddr_in *managers, size_t n_managers)
2359 {
2360     const char *disable_ib_str, *queue_id_str;
2361     bool disable_in_band = false;
2362     int queue_id;
2363
2364     struct ovsrec_controller **controllers;
2365     size_t n_controllers;
2366
2367     enum ofproto_fail_mode fail_mode;
2368
2369     struct ofproto_controller *ocs;
2370     size_t n_ocs;
2371     size_t i;
2372
2373     /* Check if we should disable in-band control on this bridge. */
2374     disable_ib_str = bridge_get_other_config(br->cfg, "disable-in-band");
2375     if (disable_ib_str && !strcmp(disable_ib_str, "true")) {
2376         disable_in_band = true;
2377     }
2378
2379     /* Set OpenFlow queue ID for in-band control. */
2380     queue_id_str = bridge_get_other_config(br->cfg, "in-band-queue");
2381     queue_id = queue_id_str ? strtol(queue_id_str, NULL, 10) : -1;
2382     ofproto_set_in_band_queue(br->ofproto, queue_id);
2383
2384     if (disable_in_band) {
2385         ofproto_set_extra_in_band_remotes(br->ofproto, NULL, 0);
2386     } else {
2387         ofproto_set_extra_in_band_remotes(br->ofproto, managers, n_managers);
2388     }
2389
2390     n_controllers = bridge_get_controllers(br, &controllers);
2391
2392     ocs = xmalloc((n_controllers + 1) * sizeof *ocs);
2393     n_ocs = 0;
2394
2395     bridge_ofproto_controller_for_mgmt(br, &ocs[n_ocs++]);
2396     for (i = 0; i < n_controllers; i++) {
2397         struct ovsrec_controller *c = controllers[i];
2398
2399         if (!strncmp(c->target, "punix:", 6)
2400             || !strncmp(c->target, "unix:", 5)) {
2401             static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 5);
2402             char *whitelist;
2403
2404             whitelist = xasprintf("unix:%s/%s.controller",
2405                                   ovs_rundir(), br->name);
2406             if (!equal_pathnames(c->target, whitelist)) {
2407                 /* Prevent remote ovsdb-server users from accessing arbitrary
2408                  * Unix domain sockets and overwriting arbitrary local
2409                  * files. */
2410                 VLOG_ERR_RL(&rl, "bridge %s: Not adding Unix domain socket "
2411                             "controller \"%s\" due to possibility for remote "
2412                             "exploit.  Instead, specify whitelisted \"%s\" or "
2413                             "connect to \"unix:%s/%s.mgmt\" (which is always "
2414                             "available without special configuration).",
2415                             br->name, c->target, whitelist,
2416                             ovs_rundir(), br->name);
2417                 free(whitelist);
2418                 continue;
2419             }
2420
2421             free(whitelist);
2422         }
2423
2424         bridge_configure_local_iface_netdev(br, c);
2425         bridge_ofproto_controller_from_ovsrec(c, &ocs[n_ocs]);
2426         if (disable_in_band) {
2427             ocs[n_ocs].band = OFPROTO_OUT_OF_BAND;
2428         }
2429         n_ocs++;
2430     }
2431
2432     ofproto_set_controllers(br->ofproto, ocs, n_ocs);
2433     free(ocs[0].target); /* From bridge_ofproto_controller_for_mgmt(). */
2434     free(ocs);
2435
2436     /* Set the fail-mode. */
2437     fail_mode = !br->cfg->fail_mode
2438                 || !strcmp(br->cfg->fail_mode, "standalone")
2439                     ? OFPROTO_FAIL_STANDALONE
2440                     : OFPROTO_FAIL_SECURE;
2441     ofproto_set_fail_mode(br->ofproto, fail_mode);
2442
2443     /* Configure OpenFlow controller connection snooping. */
2444     if (!ofproto_has_snoops(br->ofproto)) {
2445         struct sset snoops;
2446
2447         sset_init(&snoops);
2448         sset_add_and_free(&snoops, xasprintf("punix:%s/%s.snoop",
2449                                              ovs_rundir(), br->name));
2450         ofproto_set_snoops(br->ofproto, &snoops);
2451         sset_destroy(&snoops);
2452     }
2453 }
2454 \f
2455 /* Port functions. */
2456
2457 static struct port *
2458 port_create(struct bridge *br, const struct ovsrec_port *cfg)
2459 {
2460     struct port *port;
2461
2462     port = xzalloc(sizeof *port);
2463     port->bridge = br;
2464     port->name = xstrdup(cfg->name);
2465     port->cfg = cfg;
2466     list_init(&port->ifaces);
2467
2468     hmap_insert(&br->ports, &port->hmap_node, hash_string(port->name, 0));
2469
2470     VLOG_INFO("created port %s on bridge %s", port->name, br->name);
2471
2472     return port;
2473 }
2474
2475 static const char *
2476 get_port_other_config(const struct ovsrec_port *port, const char *key,
2477                       const char *default_value)
2478 {
2479     const char *value;
2480
2481     value = get_ovsrec_key_value(port->key_other_config,
2482                                  port->value_other_config,
2483                                  port->n_other_config, key);
2484     return value ? value : default_value;
2485 }
2486
2487 static const char *
2488 get_interface_other_config(const struct ovsrec_interface *iface,
2489                            const char *key, const char *default_value)
2490 {
2491     const char *value;
2492
2493     value = get_ovsrec_key_value(iface->key_other_config,
2494                                  iface->value_other_config,
2495                                  iface->n_other_config, key);
2496     return value ? value : default_value;
2497 }
2498
2499 /* Deletes interfaces from 'port' that are no longer configured for it. */
2500 static void
2501 port_del_ifaces(struct port *port)
2502 {
2503     struct iface *iface, *next;
2504     struct sset new_ifaces;
2505     size_t i;
2506
2507     /* Collect list of new interfaces. */
2508     sset_init(&new_ifaces);
2509     for (i = 0; i < port->cfg->n_interfaces; i++) {
2510         const char *name = port->cfg->interfaces[i]->name;
2511         const char *type = port->cfg->interfaces[i]->name;
2512         if (strcmp(type, "null")) {
2513             sset_add(&new_ifaces, name);
2514         }
2515     }
2516
2517     /* Get rid of deleted interfaces. */
2518     LIST_FOR_EACH_SAFE (iface, next, port_elem, &port->ifaces) {
2519         if (!sset_contains(&new_ifaces, iface->name)) {
2520             iface_destroy(iface);
2521         }
2522     }
2523
2524     sset_destroy(&new_ifaces);
2525 }
2526
2527 /* Adds new interfaces to 'port' and updates 'type' and 'cfg' members of
2528  * existing ones. */
2529 static void
2530 port_add_ifaces(struct port *port)
2531 {
2532     struct shash new_ifaces;
2533     struct shash_node *node;
2534     size_t i;
2535
2536     /* Collect new ifaces. */
2537     shash_init(&new_ifaces);
2538     for (i = 0; i < port->cfg->n_interfaces; i++) {
2539         const struct ovsrec_interface *cfg = port->cfg->interfaces[i];
2540         if (strcmp(cfg->type, "null")
2541             && !shash_add_once(&new_ifaces, cfg->name, cfg)) {
2542             VLOG_WARN("port %s: %s specified twice as port interface",
2543                       port->name, cfg->name);
2544             iface_clear_db_record(cfg);
2545         }
2546     }
2547
2548     /* Create new interfaces.
2549      * Update interface types and 'cfg' members. */
2550     SHASH_FOR_EACH (node, &new_ifaces) {
2551         const struct ovsrec_interface *cfg = node->data;
2552         const char *iface_name = node->name;
2553         struct iface *iface;
2554
2555         iface = iface_lookup(port->bridge, iface_name);
2556         if (!iface) {
2557             iface = iface_create(port, cfg);
2558         } else {
2559             iface->cfg = cfg;
2560         }
2561
2562         /* Determine interface type.  The local port always has type
2563          * "internal".  Other ports take their type from the database and
2564          * default to "system" if none is specified. */
2565         iface->type = (!strcmp(iface_name, port->bridge->name) ? "internal"
2566                        : cfg->type[0] ? cfg->type
2567                        : "system");
2568     }
2569     shash_destroy(&new_ifaces);
2570 }
2571
2572 static void
2573 port_destroy(struct port *port)
2574 {
2575     if (port) {
2576         struct bridge *br = port->bridge;
2577         struct iface *iface, *next;
2578
2579         if (br->ofproto) {
2580             ofproto_bundle_unregister(br->ofproto, port);
2581         }
2582
2583         LIST_FOR_EACH_SAFE (iface, next, port_elem, &port->ifaces) {
2584             iface_destroy(iface);
2585         }
2586
2587         hmap_remove(&br->ports, &port->hmap_node);
2588
2589         VLOG_INFO("destroyed port %s on bridge %s", port->name, br->name);
2590
2591         free(port->name);
2592         free(port);
2593     }
2594 }
2595
2596 static struct port *
2597 port_lookup(const struct bridge *br, const char *name)
2598 {
2599     struct port *port;
2600
2601     HMAP_FOR_EACH_WITH_HASH (port, hmap_node, hash_string(name, 0),
2602                              &br->ports) {
2603         if (!strcmp(port->name, name)) {
2604             return port;
2605         }
2606     }
2607     return NULL;
2608 }
2609
2610 static bool
2611 enable_lacp(struct port *port, bool *activep)
2612 {
2613     if (!port->cfg->lacp) {
2614         /* XXX when LACP implementation has been sufficiently tested, enable by
2615          * default and make active on bonded ports. */
2616         return false;
2617     } else if (!strcmp(port->cfg->lacp, "off")) {
2618         return false;
2619     } else if (!strcmp(port->cfg->lacp, "active")) {
2620         *activep = true;
2621         return true;
2622     } else if (!strcmp(port->cfg->lacp, "passive")) {
2623         *activep = false;
2624         return true;
2625     } else {
2626         VLOG_WARN("port %s: unknown LACP mode %s",
2627                   port->name, port->cfg->lacp);
2628         return false;
2629     }
2630 }
2631
2632 static struct lacp_settings *
2633 port_configure_lacp(struct port *port, struct lacp_settings *s)
2634 {
2635     const char *lacp_time;
2636     long long int custom_time;
2637     int priority;
2638
2639     if (!enable_lacp(port, &s->active)) {
2640         return NULL;
2641     }
2642
2643     s->name = port->name;
2644     memcpy(s->id, port->bridge->ea, ETH_ADDR_LEN);
2645
2646     /* Prefer bondable links if unspecified. */
2647     priority = atoi(get_port_other_config(port->cfg, "lacp-system-priority",
2648                                           "0"));
2649     s->priority = (priority > 0 && priority <= UINT16_MAX
2650                    ? priority
2651                    : UINT16_MAX - !list_is_short(&port->ifaces));
2652
2653     s->heartbeat = !strcmp(get_port_other_config(port->cfg,
2654                                                  "lacp-heartbeat",
2655                                                  "false"), "true");
2656
2657
2658     lacp_time = get_port_other_config(port->cfg, "lacp-time", "slow");
2659     custom_time = atoi(lacp_time);
2660     if (!strcmp(lacp_time, "fast")) {
2661         s->lacp_time = LACP_TIME_FAST;
2662     } else if (!strcmp(lacp_time, "slow")) {
2663         s->lacp_time = LACP_TIME_SLOW;
2664     } else if (custom_time > 0) {
2665         s->lacp_time = LACP_TIME_CUSTOM;
2666         s->custom_time = custom_time;
2667     } else {
2668         s->lacp_time = LACP_TIME_SLOW;
2669     }
2670
2671     return s;
2672 }
2673
2674 static void
2675 iface_configure_lacp(struct iface *iface, struct lacp_slave_settings *s)
2676 {
2677     int priority, portid, key;
2678
2679     portid = atoi(get_interface_other_config(iface->cfg, "lacp-port-id", "0"));
2680     priority = atoi(get_interface_other_config(iface->cfg,
2681                                                "lacp-port-priority", "0"));
2682     key = atoi(get_interface_other_config(iface->cfg, "lacp-aggregation-key",
2683                                           "0"));
2684
2685     if (portid <= 0 || portid > UINT16_MAX) {
2686         portid = iface->ofp_port;
2687     }
2688
2689     if (priority <= 0 || priority > UINT16_MAX) {
2690         priority = UINT16_MAX;
2691     }
2692
2693     if (key < 0 || key > UINT16_MAX) {
2694         key = 0;
2695     }
2696
2697     s->name = iface->name;
2698     s->id = portid;
2699     s->priority = priority;
2700     s->key = key;
2701 }
2702
2703 static void
2704 port_configure_bond(struct port *port, struct bond_settings *s,
2705                     uint32_t *bond_stable_ids)
2706 {
2707     const char *detect_s;
2708     struct iface *iface;
2709     int miimon_interval;
2710     size_t i;
2711
2712     s->name = port->name;
2713     s->balance = BM_SLB;
2714     if (port->cfg->bond_mode
2715         && !bond_mode_from_string(&s->balance, port->cfg->bond_mode)) {
2716         VLOG_WARN("port %s: unknown bond_mode %s, defaulting to %s",
2717                   port->name, port->cfg->bond_mode,
2718                   bond_mode_to_string(s->balance));
2719     }
2720     if (s->balance == BM_SLB && port->bridge->cfg->n_flood_vlans) {
2721         VLOG_WARN("port %s: SLB bonds are incompatible with flood_vlans, "
2722                   "please use another bond type or disable flood_vlans",
2723                   port->name);
2724     }
2725
2726     miimon_interval = atoi(get_port_other_config(port->cfg,
2727                                                  "bond-miimon-interval", "0"));
2728     if (miimon_interval <= 0) {
2729         miimon_interval = 200;
2730     }
2731
2732     detect_s = get_port_other_config(port->cfg, "bond-detect-mode", "carrier");
2733     if (!strcmp(detect_s, "carrier")) {
2734         miimon_interval = 0;
2735     } else if (strcmp(detect_s, "miimon")) {
2736         VLOG_WARN("port %s: unsupported bond-detect-mode %s, "
2737                   "defaulting to carrier", port->name, detect_s);
2738         miimon_interval = 0;
2739     }
2740
2741     s->up_delay = MAX(0, port->cfg->bond_updelay);
2742     s->down_delay = MAX(0, port->cfg->bond_downdelay);
2743     s->basis = atoi(get_port_other_config(port->cfg, "bond-hash-basis", "0"));
2744     s->rebalance_interval = atoi(
2745         get_port_other_config(port->cfg, "bond-rebalance-interval", "10000"));
2746     if (s->rebalance_interval < 1000) {
2747         s->rebalance_interval = 1000;
2748     }
2749
2750     s->fake_iface = port->cfg->bond_fake_iface;
2751
2752     i = 0;
2753     LIST_FOR_EACH (iface, port_elem, &port->ifaces) {
2754         long long stable_id;
2755
2756         stable_id = atoll(get_interface_other_config(iface->cfg,
2757                                                      "bond-stable-id", "0"));
2758         if (stable_id <= 0 || stable_id >= UINT32_MAX) {
2759             stable_id = iface->ofp_port;
2760         }
2761         bond_stable_ids[i++] = stable_id;
2762
2763         netdev_set_miimon_interval(iface->netdev, miimon_interval);
2764     }
2765 }
2766
2767 /* Returns true if 'port' is synthetic, that is, if we constructed it locally
2768  * instead of obtaining it from the database. */
2769 static bool
2770 port_is_synthetic(const struct port *port)
2771 {
2772     return ovsdb_idl_row_is_synthetic(&port->cfg->header_);
2773 }
2774 \f
2775 /* Interface functions. */
2776
2777 static struct iface *
2778 iface_create(struct port *port, const struct ovsrec_interface *if_cfg)
2779 {
2780     struct bridge *br = port->bridge;
2781     struct iface *iface;
2782     char *name = if_cfg->name;
2783
2784     iface = xzalloc(sizeof *iface);
2785     iface->port = port;
2786     iface->name = xstrdup(name);
2787     iface->ofp_port = -1;
2788     iface->tag = tag_create_random();
2789     iface->netdev = NULL;
2790     iface->cfg = if_cfg;
2791
2792     hmap_insert(&br->iface_by_name, &iface->name_node, hash_string(name, 0));
2793
2794     list_push_back(&port->ifaces, &iface->port_elem);
2795
2796     VLOG_DBG("attached network device %s to port %s", iface->name, port->name);
2797
2798     return iface;
2799 }
2800
2801 static void
2802 iface_destroy(struct iface *iface)
2803 {
2804     if (iface) {
2805         struct port *port = iface->port;
2806         struct bridge *br = port->bridge;
2807
2808         if (br->ofproto && iface->ofp_port >= 0) {
2809             ofproto_port_unregister(br->ofproto, iface->ofp_port);
2810         }
2811
2812         if (iface->ofp_port >= 0) {
2813             hmap_remove(&br->ifaces, &iface->ofp_port_node);
2814         }
2815
2816         list_remove(&iface->port_elem);
2817         hmap_remove(&br->iface_by_name, &iface->name_node);
2818
2819         netdev_close(iface->netdev);
2820
2821         free(iface->name);
2822         free(iface);
2823     }
2824 }
2825
2826 static struct iface *
2827 iface_lookup(const struct bridge *br, const char *name)
2828 {
2829     struct iface *iface;
2830
2831     HMAP_FOR_EACH_WITH_HASH (iface, name_node, hash_string(name, 0),
2832                              &br->iface_by_name) {
2833         if (!strcmp(iface->name, name)) {
2834             return iface;
2835         }
2836     }
2837
2838     return NULL;
2839 }
2840
2841 static struct iface *
2842 iface_find(const char *name)
2843 {
2844     const struct bridge *br;
2845
2846     HMAP_FOR_EACH (br, node, &all_bridges) {
2847         struct iface *iface = iface_lookup(br, name);
2848
2849         if (iface) {
2850             return iface;
2851         }
2852     }
2853     return NULL;
2854 }
2855
2856 static struct iface *
2857 iface_from_ofp_port(const struct bridge *br, uint16_t ofp_port)
2858 {
2859     struct iface *iface;
2860
2861     HMAP_FOR_EACH_IN_BUCKET (iface, ofp_port_node,
2862                              hash_int(ofp_port, 0), &br->ifaces) {
2863         if (iface->ofp_port == ofp_port) {
2864             return iface;
2865         }
2866     }
2867     return NULL;
2868 }
2869
2870 /* Set Ethernet address of 'iface', if one is specified in the configuration
2871  * file. */
2872 static void
2873 iface_set_mac(struct iface *iface)
2874 {
2875     uint8_t ea[ETH_ADDR_LEN];
2876
2877     if (!strcmp(iface->type, "internal")
2878         && iface->cfg->mac && eth_addr_from_string(iface->cfg->mac, ea)) {
2879         if (iface->ofp_port == OFPP_LOCAL) {
2880             VLOG_ERR("interface %s: ignoring mac in Interface record "
2881                      "(use Bridge record to set local port's mac)",
2882                      iface->name);
2883         } else if (eth_addr_is_multicast(ea)) {
2884             VLOG_ERR("interface %s: cannot set MAC to multicast address",
2885                      iface->name);
2886         } else {
2887             int error = netdev_set_etheraddr(iface->netdev, ea);
2888             if (error) {
2889                 VLOG_ERR("interface %s: setting MAC failed (%s)",
2890                          iface->name, strerror(error));
2891             }
2892         }
2893     }
2894 }
2895
2896 /* Sets the ofport column of 'if_cfg' to 'ofport'. */
2897 static void
2898 iface_set_ofport(const struct ovsrec_interface *if_cfg, int64_t ofport)
2899 {
2900     if (if_cfg && !ovsdb_idl_row_is_synthetic(&if_cfg->header_)) {
2901         ovsrec_interface_set_ofport(if_cfg, &ofport, 1);
2902     }
2903 }
2904
2905 /* Clears all of the fields in 'if_cfg' that indicate interface status, and
2906  * sets the "ofport" field to -1.
2907  *
2908  * This is appropriate when 'if_cfg''s interface cannot be created or is
2909  * otherwise invalid. */
2910 static void
2911 iface_clear_db_record(const struct ovsrec_interface *if_cfg)
2912 {
2913     if (!ovsdb_idl_row_is_synthetic(&if_cfg->header_)) {
2914         iface_set_ofport(if_cfg, -1);
2915         ovsrec_interface_set_status(if_cfg, NULL, NULL, 0);
2916         ovsrec_interface_set_admin_state(if_cfg, NULL);
2917         ovsrec_interface_set_duplex(if_cfg, NULL);
2918         ovsrec_interface_set_link_speed(if_cfg, NULL, 0);
2919         ovsrec_interface_set_link_state(if_cfg, NULL);
2920         ovsrec_interface_set_mtu(if_cfg, NULL, 0);
2921         ovsrec_interface_set_cfm_fault(if_cfg, NULL, 0);
2922         ovsrec_interface_set_cfm_remote_mpids(if_cfg, NULL, 0);
2923         ovsrec_interface_set_lacp_current(if_cfg, NULL, 0);
2924         ovsrec_interface_set_statistics(if_cfg, NULL, NULL, 0);
2925     }
2926 }
2927
2928 /* Adds the 'n' key-value pairs in 'keys' in 'values' to 'shash'.
2929  *
2930  * The value strings in '*shash' are taken directly from values[], not copied,
2931  * so the caller should not modify or free them. */
2932 static void
2933 shash_from_ovs_idl_map(char **keys, char **values, size_t n,
2934                        struct shash *shash)
2935 {
2936     size_t i;
2937
2938     shash_init(shash);
2939     for (i = 0; i < n; i++) {
2940         shash_add(shash, keys[i], values[i]);
2941     }
2942 }
2943
2944 /* Creates 'keys' and 'values' arrays from 'shash'.
2945  *
2946  * Sets 'keys' and 'values' to heap allocated arrays representing the key-value
2947  * pairs in 'shash'.  The caller takes ownership of 'keys' and 'values'.  They
2948  * are populated with with strings taken directly from 'shash' and thus have
2949  * the same ownership of the key-value pairs in shash.
2950  */
2951 static void
2952 shash_to_ovs_idl_map(struct shash *shash,
2953                      char ***keys, char ***values, size_t *n)
2954 {
2955     size_t i, count;
2956     char **k, **v;
2957     struct shash_node *sn;
2958
2959     count = shash_count(shash);
2960
2961     k = xmalloc(count * sizeof *k);
2962     v = xmalloc(count * sizeof *v);
2963
2964     i = 0;
2965     SHASH_FOR_EACH(sn, shash) {
2966         k[i] = sn->name;
2967         v[i] = sn->data;
2968         i++;
2969     }
2970
2971     *n      = count;
2972     *keys   = k;
2973     *values = v;
2974 }
2975
2976 struct iface_delete_queues_cbdata {
2977     struct netdev *netdev;
2978     const struct ovsdb_datum *queues;
2979 };
2980
2981 static bool
2982 queue_ids_include(const struct ovsdb_datum *queues, int64_t target)
2983 {
2984     union ovsdb_atom atom;
2985
2986     atom.integer = target;
2987     return ovsdb_datum_find_key(queues, &atom, OVSDB_TYPE_INTEGER) != UINT_MAX;
2988 }
2989
2990 static void
2991 iface_delete_queues(unsigned int queue_id,
2992                     const struct shash *details OVS_UNUSED, void *cbdata_)
2993 {
2994     struct iface_delete_queues_cbdata *cbdata = cbdata_;
2995
2996     if (!queue_ids_include(cbdata->queues, queue_id)) {
2997         netdev_delete_queue(cbdata->netdev, queue_id);
2998     }
2999 }
3000
3001 static void
3002 iface_configure_qos(struct iface *iface, const struct ovsrec_qos *qos)
3003 {
3004     struct ofpbuf queues_buf;
3005
3006     ofpbuf_init(&queues_buf, 0);
3007
3008     if (!qos || qos->type[0] == '\0' || qos->n_queues < 1) {
3009         netdev_set_qos(iface->netdev, NULL, NULL);
3010     } else {
3011         struct iface_delete_queues_cbdata cbdata;
3012         struct shash details;
3013         bool queue_zero;
3014         size_t i;
3015
3016         /* Configure top-level Qos for 'iface'. */
3017         shash_from_ovs_idl_map(qos->key_other_config, qos->value_other_config,
3018                                qos->n_other_config, &details);
3019         netdev_set_qos(iface->netdev, qos->type, &details);
3020         shash_destroy(&details);
3021
3022         /* Deconfigure queues that were deleted. */
3023         cbdata.netdev = iface->netdev;
3024         cbdata.queues = ovsrec_qos_get_queues(qos, OVSDB_TYPE_INTEGER,
3025                                               OVSDB_TYPE_UUID);
3026         netdev_dump_queues(iface->netdev, iface_delete_queues, &cbdata);
3027
3028         /* Configure queues for 'iface'. */
3029         queue_zero = false;
3030         for (i = 0; i < qos->n_queues; i++) {
3031             const struct ovsrec_queue *queue = qos->value_queues[i];
3032             unsigned int queue_id = qos->key_queues[i];
3033
3034             if (queue_id == 0) {
3035                 queue_zero = true;
3036             }
3037
3038             if (queue->n_dscp == 1) {
3039                 struct ofproto_port_queue *port_queue;
3040
3041                 port_queue = ofpbuf_put_uninit(&queues_buf,
3042                                                sizeof *port_queue);
3043                 port_queue->queue = queue_id;
3044                 port_queue->dscp = queue->dscp[0];
3045             }
3046
3047             shash_from_ovs_idl_map(queue->key_other_config,
3048                                    queue->value_other_config,
3049                                    queue->n_other_config, &details);
3050             netdev_set_queue(iface->netdev, queue_id, &details);
3051             shash_destroy(&details);
3052         }
3053         if (!queue_zero) {
3054             static struct vlog_rate_limit rl = VLOG_RATE_LIMIT_INIT(1, 1);
3055             VLOG_WARN_RL(&rl, "interface %s: QoS configured without a default "
3056                          "queue (queue 0).  Packets not directed to a "
3057                          "correctly configured queue may be dropped.",
3058                          iface->name);
3059         }
3060     }
3061
3062     if (iface->ofp_port >= 0) {
3063         const struct ofproto_port_queue *port_queues = queues_buf.data;
3064         size_t n_queues = queues_buf.size / sizeof *port_queues;
3065
3066         ofproto_port_set_queues(iface->port->bridge->ofproto, iface->ofp_port,
3067                                 port_queues, n_queues);
3068     }
3069
3070     netdev_set_policing(iface->netdev,
3071                         iface->cfg->ingress_policing_rate,
3072                         iface->cfg->ingress_policing_burst);
3073
3074     ofpbuf_uninit(&queues_buf);
3075 }
3076
3077 static void
3078 iface_configure_cfm(struct iface *iface)
3079 {
3080     const struct ovsrec_interface *cfg = iface->cfg;
3081     const char *extended_str, *opstate_str;
3082     struct cfm_settings s;
3083
3084     if (!cfg->n_cfm_mpid) {
3085         ofproto_port_clear_cfm(iface->port->bridge->ofproto, iface->ofp_port);
3086         return;
3087     }
3088
3089     s.mpid = *cfg->cfm_mpid;
3090     s.interval = atoi(get_interface_other_config(iface->cfg, "cfm_interval",
3091                                                  "0"));
3092     s.ccm_vlan = atoi(get_interface_other_config(iface->cfg, "cfm_ccm_vlan",
3093                                                  "0"));
3094     if (s.interval <= 0) {
3095         s.interval = 1000;
3096     }
3097
3098     extended_str = get_interface_other_config(iface->cfg, "cfm_extended",
3099                                               "false");
3100     s.extended = !strcasecmp("true", extended_str);
3101
3102     opstate_str = get_interface_other_config(iface->cfg, "cfm_opstate", "up");
3103     s.opup = !strcasecmp("up", opstate_str);
3104
3105     ofproto_port_set_cfm(iface->port->bridge->ofproto, iface->ofp_port, &s);
3106 }
3107
3108 /* Returns true if 'iface' is synthetic, that is, if we constructed it locally
3109  * instead of obtaining it from the database. */
3110 static bool
3111 iface_is_synthetic(const struct iface *iface)
3112 {
3113     return ovsdb_idl_row_is_synthetic(&iface->cfg->header_);
3114 }
3115 \f
3116 /* Port mirroring. */
3117
3118 static struct mirror *
3119 mirror_find_by_uuid(struct bridge *br, const struct uuid *uuid)
3120 {
3121     struct mirror *m;
3122
3123     HMAP_FOR_EACH_IN_BUCKET (m, hmap_node, uuid_hash(uuid), &br->mirrors) {
3124         if (uuid_equals(uuid, &m->uuid)) {
3125             return m;
3126         }
3127     }
3128     return NULL;
3129 }
3130
3131 static void
3132 bridge_configure_mirrors(struct bridge *br)
3133 {
3134     const struct ovsdb_datum *mc;
3135     unsigned long *flood_vlans;
3136     struct mirror *m, *next;
3137     size_t i;
3138
3139     /* Get rid of deleted mirrors. */
3140     mc = ovsrec_bridge_get_mirrors(br->cfg, OVSDB_TYPE_UUID);
3141     HMAP_FOR_EACH_SAFE (m, next, hmap_node, &br->mirrors) {
3142         union ovsdb_atom atom;
3143
3144         atom.uuid = m->uuid;
3145         if (ovsdb_datum_find_key(mc, &atom, OVSDB_TYPE_UUID) == UINT_MAX) {
3146             mirror_destroy(m);
3147         }
3148     }
3149
3150     /* Add new mirrors and reconfigure existing ones. */
3151     for (i = 0; i < br->cfg->n_mirrors; i++) {
3152         const struct ovsrec_mirror *cfg = br->cfg->mirrors[i];
3153         struct mirror *m = mirror_find_by_uuid(br, &cfg->header_.uuid);
3154         if (!m) {
3155             m = mirror_create(br, cfg);
3156         }
3157         m->cfg = cfg;
3158         if (!mirror_configure(m)) {
3159             mirror_destroy(m);
3160         }
3161     }
3162
3163     /* Update flooded vlans (for RSPAN). */
3164     flood_vlans = vlan_bitmap_from_array(br->cfg->flood_vlans,
3165                                          br->cfg->n_flood_vlans);
3166     ofproto_set_flood_vlans(br->ofproto, flood_vlans);
3167     bitmap_free(flood_vlans);
3168 }
3169
3170 static struct mirror *
3171 mirror_create(struct bridge *br, const struct ovsrec_mirror *cfg)
3172 {
3173     struct mirror *m;
3174
3175     m = xzalloc(sizeof *m);
3176     m->uuid = cfg->header_.uuid;
3177     hmap_insert(&br->mirrors, &m->hmap_node, uuid_hash(&m->uuid));
3178     m->bridge = br;
3179     m->name = xstrdup(cfg->name);
3180
3181     return m;
3182 }
3183
3184 static void
3185 mirror_destroy(struct mirror *m)
3186 {
3187     if (m) {
3188         struct bridge *br = m->bridge;
3189
3190         if (br->ofproto) {
3191             ofproto_mirror_unregister(br->ofproto, m);
3192         }
3193
3194         hmap_remove(&br->mirrors, &m->hmap_node);
3195         free(m->name);
3196         free(m);
3197     }
3198 }
3199
3200 static void
3201 mirror_collect_ports(struct mirror *m,
3202                      struct ovsrec_port **in_ports, int n_in_ports,
3203                      void ***out_portsp, size_t *n_out_portsp)
3204 {
3205     void **out_ports = xmalloc(n_in_ports * sizeof *out_ports);
3206     size_t n_out_ports = 0;
3207     size_t i;
3208
3209     for (i = 0; i < n_in_ports; i++) {
3210         const char *name = in_ports[i]->name;
3211         struct port *port = port_lookup(m->bridge, name);
3212         if (port) {
3213             out_ports[n_out_ports++] = port;
3214         } else {
3215             VLOG_WARN("bridge %s: mirror %s cannot match on nonexistent "
3216                       "port %s", m->bridge->name, m->name, name);
3217         }
3218     }
3219     *out_portsp = out_ports;
3220     *n_out_portsp = n_out_ports;
3221 }
3222
3223 static bool
3224 mirror_configure(struct mirror *m)
3225 {
3226     const struct ovsrec_mirror *cfg = m->cfg;
3227     struct ofproto_mirror_settings s;
3228
3229     /* Set name. */
3230     if (strcmp(cfg->name, m->name)) {
3231         free(m->name);
3232         m->name = xstrdup(cfg->name);
3233     }
3234     s.name = m->name;
3235
3236     /* Get output port or VLAN. */
3237     if (cfg->output_port) {
3238         s.out_bundle = port_lookup(m->bridge, cfg->output_port->name);
3239         if (!s.out_bundle) {
3240             VLOG_ERR("bridge %s: mirror %s outputs to port not on bridge",
3241                      m->bridge->name, m->name);
3242             return false;
3243         }
3244         s.out_vlan = UINT16_MAX;
3245
3246         if (cfg->output_vlan) {
3247             VLOG_ERR("bridge %s: mirror %s specifies both output port and "
3248                      "output vlan; ignoring output vlan",
3249                      m->bridge->name, m->name);
3250         }
3251     } else if (cfg->output_vlan) {
3252         /* The database should prevent invalid VLAN values. */
3253         s.out_bundle = NULL;
3254         s.out_vlan = *cfg->output_vlan;
3255     } else {
3256         VLOG_ERR("bridge %s: mirror %s does not specify output; ignoring",
3257                  m->bridge->name, m->name);
3258         return false;
3259     }
3260
3261     /* Get port selection. */
3262     if (cfg->select_all) {
3263         size_t n_ports = hmap_count(&m->bridge->ports);
3264         void **ports = xmalloc(n_ports * sizeof *ports);
3265         struct port *port;
3266         size_t i;
3267
3268         i = 0;
3269         HMAP_FOR_EACH (port, hmap_node, &m->bridge->ports) {
3270             ports[i++] = port;
3271         }
3272
3273         s.srcs = ports;
3274         s.n_srcs = n_ports;
3275
3276         s.dsts = ports;
3277         s.n_dsts = n_ports;
3278     } else {
3279         /* Get ports, dropping ports that don't exist.
3280          * The IDL ensures that there are no duplicates. */
3281         mirror_collect_ports(m, cfg->select_src_port, cfg->n_select_src_port,
3282                              &s.srcs, &s.n_srcs);
3283         mirror_collect_ports(m, cfg->select_dst_port, cfg->n_select_dst_port,
3284                              &s.dsts, &s.n_dsts);
3285     }
3286
3287     /* Get VLAN selection. */
3288     s.src_vlans = vlan_bitmap_from_array(cfg->select_vlan, cfg->n_select_vlan);
3289
3290     /* Configure. */
3291     ofproto_mirror_register(m->bridge->ofproto, m, &s);
3292
3293     /* Clean up. */
3294     if (s.srcs != s.dsts) {
3295         free(s.dsts);
3296     }
3297     free(s.srcs);
3298     free(s.src_vlans);
3299
3300     return true;
3301 }
3302 \f
3303 /* Linux VLAN device support (e.g. "eth0.10" for VLAN 10.)
3304  *
3305  * This is deprecated.  It is only for compatibility with broken device drivers
3306  * in old versions of Linux that do not properly support VLANs when VLAN
3307  * devices are not used.  When broken device drivers are no longer in
3308  * widespread use, we will delete these interfaces. */
3309
3310 static void **blocks;
3311 static size_t n_blocks, allocated_blocks;
3312
3313 /* Adds 'block' to a list of blocks that have to be freed with free() when the
3314  * VLAN splinters are reconfigured. */
3315 static void
3316 register_block(void *block)
3317 {
3318     if (n_blocks >= allocated_blocks) {
3319         blocks = x2nrealloc(blocks, &allocated_blocks, sizeof *blocks);
3320     }
3321     blocks[n_blocks++] = block;
3322 }
3323
3324 /* Frees all of the blocks registered with register_block(). */
3325 static void
3326 free_registered_blocks(void)
3327 {
3328     size_t i;
3329
3330     for (i = 0; i < n_blocks; i++) {
3331         free(blocks[i]);
3332     }
3333     n_blocks = 0;
3334 }
3335
3336 /* Returns true if VLAN splinters are enabled on 'iface_cfg', false
3337  * otherwise. */
3338 static bool
3339 vlan_splinters_is_enabled(const struct ovsrec_interface *iface_cfg)
3340 {
3341     const char *value;
3342
3343     value = get_interface_other_config(iface_cfg, "enable-vlan-splinters", "");
3344     return !strcmp(value, "true");
3345 }
3346
3347 /* Figures out the set of VLANs that are in use for the purpose of VLAN
3348  * splinters.
3349  *
3350  * If VLAN splinters are enabled on at least one interface and any VLANs are in
3351  * use, returns a 4096-bit bitmap with a 1-bit for each in-use VLAN (bits 0 and
3352  * 4095 will not be set).  The caller is responsible for freeing the bitmap,
3353  * with free().
3354  *
3355  * If VLANs splinters are not enabled on any interface or if no VLANs are in
3356  * use, returns NULL.
3357  *
3358  * Updates 'vlan_splinters_enabled_anywhere'. */
3359 static unsigned long int *
3360 collect_splinter_vlans(const struct ovsrec_open_vswitch *ovs_cfg)
3361 {
3362     unsigned long int *splinter_vlans;
3363     struct sset splinter_ifaces;
3364     const char *real_dev_name;
3365     struct shash *real_devs;
3366     struct shash_node *node;
3367     struct bridge *br;
3368     size_t i;
3369
3370     splinter_vlans = NULL;
3371     sset_init(&splinter_ifaces);
3372     for (i = 0; i < ovs_cfg->n_bridges; i++) {
3373         struct ovsrec_bridge *br_cfg = ovs_cfg->bridges[i];
3374         size_t j;
3375
3376         for (j = 0; j < br_cfg->n_ports; j++) {
3377             struct ovsrec_port *port_cfg = br_cfg->ports[j];
3378             int k;
3379
3380             for (k = 0; k < port_cfg->n_interfaces; k++) {
3381                 struct ovsrec_interface *iface_cfg = port_cfg->interfaces[k];
3382
3383                 if (vlan_splinters_is_enabled(iface_cfg)) {
3384                     sset_add(&splinter_ifaces, iface_cfg->name);
3385
3386                     if (!splinter_vlans) {
3387                         splinter_vlans = bitmap_allocate(4096);
3388                     }
3389                     vlan_bitmap_from_array__(port_cfg->trunks,
3390                                              port_cfg->n_trunks,
3391                                              splinter_vlans);
3392                 }
3393             }
3394         }
3395     }
3396
3397     vlan_splinters_enabled_anywhere = splinter_vlans != NULL;
3398     if (!splinter_vlans) {
3399         sset_destroy(&splinter_ifaces);
3400         return NULL;
3401     }
3402
3403     HMAP_FOR_EACH (br, node, &all_bridges) {
3404         if (br->ofproto) {
3405             ofproto_get_vlan_usage(br->ofproto, splinter_vlans);
3406         }
3407     }
3408
3409     /* Don't allow VLANs 0 or 4095 to be splintered.  VLAN 0 should appear on
3410      * the real device.  VLAN 4095 is reserved and Linux doesn't allow a VLAN
3411      * device to be created for it. */
3412     bitmap_set0(splinter_vlans, 0);
3413     bitmap_set0(splinter_vlans, 4095);
3414
3415     /* Delete all VLAN devices that we don't need. */
3416     vlandev_refresh();
3417     real_devs = vlandev_get_real_devs();
3418     SHASH_FOR_EACH (node, real_devs) {
3419         const struct vlan_real_dev *real_dev = node->data;
3420         const struct vlan_dev *vlan_dev;
3421         bool real_dev_has_splinters;
3422
3423         real_dev_has_splinters = sset_contains(&splinter_ifaces,
3424                                                real_dev->name);
3425         HMAP_FOR_EACH (vlan_dev, hmap_node, &real_dev->vlan_devs) {
3426             if (!real_dev_has_splinters
3427                 || !bitmap_is_set(splinter_vlans, vlan_dev->vid)) {
3428                 struct netdev *netdev;
3429
3430                 if (!netdev_open(vlan_dev->name, "system", &netdev)) {
3431                     if (!netdev_get_in4(netdev, NULL, NULL) ||
3432                         !netdev_get_in6(netdev, NULL)) {
3433                         vlandev_del(vlan_dev->name);
3434                     } else {
3435                         /* It has an IP address configured, so we don't own
3436                          * it.  Don't delete it. */
3437                     }
3438                     netdev_close(netdev);
3439                 }
3440             }
3441
3442         }
3443     }
3444
3445     /* Add all VLAN devices that we need. */
3446     SSET_FOR_EACH (real_dev_name, &splinter_ifaces) {
3447         int vid;
3448
3449         BITMAP_FOR_EACH_1 (vid, 4096, splinter_vlans) {
3450             if (!vlandev_get_name(real_dev_name, vid)) {
3451                 vlandev_add(real_dev_name, vid);
3452             }
3453         }
3454     }
3455
3456     vlandev_refresh();
3457
3458     sset_destroy(&splinter_ifaces);
3459
3460     if (bitmap_scan(splinter_vlans, 0, 4096) >= 4096) {
3461         free(splinter_vlans);
3462         return NULL;
3463     }
3464     return splinter_vlans;
3465 }
3466
3467 /* Pushes the configure of VLAN splinter port 'port' (e.g. eth0.9) down to
3468  * ofproto.  */
3469 static void
3470 configure_splinter_port(struct port *port)
3471 {
3472     struct ofproto *ofproto = port->bridge->ofproto;
3473     uint16_t realdev_ofp_port;
3474     const char *realdev_name;
3475     struct iface *vlandev, *realdev;
3476
3477     ofproto_bundle_unregister(port->bridge->ofproto, port);
3478
3479     vlandev = CONTAINER_OF(list_front(&port->ifaces), struct iface,
3480                            port_elem);
3481
3482     realdev_name = get_port_other_config(port->cfg, "realdev", NULL);
3483     realdev = iface_lookup(port->bridge, realdev_name);
3484     realdev_ofp_port = realdev ? realdev->ofp_port : 0;
3485
3486     ofproto_port_set_realdev(ofproto, vlandev->ofp_port, realdev_ofp_port,
3487                              *port->cfg->tag);
3488 }
3489
3490 static struct ovsrec_port *
3491 synthesize_splinter_port(const char *real_dev_name,
3492                          const char *vlan_dev_name, int vid)
3493 {
3494     struct ovsrec_interface *iface;
3495     struct ovsrec_port *port;
3496
3497     iface = xzalloc(sizeof *iface);
3498     iface->name = xstrdup(vlan_dev_name);
3499     iface->type = "system";
3500
3501     port = xzalloc(sizeof *port);
3502     port->interfaces = xmemdup(&iface, sizeof iface);
3503     port->n_interfaces = 1;
3504     port->name = xstrdup(vlan_dev_name);
3505     port->vlan_mode = "splinter";
3506     port->tag = xmalloc(sizeof *port->tag);
3507     *port->tag = vid;
3508     port->key_other_config = xmalloc(sizeof *port->key_other_config);
3509     port->key_other_config[0] = "realdev";
3510     port->value_other_config = xmalloc(sizeof *port->value_other_config);
3511     port->value_other_config[0] = xstrdup(real_dev_name);
3512     port->n_other_config = 1;
3513
3514     register_block(iface);
3515     register_block(iface->name);
3516     register_block(port);
3517     register_block(port->interfaces);
3518     register_block(port->name);
3519     register_block(port->tag);
3520     register_block(port->key_other_config);
3521     register_block(port->value_other_config);
3522     register_block(port->value_other_config[0]);
3523
3524     return port;
3525 }
3526
3527 /* For each interface with 'br' that has VLAN splinters enabled, adds a
3528  * corresponding ovsrec_port to 'ports' for each splinter VLAN marked with a
3529  * 1-bit in the 'splinter_vlans' bitmap. */
3530 static void
3531 add_vlan_splinter_ports(struct bridge *br,
3532                         const unsigned long int *splinter_vlans,
3533                         struct shash *ports)
3534 {
3535     size_t i;
3536
3537     free_registered_blocks();
3538
3539     /* We iterate through 'br->cfg->ports' instead of 'ports' here because
3540      * we're modifying 'ports'. */
3541     for (i = 0; i < br->cfg->n_ports; i++) {
3542         const char *name = br->cfg->ports[i]->name;
3543         struct ovsrec_port *port_cfg = shash_find_data(ports, name);
3544         size_t j;
3545
3546         for (j = 0; j < port_cfg->n_interfaces; j++) {
3547             struct ovsrec_interface *iface_cfg = port_cfg->interfaces[j];
3548
3549             if (vlan_splinters_is_enabled(iface_cfg)) {
3550                 const char *real_dev_name;
3551                 uint16_t vid;
3552
3553                 real_dev_name = iface_cfg->name;
3554                 BITMAP_FOR_EACH_1 (vid, 4096, splinter_vlans) {
3555                     const char *vlan_dev_name;
3556
3557                     vlan_dev_name = vlandev_get_name(real_dev_name, vid);
3558                     if (vlan_dev_name
3559                         && !shash_find(ports, vlan_dev_name)) {
3560                         shash_add(ports, vlan_dev_name,
3561                                   synthesize_splinter_port(
3562                                       real_dev_name, vlan_dev_name, vid));
3563                     }
3564                 }
3565             }
3566         }
3567     }
3568 }
3569
3570 static void
3571 mirror_refresh_stats(struct mirror *m)
3572 {
3573     struct ofproto *ofproto = m->bridge->ofproto;
3574     uint64_t tx_packets, tx_bytes;
3575     char *keys[2];
3576     int64_t values[2];
3577     size_t stat_cnt = 0;
3578
3579     if (ofproto_mirror_get_stats(ofproto, m, &tx_packets, &tx_bytes)) {
3580         ovsrec_mirror_set_statistics(m->cfg, NULL, NULL, 0);
3581         return;
3582     }
3583
3584     if (tx_packets != UINT64_MAX) {
3585         keys[stat_cnt] = "tx_packets";
3586         values[stat_cnt] = tx_packets;
3587         stat_cnt++;
3588     }
3589     if (tx_bytes != UINT64_MAX) {
3590         keys[stat_cnt] = "tx_bytes";
3591         values[stat_cnt] = tx_bytes;
3592         stat_cnt++;
3593     }
3594
3595     ovsrec_mirror_set_statistics(m->cfg, keys, values, stat_cnt);
3596 }