datapath/vport-gre.c

   1 /*
   2  * Copyright (c) 2007-2012 Nicira, Inc.
   3  *
   4  * This program is free software; you can redistribute it and/or
   5  * modify it under the terms of version 2 of the GNU General Public
   6  * License as published by the Free Software Foundation.
   7  *
   8  * This program is distributed in the hope that it will be useful, but
   9  * WITHOUT ANY WARRANTY; without even the implied warranty of
  10  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE. See the GNU
  11  * General Public License for more details.
  12  *
  13  * You should have received a copy of the GNU General Public License
  14  * along with this program; if not, write to the Free Software
  15  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA
  16  * 02110-1301, USA
  17  */
  18
  19 #include <linux/kconfig.h>
  20 #if IS_ENABLED(CONFIG_NET_IPGRE_DEMUX)
  21 #define pr_fmt(fmt) KBUILD_MODNAME ": " fmt
  22
  23 #include <linux/if.h>
  24 #include <linux/skbuff.h>
  25 #include <linux/ip.h>
  26 #include <linux/if_tunnel.h>
  27 #include <linux/if_vlan.h>
  28 #include <linux/in.h>
  29 #include <linux/in_route.h>
  30 #include <linux/inetdevice.h>
  31 #include <linux/jhash.h>
  32 #include <linux/list.h>
  33 #include <linux/kernel.h>
  34 #include <linux/workqueue.h>
  35 #include <linux/rculist.h>
  36 #include <net/net_namespace.h>
  37 #include <net/netns/generic.h>
  38 #include <net/route.h>
  39 #include <net/xfrm.h>
  40
  41 #include <net/icmp.h>
  42 #include <net/ip.h>
  43 #include <net/ip_tunnels.h>
  44 #include <net/gre.h>
  45 #include <net/protocol.h>
  46
  47 #include "datapath.h"
  48 #include "vport.h"
  49
  50 /* Returns the least-significant 32 bits of a __be64. */
  51 static __be32 be64_get_low32(__be64 x)
  52 {
  53 #ifdef __BIG_ENDIAN
  54         return (__force __be32)x;
  55 #else
  56         return (__force __be32)((__force u64)x >> 32);
  57 #endif
  58 }
  59
  60 static __be16 filter_tnl_flags(__be16 flags)
  61 {
  62         return flags & (TUNNEL_CSUM | TUNNEL_KEY);
  63 }
  64
  65 static struct sk_buff *__build_header(struct sk_buff *skb,
  66                                       int tunnel_hlen,
  67                                       __be32 seq, __be16 gre64_flag)
  68 {
  69         const struct ovs_key_ipv4_tunnel *tun_key = OVS_CB(skb)->tun_key;
  70         struct tnl_ptk_info tpi;
  71
  72         skb = gre_handle_offloads(skb, !!(tun_key->tun_flags & TUNNEL_CSUM));
  73         if (IS_ERR(skb))
  74                 return NULL;
  75
  76         tpi.flags = filter_tnl_flags(tun_key->tun_flags) | gre64_flag;
  77
  78         tpi.proto = htons(ETH_P_TEB);
  79         tpi.key = be64_get_low32(tun_key->tun_id);
  80         tpi.seq = seq;
  81         gre_build_header(skb, &tpi, tunnel_hlen);
  82
  83         return skb;
  84 }
  85
  86 static __be64 key_to_tunnel_id(__be32 key, __be32 seq)
  87 {
  88 #ifdef __BIG_ENDIAN
  89         return (__force __be64)((__force u64)seq << 32 | (__force u32)key);
  90 #else
  91         return (__force __be64)((__force u64)key << 32 | (__force u32)seq);
  92 #endif
  93 }
  94
  95 /* Called with rcu_read_lock and BH disabled. */
  96 static int gre_rcv(struct sk_buff *skb,
  97                    const struct tnl_ptk_info *tpi)
  98 {
  99         struct ovs_key_ipv4_tunnel tun_key;
 100         struct ovs_net *ovs_net;
 101         struct vport *vport;
 102         __be64 key;
 103
 104         ovs_net = net_generic(dev_net(skb->dev), ovs_net_id);
 105         if ((tpi->flags & TUNNEL_KEY) && (tpi->flags & TUNNEL_SEQ))
 106                 vport = rcu_dereference(ovs_net->vport_net.gre64_vport);
 107         else
 108                 vport = rcu_dereference(ovs_net->vport_net.gre_vport);
 109         if (unlikely(!vport))
 110                 return PACKET_REJECT;
 111
 112         key = key_to_tunnel_id(tpi->key, tpi->seq);
 113         ovs_flow_tun_key_init(&tun_key, ip_hdr(skb), key, filter_tnl_flags(tpi->flags));
 114
 115         ovs_vport_receive(vport, skb, &tun_key);
 116         return PACKET_RCVD;
 117 }
 118
 119 /* Called with rcu_read_lock and BH disabled. */
 120 static int gre_err(struct sk_buff *skb, u32 info,
 121                    const struct tnl_ptk_info *tpi)
 122 {
 123         struct ovs_net *ovs_net;
 124         struct vport *vport;
 125
 126         ovs_net = net_generic(dev_net(skb->dev), ovs_net_id);
 127         if ((tpi->flags & TUNNEL_KEY) && (tpi->flags & TUNNEL_SEQ))
 128                 vport = rcu_dereference(ovs_net->vport_net.gre64_vport);
 129         else
 130                 vport = rcu_dereference(ovs_net->vport_net.gre_vport);
 131
 132         if (unlikely(!vport))
 133                 return PACKET_REJECT;
 134         else
 135                 return PACKET_RCVD;
 136 }
 137
 138 static int __send(struct vport *vport, struct sk_buff *skb,
 139                   int tunnel_hlen,
 140                   __be32 seq, __be16 gre64_flag)
 141 {
 142         struct rtable *rt;
 143         int min_headroom;
 144         __be16 df;
 145         __be32 saddr;
 146         int err;
 147
 148         /* Route lookup */
 149         saddr = OVS_CB(skb)->tun_key->ipv4_src;
 150         rt = find_route(ovs_dp_get_net(vport->dp),
 151                         &saddr,
 152                         OVS_CB(skb)->tun_key->ipv4_dst,
 153                         IPPROTO_GRE,
 154                         OVS_CB(skb)->tun_key->ipv4_tos,
 155                         skb->mark);
 156         if (IS_ERR(rt)) {
 157                 err = PTR_ERR(rt);
 158                 goto error;
 159         }
 160
 161         min_headroom = LL_RESERVED_SPACE(rt_dst(rt).dev) + rt_dst(rt).header_len
 162                         + tunnel_hlen + sizeof(struct iphdr)
 163                         + (vlan_tx_tag_present(skb) ? VLAN_HLEN : 0);
 164
 165         if (skb_headroom(skb) < min_headroom || skb_header_cloned(skb)) {
 166                 int head_delta = SKB_DATA_ALIGN(min_headroom -
 167                                                 skb_headroom(skb) +
 168                                                 16);
 169                 err = pskb_expand_head(skb, max_t(int, head_delta, 0),
 170                                         0, GFP_ATOMIC);
 171                 if (unlikely(err))
 172                         goto err_free_rt;
 173         }
 174
 175         if (vlan_tx_tag_present(skb)) {
 176                 if (unlikely(!__vlan_put_tag(skb,
 177                                              skb->vlan_proto,
 178                                              vlan_tx_tag_get(skb)))) {
 179                         err = -ENOMEM;
 180                         goto err_free_rt;
 181                 }
 182                 vlan_set_tci(skb, 0);
 183         }
 184
 185         /* Push Tunnel header. */
 186         skb = __build_header(skb, tunnel_hlen, seq, gre64_flag);
 187         if (unlikely(!skb)) {
 188                 err = 0;
 189                 goto err_free_rt;
 190         }
 191
 192         df = OVS_CB(skb)->tun_key->tun_flags & TUNNEL_DONT_FRAGMENT ?
 193                 htons(IP_DF) : 0;
 194
 195         skb->local_df = 1;
 196
 197         return iptunnel_xmit(rt, skb, saddr,
 198                              OVS_CB(skb)->tun_key->ipv4_dst, IPPROTO_GRE,
 199                              OVS_CB(skb)->tun_key->ipv4_tos,
 200                              OVS_CB(skb)->tun_key->ipv4_ttl, df, false);
 201 err_free_rt:
 202         ip_rt_put(rt);
 203 error:
 204         return err;
 205 }
 206
 207 static struct gre_cisco_protocol gre_protocol = {
 208         .handler        = gre_rcv,
 209         .err_handler    = gre_err,
 210         .priority       = 1,
 211 };
 212
 213 static int gre_ports;
 214 static int gre_init(void)
 215 {
 216         int err;
 217
 218         gre_ports++;
 219         if (gre_ports > 1)
 220                 return 0;
 221
 222         err = gre_cisco_register(&gre_protocol);
 223         if (err)
 224                 pr_warn("cannot register gre protocol handler\n");
 225
 226         return err;
 227 }
 228
 229 static void gre_exit(void)
 230 {
 231         gre_ports--;
 232         if (gre_ports > 0)
 233                 return;
 234
 235         gre_cisco_unregister(&gre_protocol);
 236 }
 237
 238 static const char *gre_get_name(const struct vport *vport)
 239 {
 240         return vport_priv(vport);
 241 }
 242
 243 static struct vport *gre_create(const struct vport_parms *parms)
 244 {
 245         struct net *net = ovs_dp_get_net(parms->dp);
 246         struct ovs_net *ovs_net;
 247         struct vport *vport;
 248         int err;
 249
 250         err = gre_init();
 251         if (err)
 252                 return ERR_PTR(err);
 253
 254         ovs_net = net_generic(net, ovs_net_id);
 255         if (ovsl_dereference(ovs_net->vport_net.gre_vport)) {
 256                 vport = ERR_PTR(-EEXIST);
 257                 goto error;
 258         }
 259
 260         vport = ovs_vport_alloc(IFNAMSIZ, &ovs_gre_vport_ops, parms);
 261         if (IS_ERR(vport))
 262                 goto error;
 263
 264         strncpy(vport_priv(vport), parms->name, IFNAMSIZ);
 265         rcu_assign_pointer(ovs_net->vport_net.gre_vport, vport);
 266         return vport;
 267
 268 error:
 269         gre_exit();
 270         return vport;
 271 }
 272
 273 static void gre_tnl_destroy(struct vport *vport)
 274 {
 275         struct net *net = ovs_dp_get_net(vport->dp);
 276         struct ovs_net *ovs_net;
 277
 278         ovs_net = net_generic(net, ovs_net_id);
 279
 280         RCU_INIT_POINTER(ovs_net->vport_net.gre_vport, NULL);
 281         ovs_vport_deferred_free(vport);
 282         gre_exit();
 283 }
 284
 285 static int gre_send(struct vport *vport, struct sk_buff *skb)
 286 {
 287         int hlen;
 288
 289         if (unlikely(!OVS_CB(skb)->tun_key))
 290                 return -EINVAL;
 291
 292         hlen = ip_gre_calc_hlen(OVS_CB(skb)->tun_key->tun_flags);
 293
 294         return __send(vport, skb, hlen, 0, 0);
 295 }
 296
 297 const struct vport_ops ovs_gre_vport_ops = {
 298         .type           = OVS_VPORT_TYPE_GRE,
 299         .create         = gre_create,
 300         .destroy        = gre_tnl_destroy,
 301         .get_name       = gre_get_name,
 302         .send           = gre_send,
 303 };
 304
 305 /* GRE64 vport. */
 306 static struct vport *gre64_create(const struct vport_parms *parms)
 307 {
 308         struct net *net = ovs_dp_get_net(parms->dp);
 309         struct ovs_net *ovs_net;
 310         struct vport *vport;
 311         int err;
 312
 313         err = gre_init();
 314         if (err)
 315                 return ERR_PTR(err);
 316
 317         ovs_net = net_generic(net, ovs_net_id);
 318         if (ovsl_dereference(ovs_net->vport_net.gre64_vport)) {
 319                 vport = ERR_PTR(-EEXIST);
 320                 goto error;
 321         }
 322
 323         vport = ovs_vport_alloc(IFNAMSIZ, &ovs_gre64_vport_ops, parms);
 324         if (IS_ERR(vport))
 325                 goto error;
 326
 327         strncpy(vport_priv(vport), parms->name, IFNAMSIZ);
 328         rcu_assign_pointer(ovs_net->vport_net.gre64_vport, vport);
 329         return vport;
 330 error:
 331         gre_exit();
 332         return vport;
 333 }
 334
 335 static void gre64_tnl_destroy(struct vport *vport)
 336 {
 337         struct net *net = ovs_dp_get_net(vport->dp);
 338         struct ovs_net *ovs_net;
 339
 340         ovs_net = net_generic(net, ovs_net_id);
 341
 342         rcu_assign_pointer(ovs_net->vport_net.gre64_vport, NULL);
 343         ovs_vport_deferred_free(vport);
 344         gre_exit();
 345 }
 346
 347 static __be32 be64_get_high32(__be64 x)
 348 {
 349 #ifdef __BIG_ENDIAN
 350         return (__force __be32)((__force u64)x >> 32);
 351 #else
 352         return (__force __be32)x;
 353 #endif
 354 }
 355
 356 static int gre64_send(struct vport *vport, struct sk_buff *skb)
 357 {
 358         int hlen = GRE_HEADER_SECTION +         /* GRE Hdr */
 359                    GRE_HEADER_SECTION +         /* GRE Key */
 360                    GRE_HEADER_SECTION;          /* GRE SEQ */
 361         __be32 seq;
 362
 363         if (unlikely(!OVS_CB(skb)->tun_key))
 364                 return -EINVAL;
 365
 366         if (OVS_CB(skb)->tun_key->tun_flags & TUNNEL_CSUM)
 367                 hlen += GRE_HEADER_SECTION;
 368
 369         seq = be64_get_high32(OVS_CB(skb)->tun_key->tun_id);
 370         return __send(vport, skb, hlen, seq, (TUNNEL_KEY|TUNNEL_SEQ));
 371 }
 372
 373 const struct vport_ops ovs_gre64_vport_ops = {
 374         .type           = OVS_VPORT_TYPE_GRE64,
 375         .create         = gre64_create,
 376         .destroy        = gre64_tnl_destroy,
 377         .get_name       = gre_get_name,
 378         .send           = gre64_send,
 379 };
 380 #endif