examples/linux/testing/ccncat_extended_ring_topo.py

   1 #!/usr/bin/env python
   2
   3 #
   4 #    NEPI, a framework to manage network experiments
   5 #    Copyright (C) 2013 INRIA
   6 #
   7 #    This program is free software: you can redistribute it and/or modify
   8 #    it under the terms of the GNU General Public License as published by
   9 #    the Free Software Foundation, either version 3 of the License, or
  10 #    (at your option) any later version.
  11 #
  12 #    This program is distributed in the hope that it will be useful,
  13 #    but WITHOUT ANY WARRANTY; without even the implied warranty of
  14 #    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  15 #    GNU General Public License for more details.
  16 #
  17 #    You should have received a copy of the GNU General Public License
  18 #    along with this program.  If not, see <http://www.gnu.org/licenses/>.
  19 #
  20 # Author: Alina Quereilhac <alina.quereilhac@inria.fr>
  21
  22 #
  23 # CCN topology:
  24 #
  25 #                h2
  26 #                0
  27 #  content   l1 / \ l2         ccncat
  28 #  b1          /l5 \           b2
  29 #  0 ----- h1 0 --- 0 h3 ------ 0
  30 #              \   /
  31 #            l4 \ / l3
  32 #                0
  33 #                h4
  34 # Experiment:
  35 # - t0 : b2 retrives video published in b1
  36 # - t1 : l1 goes down
  37 # - t2 : l2 goes down
  38 # - t3 : l5 goes up
  39 #
  40
  41 from nepi.execution.ec import ExperimentController, ECState
  42 from nepi.execution.resource import ResourceState, ResourceAction
  43 from nepi.execution.trace import TraceAttr
  44
  45 import subprocess
  46 from optparse import OptionParser, SUPPRESS_HELP
  47
  48 import os
  49 import time
  50
  51 def add_node(ec, host, user, ssh_key = None):
  52     node = ec.register_resource("LinuxNode")
  53     ec.set(node, "hostname", host)
  54     ec.set(node, "username", user)
  55     ec.set(node, "identity", ssh_key)
  56     ec.set(node, "cleanHome", True)
  57     ec.set(node, "cleanProcesses", True)
  58     return node
  59
  60 def add_ccnd(ec, node):
  61     ccnd = ec.register_resource("LinuxCCND")
  62     ec.set(ccnd, "debug", 7)
  63     ec.register_connection(ccnd, node)
  64     return ccnd
  65
  66 def add_ccnr(ec, ccnd):
  67     ccnr = ec.register_resource("LinuxCCNR")
  68     ec.register_connection(ccnr, ccnd)
  69     return ccnr
  70
  71 def add_fib_entry(ec, ccnd, peer_host):
  72     entry = ec.register_resource("LinuxFIBEntry")
  73     ec.set(entry, "host", peer_host)
  74     ec.register_connection(entry, ccnd)
  75     return entry
  76
  77 def add_content(ec, ccnr, content_name, content):
  78     co = ec.register_resource("LinuxCCNContent")
  79     ec.set(co, "contentName", content_name)
  80     ec.set(co, "content", content)
  81     ec.register_connection(co, ccnr)
  82     return co
  83
  84 def add_stream(ec, ccnd, content_name):
  85     # ccnx v7.2 issue 101007
  86     command = "ccnpeek %(content_name)s; ccncat %(content_name)s" % {
  87             "content_name" : content_name}
  88
  89     app = ec.register_resource("LinuxCCNApplication")
  90     ec.set(app, "command", command)
  91     ec.register_connection(app, ccnd)
  92
  93     return app
  94
  95 def add_collector(ec, trace_name):
  96     collector = ec.register_resource("Collector")
  97     ec.set(collector, "traceName", trace_name)
  98
  99     return collector
 100
 101 def get_options():
 102     pl_slice = os.environ.get("PL_SLICE")
 103
 104     # We use a specific SSH private key for PL if the PL_SSHKEY is specified or the
 105     # id_rsa_planetlab exists
 106     default_key = "%s/.ssh/id_rsa_planetlab" % (os.environ['HOME'])
 107     default_key = default_key if os.path.exists(default_key) else None
 108     pl_ssh_key = os.environ.get("PL_SSHKEY", default_key)
 109
 110     usage = "usage: %prog -s <pl-user> -m <movie> -e <exp-id> -i <ssh_key> -r <results>"
 111
 112     parser = OptionParser(usage=usage)
 113     parser.add_option("-s", "--pl-user", dest="pl_user",
 114             help="PlanetLab slicename", default = pl_slice, type="str")
 115     parser.add_option("-m", "--movie", dest="movie",
 116             help="Stream movie", type="str")
 117     parser.add_option("-e", "--exp-id", dest="exp_id",
 118             help="Label to identify experiment", type="str")
 119     parser.add_option("-i", "--pl-ssh-key", dest="pl_ssh_key",
 120             help="Path to private SSH key to be used for connection",
 121             default = pl_ssh_key, type="str")
 122     parser.add_option("-r", "--results", dest="results", default = "/tmp",
 123             help="Path to directory where to store results", type="str")
 124
 125     (options, args) = parser.parse_args()
 126
 127     if not options.movie:
 128         parser.error("movie is a required argument")
 129
 130     return (options.pl_user, options.movie, options.exp_id, options.pl_ssh_key,
 131             options.results)
 132
 133 if __name__ == '__main__':
 134     content_name = "ccnx:/test/VIDEO"
 135
 136     ( pl_user, movie, exp_id, pl_ssh_key, results_dir ) = get_options()
 137
 138     ec = ExperimentController(exp_id = exp_id, local_dir = results_dir)
 139
 140     # hosts in the US
 141     #host1 = "planetlab4.wail.wisc.edu"
 142     #host2 = "planetlab2.cs.columbia.edu"
 143     #host3 = "ricepl-2.cs.rice.edu"
 144     #host4 = "node1.planetlab.albany.edu"
 145     #host5 = "earth.cs.brown.edu"
 146     #host6 = "planetlab2.engr.uconn.edu"
 147
 148     # hosts in EU
 149     host1 = "planetlab2.fct.ualg.pt"
 150     host2 = "planet2.unipr.it"
 151     host3 = "planetlab1.aston.ac.uk"
 152     host4 = "itchy.comlab.bth.se"
 153     host5 = "rochefort.infonet.fundp.ac.be"
 154     host6 = "planetlab1.u-strasbg.fr"
 155
 156     # describe nodes in the central ring
 157     ring_hosts = [host1, host2, host3, host4]
 158     ccnds = dict()
 159
 160     for i in xrange(len(ring_hosts)):
 161         host = ring_hosts[i]
 162         node = add_node(ec, host, pl_user, pl_ssh_key)
 163         ccnd = add_ccnd(ec, node)
 164         ccnr = add_ccnr(ec, ccnd)
 165         ccnds[host] = ccnd
 166
 167     ## Add ccn ring links
 168     # l1 : h1 - h2 , h2 - h1
 169     l1u = add_fib_entry(ec, ccnds[host1], host2)
 170     l1d = add_fib_entry(ec, ccnds[host2], host1)
 171
 172     # l2 : h2 - h3 , h3 - h2
 173     l2u = add_fib_entry(ec, ccnds[host2], host3)
 174     l2d = add_fib_entry(ec, ccnds[host3], host2)
 175
 176     # l3 : h3 - h4 , h4 - h3
 177     l3u = add_fib_entry(ec, ccnds[host3], host4)
 178     l3d = add_fib_entry(ec, ccnds[host4], host3)
 179
 180     # l4 : h4 - h1 , h1 - h4
 181     l4u = add_fib_entry(ec, ccnds[host4], host1)
 182     l4d = add_fib_entry(ec, ccnds[host1], host4)
 183
 184     # l5 : h1 - h3 , h3 - h1
 185     l5u = add_fib_entry(ec, ccnds[host1], host3)
 186     l5d = add_fib_entry(ec, ccnds[host3], host1)
 187
 188     # border node 1
 189     bnode1 = add_node(ec, host5, pl_user, pl_ssh_key)
 190     ccndb1 = add_ccnd(ec, bnode1)
 191     ccnrb1 = add_ccnr(ec, ccndb1)
 192     ccnds[host5] = ccndb1
 193     co = add_content(ec, ccnrb1, content_name, movie)
 194
 195     # border node 2
 196     bnode2 = add_node(ec, host6, pl_user, pl_ssh_key)
 197     ccndb2 = add_ccnd(ec, bnode2)
 198     ccnrb2 = add_ccnr(ec, ccndb2)
 199     ccnds[host6] = ccndb2
 200     app = add_stream(ec, ccndb2, content_name)
 201
 202     # connect border nodes
 203     add_fib_entry(ec, ccndb1, host1)
 204     add_fib_entry(ec, ccnds[host1], host5)
 205
 206     add_fib_entry(ec, ccndb2, host3)
 207     add_fib_entry(ec, ccnds[host3], host6)
 208
 209     # Put down l5 10s after transfer started
 210     ec.register_condition(l5u, ResourceAction.STOP,
 211             app, ResourceState.STARTED, time = "10s")
 212     ec.register_condition(l5d, ResourceAction.STOP,
 213             app, ResourceState.STARTED, time = "10s")
 214
 215     # Register a collector to automatically collect traces
 216     collector = add_collector(ec, "stderr")
 217     for ccnd in ccnds.values():
 218         ec.register_connection(collector, ccnd)
 219
 220     # deploy all ResourceManagers
 221     ec.deploy()
 222
 223     # Wait until ccncat has started retrieving the content
 224     ec.wait_started([app])
 225
 226     rvideo_path = ec.trace(app, "stdout", attr = TraceAttr.PATH)
 227     command = 'tail -f %s' % rvideo_path
 228
 229     # pulling the content of the video received
 230     # on b2, to stream it locally
 231     proc1 = subprocess.Popen(['ssh',
 232         '-o', 'StrictHostKeyChecking=no',
 233         '-l', pl_user, host6,
 234         command],
 235         stdout = subprocess.PIPE,
 236         stderr = subprocess.PIPE)
 237
 238     proc2 = subprocess.Popen(['vlc',
 239         '--ffmpeg-threads=1',
 240         '--sub-filter', 'marq',
 241         '--marq-marquee',
 242         '(c) copyright 2008, Blender Foundation / www.bigbuckbunny.org',
 243         '--marq-position=8',
 244         '--no-video-title-show', '-'],
 245         stdin=proc1.stdout,
 246         stdout=subprocess.PIPE,
 247         stderr=subprocess.PIPE)
 248
 249     (stdout, stderr) = proc2.communicate()
 250
 251     # shutdown the experiment controller
 252     ec.shutdown()
 253