sfa/rspecs/aggregates/rspec_manager_vini.py

   1 from sfa.util.faults import *
   2 from sfa.util.misc import *
   3 from sfa.util.rspec import Rspec
   4 from sfa.server.registry import Registries
   5 from sfa.plc.nodes import *
   6 from sfa.rspecs.aggregates.vini.utils import *
   7 from sfa.rspecs.aggregates.vini.rspec import *
   8 import sys
   9
  10 SFA_VINI_WHITELIST = '/etc/sfa/vini.whitelist'
  11
  12 """
  13 Copied from create_slice_aggregate() in sfa.plc.slices
  14 """
  15 def create_slice_vini_aggregate(api, hrn, nodes):
  16     # Get the slice record from geni
  17     slice = {}
  18     registries = Registries(api)
  19     registry = registries[api.hrn]
  20     credential = api.getCredential()
  21     records = registry.resolve(credential, hrn)
  22     for record in records:
  23         if record.get_type() in ['slice']:
  24             slice = record.as_dict()
  25     if not slice:
  26         raise RecordNotFound(hrn)
  27
  28     # Make sure slice exists at plc, if it doesnt add it
  29     slicename = hrn_to_pl_slicename(hrn)
  30     slices = api.plshell.GetSlices(api.plauth, [slicename], ['node_ids'])
  31     if not slices:
  32         parts = slicename.split("_")
  33         login_base = parts[0]
  34         # if site doesnt exist add it
  35         sites = api.plshell.GetSites(api.plauth, [login_base])
  36         if not sites:
  37             authority = get_authority(hrn)
  38             site_records = registry.resolve(credential, authority)
  39             site_record = {}
  40             if not site_records:
  41                 raise RecordNotFound(authority)
  42             site_record = site_records[0]
  43             site = site_record.as_dict()
  44
  45             # add the site
  46             site.pop('site_id')
  47             site_id = api.plshell.AddSite(api.plauth, site)
  48         else:
  49             site = sites[0]
  50
  51         slice_fields = {}
  52         slice_keys = ['name', 'url', 'description']
  53         for key in slice_keys:
  54             if key in slice and slice[key]:
  55                 slice_fields[key] = slice[key]
  56         api.plshell.AddSlice(api.plauth, slice_fields)
  57         slice = slice_fields
  58         slice['node_ids'] = 0
  59     else:
  60         slice = slices[0]
  61
  62     # get the list of valid slice users from the registry and make
  63     # they are added to the slice
  64     researchers = record.get('researcher', [])
  65     for researcher in researchers:
  66         person_record = {}
  67         person_records = registry.resolve(credential, researcher)
  68         for record in person_records:
  69             if record.get_type() in ['user']:
  70                 person_record = record
  71         if not person_record:
  72             pass
  73         person_dict = person_record.as_dict()
  74         persons = api.plshell.GetPersons(api.plauth, [person_dict['email']],
  75                                          ['person_id', 'key_ids'])
  76
  77         # Create the person record
  78         if not persons:
  79             person_id=api.plshell.AddPerson(api.plauth, person_dict)
  80
  81             # The line below enables the user account on the remote aggregate
  82             # soon after it is created.
  83             # without this the user key is not transfered to the slice
  84             # (as GetSlivers returns key of only enabled users),
  85             # which prevents the user from login to the slice.
  86             # We may do additional checks before enabling the user.
  87
  88             api.plshell.UpdatePerson(api.plauth, person_id, {'enabled' : True})
  89             key_ids = []
  90         else:
  91             key_ids = persons[0]['key_ids']
  92
  93         api.plshell.AddPersonToSlice(api.plauth, person_dict['email'],
  94                                      slicename)
  95
  96         # Get this users local keys
  97         keylist = api.plshell.GetKeys(api.plauth, key_ids, ['key'])
  98         keys = [key['key'] for key in keylist]
  99
 100         # add keys that arent already there
 101         for personkey in person_dict['keys']:
 102             if personkey not in keys:
 103                 key = {'key_type': 'ssh', 'key': personkey}
 104                 api.plshell.AddPersonKey(api.plauth, person_dict['email'], key)
 105
 106     # find out where this slice is currently running
 107     nodelist = api.plshell.GetNodes(api.plauth, slice['node_ids'],
 108                                     ['hostname'])
 109     hostnames = [node['hostname'] for node in nodelist]
 110
 111     # remove nodes not in rspec
 112     deleted_nodes = list(set(hostnames).difference(nodes))
 113     # add nodes from rspec
 114     added_nodes = list(set(nodes).difference(hostnames))
 115
 116     """
 117     print >> sys.stderr, "Slice on nodes:"
 118     for n in hostnames:
 119         print >> sys.stderr, n
 120     print >> sys.stderr, "Wants nodes:"
 121     for n in nodes:
 122         print >> sys.stderr, n
 123     print >> sys.stderr, "Deleting nodes:"
 124     for n in deleted_nodes:
 125         print >> sys.stderr, n
 126     print >> sys.stderr, "Adding nodes:"
 127     for n in added_nodes:
 128         print >> sys.stderr, n
 129     """
 130
 131     api.plshell.AddSliceToNodes(api.plauth, slicename, added_nodes)
 132     api.plshell.DeleteSliceFromNodes(api.plauth, slicename, deleted_nodes)
 133
 134     return 1
 135
 136 def get_rspec(api, hrn):
 137     rspec = ViniRspec()
 138     topo = Topology(api)
 139
 140     rspec.updateCapacity(topo)
 141
 142     if (hrn):
 143         slicename = hrn_to_pl_slicename(hrn)
 144         slice = get_slice(api, slicename)
 145         if slice:
 146             slice.hrn = hrn
 147             topo.nodeTopoFromSliceTags(slice)
 148             rspec.updateRequest(slice, topo)
 149         else:
 150             # call the default sfa.plc.nodes.get_rspec() method
 151             return Nodes(api).get_rspec(hrn)
 152
 153     return rspec.toxml()
 154
 155
 156 """
 157 Check the requested topology against the available topology and capacity
 158 """
 159 def check_request(hrn, rspec, nodes, sites, sitelinks, maxbw):
 160     linkspecs = rspec['Rspec']['Request'][0]['NetSpec'][0]['LinkSpec']
 161     if linkspecs:
 162         for l in linkspecs:
 163             n1 = Node.lookup(l['endpoint'][0])
 164             n2 = Node.lookup(l['endpoint'][1])
 165             bw = l['bw'][0]
 166             reqbps = get_tc_rate(bw)
 167             maxbps = get_tc_rate(maxbw)
 168
 169             if reqbps <= 0:
 170                 raise GeniInvalidArgument(bw, "BW")
 171             if reqbps > maxbps:
 172                 raise PermissionError(" %s requested %s but max BW is %s" %
 173                                       (hrn, bw, maxbw))
 174
 175             if adjacent_nodes(n1, n2, sites, sitelinks):
 176                 availbps = get_avail_bps(n1, n2, sites, sitelinks)
 177                 if availbps < reqbps:
 178                     raise PermissionError("%s: capacity exceeded" % hrn)
 179             else:
 180                 raise PermissionError("%s: nodes %s and %s not adjacent"
 181                                       % (hrn, n1.tag, n2.tag))
 182
 183 """
 184 Hook called via 'sfi.py create'
 185 """
 186 def create_slice(api, hrn, xml):
 187     ### Check the whitelist
 188     ### It consists of lines of the form: <slice hrn> <bw>
 189     whitelist = {}
 190     f = open(SFA_VINI_WHITELIST)
 191     for line in f.readlines():
 192         (slice, maxbw) = line.split()
 193         whitelist[slice] = maxbw
 194
 195     if hrn in whitelist:
 196         maxbw = whitelist[hrn]
 197     else:
 198         raise PermissionError("%s not in VINI whitelist" % hrn)
 199
 200     rspec = ViniRspec(xml)
 201     topo = Topology(api)
 202
 203     topo.nodeTopoFromRspec(rspec)
 204
 205     # Check request against current allocations
 206     #check_request(hrn, rspec, nodes, sites, sitelinks, maxbw)
 207
 208     nodes = topo.nodesInTopo()
 209     hostnames = []
 210     for node in nodes:
 211         hostnames.append(node.hostname)
 212     create_slice_vini_aggregate(api, hrn, hostnames)
 213
 214     slicename = hrn_to_pl_slicename(hrn)
 215     slice = get_slice(api, slicename)
 216     if slice:
 217         topo.updateSliceTags(slice)
 218
 219     return True
 220
 221
 222 def main():
 223     r = Rspec()
 224     r.parseFile(sys.argv[1])
 225     rspec = r.toDict()
 226     create_slice(None,'plc',rspec)
 227
 228 if __name__ == "__main__":
 229     main()