sfa/plc/plslices.py

   1 from types import StringTypes
   2 from collections import defaultdict
   3
   4 from sfa.util.xrn import get_leaf, get_authority, urn_to_hrn
   5 from sfa.util.plxrn import hrn_to_pl_slicename
   6 from sfa.util.policy import Policy
   7 from sfa.rspecs.rspec import RSpec
   8 from sfa.plc.vlink import VLink
   9 from sfa.util.xrn import Xrn
  10
  11 MAXINT =  2L**31-1
  12
  13 class PlSlices:
  14
  15     rspec_to_slice_tag = {'max_rate':'net_max_rate'}
  16
  17     def __init__(self, api, ttl = .5, origin_hrn=None):
  18         self.api = api
  19         #filepath = path + os.sep + filename
  20 #        self.policy = Policy(self.api)
  21         self.origin_hrn = origin_hrn
  22         self.registry = api.registries[api.hrn]
  23         self.credential = api.getCredential()
  24         self.nodes = []
  25         self.persons = []
  26
  27     def get_slivers(self, xrn, node=None):
  28         hrn, type = urn_to_hrn(xrn)
  29
  30         slice_name = hrn_to_pl_slicename(hrn)
  31         # XX Should we just call PLCAPI.GetSliceTicket(slice_name) instead
  32         # of doing all of this?
  33         #return self.api.driver.GetSliceTicket(self.auth, slice_name)
  34
  35         # from PLCAPI.GetSlivers.get_slivers()
  36         slice_fields = ['slice_id', 'name', 'instantiation', 'expires', 'person_ids', 'slice_tag_ids']
  37         slices = self.api.driver.GetSlices(slice_name, slice_fields)
  38         # Build up list of users and slice attributes
  39         person_ids = set()
  40         all_slice_tag_ids = set()
  41         for slice in slices:
  42             person_ids.update(slice['person_ids'])
  43             all_slice_tag_ids.update(slice['slice_tag_ids'])
  44         person_ids = list(person_ids)
  45         all_slice_tag_ids = list(all_slice_tag_ids)
  46         # Get user information
  47         all_persons_list = self.api.driver.GetPersons({'person_id':person_ids,'enabled':True}, ['person_id', 'enabled', 'key_ids'])
  48         all_persons = {}
  49         for person in all_persons_list:
  50             all_persons[person['person_id']] = person
  51
  52         # Build up list of keys
  53         key_ids = set()
  54         for person in all_persons.values():
  55             key_ids.update(person['key_ids'])
  56         key_ids = list(key_ids)
  57         # Get user account keys
  58         all_keys_list = self.api.driver.GetKeys(key_ids, ['key_id', 'key', 'key_type'])
  59         all_keys = {}
  60         for key in all_keys_list:
  61             all_keys[key['key_id']] = key
  62         # Get slice attributes
  63         all_slice_tags_list = self.api.driver.GetSliceTags(all_slice_tag_ids)
  64         all_slice_tags = {}
  65         for slice_tag in all_slice_tags_list:
  66             all_slice_tags[slice_tag['slice_tag_id']] = slice_tag
  67
  68         slivers = []
  69         for slice in slices:
  70             keys = []
  71             for person_id in slice['person_ids']:
  72                 if person_id in all_persons:
  73                     person = all_persons[person_id]
  74                     if not person['enabled']:
  75                         continue
  76                     for key_id in person['key_ids']:
  77                         if key_id in all_keys:
  78                             key = all_keys[key_id]
  79                             keys += [{'key_type': key['key_type'],
  80                                     'key': key['key']}]
  81             attributes = []
  82             # All (per-node and global) attributes for this slice
  83             slice_tags = []
  84             for slice_tag_id in slice['slice_tag_ids']:
  85                 if slice_tag_id in all_slice_tags:
  86                     slice_tags.append(all_slice_tags[slice_tag_id])
  87             # Per-node sliver attributes take precedence over global
  88             # slice attributes, so set them first.
  89             # Then comes nodegroup slice attributes
  90             # Followed by global slice attributes
  91             sliver_attributes = []
  92
  93             if node is not None:
  94                 for sliver_attribute in filter(lambda a: a['node_id'] == node['node_id'], slice_tags):
  95                     sliver_attributes.append(sliver_attribute['tagname'])
  96                     attributes.append({'tagname': sliver_attribute['tagname'],
  97                                     'value': sliver_attribute['value']})
  98
  99             # set nodegroup slice attributes
 100             for slice_tag in filter(lambda a: a['nodegroup_id'] in node['nodegroup_ids'], slice_tags):
 101                 # Do not set any nodegroup slice attributes for
 102                 # which there is at least one sliver attribute
 103                 # already set.
 104                 if slice_tag not in slice_tags:
 105                     attributes.append({'tagname': slice_tag['tagname'],
 106                         'value': slice_tag['value']})
 107
 108             for slice_tag in filter(lambda a: a['node_id'] is None, slice_tags):
 109                 # Do not set any global slice attributes for
 110                 # which there is at least one sliver attribute
 111                 # already set.
 112                 if slice_tag['tagname'] not in sliver_attributes:
 113                     attributes.append({'tagname': slice_tag['tagname'],
 114                                    'value': slice_tag['value']})
 115
 116             # XXX Sanity check; though technically this should be a system invariant
 117             # checked with an assertion
 118             if slice['expires'] > MAXINT:  slice['expires']= MAXINT
 119
 120             slivers.append({
 121                 'hrn': hrn,
 122                 'name': slice['name'],
 123                 'slice_id': slice['slice_id'],
 124                 'instantiation': slice['instantiation'],
 125                 'expires': slice['expires'],
 126                 'keys': keys,
 127                 'attributes': attributes
 128             })
 129
 130         return slivers
 131
 132     def get_peer(self, xrn):
 133         hrn, type = urn_to_hrn(xrn)
 134         # Becaues of myplc federation,  we first need to determine if this
 135         # slice belongs to out local plc or a myplc peer. We will assume it
 136         # is a local site, unless we find out otherwise
 137         peer = None
 138
 139         # get this slice's authority (site)
 140         slice_authority = get_authority(hrn)
 141
 142         # get this site's authority (sfa root authority or sub authority)
 143         site_authority = get_authority(slice_authority).lower()
 144
 145         # check if we are already peered with this site_authority, if so
 146         peers = self.api.driver.GetPeers({}, ['peer_id', 'peername', 'shortname', 'hrn_root'])
 147         for peer_record in peers:
 148             names = [name.lower() for name in peer_record.values() if isinstance(name, StringTypes)]
 149             if site_authority in names:
 150                 peer = peer_record
 151
 152         return peer
 153
 154     def get_sfa_peer(self, xrn):
 155         hrn, type = urn_to_hrn(xrn)
 156
 157         # return the authority for this hrn or None if we are the authority
 158         sfa_peer = None
 159         slice_authority = get_authority(hrn)
 160         site_authority = get_authority(slice_authority)
 161
 162         if site_authority != self.api.hrn:
 163             sfa_peer = site_authority
 164
 165         return sfa_peer
 166
 167     def verify_slice_nodes(self, slice, requested_slivers, peer):
 168
 169         nodes = self.api.driver.GetNodes(slice['node_ids'], ['hostname'])
 170         current_slivers = [node['hostname'] for node in nodes]
 171
 172         # remove nodes not in rspec
 173         deleted_nodes = list(set(current_slivers).difference(requested_slivers))
 174
 175         # add nodes from rspec
 176         added_nodes = list(set(requested_slivers).difference(current_slivers))
 177
 178         try:
 179             if peer:
 180                 self.api.driver.UnBindObjectFromPeer('slice', slice['slice_id'], peer['shortname'])
 181             self.api.driver.AddSliceToNodes(slice['name'], added_nodes)
 182             self.api.driver.DeleteSliceFromNodes(slice['name'], deleted_nodes)
 183
 184         except:
 185             self.api.logger.log_exc('Failed to add/remove slice from nodes')
 186
 187     def free_egre_key(self):
 188         used = set()
 189         for tag in self.api.driver.GetSliceTags({'tagname': 'egre_key'}):
 190                 used.add(int(tag['value']))
 191
 192         for i in range(1, 256):
 193             if i not in used:
 194                 key = i
 195                 break
 196         else:
 197             raise KeyError("No more EGRE keys available")
 198
 199         return str(key)
 200
 201     def verify_slice_links(self, slice, links, aggregate):
 202         # nodes is undefined here
 203         if not links:
 204             return
 205
 206         slice_tags = []
 207
 208         # set egre key
 209         slice_tags.append({'name': 'egre_key', 'value': self.free_egre_key()})
 210
 211         # set netns
 212         slice_tags.append({'name': 'netns', 'value': '1'})
 213
 214         # set cap_net_admin
 215         # need to update the attribute string?
 216         slice_tags.append({'name': 'capabilities', 'value': 'CAP_NET_ADMIN'})
 217
 218         for link in links:
 219             # get the ip address of the first node in the link
 220             ifname1 = Xrn(link['interface1']['component_id']).get_leaf()
 221             (node, device) = ifname1.split(':')
 222             node_id = int(node.replace('node', ''))
 223             node = aggregate.nodes[node_id]
 224             if1 = aggregate.interfaces[node['interface_ids'][0]]
 225             ipaddr = if1['ip']
 226             topo_rspec = VLink.get_topo_rspec(link, ipaddr)
 227             # set topo_rspec tag
 228             slice_tags.append({'name': 'topo_rspec', 'value': str([topo_rspec]), 'node_id': node_id})
 229             # set vini_topo tag
 230             slice_tags.append({'name': 'vini_topo', 'value': 'manual', 'node_id': node_id})
 231             #self.api.driver.AddSliceTag(slice['name'], 'topo_rspec', str([topo_rspec]), node_id)
 232
 233         self.verify_slice_attributes(slice, slice_tags, append=True, admin=True)
 234
 235
 236
 237     def handle_peer(self, site, slice, persons, peer):
 238         if peer:
 239             # bind site
 240             try:
 241                 if site:
 242                     self.api.driver.BindObjectToPeer('site', site['site_id'], peer['shortname'], slice['site_id'])
 243             except Exception,e:
 244                 self.api.driver.DeleteSite(site['site_id'])
 245                 raise e
 246
 247             # bind slice
 248             try:
 249                 if slice:
 250                     self.api.driver.BindObjectToPeer('slice', slice['slice_id'], peer['shortname'], slice['slice_id'])
 251             except Exception,e:
 252                 self.api.driver.DeleteSlice(slice['slice_id'])
 253                 raise e
 254
 255             # bind persons
 256             for person in persons:
 257                 try:
 258                     self.api.driver.BindObjectToPeer('person',
 259                                                      person['person_id'], peer['shortname'], person['peer_person_id'])
 260
 261                     for (key, remote_key_id) in zip(person['keys'], person['key_ids']):
 262                         try:
 263                             self.api.driver.BindObjectToPeer( 'key', key['key_id'], peer['shortname'], remote_key_id)
 264                         except:
 265                             self.api.driver.DeleteKey(key['key_id'])
 266                             self.api.logger("failed to bind key: %s to peer: %s " % (key['key_id'], peer['shortname']))
 267                 except Exception,e:
 268                     self.api.driver.DeletePerson(person['person_id'])
 269                     raise e
 270
 271         return slice
 272
 273     def verify_site(self, slice_xrn, slice_record={}, peer=None, sfa_peer=None):
 274         (slice_hrn, type) = urn_to_hrn(slice_xrn)
 275         site_hrn = get_authority(slice_hrn)
 276         # login base can't be longer than 20 characters
 277         slicename = hrn_to_pl_slicename(slice_hrn)
 278         authority_name = slicename.split('_')[0]
 279         login_base = authority_name[:20]
 280         sites = self.api.driver.GetSites(login_base)
 281         if not sites:
 282             # create new site record
 283             site = {'name': 'geni.%s' % authority_name,
 284                     'abbreviated_name': authority_name,
 285                     'login_base': login_base,
 286                     'max_slices': 100,
 287                     'max_slivers': 1000,
 288                     'enabled': True,
 289                     'peer_site_id': None}
 290             if peer:
 291                 site['peer_site_id'] = slice_record.get('site_id', None)
 292             site['site_id'] = self.api.driver.AddSite(site)
 293             # exempt federated sites from monitor policies
 294             self.api.driver.AddSiteTag(site['site_id'], 'exempt_site_until', "20200101")
 295
 296             # is this still necessary?
 297             # add record to the local registry
 298             if sfa_peer and slice_record:
 299                 peer_dict = {'type': 'authority', 'hrn': site_hrn, \
 300                              'peer_authority': sfa_peer, 'pointer': site['site_id']}
 301                 self.registry.register_peer_object(self.credential, peer_dict)
 302         else:
 303             site =  sites[0]
 304             if peer:
 305                 # unbind from peer so we can modify if necessary. Will bind back later
 306                 self.api.driver.UnBindObjectFromPeer('site', site['site_id'], peer['shortname'])
 307
 308         return site
 309
 310     def verify_slice(self, slice_hrn, slice_record, peer, sfa_peer):
 311         slicename = hrn_to_pl_slicename(slice_hrn)
 312         parts = slicename.split("_")
 313         login_base = parts[0]
 314         slices = self.api.driver.GetSlices([slicename])
 315         if not slices:
 316             slice = {'name': slicename,
 317                      'url': slice_record.get('url', slice_hrn),
 318                      'description': slice_record.get('description', slice_hrn)}
 319             # add the slice
 320             slice['slice_id'] = self.api.driver.AddSlice(slice)
 321             slice['node_ids'] = []
 322             slice['person_ids'] = []
 323             if peer:
 324                 slice['peer_slice_id'] = slice_record.get('slice_id', None)
 325             # mark this slice as an sfa peer record
 326             if sfa_peer:
 327                 peer_dict = {'type': 'slice', 'hrn': slice_hrn,
 328                              'peer_authority': sfa_peer, 'pointer': slice['slice_id']}
 329                 self.registry.register_peer_object(self.credential, peer_dict)
 330         else:
 331             slice = slices[0]
 332             if peer:
 333                 slice['peer_slice_id'] = slice_record.get('slice_id', None)
 334                 # unbind from peer so we can modify if necessary. Will bind back later
 335                 self.api.driver.UnBindObjectFromPeer('slice', slice['slice_id'], peer['shortname'])
 336                 #Update existing record (e.g. expires field) it with the latest info.
 337             if slice_record and slice['expires'] != slice_record['expires']:
 338                 self.api.driver.UpdateSlice( slice['slice_id'], {'expires' : slice_record['expires']})
 339
 340         return slice
 341
 342     #def get_existing_persons(self, users):
 343     def verify_persons(self, slice_hrn, slice_record, users, peer, sfa_peer, append=True):
 344         users_by_email = {}
 345         users_by_site = defaultdict(list)
 346
 347         users_dict = {}
 348         for user in users:
 349             hrn, type = urn_to_hrn(user['urn'])
 350             username = get_leaf(hrn)
 351             login_base = get_leaf(get_authority(user['urn']))
 352             user['username'] = username
 353             user['site'] = login_base
 354
 355             if 'append' in user and user['append'] == False:
 356                 append = False
 357
 358             if 'email' in user:
 359                 users_by_email[user['email']] = user
 360                 users_dict[user['email']] = user
 361             else:
 362                 users_by_site[user['site']].append(user)
 363
 364         # start building a list of existing users
 365         existing_user_ids = []
 366         existing_user_ids_filter = []
 367         if users_by_email:
 368             existing_user_ids_filter.extend(users_by_email.keys())
 369         if users_by_site:
 370             for login_base in users_by_site:
 371                 users = users_by_site[login_base]
 372                 for user in users:
 373                     existing_user_ids_filter.append(user['username']+'@geni.net')
 374         if existing_user_ids_filter:
 375             # get existing users by email
 376             existing_users = self.api.driver.GetPersons({'email': existing_user_ids_filter},
 377                                                         ['person_id', 'key_ids', 'email'])
 378             existing_user_ids.extend([user['email'] for user in existing_users])
 379
 380         if users_by_site:
 381             # get a list of user sites (based on requeste user urns
 382             site_list = self.api.driver.GetSites(users_by_site.keys(), \
 383                 ['site_id', 'login_base', 'person_ids'])
 384             # get all existing users at these sites
 385             sites = {}
 386             site_user_ids = []
 387             for site in site_list:
 388                 sites[site['site_id']] = site
 389                 site_user_ids.extend(site['person_ids'])
 390
 391             existing_site_persons_list = self.api.driver.GetPersons(site_user_ids,
 392                                                                     ['person_id', 'key_ids', 'email', 'site_ids'])
 393
 394             # all requested users are either existing users or new (added) users
 395             for login_base in users_by_site:
 396                 requested_site_users = users_by_site[login_base]
 397                 for requested_user in requested_site_users:
 398                     user_found = False
 399                     for existing_user in existing_site_persons_list:
 400                         for site_id in existing_user['site_ids']:
 401                             if site_id in sites:
 402                                 site = sites[site_id]
 403                                 if login_base == site['login_base'] and \
 404                                    existing_user['email'].startswith(requested_user['username']+'@'):
 405                                     existing_user_ids.append(existing_user['email'])
 406                                     users_dict[existing_user['email']] = requested_user
 407                                     user_found = True
 408                                     break
 409                         if user_found:
 410                             break
 411
 412                     if user_found == False:
 413                         fake_email = requested_user['username'] + '@geni.net'
 414                         users_dict[fake_email] = requested_user
 415
 416         # requested slice users
 417         requested_user_ids = users_dict.keys()
 418         # existing slice users
 419         existing_slice_users_filter = {'person_id': slice_record.get('person_ids', [])}
 420         existing_slice_users = self.api.driver.GetPersons(existing_slice_users_filter,
 421                                                           ['person_id', 'key_ids', 'email'])
 422         existing_slice_user_ids = [user['email'] for user in existing_slice_users]
 423
 424         # users to be added, removed or updated
 425         added_user_ids = set(requested_user_ids).difference(existing_user_ids)
 426         added_slice_user_ids = set(requested_user_ids).difference(existing_slice_user_ids)
 427         removed_user_ids = set(existing_slice_user_ids).difference(requested_user_ids)
 428         updated_user_ids = set(existing_slice_user_ids).intersection(requested_user_ids)
 429
 430         # Remove stale users (only if we are not appending).
 431         if append == False:
 432             for removed_user_id in removed_user_ids:
 433                 self.api.driver.DeletePersonFromSlice(removed_user_id, slice_record['name'])
 434         # update_existing users
 435         updated_users_list = [user for user in existing_slice_users if user['email'] in \
 436           updated_user_ids]
 437         self.verify_keys(existing_slice_users, updated_users_list, peer, append)
 438
 439         added_persons = []
 440         # add new users
 441         for added_user_id in added_user_ids:
 442             added_user = users_dict[added_user_id]
 443             hrn, type = urn_to_hrn(added_user['urn'])
 444             person = {
 445                 'first_name': added_user.get('first_name', hrn),
 446                 'last_name': added_user.get('last_name', hrn),
 447                 'email': added_user_id,
 448                 'peer_person_id': None,
 449                 'keys': [],
 450                 'key_ids': added_user.get('key_ids', []),
 451             }
 452             person['person_id'] = self.api.driver.AddPerson(person)
 453             if peer:
 454                 person['peer_person_id'] = added_user['person_id']
 455             added_persons.append(person)
 456
 457             # enable the account
 458             self.api.driver.UpdatePerson(person['person_id'], {'enabled': True})
 459
 460             # add person to site
 461             self.api.driver.AddPersonToSite(added_user_id, added_user['site'])
 462
 463             for key_string in added_user.get('keys', []):
 464                 key = {'key':key_string, 'key_type':'ssh'}
 465                 key['key_id'] = self.api.driver.AddPersonKey(person['person_id'], key)
 466                 person['keys'].append(key)
 467
 468             # add the registry record
 469             if sfa_peer:
 470                 peer_dict = {'type': 'user', 'hrn': hrn, 'peer_authority': sfa_peer, \
 471                     'pointer': person['person_id']}
 472                 self.registry.register_peer_object(self.credential, peer_dict)
 473
 474         for added_slice_user_id in added_slice_user_ids.union(added_user_ids):
 475             # add person to the slice
 476             self.api.driver.AddPersonToSlice(added_slice_user_id, slice_record['name'])
 477             # if this is a peer record then it should already be bound to a peer.
 478             # no need to return worry about it getting bound later
 479
 480         return added_persons
 481
 482
 483     def verify_keys(self, persons, users, peer, append=True):
 484         # existing keys
 485         key_ids = []
 486         for person in persons:
 487             key_ids.extend(person['key_ids'])
 488         keylist = self.api.driver.GetKeys(key_ids, ['key_id', 'key'])
 489         keydict = {}
 490         for key in keylist:
 491             keydict[key['key']] = key['key_id']
 492         existing_keys = keydict.keys()
 493         persondict = {}
 494         for person in persons:
 495             persondict[person['email']] = person
 496
 497         # add new keys
 498         requested_keys = []
 499         updated_persons = []
 500         for user in users:
 501             user_keys = user.get('keys', [])
 502             updated_persons.append(user)
 503             for key_string in user_keys:
 504                 requested_keys.append(key_string)
 505                 if key_string not in existing_keys:
 506                     key = {'key': key_string, 'key_type': 'ssh'}
 507                     try:
 508                         if peer:
 509                             person = persondict[user['email']]
 510                             self.api.driver.UnBindObjectFromPeer('person', person['person_id'], peer['shortname'])
 511                         key['key_id'] = self.api.driver.AddPersonKey(user['email'], key)
 512                         if peer:
 513                             key_index = user_keys.index(key['key'])
 514                             remote_key_id = user['key_ids'][key_index]
 515                             self.api.driver.BindObjectToPeer('key', key['key_id'], peer['shortname'], remote_key_id)
 516
 517                     finally:
 518                         if peer:
 519                             self.api.driver.BindObjectToPeer('person', person['person_id'], peer['shortname'], user['person_id'])
 520
 521         # remove old keys (only if we are not appending)
 522         if append == False:
 523             removed_keys = set(existing_keys).difference(requested_keys)
 524             for existing_key_id in keydict:
 525                 if keydict[existing_key_id] in removed_keys:
 526                     try:
 527                         if peer:
 528                             self.api.driver.UnBindObjectFromPeer('key', existing_key_id, peer['shortname'])
 529                         self.api.driver.DeleteKey(existing_key_id)
 530                     except:
 531                         pass
 532
 533     def verify_slice_attributes(self, slice, requested_slice_attributes, append=False, admin=False):
 534         # get list of attributes users ar able to manage
 535         filter = {'category': '*slice*'}
 536         if not admin:
 537             filter['|roles'] = ['user']
 538         slice_attributes = self.api.driver.GetTagTypes(filter)
 539         valid_slice_attribute_names = [attribute['tagname'] for attribute in slice_attributes]
 540
 541         # get sliver attributes
 542         added_slice_attributes = []
 543         removed_slice_attributes = []
 544         ignored_slice_attribute_names = []
 545         existing_slice_attributes = self.api.driver.GetSliceTags({'slice_id': slice['slice_id']})
 546
 547         # get attributes that should be removed
 548         for slice_tag in existing_slice_attributes:
 549             if slice_tag['tagname'] in ignored_slice_attribute_names:
 550                 # If a slice already has a admin only role it was probably given to them by an
 551                 # admin, so we should ignore it.
 552                 ignored_slice_attribute_names.append(slice_tag['tagname'])
 553             else:
 554                 # If an existing slice attribute was not found in the request it should
 555                 # be removed
 556                 attribute_found=False
 557                 for requested_attribute in requested_slice_attributes:
 558                     if requested_attribute['name'] == slice_tag['tagname'] and \
 559                        requested_attribute['value'] == slice_tag['value']:
 560                         attribute_found=True
 561                         break
 562
 563             if not attribute_found and not append:
 564                 removed_slice_attributes.append(slice_tag)
 565
 566         # get attributes that should be added:
 567         for requested_attribute in requested_slice_attributes:
 568             # if the requested attribute wasn't found  we should add it
 569             if requested_attribute['name'] in valid_slice_attribute_names:
 570                 attribute_found = False
 571                 for existing_attribute in existing_slice_attributes:
 572                     if requested_attribute['name'] == existing_attribute['tagname'] and \
 573                        requested_attribute['value'] == existing_attribute['value']:
 574                         attribute_found=True
 575                         break
 576                 if not attribute_found:
 577                     added_slice_attributes.append(requested_attribute)
 578
 579
 580         # remove stale attributes
 581         for attribute in removed_slice_attributes:
 582             try:
 583                 self.api.driver.DeleteSliceTag(attribute['slice_tag_id'])
 584             except Exception, e:
 585                 self.api.logger.warn('Failed to remove sliver attribute. name: %s, value: %s, node_id: %s\nCause:%s'\
 586                                 % (name, value,  node_id, str(e)))
 587
 588         # add requested_attributes
 589         for attribute in added_slice_attributes:
 590             try:
 591                 self.api.driver.AddSliceTag(slice['name'], attribute['name'], attribute['value'], attribute.get('node_id', None))
 592             except Exception, e:
 593                 self.api.logger.warn('Failed to add sliver attribute. name: %s, value: %s, node_id: %s\nCause:%s'\
 594                                 % (name, value,  node_id, str(e)))
 595
 596     def create_slice_aggregate(self, xrn, rspec):
 597         hrn, type = urn_to_hrn(xrn)
 598         # Determine if this is a peer slice
 599         peer = self.get_peer(hrn)
 600         sfa_peer = self.get_sfa_peer(hrn)
 601
 602         spec = RSpec(rspec)
 603         # Get the slice record from sfa
 604         slicename = hrn_to_pl_slicename(hrn)
 605         slice = {}
 606         slice_record = None
 607         registry = self.api.registries[self.api.hrn]
 608         credential = self.api.getCredential()
 609
 610         site_id, remote_site_id = self.verify_site(registry, credential, hrn, peer, sfa_peer)
 611         slice = self.verify_slice(registry, credential, hrn, site_id, remote_site_id, peer, sfa_peer)
 612
 613         # find out where this slice is currently running
 614         nodelist = self.api.driver.GetNodes(slice['node_ids'], ['hostname'])
 615         hostnames = [node['hostname'] for node in nodelist]
 616
 617         # get netspec details
 618         nodespecs = spec.getDictsByTagName('NodeSpec')
 619
 620         # dict in which to store slice attributes to set for the nodes
 621         nodes = {}
 622         for nodespec in nodespecs:
 623             if isinstance(nodespec['name'], list):
 624                 for nodename in nodespec['name']:
 625                     nodes[nodename] = {}
 626                     for k in nodespec.keys():
 627                         rspec_attribute_value = nodespec[k]
 628                         if (self.rspec_to_slice_tag.has_key(k)):
 629                             slice_tag_name = self.rspec_to_slice_tag[k]
 630                             nodes[nodename][slice_tag_name] = rspec_attribute_value
 631             elif isinstance(nodespec['name'], StringTypes):
 632                 nodename = nodespec['name']
 633                 nodes[nodename] = {}
 634                 for k in nodespec.keys():
 635                     rspec_attribute_value = nodespec[k]
 636                     if (self.rspec_to_slice_tag.has_key(k)):
 637                         slice_tag_name = self.rspec_to_slice_tag[k]
 638                         nodes[nodename][slice_tag_name] = rspec_attribute_value
 639
 640                 for k in nodespec.keys():
 641                     rspec_attribute_value = nodespec[k]
 642                     if (self.rspec_to_slice_tag.has_key(k)):
 643                         slice_tag_name = self.rspec_to_slice_tag[k]
 644                         nodes[nodename][slice_tag_name] = rspec_attribute_value
 645
 646         node_names = nodes.keys()
 647         # remove nodes not in rspec
 648         deleted_nodes = list(set(hostnames).difference(node_names))
 649         # add nodes from rspec
 650         added_nodes = list(set(node_names).difference(hostnames))
 651
 652         try:
 653             if peer:
 654                 self.api.driver.UnBindObjectFromPeer('slice', slice['slice_id'], peer)
 655
 656             self.api.driver.AddSliceToNodes(slicename, added_nodes)
 657
 658             # Add recognized slice tags
 659             for node_name in node_names:
 660                 node = nodes[node_name]
 661                 for slice_tag in node.keys():
 662                     value = node[slice_tag]
 663                     if (isinstance(value, list)):
 664                         value = value[0]
 665
 666                     self.api.driver.AddSliceTag(slicename, slice_tag, value, node_name)
 667
 668             self.api.driver.DeleteSliceFromNodes(slicename, deleted_nodes)
 669         finally:
 670             if peer:
 671                 self.api.driver.BindObjectToPeer('slice', slice['slice_id'], peer, slice['peer_slice_id'])
 672
 673         return 1
 674