Merge branch 'master' into senslab2
[sfa.git] / sfa / senslab / slabaggregate.py
1
2 #!/usr/bin/python
3
4 # import modules used here -- sys is a very standard one
5 import sys
6 import httplib
7 import json
8
9
10 from sfa.rspecs.version_manager import VersionManager
11 from sfa.senslab.OARrestapi import *
12 from sfa.senslab.slabdriver import SlabDriver
13 from sfa.util.config import Config
14 from sfa.util.xrn import hrn_to_urn, urn_to_hrn, urn_to_sliver_id
15 from sfa.util.plxrn import PlXrn, hostname_to_urn, hrn_to_pl_slicename
16
17 from sfa.rspecs.rspec import RSpec
18 from sfa.rspecs.elements.location import Location
19 from sfa.rspecs.elements.hardware_type import HardwareType
20 from sfa.rspecs.elements.node import Node
21 #from sfa.rspecs.elements.link import Link
22 #from sfa.rspecs.elements.sliver import Sliver
23 #from sfa.rspecs.elements.login import Login
24 #from sfa.rspecs.elements.location import Location
25 #from sfa.rspecs.elements.interface import Interface
26 #from sfa.rspecs.elements.services import Services
27 #from sfa.rspecs.elements.pltag import PLTag
28 from sfa.util.topology import Topology
29 from sfa.rspecs.version_manager import VersionManager
30 #from sfa.plc.vlink import get_tc_rate
31 from sfa.util.sfatime import epochparse
32
33 def hostname_to_hrn(root_auth,login_base,hostname):
34     return PlXrn(auth=root_auth,hostname=login_base+'_'+hostname).get_hrn()
35
36 class SlabAggregate:
37
38     
39     sites = {}
40     nodes = {}
41     api = None
42     interfaces = {}
43     links = {}
44     node_tags = {}
45     
46     prepared=False
47
48     user_options = {}
49     
50     def __init__(self ,api):
51         self.OARImporter = OARapi()     
52         self.driver = SlabDriver(Config())
53         self.api = api 
54         print >>sys.stderr,"\r\n \r\n \t\t_____________INIT Slabaggregate api : %s" %(api)
55
56
57     def get_slice_and_slivers(self, slice_xrn):
58         """
59         Returns a dict of slivers keyed on the sliver's node_id
60         """
61         slivers = {}
62         slice = None
63         if not slice_xrn:
64             return (slice, slivers)
65         slice_urn = hrn_to_urn(slice_xrn, 'slice')
66         slice_hrn, _ = urn_to_hrn(slice_xrn)
67         slice_name = slice_hrn
68         slices = self.driver.GetSlices(slice_name)
69         if not slices:
70             return (slice, slivers)
71         slice = slices[0]
72
73         # sort slivers by node id    
74         for node_id in slice['node_ids']:
75             sliver = Sliver({'sliver_id': urn_to_sliver_id(slice_urn, slice['slice_id'], node_id),
76                              'name': slice['hrn'],
77                              'type': 'slab-vm', 
78                              'tags': []})
79             slivers[node_id]= sliver
80
81         # sort sliver attributes by node id    
82         #tags = self.driver.GetSliceTags({'slice_tag_id': slice['slice_tag_ids']})
83         #for tag in tags:
84             ## most likely a default/global sliver attribute (node_id == None)
85             #if tag['node_id'] not in slivers:
86                 #sliver = Sliver({'sliver_id': urn_to_sliver_id(slice_urn, slice['slice_id'], ""),
87                                  #'name': 'slab-vm',
88                                  #'tags': []})
89                 #slivers[tag['node_id']] = sliver
90             #slivers[tag['node_id']]['tags'].append(tag)
91         
92         return (slice, slivers)
93             
94             
95   
96     def get_nodes(self):
97         filtre = {}
98         #tags_filter = {}
99         #if slice and 'node_ids' in slice and slice['node_ids']:
100             #filter['node_id'] = slice['node_ids']
101             #tags_filter=filter.copy()
102         
103         #filter.update({'peer_id': None})
104         nodes = self.driver.GetNodes(filtre)
105        
106         #site_ids = []
107         interface_ids = []
108         tag_ids = []
109         nodes_dict = {}
110         for node in nodes:
111             #site_ids.append(node['site_id'])
112             #interface_ids.extend(node['interface_ids'])
113             #tag_ids.extend(node['node_tag_ids'])
114             nodes_dict[node['node_id']] = node
115     
116         # get sites
117         #sites_dict  = self.get_sites({'site_id': site_ids}) 
118         # get interfaces
119         #interfaces = self.get_interfaces({'interface_id':interface_ids}) 
120         # get tags
121         #node_tags = self.get_node_tags(tags_filter)
122         # get initscripts
123         #pl_initscripts = self.get_pl_initscripts()
124         
125         #links = self.get_links(sites_dict, nodes_dict, interfaces)
126     
127         rspec_nodes = []
128         for node in nodes:
129             # skip whitelisted nodes
130             #if node['slice_ids_whitelist']:
131                 #if not slice or slice['slice_id'] not in node['slice_ids_whitelist']:
132                     #continue
133             node['hostname'] = hostname_to_hrn( self.driver.root_auth,node['site_login_base'], node['hostname'])
134             rspec_node = Node()
135             # xxx how to retrieve site['login_base']
136             #site_id=node['site_id']
137             #site=sites_dict[site_id]
138             
139             rspec_node['component_id'] = hostname_to_urn(self.driver.root_auth, node['site_login_base'], node['hostname'])
140             rspec_node['component_name'] = node['hostname']
141             rspec_node['component_manager_id'] = hrn_to_urn(self.driver.root_auth, 'authority+sa')
142             rspec_node['authority_id'] = hrn_to_urn(PlXrn.site_hrn(self.driver.root_auth, node['site_login_base']), 'authority+sa')
143             rspec_node['boot_state'] = node['boot_state']
144             if node['posx'] and node['posy']:  
145                 location = Location({'longitude':node['posx'], 'latitude': node['posy']})
146                 rspec_node['location'] = location
147
148             rspec_node['exclusive'] = 'True'
149             rspec_node['hardware_types']= [HardwareType({'name': 'senslab sensor node'})]
150             # only doing this because protogeni rspec needs
151             # to advertise available initscripts 
152             #rspec_node['pl_initscripts'] = pl_initscripts.values()
153                 # add site/interface info to nodes.
154             # assumes that sites, interfaces and tags have already been prepared.
155             #site = sites_dict[node['site_id']]
156             #if site['longitude'] and site['latitude']:  
157                 #location = Location({'longitude': site['longitude'], 'latitude': site['latitude']})
158                 #rspec_node['location'] = location
159             rspec_node['interfaces'] = []
160             #if_count=0
161             #for if_id in node['interface_ids']:
162                 #interface = Interface(interfaces[if_id]) 
163                 #interface['ipv4'] = interface['ip']
164                 #interface['component_id'] = PlXrn(auth=self.api.hrn, interface='node%s:eth%s' % (node['node_id'], if_count)).get_urn()
165                 #rspec_node['interfaces'].append(interface)
166                 #if_count+=1
167     
168             #tags = [PLTag(node_tags[tag_id]) for tag_id in node['node_tag_ids']]
169             rspec_node['tags'] = []
170             #if node['node_id'] in slivers:
171                 ## add sliver info
172                 #sliver = slivers[node['node_id']]
173                 #rspec_node['sliver_id'] = sliver['sliver_id']
174                 #rspec_node['client_id'] = node['hostname']
175                 #rspec_node['slivers'] = [sliver]
176                 
177                 ## slivers always provide the ssh service
178                 #login = Login({'authentication': 'ssh-keys', 'hostname': node['hostname'], 'port':'22'})
179                 #service = Services({'login': login})
180                 #rspec_node['services'] = [service]
181             rspec_nodes.append(rspec_node)
182         return (rspec_nodes)
183         
184         
185
186 #from plc/aggregate.py 
187     def get_rspec(self, slice_xrn=None, version = None, options={}):
188         print>>sys.stderr, " \r\n SlabAggregate \t\t get_rspec **************\r\n" 
189       
190         
191         rspec = None
192         version_manager = VersionManager()
193         version = version_manager.get_version(version)
194      
195         
196         if not slice_xrn:
197             rspec_version = version_manager._get_version(version.type, version.version, 'ad')
198         else:
199             rspec_version = version_manager._get_version(version.type, version.version, 'manifest')
200         #slice, slivers = self.get_slice_and_slivers(slice_xrn)
201         rspec = RSpec(version=rspec_version, user_options=options)
202         #if slice and 'expires' in slice:
203            #rspec.xml.set('expires',  epochparse(slice['expires']))
204          # add sliver defaults
205         #nodes, links = self.get_nodes_and_links(slice, slivers)
206         nodes = self.get_nodes() 
207         rspec.version.add_nodes(nodes)
208
209         #rspec.version.add_links(links)
210         #default_sliver = slivers.get(None, [])
211         #if default_sliver:
212             #default_sliver_attribs = default_sliver.get('tags', [])
213             #for attrib in default_sliver_attribs:
214                 #logger.info(attrib)
215                 #rspec.version.add_default_sliver_attribute(attrib['tagname'], attrib['value'])   
216
217         return rspec.toxml()