Merge branch 'senslab2' of ssh://flab-git.pl.sophia.inria.fr/git/sfa into senslab2
authorSandrine Avakian <sandrine.avakian@inria.fr>
Mon, 14 Nov 2011 14:34:27 +0000 (15:34 +0100)
committerSandrine Avakian <sandrine.avakian@inria.fr>
Mon, 14 Nov 2011 14:34:27 +0000 (15:34 +0100)
sfa/managers/registry_manager_slab.py
sfa/senslab/slab-import.py [new file with mode: 0644]

index b780210..903f49c 100644 (file)
@@ -15,8 +15,10 @@ from sfa.trust.credential import Credential
 from sfa.trust.certificate import Certificate, Keypair, convert_public_key
 from sfa.trust.gid import create_uuid
 
+#myapi=SfaAPI()
 # The GENI GetVersion call
 def GetVersion(api):
+    
     # Bugfix TP 09/11/2011
     #peers =dict ([ (peername,v._ServerProxy__host) for (peername,v) in api.registries.iteritems()
     peers =dict ([ (peername,v.get_url()) for (peername,v) in api.registries.iteritems()
@@ -162,6 +164,7 @@ def resolve(api, xrns, type=None, full=True):
                    
     if full:
        print >>sys.stderr, '\r\n \r\n REGISTRY:_FULL', api     
+  
         api.driver.fill_record_info(local_records)
     
     # convert local record objects to dicts
@@ -213,6 +216,7 @@ def list(api, xrn, origin_hrn=None):
 
 def register(api, record):
 
     #hrn, type = record['hrn'], record['type']
     hrn = str(record['hrn']).strip("['']")
     type = str( record['type']).strip("['']")
@@ -239,6 +243,9 @@ def register(api, record):
     #api.auth.verify_object_permission(hrn)
     api.auth.verify_object_permission( record['hrn'])
     auth_info = api.auth.get_auth_info(record['authority'])
+  
+    
+
     pub_key = None
     # make sure record has a gid
     if 'gid' not in record:
@@ -314,6 +321,7 @@ def register(api, record):
         # time by sfa and doesont already exist in plc
         if not persons or not persons[0]['site_ids']:
             login_base = get_leaf(record['authority'])
+
             api.driver.AddPersonToSite(pointer, login_base)
 
         # What roles should this user have?
diff --git a/sfa/senslab/slab-import.py b/sfa/senslab/slab-import.py
new file mode 100644 (file)
index 0000000..9d17757
--- /dev/null
@@ -0,0 +1,238 @@
+###########################################################################
+#    Copyright (C) 2011 by root                                      
+#    <root@FlabFedora2>                                                             
+#
+# Copyright: See COPYING file that comes with this distribution
+#
+###########################################################################
+import sys
+from sfa.senslab.OARrestapi import OARapi
+from sfa.senslab.LDAPapi import LDAPapi
+from sfa.util.config import Config
+from sfa.util.xrn import hrn_to_urn, get_authority
+from sfa.util.table import SfaTable
+from sfa.trust.hierarchy import Hierarchy
+
+AuthHierarchy = Hierarchy()
+table = SfaTable()
+
+def create_top_level_auth_records(hrn):
+    """
+    Create top level records (includes root and sub authorities (local/remote)
+    """
+    print>>sys.stderr, "\r\n =========SenslabImport create_top_level_auth_records\r\n"
+    urn = hrn_to_urn(hrn, 'authority')
+    # make sure parent exists
+    parent_hrn = get_authority(hrn)
+    if not parent_hrn:
+        parent_hrn = hrn
+    if not parent_hrn == hrn:
+        create_top_level_auth_records(parent_hrn)
+        
+    
+    # create the authority if it doesnt already exist 
+    if not AuthHierarchy.auth_exists(urn):
+        AuthHierarchy.create_auth(urn)
+    
+    # create the db record if it doesnt already exist    
+    auth_info = AuthHierarchy.get_auth_info(hrn)
+   
+    auth_record = table.find({'type': 'authority', 'hrn': hrn})
+
+    if not auth_record:
+        auth_record = SfaRecord(hrn=hrn, gid=auth_info.get_gid_object(), type="authority", pointer=-1)
+        auth_record['authority'] = get_authority(auth_record['hrn'])
+        table.insert(auth_record)
+        print>>sys.stderr, "\r\n ========= \t\t SenslabImport NO AUTH RECORD \r\n" ,auth_record['authority']
+        
+    
+def import_node(hrn, node):
+
+    # ASN.1 will have problems with hrn's longer than 64 characters
+    if len(hrn) > 64:
+        hrn = hrn[:64]
+
+    node_record = table.find({'type': 'node', 'hrn': hrn})
+    pkey = Keypair(create=True)
+    urn = hrn_to_urn(hrn, 'node')
+    node_gid = AuthHierarchy.create_gid(urn, create_uuid(), pkey)
+    node_record = SfaRecord(hrn=hrn, gid=node_gid, type="node", pointer=node['node_id'])
+    node_record['authority'] = get_authority(node_record['hrn'])
+    existing_records = table.find({'hrn': hrn, 'type': 'node', 'pointer': node['node_id']})
+    if not existing_records:
+        table.insert(node_record)
+    else:
+        existing_record = existing_records[0]
+        node_record['record_id'] = existing_record['record_id']
+        table.update(node_record)
+
+def import_person(person):       
+    existing_records = table.find({'hrn': person['hrn'], 'type': 'user'})
+    if not existing_records:
+        table.insert(person_record)
+    else:
+        existing_record = existing_records[0]
+        person['record_id'] = existing_record['record_id']
+        table.update(person_record)      
+        
+        
+        
+def delete_record( hrn, type):
+    # delete the record
+    record_list = table.find({'type': type, 'hrn': hrn})
+    for record in record_list:
+        table.remove(record)
+                
+                
+def main():
+
+    config = Config()
+    if not config.SFA_REGISTRY_ENABLED:
+        sys.exit(0)
+    root_auth = config.SFA_REGISTRY_ROOT_AUTH
+    interface_hrn = config.SFA_INTERFACE_HRN
+    print interface_hrn, root_auth
+    
+     # initialize registry db table
+    table = SfaTable()
+    if not table.exists():
+       table.create()
+
+    # create root authority 
+    SenslabImporter.create_top_level_auth_records(root_auth)
+    
+    # create s user record for the slice manager
+    #Do we need this?
+    #SenslabImporter.create_sm_client_record()
+    
+    # create interface records 
+    #Do we need this?
+    #SenslabImporter.logger.info("Import: creating interface records")
+    #SenslabImporter.create_interface_records()
+     # create dict of all existing sfa records
+     
+    existing_records = {}
+    existing_hrns = []
+    key_ids = []
+    person_keys = {} 
+    results = table.find()
+    for result in results:
+        existing_records[(result['hrn'], result['type'])] = result
+        existing_hrns.append(result['hrn'])   
+        
+         #Get Senslab nodes 
+    nodes_dict  = OARImporter.GetNodes()
+    print "\r\n NODES8DICT ",nodes_dict
+    
+    persons_list = SenslabUsers.GetPersons()
+    print "\r\n PERSONS_LIST ",persons_list
+
+    keys_list = SenslabUsers.GetKeys()
+    print "\r\n KEYSS_LIST ",keys_list
+    
+    #slices_list = SenslabUsers.GetSlices()
+    #print "\r\n SLICES_LIST ",slices_list
+    
+        # Get all Senslab sites
+    #sites_dict  = OARImporter.GetSites()
+    #print "\r\n sSITES_DICT" , sites_dict
+    
+     # start importing 
+    #for site in sites_dict:
+        #site_hrn = interface_hrn + "." + site['login_base']
+        ##sfa_logger().info("Importing site: %s" % site_hrn)
+       #print "HRN %s %s site existing in hrn ? %s" %( site['login_base'],site_hrn, site_hrn in existing_hrns)
+        ## import if hrn is not in list of existing hrns or if the hrn exists
+        ## but its not a site record
+        #if site_hrn not in existing_hrns or \
+            #(site_hrn, 'authority') not in existing_records:
+             #print "SITE HRN UNKNOWN" , site, site_hrn
+             #site_hrn = SenslabImporter.import_site(interface_hrn, site)
+            
+    print "\r\n \r\n ===========IMPORT NODE_RECORDS ==========\r\n site %s \r\n \t nodes_dict %s" %(site,nodes_dict)            
+        # import node records
+       #for node_id in site['node_ids']:
+               #for[node['node_id'] for node in nodes_dict]:
+                       #print '\r\n \t **NODE_ID %s node %s '%( node_id, node)         
+                       #continue 
+    for node in nodes_dict:
+        #if node_id is node['node_id']:        
+                #node = nodes_dict[node_id]
+        print '\r\n \t NODE_ID %s node %s '%( node_id, node)
+        hrn =  hostname_to_hrn(interface_hrn, root_auth, node['hostname'])
+        break  
+
+    if hrn not in existing_hrns or \
+    (hrn, 'node') not in existing_records:
+        print "\t\t NODE HRN NOT in existing records!" ,hrn
+        import_node(hrn, node)
+
+   # import persons
+    for person in persons_list:
+        print >>sys.stderr, "\r\n\r\n^^^^^^^^^^^^^PERSON hrn %s person %s site hrn %s" %(hrn,person)    
+        SenslabImporter.import_person( site_hrn, person,keys_list)
+        if hrn not in existing_hrns or \
+            (hrn, 'user') not in existing_records or update_record:
+            import_person(site_hrn, person)    
+# import slices
+        #for slice_id in site['slice_ids']:
+               #print >>sys.stderr, "\r\n\r\n \t ^^^^^^^\\\\\\\\\\\\\\\^^^^^^ slice_id  %s  " %(slice_id)              
+               #for sl in slices_list:
+                       #if slice_id is sl['slice_id']:
+                               ##hrn = slicename_to_hrn(interface_hrn, sl['name'])
+                               #hrn = email_to_hrn(site_hrn, sl['name'])
+                               #print >>sys.stderr, "\r\n\r\n^^^^^^^^^^^^^SLICE ID hrn %s  site_hrn %s" %(hrn,site_hrn)                                
+                               #if hrn not in existing_hrns or \
+                               #(hrn, 'slice') not in existing_records:
+                                       #SenslabImporter.import_slice(site_hrn, sl)     
+
+                                       
+    # remove stale records    
+    system_records = [interface_hrn, root_auth, interface_hrn + '.slicemanager']
+    for (record_hrn, type) in existing_records.keys():
+        if record_hrn in system_records:
+            continue
+        
+        record = existing_records[(record_hrn, type)]
+        if record['peer_authority']:
+            continue                                   
+
+
+
+        found = False
+        
+        if type == 'authority':    
+            #for site in sites_dict:
+               #print "\t type : authority : ", site
+                #site_hrn = interface_hrn + "." + site['login_base']
+                #if site_hrn == record_hrn and site['site_id'] == record['pointer']:
+            found = True
+            print "\t \t Found :", found
+            break
+                
+        elif type == 'user':
+            for person in persons:
+                if person['hrn'] == record_hrn:
+                    found = True
+                break
+            
+        elif type == 'node':
+            login_base = get_leaf(get_authority(record_hrn))
+            nodename = Xrn.unescape(get_leaf(record_hrn))
+            print "type: node :  nodename %s" %(nodename)
+            for node in nodes_dict.values():
+                if node['hostname'] == nodename :
+                    found = True
+                    break 
+                    
+        else:
+            continue 
+        
+        if not found:
+            record_object = existing_records[(record_hrn, type)]
+            print "\t\t NOT FOUND ! "
+            delete_record(record_hrn, type) 
+    
+if __name__ == "__main__":
+    main()    
\ No newline at end of file