Merge branch 'master' into senslab2

Merge branch 'upstreammaster'

Created special slab_get_authority to import slab nodes in sfa db.
Modified import script to prevent stalling on import.

Evert sfa file.

Better with the file concerned, slabslices.py

Added lease modification feature when adding/removing
nodes from a slice/lease in Rspec.
WARNING: Not working if at least 2experminents scheduled in
OAR.

Modified SFA Rspec format for requesting leases.
Propagating changes.

Setting tag sfa-2.1-17
bugfix in forwarding Resolve requests
various fixes in the nitos driver wrt keys and users

Nitos: fix addUserKey call in verify_users()

Modified test.

on behalf of Jordan Auge - thanks Jordan

Removing ldap_config.py file due to errors.

 .

Fixing bug in slabimporter.

Modified slabimporter to import
only user who have a valid ssh key. Does not import slice
if user's key is invalid.

Modified ip address (prod migration).

Adding myslice and testuser pkey.

Bug fixes for senslab site in config file.

Adding new format config files config_site
for senslab and senslab2 (needed by bash_nukem).

.

Cleaning.

Fixed bug for sfi.py show slice record.

Same.

Indent fix.

Fixed bug in slabdriver preventing from get info
from sfi.py show on a user when no job is scheduled.

Corrected bug in filename in TestSuite.py
Added configuration details in jenkins-config.

Added comments to tests.

Adding sfi tests in TestSuite.
Modified "true" value for exclusive item in slabaggregate to fit SFA new
Rspec.

Merge branch 'master' into senslab2

Conflicts:
sfa/client/client_helper.py
sfa/managers/registry_manager.py

Merge branch 'upstreammaster'

Setting tag sfa-2.1-16
various tweaks for the nitos driver

Nitos: bug fix verify_users

Nitos: clean up

Nitos: update verify_users

PL leases: take in account only the leases in the aggregate network

PL Leases: check slice_xrn and slice args in get_leases

PL: for the manifest, use slice_xrn for the lease slice_id

Nitos: for the manifest, use slice_xrn for the lease slice_id

Nitos: for the manifest, use slice_xrn for the lease slice_id

Nitos: fot the manifest, use slice_xrn for the lease slice_id

Nitos: fix addSlice call with right arg slice_name

Nitos: rspec's format is NITOS 1

Nitos: Enfore network name in case of a no resoucres manifest

Nitos: Enforce slice check within get_leases_and_channels

Add exclusive tag in order to distinguish between reservable \n and shared nodes and show the granularity of the reservation system in case of reservable nodes

bug fix: check returned filtred list of nitos nodes

Merge branch 'master' of git.onelab.eu:/git/sfa

Update PlanetLab reservation oriented Rspecs: the leases were expressed an atomic way (ie. 1 Lease = 1 Slice = 1 TimeSlot = 1 node) but now they are grouped by slice and timeslot (ie. 1 Lease = 1 Slice = 1 TimeSlot = N node)

Setting tag sfa-2.1-15
first stab at a driver for the NITOS/OMF testbed (sep. pkg)
deeper cleanup of the data-dependencies between SFA and the testbed
in particular, sfi create issues Resolve(details=False)
for that purpose, Resolve exposes reg-* keys for SFA builtins
which in turn allows sfi list to show PIs, slice members and keys
NOTE: sfa-config-tty is known to be broken w/ less frequently used func's
Shows stacktrace when startup fails (DB conn, wrong flavour, etc..)

before we expose a sqlalchemy object to the xmlrpc wire, we need to
clean up related objects - xmlrpc would not allow it, we expose hrns
instead anyways
the way we did this before this change was to look for lists of
RegRecord or RegKey
however it turns out the lists are actually instances of
sqlalchemy.orm.collections.InstrumentedList
so if a list turns out empty, it did not get filter out but could not
get marshalled either
we simplify the code for filtering out (Record.todict) to exclude
objects only on the value type (not its sons when it's a list)
and the manager does not pass RegRecord or RegKey anymore, but just
InstrmentedList

sfi calls Resolve (details=False) before issuing CreateSliver
this seems to work now again, tested in dual-mode SFA/Plc

cosmetic

fix syntax error

cosmetic changes for sfi list - accepts a -v option and can display keys

Merge branch 'geni-v2' of ssh://git.onelab.eu/git/sfa into geni-v2

sfi is more flexible when putting together the 'users' arg for CreateSliver

expose reg-keys as part of Resolve

cleanup

fix NameError

When sfi calls CreateSliver, it uses Resolve beforehand to make up the
'users' arg
This change reverts to using Resolve (details=True) so that
testbed-dependant data gets added to the result of Resolve
It seems like our implementation is not yet testbed-neutral enough, so
for now we need this setting

comment

add an optional 'options' dict to Resolve (checked that old clients
would not break)
go deeper yet in cleaning up the amount of extra fields in records
turns out CreateSliver actually needs to re-synthesize a whole lot of
data about users (for when account creation needs to take place)
in a truly federated environment this is not going to work, the
registry will never have enough data for account creation as this is
testbed-dependent
as far as I can tell this is a blatant flaw in the architecture
this code might work - accidentally - in a simple one-SFA-one-PLC
setup but this needs more work

add to List the same builtin relations as for Resolve
use that to have 'sfi list' display member ships and PI relationships
as well

sfi create takes advantage of the reg-researchers (builtin hrns of
attached users) instead of the unreliable and testbed-dependant
'researcher'

expose hrns of builtin related entities as a result of Resolve; this
is required now that the default value for 'details' is False, and
that we cannot rely on an underlying testbed

Advertise the Nitos access gateway

Add the exclusive tag to nitos nodes in order to show that they are reservables and not shared

the Resolve method takes an optional argument that tells if we need
details from the testbed (which was named 'full', which was dumb, I renamed
this as 'details')
in any case this change is about using details=False by default, as
SFA data should be self-sufficient, and examples of foreign drivers
have shown the problem...

clearer warnings for when things go wrong

sfadump -x to show a full xml dump of credentials

print out explicit warning when xmlsec1 cannot be found in PATH

fix to sfadump that is sometimes helpful

Update reserveNodes/Channels and releaseNodes/Channels calls arguments

clean up nitosslices.py

Make Nitos Rspecs version independante from the Nitos driver

Add Nitos package

Update delete_sliver for nitos driver

Nitos slice's users in slice['user_ids']

bugs fix

craete or parse RSpec according to the requested RSpec Version

handle Nitos users also

bugs fixing

Enforce RSpec Version check

Add nitos module to setup.py

Flavour oriented configuration

First draft of the Nitos federation with SFA

Setting tag sfa-2.1-14
configurable data-dir (/var/lib/sfa)
no more dependent on myplc-config
some support for hrns with _ instead of \.
fix for PL importing in presence of gpg keys
DeleteSliver returns True instead of 1 in case of success
Various improvements on the openstack/nova side

typo

manifest rspec for a slice that doesn't exist should be empyt

leaning LDAP api.py

Pylint test on slabdriver.py.

unning tests on new LDAP.

Trying nosetests.

get client_id from slice tag

fix NameError

client id should remain as long as slice remains alive

Modified TestSuite while Senslab 's infrastructure is down.
Trying out Jenkins.

Removed test files.

fix AttributeError

fix bug