Setting tag nodemanager-2.0-18

hardcode planetlab-f8-i386 as a vref until migration from 4.3 to 5.0 completes

initial checkin of NM plugin for installing SFA gids

cciss fix and cleaner way to reach the partition.

Fix for cciss.

Setting tag nodemanager-2.0-17
revert curlwrapper to former forking-curl version
fixes in the omf plugin for ssh key location and node hrn
set umask 0022 in tools.daemon

preserve comment that ends in the config file

revert to the forking-curl approach to curlwrapper

Merge branch 'master' of ssh://git.onelab.eu/git/nodemanager

Merge remote branch 'origin/master'

fix path for the sliver private key

lingering cosmetic

use system-wide umask value otherwise all directories under /dev/cgroup and /vservers become world writable

exclude git repo

Setting tag nodemanager-2.0-16
configure omf-resctl for keys

add sliver keys to resctl configuration

Setting tag NodeManager-2.0-15
fix key generation

fix key generation

Setting tag NodeManager-2.0-14
name changes and fix typos

uses lowercase module names - needs the fix in myplc-docs.spec

fix the typo

store sliver ssh keys in the root /home and rely on the mounting vsys script to expose it

Setting tag NodeManager-2.0-13
remove config and options parameters from start function

remove config and options parameters from start function as nobody uses them

Setting tag NodeManager-2.0-12
working version of reservable nodes
sliverauth generates an ssh keypair and export pub part as 'ssh_key' tag
dismantled the -s|--startup option (no convincing need for that)
simpler and more robust init.d/nm
initscript content management through replace_file_with_string
sliverauth uses replace_file_with_string
curlwrapper has a debug mode

note-added

first working code for reservations

first working code for reservations

take down the -s (startingup) option

cosmetic

placeholder

review ssh generation for deleted/re-created slivers

rename local config file

sliverauth generates a sliver ssh keypair and exposes it in the 'ssh_key' tag
sliverauth uses replace_file_with_string
replace_file_with_string uses sliverauth's atomic code

cosmetic

bugfix for initscript creation

bugfix in child processes management - review initscript install

 uses pidfile for all steps - more robust

debug mode might be useful occasionnally

Setting tag NodeManager-2.0-11
pretty-printing/normalized python code - hopefully neutral

- Change .py files to use 4-space indents and no hard tab characters.
- Trim excess spaces and tabs from ends of lines, and remove empty lines at the end of files.
- Ensure the last line ends with a newline.

Setting tag NodeManager-2.0-10
(1) unconditionnally install and chkconfig-like a generic 'vinit' service
that triggers /etc/init.d/vinit.slice if present and executable
(2) install the slice-provided initscript (as per the initscript tag) as
/etc/init.d/vinit.slice
(3) as a result the initscript are now triggered by rc as part of the
standard vserver .. start, properly attached to the vserver,
and properly killed upon vserver .. stop
(4) this works best with util-vserver-pl 0.3-31 or 0.4-12

provide a generic stop method for the initscript

initscripts are now triggered through rc via a generic /etc/init.d/vinit
that script is always installed and chkconfig-enabled
it then checks for /etc/init.d/vinit.slice, from the initscript tag
this way this process group correctly gets wiped when the sliver is shutdown
this was confirmed to not be the case formerly

cosmetic

Setting tag NodeManager-2.0-9
fix for 64bits nodes: add newline to the personality files that instruct util-vserver to create 32bits slivers
basic/partial support from reservable nodes through the 'reservation plugin' (not fully working yet)
plugins can set 'persistent_data' to receive the latests know GetSlivers in case the connection is down
cleanup: moved runtime files in /var/lib/nodemanager, and logs as /var/log/nodemanager* (see specfile)
cleanup: some modules renamed (e.g. nm.py becomes nodemanager.py)
cleanup: nodemanger now is a class; however plugins are still dumb modules
cleanup: does not depend on obsolete Set

basics are OK; still needs to prevent the regular slivermanager from starting slivers in reservation mode

more data stored in verbose mode

cosmetic

checkpoint

cosmetic

moving towards reservable nodes

dummy/scaffolding plugin for reservations
modules that set 'persistent_data' are provided with the latest known getslivers data instead of {}
nodemanager now is a class
bwmon.data renamed more consistently into /var/lib/nodemanager/bwmon.pickle
cleaned up deprecated uses of Set

add trailing newline in sliver's personality config file

cosmetic: protect drl against void getslivers

more renamings

renamed files used at runtime (see post-install script in specfile)
curlwrapper now uses pycurl
needs testing

Setting tag NodeManager-2.0-8
tagging before RC

fix harmless slice_id does not end on newline warning

Setting tag NodeManager-2.0-7
Fix typos in plugins/drl.py and doc/NMAPI.xml.in
Added some precautions to the slice id-saving code
Added log message to code that records the slice id

fix log message

typo

s/install/update/g

Tweaks

Added log message to code that records the slice id.

Added some precautions to the slice id-saving code.

Setting tag NodeManager-2.0-6
This version changes the location of the slice id for components such as PlanetFlow to look up. Previously this piece
of information was stored in the 'vserver name' field of the per-vserver context structure in the kernel but we needed
to move it elsewhere since Daniel decided to use that for something else (the vserver name... pedantic!).

Do we really need an exec trace for this expected state - not sure, please change if appropriate.

Thsi appears to be a typo.

Correction to the previous commit. This is the version that was tested.

Recommitting this patch, after testing it on a PLC node.

This patch stores the slice id in a file in /etc/vservers instead of poking it in the kernel as was done previously.

Setting tag NodeManager-2.0-5
fix log_call in plugins/drl.py

lag_call requires the command to be an array

Setting tag NodeManager-2.0-4
protect against nodes in migrated PLC's not having the hrn tag yet

hrn might be empty during transition period

Setting tag NodeManager-2.0-3
new omf-resctl and drl plugins
specialaccount optimized to overwrite authorized keys only upon changes
codemux plugin has support for a new 'ip' setting
mainloop to display ordered modules&plugins at all times

expose node hrn to the OMF resource controller

handle all installed versions

change the way 'vref' gets set on omf-control'ed slivers

nodenetworks are now known as interfaces

merge rev 17315

new omf-oriented plugins
new tool for changing files only when needed

cosmetic fix

DRL plugin

don't invoke /etc/init.d/codemux if it is not installed

Enable/disable the initscript as well.

Setting tag NodeManager-2.0-2
modules and plugins have a priority
specialaccounts appears soon in the priority chain
logger.log_call logs process output, and has a timeout
vuser{add,del} run through bash -x
nm initscript has support for 'service nm restartverbose'
logs reviewed for consistency
use hashlib module instead of sha when available

fix log_call deadlock
initscript cleaned up - now supports 'service nm restartverbose'
run vuseradd and vuserdel through bash -x (should be in verbose only but..)

use hashlib and fallback to sha (for python 2.4)

(*) the various modules have a priority; lower gets invoked first
(*) default is net, conf_files, specialaccounts, sm, bwmon, then the rest
(*) log_call can log child output on the fly even if hangs
(*) log_call has timeout and terminates hanging child if too long

expects the 'interfaces' key in GetSlivers - review logs to always mention module

cosmetic

more graceful log message when GetSlivers() API called failed

gracefully handle case where the sliver has not yet been instantiated

Setting tag NodeManager-2.0-1
first working version of 5.0:
pld.c/, db-config.d/ and nodeconfig/ scripts should now sit in the module they belong to
nodefamily is 3-fold with pldistro-fcdistro-arch
relies on GetSlivers to expose 'GetSliceFamily' for slivers
(in addition to the 'vref' tag that's still exposed too)
logging reviewed for more convenience
support for 'service nm restartdebug'
make sync knows how to publish uncommitted code on a test node

Branch 2.0 for module NodeManager created (as new trunk) from tag NodeManager-1.8-23

logs for when PLC is unreachable

fixed broken slice-creation