Disconnected operation.

This commit was manufactured by cvs2svn to create branch
'disconnectedops'.

Change path from /usr/local/planetlab to /usr

fix for FC releases that do not have pcitable file

invoke buildnode.sh with fedora core release argument

Hack to make older bootcds create initrds.  Uses mkinitrd shell script.

bool was not a real type in Python <2.3 and had to be marshalled as a
custom type in xmlrpclib. Make sure that bools serialize consistently.

- move InstallBuildVServer.update_vserver_network_files() to
UpdateNodeConfiguration (this is all that InstallBuildVServer usefully
did)
- remove useless InstallBuildVServer step, setting barrier bit has
been done by the vserver-reference initscript since 3.0
- modify update_vserver_network_files() to modify reference images in
new 4.0 location (/vservers/.vref and /vservers/.vcache)

- look for PlanetLab-Bootstrap-<nodegroup>.tar.bz2 in the boot/
  directory, to support rinses by nodegroup (>=4.0 only, which supports
  calling GetNodes() and GetNodeGroups() via BootAPI)

- fix totally broken call canonicalization code, to be only somewhat
  broken

do not dereference symlinks when chowning files back to the SUDO_USER

- use get_partition_path_from_device() to get the path to the first
  partition of a device (under devfs on 2.4, it's /part1, not
  /disc1!). This also checks for cciss device paths..

- fix get_partition_path_from_device() to work with 2.x cds that may or
  may not use devfs

- fix last checkin to just store the full path (e.g.,
  ide/host0/bus0/target0/lun0/disc) of the valid block name instead of
  storing the name of the symlink (e.g., hda)
- ...since vgcreate doesn't follow symlinks (see accompanying checkin to
  InstallPartitionDisks.py)

- fix get_block_device_list() regression
- devfs under 2.4 (old boot cds) used to list partitions in a format
  such as scsi/host0/bus0/target0/lun0/disc and /dev/sda, etc. were just
  symlinks

- handle BootAPI failures gracefully

- always run PlanetLabConf (or conf_files) before booting
- must update /etc/planetlab/session before running conf_files

ata_piix and ahci both claim 8086:2652 and 8086:2653,
and it is usually a non-visible BIOS option that decides
which is appropriate. Just load both.

- recognize SATA classid (0106)

Be more careful in how we remove the PLCONF_DIR, especially for systems
that use the readonly cramfs.

- fix whitespace bug

Fix for cciss devices.  Wrong partition was being quieried when installation was being validated, resulting in the lvm trying to recreate a volume.  Checks correct partition now.

remove useless InstallNodeInit step

Node Manager needs at least PLC_API_HOST and PLC_BOOT_HOST in /etc/planetlab/plc_config

ata_piix and ahci both claim the same chipsets, and it
is usually a non-visible BIOS option that decides which is
appropriate. Prefer ata_piix over ahci for now.

* Change the TEMP_PATH and SYSIMG_PATH to be mounted in /tmp/mnt
  rather than /mnt/tmp

always regenerate initrd before booting in case hardware changes or new kernel is installed

always regenerate initrd before booting in case hardware changes or new kernel is installed

* Add in import for notify_messages

Cleaning up bootmanager :
- None of the three former support-files output is no longer necessary, so
  we obsolete these three components :
   alpina-BootstrapRPM.tar.gz, that was no longer built anyway,
   alpina-BootLVM.tar.gz and
   alpina-PartDisks.tar.gz

dev replaced with udev for mkfedora package checking

Detangled steps.  No step makes calls into another step.

Broke out some functionality into new steps.

Fixed support to adding a new disk to a system.

Modularized code and handled exception handling.

The functionality of this module previously was implemented as a OO Class.
However, as it was never used in the form of an instance, it has been
converted to simply operate as a module with variables and procedures.

Copyright notice for both Intel and Princeton

Fix for adding new disks to system:
 - umount proc to ensure that subsequent lvm modification succeed
 - make lvm extents visible again after lvm modifications
 - switched to using ext2online to extend vserver filesystem across
   newly added lvm extents.

Fix get_block_device_list() function:
- search for well known block device names (sdX, hdX, cciss/cXdX)
  as raw block devices
- run sfdisk against the proper cciss block device names
- use open("w") to determine if a block device is writable,
  rather than running hdparm

support for mkfs.ext2 w/ badblock search

- fix to support /smp model option for rins

Fall back to up kernel if smp model option is set but the smp kernel is not installed

Cleaned up NodeRunStates handling

Cleaned up model option processing

Added support to force the node run state from command line.

- continue to install boot server certs in /mnt/cdrom/bootme for
  backward compatibility with old vserver-reference images

- pass -ff to pvcreate to avoid warning about not being able to
  re-create a physical volume on an existing disk

- In kernel versions <2.6.14, mptscsih is the actual module that should
  be loaded instead of mptbase

- greatly simplify (and fix in the process) parsing of lspci output

- mount /proc in system image before running yum 2.4, which now
  requires it to be mounted

- support version 2 boot CDs that do not have tempfile.NamedTemporaryFile

- implement MakeRequest with DownloadFile, to support environments
  without pycurl

- one second sleep required after wiping partition table on some hardware

- lspci prints blank columns sometimes

- build FC4 based node by default
- need to specify -k to mkfedora to avoid installing vanilla FC4 kernel
- only disable unnecessary services that actually exist (rawdevices is
  deprecated in FC4)

- only disable services that actually exist (rawdevices is deprecated in FC4)

- no longer need yum.conf for node installation

- FC4 initrd /init script (specifically, mkrootdev nash mini-program)
  requires a root= kernel cmdline argument for LVM root boots

- Copy the boot server certificate(s) and GPG public key to /usr/boot

- remove deprecated InstallBase step, which no longer does anything

use BootServerRequest to upload logs to the right server

- install the public debug SSH key, not the private one

- don't delete the bootstrap root so that it can be inspected later

Support to handle /smp model option properly and boot the SMP rather than UNI kernel.

Added support to parse in different model options.  Specifically added support for /smp. Probably should abstract those out into a separate module to make the implementation cleaner.

fix internal bug in calling _nodeNotInstalled function

- make sure python is installed as well before groupinstall

- specify coreutils explicitly because groupinstall does not honor
  Requires(pre) dependencies properly, and most %pre scripts require
  coreutils to be installed first.

Cleaned up version of BootManager.Run() function.
Now uses a simple state machine like implementation to invoke the
state specific functionality.

Programmatic version of creating the cciss devices.

Cleaning out rcfs/ckrm related operations in a backward compatible manner.
- on install do not write out /etc/fstab with /rfcs
- avoid trying to mount or umount /rcfs when it is not there

Doing this in a backwards compatibile manner so that we can still bring up
a PL system with a CKRM enabled kernel in the future (i.e., just for kicks),
although I suppose that will be unlikely.

Need to import BootManagerException or else get a crash.

- specify dev explicitly

moved to v4arch repo

make page header part larger to prevent title wrapping

remove dead end formats (unscalable png, visio, powerpoint) and replace
two graphics (flowchart and sequence diagram) with SVG versions.
regenerate pdf output.

- isolate all the sudo stuff in %clean
- install files necessary to rebuild bootmanager in /usr/share/bootmanager

- support MyPLC customization

- use mkfedora

- bump version number in spec file

regen

more changes to make it fit in new MA terminology

Support "other storage device" PCI class.

Fix to search for drivers that match the full PCI_ID first and then look
for drivers that use PCI_ANY for subdevice and subvendor ids.

more rewording and reorg. to fit into the arch series documents

resize

- run createrepo as well
- if run under sudo, allow user to delete the headers/ and repodata/
  directories

first take at new booting nodes pdn, very largely based off of existing
tech doc for bootmanager. still needs bootcd doc integrated

sequence diagram (original ppt and export png) for use in new booting nodes pdn

- run yum-arch on Bootstrap RPMS directory before using

Updated to work with new merge_hw_tables.merge_files() functionality.

Rewrote merge_files function to handle case when multiple modules claim
they support a partical PCI device.  For example, the 8139cp and 8139too
modules both claim they can handle the generic RTL 8139 eth chipset.

Also incorporate support to distinguish when a driver can only handle
specific subvendor/subdevice IDs.  E.g., the bcm5700 driver currently
does not handle all broadcom devices---some must still be handled by
tg3 (e.g., on the Dell PowerEdge 850).

Added optional filename argument to write_modprobe_config() function for
testing purposes.

implement two changes to better handle, identify, and recover from
situation where no detected network driver is found. this should prevent
machines from installing, and booting, only to become unresponsive due to
no loaded network driver.

the two changes are:
1. write out modprobe.conf at each boot, instead of only after install
2. if no network devices are written to modprobe.conf during boot,
send a message to the tech contacts about missing net driver, and
put the node into debug.

when checking for usable disks, also skip disks starting with dm-
(device mapper, ie lvm)

bump release number

filter out partitions from block devices by using device minor number,
not partition name format

move code block to write out /etc/planetlab/session to ChainBootNode, since
it being in UpdateNodeConfiguration only is called after the first
boot. POD should work immediately after install now.

- bump version number for new release

patch from E Jaffe to fix eth0 config files with mac address (if specified)

support pldistro "variants"

patch from Marc F to optionally pull in extra kexec args from /kargs.txt

update and rebuild docs to reflect readding the api server in the configuration
and new search path for node configuration file