* tentative merge of the onelab build, be sure to run
[build.git] / planetlab.mk
index 62c1e50..ccb3da6 100644 (file)
 # Mark Huang <mlhuang@cs.princeton.edu>
 # Copyright (C) 2003-2006 The Trustees of Princeton University
 #
-# $Id: planetlab.mk,v 1.47 2007/02/08 00:23:45 mlhuang Exp $
+# $Id: planetlab.mk 1082 2007-11-15 13:49:05Z thierry $
 #
 
 #
 # Required:
 #
 # CVSROOT or package-CVSROOT: CVSROOT to use
-# TAG or package-TAG: CVS tag to use
-# package-MODULE: CVS module name to use
-# package-SPEC: RPM spec file template
+# together with 
+# TAG or package-TAG: CVS tag to use (only with CVSROOT)
+# or
+# SVNPATH or package-SVNPATH: SVNPATH to use
+# Note: do not define both CVSROOT and SVNPATH
+#
+# package-MODULE: name(s) of cvs/svn module(s) needed for building
+# package-SPEC: RPM spec file name
 #
 # Optional:
 #
 # package-RPMFLAGS: Miscellaneous RPM flags
 # package-RPMBUILD: If not rpmbuild
-# package-CVS_RSH: If not ssh
 #
 # Add to ALL if you want the package built as part of the default set.
 #
 
 #
-# Default values
+# Default values -- should be able to override these from command line
 #
-
-CVSROOT := :pserver:anon@cvs.planet-lab.org:/cvs
-TAG := HEAD
-
-# Check if a tag has been checked out
-ifneq ($(wildcard CVS/Root),)
-# Check if we are able to access CVS
-CVSTAG := $(shell cvs status planetlab.mk 2>/dev/null | sed -ne 's/[[:space:]]*Sticky Tag:[[:space:]]*\([^[:space:]]*\).*/\1/p')
-ifneq ($(CVSTAG),)
-CVSROOT := $(shell cat CVS/Root)
-ifeq ($(CVSTAG),(none))
-TAG := HEAD
-else
-TAG := $(CVSTAG)
-endif
-endif
-endif
+HOSTARCH := $(shell uname -i)
+DISTRO := $(shell ./getdistro.sh)
+RELEASE := $(shell ./getrelease.sh)
 
 #
-# kernel
+# load in a release specific tags file
+# Override TAGSFILE from command line to select something else
 #
 
-kernel-x86_64-MODULE := linux-2.6
-kernel-x86_64-RPMFLAGS:= --target x86_64
-kernel-x86_64-SPEC := linux-2.6/scripts/kernel-2.6-planetlab.spec
-#ALL += kernel-x86_64
-
-kernel-i686-MODULE := linux-2.6
-kernel-i686-RPMFLAGS:= --target i686
-kernel-i686-SPEC := linux-2.6/scripts/kernel-2.6-planetlab.spec
-ALL += kernel-i686
-
-kernel-i586-MODULE := linux-2.6
-kernel-i586-RPMFLAGS:= --target i586
-kernel-i586-SPEC := linux-2.6/scripts/kernel-2.6-planetlab.spec
-ALL += kernel-i586
-
-kernel: kernel-i586 kernel-i686
-kernel-clean: kernel-i586-clean kernel-i686-clean
-
-#
-# vnet
 #
-
-vnet-MODULE := vnet
-vnet-SPEC := vnet/vnet.spec
-ALL += vnet
-
-# Build kernel first so we can bootstrap off of its build
-vnet: kernel
-
-#
-# madwifi
+# kernel
 #
+kernel-$(HOSTARCH)-MODULE := Linux-2.6
+kernel-$(HOSTARCH)-SPEC := scripts/kernel-2.6-planetlab.spec
+ifeq ($(HOSTARCH),i386)
+kernel-$(HOSTARCH)-RPMFLAGS:= --target i686
+else
+kernel-$(HOSTARCH)-RPMFLAGS:= --target $(HOSTARCH)
+endif
 
-madwifi-ng-MODULE := madwifi-ng
-madwifi-ng-SPEC := madwifi-ng/madwifi.spec
-ALL += madwifi-ng
+KERNELS += kernel-$(HOSTARCH)
 
-# Build kernel first so we can bootstrap off of its build
-madwifi-ng: kernel
+kernel: $(KERNELS)
+kernel-clean: $(foreach package,$(KERNELS),$(package)-clean)
 
-#
-# ivtv 
-#
-
-#ivtv-MODULE := ivtv
-#ivtv-SPEC := ivtv/ivtv.spec
-#ALL += ivtv
+ALL += $(KERNELS)
 
 #
 # util-vserver
 #
-
 util-vserver-MODULE := util-vserver
-util-vserver-SPEC := util-vserver/util-vserver.spec
+util-vserver-SPEC := util-vserver.spec
 util-vserver-RPMFLAGS:= --without dietlibc
+util-vserver-DEPENDS := libnl
 ALL += util-vserver
 
-#
-# PlanetLabAccounts
-#
-
-PlanetLabAccounts-MODULE := PlanetLabAccounts
-PlanetLabAccounts-SPEC := PlanetLabAccounts/PlanetLabAccounts.spec
-ALL += PlanetLabAccounts
-
 #
 # NodeUpdate
 #
-
 NodeUpdate-MODULE := NodeUpdate
-NodeUpdate-SPEC := NodeUpdate/NodeUpdate.spec
+NodeUpdate-SPEC := NodeUpdate.spec
 ALL += NodeUpdate
 
-#
-# PlanetLabConf
-#
-
-PlanetLabConf-MODULE := PlanetLabConf
-PlanetLabConf-SPEC := PlanetLabConf/PlanetLabConf.spec
-ALL += PlanetLabConf
-
 #
 # ipod
 #
-
-ipod-MODULE := ipod
-ipod-SPEC := ipod/ipod.spec
-ALL += ipod
-
-#
-# sudo
-#
-
-sudo-MODULE := sudo
-sudo-SPEC := sudo/planetlab_sudo.spec
-ALL += sudo
+PingOfDeath-MODULE := PingOfDeath
+PingOfDeath-SPEC := ipod.spec
+ALL += PingOfDeath
 
 #
-# pycurl
-#
-
-pycurl-MODULE := pycurl
-pycurl-SPEC := pycurl/pycurl.spec
-ALL += pycurl
-
+# NodeManager
 #
-# BootServerRequest
-#
-
-BootServerRequest-MODULE := BootServerRequest
-BootServerRequest-SPEC := BootServerRequest/PLBootServerRequest.spec
-ALL += BootServerRequest
-
-#
-# PlanetLabID
-#
-
-PlanetLabID-MODULE := PlanetLabID
-PlanetLabID-SPEC := PlanetLabID/PlanetLabID.spec
-ALL += PlanetLabID
-
-#
-# Node Manager
-#
-
 NodeManager-MODULE := NodeManager
-NodeManager-SPEC := NodeManager/NodeManager.spec
+NodeManager-SPEC := NodeManager.spec
 ALL += NodeManager
 
 #
 # pl_sshd
 #
-
 pl_sshd-MODULE := pl_sshd
-pl_sshd-SPEC := pl_sshd/pl_sshd.spec
+pl_sshd-SPEC := pl_sshd.spec
 ALL += pl_sshd
 
 #
 # libhttpd++: 
 #
-
+# Deprecate when vsys takes over [sapan].
+# keep in build for proper.
+#
 libhttpd++-MODULE := libhttpd++
-libhttpd++-SPEC := libhttpd++/libhttpd++.spec
+libhttpd++-SPEC := libhttpd++.spec
 ALL += libhttpd++
 
 #
 # Proper: Privileged Operations Service
 #
-
 proper-MODULE := proper
-proper-SPEC := proper/proper.spec
+proper-SPEC := proper.spec
+proper-RPMBUILD := sudo bash ./rpmbuild.sh
+# proper uses scripts in util-python for building
+proper-DEPENDS := libhttpd++ util-python
 ALL += proper
 
-proper: libhttpd++
-
 #
-# MySQL
+# CoDemux: Port 80 demux
 #
-
-mysql-MODULE := mysql
-mysql-SPEC := mysql/mysql.spec
-ALL += mysql
+CoDemux-MODULE := CoDemux
+CoDemux-SPEC   := codemux.spec
+CoDemux-RPMBUILD := sudo bash ./rpmbuild.sh
+ALL += CoDemux
 
 #
 # ulogd
 #
-
 ulogd-MODULE := ulogd
-ulogd-SPEC := ulogd/ulogd.spec
+ulogd-SPEC := ulogd.spec
+ulogd-DEPENDS := $(KERNELS) proper
 ALL += ulogd
 
-ulogd: kernel proper mysql
-
 #
-# netflow
+# PlanetFlow
 #
-
-netflow-MODULE := netflow
-netflow-SPEC := netflow/netflow.spec
-ALL += netflow
-
-netflow: mysql
+PlanetFlow-MODULE := PlanetFlow
+PlanetFlow-SPEC := netflow.spec
+PlanetFlow-SPECVARS := distroname=$(DISTRO) distrorelease=$(RELEASE)
+ALL += PlanetFlow
 
 #
 # PlanetLab Mom: Cleans up your mess
 #
-
-pl_mom-MODULE := pl_mom
-pl_mom-SPEC := pl_mom/pl_mom.spec
-ALL += pl_mom
+Mom-MODULE := Mom
+Mom-SPEC := pl_mom.spec
+ALL += Mom
 
 #
 # iptables
 #
-
 iptables-MODULE := iptables
-iptables-SPEC := iptables/iptables.spec
+iptables-SPEC := iptables.spec
+iptables-DEPENDS := $(KERNELS)
 ALL += iptables
 
-iptables: kernel
-
 #
 # iproute
 #
-
 iproute-MODULE := iproute2
-iproute-SPEC := iproute2/iproute.spec
+iproute-SPEC := iproute.spec
 ALL += iproute
 
-#
-# kexec-tools
-#
-
-kexec-tools-MODULE := kexec-tools
-kexec-tools-SPEC := kexec-tools/kexec-tools.spec
-ALL += kexec-tools
-
 #
 # util-python
 #
-
+# [marc]    deprecate with proper
+#
 util-python-MODULE := util-python
-util-python-SPEC := util-python/util-python.spec
+util-python-SPEC := util-python.spec
 ALL += util-python
 
-# proper and util-vserver both use scripts in util-python for building
-proper: util-python
-util-vserver: util-python
-PlanetLabAuth: util-python
+#
+# vsys
+#
+vsys-MODULE := vsys
+vsys-SPEC := vsys.spec
+ifeq ($(DISTRO),"Fedora")
+ifeq ($(RELEASE),7)
+ALL += vsys
+endif
+endif
 
 #
 # PLCAPI
 #
-
-PLCAPI-MODULE := new_plc_api
-PLCAPI-SPEC := new_plc_api/PLCAPI.spec
+PLCAPI-MODULE := PLCAPI
+PLCAPI-SPEC := PLCAPI.spec
 ALL += PLCAPI
 
 #
-# vserver-reference
+# PLCWWW
 #
+PLCWWW-MODULE := WWW
+PLCWWW-SPEC := PLCWWW.spec
+ALL += PLCWWW
 
-vserver-reference-MODULE := vserver-reference build
-vserver-reference-SPEC := vserver-reference/vserver-reference.spec
+#
+# BootManager
+#
+BootManager-MODULE := BootManager build
+BootManager-SPEC := bootmanager.spec
 # Package must be built as root
-vserver-reference-RPMBUILD := sudo rpmbuild
-ALL += vserver-reference
+BootManager-RPMBUILD := sudo bash ./rpmbuild.sh
+ALL += BootManager
 
-# vserver-reference may require current packages
-vserver-reference: $(filter-out vserver-reference,$(ALL))
+# we do not want BootCD to depend on vserver-reference, do we ?
+ALL-REGULARS := $(ALL)
 
 #
-# bootmanager
+# vserver-reference
 #
-
-bootmanager-MODULE := bootmanager build
-bootmanager-SPEC := bootmanager/bootmanager.spec
-bootmanager-RPMBUILD := sudo rpmbuild
-ALL += bootmanager
-
-# bootmanager requires current packages
-bootmanager: $(filter-out bootmanager,$(ALL))
-
-# ...and the yum manifest
-bootmanager: RPMS/yumgroups.xml
+VserverReference-MODULE := VserverReference build
+VserverReference-SPEC := vserver-reference.spec
+# Package must be built as root
+VserverReference-RPMBUILD := sudo bash ./rpmbuild.sh
+# package requires all regular packages
+VserverReference-DEPENDS := $(ALL-REGULARS)
+VserverReference-DEPENDFILES := RPMS/yumgroups.xml
+ALL += VserverReference
 
 #
-# bootcd
+# BootCD
 #
+BootCD-MODULE := BootCD BootManager build
+BootCD-SPEC := bootcd.spec
+BootCD-RPMBUILD := sudo bash ./rpmbuild.sh
+# package has *some* dependencies, at least these ones
+BootCD-DEPENDS := $(KERNELS)
+BootCD-DEPENDFILES := RPMS/yumgroups.xml
+ALL += BootCD
 
-bootcd-MODULE := bootcd build bootmanager
-bootcd-SPEC := bootcd/bootcd.spec
-bootcd-RPMBUILD := sudo rpmbuild
-ALL += bootcd
-
-# bootcd requires current packages
-bootcd: $(filter-out bootcd,$(ALL))
+#
+# BootstrapFS
+#
+BootstrapFS-MODULE := BootstrapFS build
+BootstrapFS-SPEC := bootstrapfs.spec
+BootstrapFS-RPMBUILD := sudo bash ./rpmbuild.sh
+# package requires all regular packages
+BootstrapFS-DEPENDS := $(ALL-REGULARS)
+BootstrapFS-DEPENDFILES := RPMS/yumgroups.xml
+ALL += BootstrapFS
 
 #
 # MyPLC
 #
-
-myplc-MODULE := build myplc new_plc_www plc/scripts
-myplc-SPEC := myplc/myplc.spec
+MyPLC-MODULE := MyPLC build
+MyPLC-SPEC := myplc.spec
 # Package must be built as root
-myplc-RPMBUILD := sudo rpmbuild
-ALL += myplc
-
-# MyPLC may require current packages
-myplc: $(filter-out myplc,$(ALL))
-
-# ...and the yum manifest
-myplc: RPMS/yumgroups.xml
+MyPLC-RPMBUILD := sudo bash ./rpmbuild.sh
+# MyPLC may require all packages
+MyPLC-DEPENDS := $(filter-out MyPLC,$(ALL))
+MyPLC-DEPENDFILES := RPMS/yumgroups.xml
+ALL += MyPLC
 
 #
-# MyPLC development environment
+# MyPLC native
 #
-
-myplc-devel-MODULE := build myplc
-myplc-devel-SPEC := myplc/myplc-devel.spec
+MyPLC-native-MODULE := MyPLC build 
+MyPLC-native-SPEC := myplc-native.spec
 # Package must be built as root
-myplc-devel-RPMBUILD := sudo rpmbuild
-ALL += myplc-devel
+MyPLC-native-RPMBUILD := sudo bash ./rpmbuild.sh
+# Thierry : I don't think we depend on these at build-time
+#MyPLC-native-DEPENDS := $(MyPLC-DEPENDS)
+# Thierry : dunno about this one, let's stay safe
+MyPLC-native-DEPENDFILES := $(MyPLC-DEPENDFILES)
+#ALL += MyPLC-native
 
 #
-# Installation rules
-# 
-
-# Upload packages to boot server
-SERVER := build@boot.planet-lab.org
-ARCHIVE := /plc/data/var/www/html/install-rpms/archive
-
-# Put nightly alpha builds in a subdirectory
-ifeq ($(TAG),HEAD)
-ARCHIVE := $(ARCHIVE)/planetlab-alpha
-REPOS := /plc/data/var/www/html/install-rpms/planetlab-alpha
-endif
+# MyPLC development environment
+#
+MyPLC-devel-MODULE := MyPLC build 
+MyPLC-devel-SPEC := myplc-devel.spec
+MyPLC-devel-RPMBUILD := sudo bash ./rpmbuild.sh
+#ALL += MyPLC-devel
 
-RPMS/yumgroups.xml:
-       install -D -m 644 groups/v3_yumgroups.xml RPMS/yumgroups.xml
+#
+# MyPLC native development environment
+#
+MyPLC-devel-native-MODULE := MyPLC
+MyPLC-devel-native-SPECVARS := distroname=$(DISTRO) distrorelease=$(RELEASE)
+MyPLC-devel-native-SPEC := myplc-devel-native.spec
+#ALL += MyPLC-devel-native
 
-install:
-ifeq ($(BASE),)
-       @echo make install is only meant to be called from ./build.sh
-else
-ifneq ($(wildcard /etc/planetlab/secring.gpg),)
-        # Sign all RPMS. setsid detaches rpm from the terminal,
-        # allowing the (hopefully blank) GPG password to be entered
-        # from stdin instead of /dev/tty. Obviously, the build server
-        # should be secure.
-       echo | setsid rpm \
-       --define "_signature gpg" \
-       --define "_gpg_path /etc/planetlab" \
-       --define "_gpg_name PlanetLab <info@planet-lab.org>" \
-       --resign RPMS/*/*.rpm
-endif
-ifneq ($(BUILDS),)
-        # Remove old runs
-       echo "cd $(ARCHIVE) && ls -t | sed -n $(BUILDS)~1p | xargs rm -rf" | ssh $(SERVER) /bin/bash -s
-endif
-        # Create package manifest
-       sh ./packages.sh -b "http://build.planet-lab.org/$(subst $(HOME)/,,$(shell pwd))/RPMS" RPMS > packages.xml
-        # Update yum metadata
-       yum-arch RPMS >/dev/null
-       createrepo -g yumgroups.xml RPMS >/dev/null
-        # Populate repository
-       rsync \
-       --exclude '*-debuginfo-*' \
-       --recursive --links --perms --times --group --compress --rsh=ssh \
-       RPMS $(SERVER):$(ARCHIVE)/$(BASE)
-ifeq ($(TAG),HEAD)
-        # Update nightly alpha symlink if it does not exist or is broken, or it is Monday
-       if ! ssh $(SERVER) "[ -e $(REPOS) ] && exit 0 || exit 1" || [ "$(shell date +%A)" = "Monday" ] ; then \
-           ssh $(SERVER) ln -nsf $(ARCHIVE)/$(BASE) $(REPOS) ; \
-       fi
-endif
-endif
+#
+# libnl
+#
+# [daniel]    wait for latest Fedora release 
+# (03:29:46 PM) daniel_hozac: interfacing with the kernel directly when dealing with netlink was fugly, so... i had to find something nicer.
+# (03:29:53 PM) daniel_hozac: the one in Fedora is lacking certain APIs i need.
+#
+libnl-MODULE := libnl
+libnl-SPEC := libnl.spec
+ALL += libnl
 
-.PHONY: install