searches lst file in command directory as well
[build.git] / vbuild-init-vserver.sh
1 #!/bin/bash
2 # -*-shell-*-
3
4 COMMAND=$(basename $0)
5 DIRNAME=$(dirname $0)
6
7 # lst parsing utilities
8 PATH=$(dirname $0):$PATH . build.common
9
10 function failure () {
11     echo "$COMMAND : Bailing out"
12     exit 1
13 }
14
15 # overwrite vserver's internal yum config from what is in
16 # .distributions/<distrib>/yum/yum.conf and /yum.repos.d 
17
18 function configure_yum_in_vserver () {
19     set -x 
20     set -e 
21     trap failure ERR INT
22
23     vserver=$1; shift
24     fcdistro=$1; shift
25
26     cd /etc/vservers/.distributions/${fcdistro}
27     if [ -f yum/yum.conf ] ; then
28         echo "Initializing yum.conf in $vserver from $(pwd)/yum"
29         sed -e "s!@YUMETCDIR@!/etc!g;
30                 s!@YUMCACHEDIR@!/var/cache/yum!g;
31                 s!@YUMLOGDIR@!/var/log!g;
32                 s!@YUMLOCKDIR@!/var/lock!g;
33                " yum/yum.conf > /vservers/$vserver/etc/yum.conf
34
35         # post process the various @...@ variables from this yum.conf file.
36     else
37         echo "Using $fcdistro default for yum.conf"
38     fi
39
40     if [ -d yum.repos.d ] ; then
41         echo "Initializing yum.repos.d in $vserver from $(pwd)/yum.repos.d"
42         rm -rf /vservers/$vserver/etc/yum.repos.d
43         tar cf - yum.repos.d | tar -C /vservers/$vserver/etc -xvf -
44     else
45         echo "Cannot initialize yum.repos.d in $vserver"
46     fi
47
48     if [ -n "$MYPLC_MODE" ] ; then
49         if [ ! -d /vservers/$vserver/etc/yum.repos.d ] ; then
50             echo "WARNING : cannot create myplc repo"
51         else
52             # exclude kernel from fedora repos 
53             for i in /vservers/$vserver/etc/yum.repos.d/* ; do
54                 echo "exclude=kernel* ulogd iptables" >> $i
55             done
56             # the build repo is not signed at this stage
57             cat > /vservers/$vserver/etc/yum.repos.d/myplc.repo <<EOF
58 [myplc]
59 name= MyPLC
60 baseurl=$REPO_URL
61 enabled=1
62 gpgcheck=0
63 EOF
64         fi
65     fi
66     cd -
67 }    
68
69 function setup_vserver () {
70
71     set -x
72     set -e
73     trap failure ERR INT
74
75     vserver=$1; shift
76     fcdistro=$1; shift
77     personality=$1; shift
78
79     CLONED=0
80     # create the new vserver
81     if [ ! -d /etc/vservers/$vserver ] ; then
82         # check if we can create the vserver from a reference vserver
83         #if [ -d /vservers/${fcdistro}_reference ] ; then
84         if [ 0 -ne 0 -a -n "$VBUILD_MODE" ] ; then
85             $personality vserver $VERBOSE $vserver build -m clone -- --source /vservers/${fcdistro}_reference
86             CLONED=1
87         else
88             $personality vserver $VERBOSE $vserver build -m yum -- -d $fcdistro
89         fi
90     fi
91
92     if [ ! -z "$personality" ] ; then
93         l32=$(grep $personality /etc/vservers/$vserver/personality | wc -l)
94         [ $l32 -eq 0 ] && echo $personality >> /etc/vservers/$vserver/personality
95     fi
96
97     if [ -n "$VBUILD_MODE" ] ; then 
98     # set up appropriate vserver capabilities to mount, mknod and IPC_LOCK
99         BCAPFILE=/etc/vservers/$vserver/bcapabilities
100         touch $BCAPFILE
101         cap=$(grep ^CAP_SYS_ADMIN /etc/vservers/$vserver/bcapabilities | wc -l)
102         [ $cap -eq 0 ] && echo 'CAP_SYS_ADMIN' >> /etc/vservers/$vserver/bcapabilities
103         cap=$(grep ^CAP_MKNOD /etc/vservers/$vserver/bcapabilities | wc -l)
104         [ $cap -eq 0 ] && echo 'CAP_MKNOD' >> /etc/vservers/$vserver/bcapabilities
105         cap=$(grep ^CAP_IPC_LOCK /etc/vservers/$vserver/bcapabilities | wc -l)
106         [ $cap -eq 0 ] && echo 'CAP_IPC_LOCK' >> /etc/vservers/$vserver/bcapabilities
107     fi
108
109     # start the vserver so we can do the following operations
110     if [ $CLONED -eq 0 ] ; then
111         $personality vyum $vserver -- -y install yum
112         $personality vserver $VERBOSE $vserver pkgmgmt internalize
113     fi
114     $personality vserver $VERBOSE $vserver start
115     $personality vserver $VERBOSE $vserver exec rm -f /var/lib/rpm/__db*
116     $personality vserver $VERBOSE $vserver exec rpm --rebuilddb
117
118     # minimal config in the vserver for yum to work
119     configure_yum_in_vserver $vserver $fcdistro 
120
121     # set up resolv.conf
122     cp /etc/resolv.conf /vservers/$vserver/etc/resolv.conf
123 }
124
125 function devel_tools () {
126
127     set -x 
128     set -e 
129     trap failure ERR INT
130
131     vserver=$1; shift
132     fcdistro=$1; shift
133     pldistro=$1; shift
134     personality=$1; shift
135
136     # check for .lst file based on pldistro
137     if [ -n "$VBUILD_MODE" ] ; then
138         lst=${pldistro}-devel.lst
139     else
140         lst=${pldistro}-shell.lst
141     fi
142     if [ -f $lst ] ; then
143         echo "$COMMAND: Using $lst"
144     elif [ -f $DIRNAME/$lst ] ; then
145         lst=$DIRNAME/$lst
146         echo "$COMMAND: Using $lst"
147     else
148         echo "$COMMAND : Cannot locate $lst - exiting"
149         usage
150     fi
151
152     # install individual packages, then groups
153     packages=$(pl_getPackages2 ${fcdistro} $lst)
154     groups=$(pl_getGroups2 ${fcdistro} $lst)
155
156     [ -n "$packages" ] && $personality vserver $vserver exec yum -y install $packages
157     [ -n "$groups" ] && $personality vserver $vserver exec yum -y groupinstall $groups
158     return 0
159 }
160
161 function post_install () {
162     if [ -n "$VBUILD_MODE" ] ; then
163         post_install_vbuild "$@" 
164     else
165         post_install_myplc "$@"
166     fi
167 }
168
169 function post_install_vbuild () {
170
171     set -x 
172     set -e 
173     trap failure ERR INT
174
175     vserver=$1; shift
176     personality=$1; shift
177
178 ### From myplc-devel-native.spec
179 # be careful to backslash $ in this, otherwise it's the root context that's going to do the evaluation
180     cat << EOF | $personality vserver $VERBOSE $vserver exec bash -x
181     # set up /dev/loop* in vserver
182     for i in \$(seq 0 255) ; do
183         mknod -m 640 /dev/loop\$i b 7 \$i
184     done
185     
186     # create symlink for /dev/fd
187     ln -fs /proc/self/fd /dev/fd
188
189     # modify /etc/rpm/macros to not use /sbin/new-kernel-pkg
190     sed -i 's,/sbin/new-kernel-pkg:,,' /etc/rpm/macros
191     if [ -h "/sbin/new-kernel-pkg" ] ; then
192         filename=\$(readlink -f /sbin/new-kernel-pkg)
193         if [ "\$filename" == "/sbin/true" ] ; then
194                 echo "WARNING: /sbin/new-kernel-pkg symlinked to /sbin/true"
195                 echo "\tmost likely /etc/rpm/macros has /sbin/new-kernel-pkg declared in _netsharedpath."
196                 echo "\tPlease remove /sbin/new-kernel-pkg from _netsharedpath and reintall mkinitrd."
197                 exit 1
198         fi
199     fi
200     
201     # customize root's prompt
202     cat << PROFILE > /root/.profile
203 export PS1="[$vserver] \\w # "
204 PROFILE
205
206     uid=2000
207     gid=2000
208     
209     # add a "build" user to the system
210     builduser=\$(grep "^build:" /etc/passwd | wc -l)
211     if [ \$builduser -eq 0 ] ; then
212         groupadd -o -g \$gid build;
213         useradd -o -c 'Automated Build' -u \$uid -g \$gid -n -M -s /bin/bash build;
214     fi
215
216 # Allow build user to build certain RPMs as root
217     if [ -f /etc/sudoers ] ; then
218         buildsudo=\$(grep "^build.*ALL=(ALL).*NOPASSWD:.*ALL"  /etc/sudoers | wc -l)
219         if [ \$buildsudo -eq 0 ] ; then
220             echo "build   ALL=(ALL)       NOPASSWD: ALL" >> /etc/sudoers
221         fi
222         sed -i 's,^Defaults.*requiretty,#Defaults requiretty,' /etc/sudoers
223     fi
224 #
225 EOF
226
227 }
228
229 function post_install_myplc  () {
230     set -x 
231     set -e 
232     trap failure ERR INT
233
234     vserver=$1; shift
235     personality=$1; shift
236
237 # be careful to backslash $ in this, otherwise it's the root context that's going to do the evaluation
238     cat << EOF | $personality vserver $VERBOSE $vserver exec bash -x
239
240     # customize root's prompt
241     cat << PROFILE > /root/.profile
242 export PS1="[$vserver] \\w # "
243 PROFILE
244
245 EOF
246 }
247
248 COMMAND_VBUILD="vbuild-init-vserver.sh"
249 COMMAND_MYPLC="myplc-init-vserver.sh"
250 function usage () {
251     set +x 
252     echo "Usage: $COMMAND_VBUILD [-s|s|p] [-v] vserver-name distribution pldistro [personality]"
253     echo "Usage: $COMMAND_MYPLC [-s|s|p] [-v] vserver-name distribution pldistro repo-url [personality]"
254     echo "Requirements: you need to have a vserver-compliant kernel,"
255     echo "  as well as the util-vserver RPM installed"
256     echo "Description:"
257     echo "  This command creates a fresh vserver instance"
258     echo "  . vserver-name : the vserver's name"
259     echo "  . distribution : for creating the root filesystem, e.g. fc6"
260     echo "  . pldistro: e.g. onelab"
261     echo "  . repo-url: for myplc vserver, used to create a yum repository"
262     echo "  . personality: last, optional, argument defaults to linux32"
263     echo "This is done in three steps"
264     echo " (*) setup phase : vserver creation, yum internalization and config (from /etc/vservers)"
265     echo " (*) tools install the tools required for building are installed"
266     echo "     based on the folowing file for the actual set of packages and groups"
267     echo "     vbuild mode :  <pldistro>-devel.lst"
268     echo "     myplc mode :   <pldistro>-shell.lst"
269     echo " (*) post-install : various tunings required, as well as create a build user (vbuild only)"
270     echo "Options:"
271     echo " -s : skips the setup phase"
272     echo " -t : skips the tools phase"
273     echo " -p : skips the post-install"
274     echo " -v : passes -v to calls to vserver"
275     exit 1
276 }
277
278 ### parse args and 
279 function main () {
280
281     set -e
282     trap failure ERR INT
283
284     case "$COMMAND" in
285         $COMMAND_VBUILD)
286             VBUILD_MODE=true ;;
287         $COMMAND_MYPLC)
288             MYPLC_MODE=true;;
289         *)
290             usage ;;
291     esac
292
293     DO_SETUP=true
294     DO_TOOLS=true
295     DO_POST=true
296     VERBOSE=
297     while getopts "stpvh" opt ; do
298         case $opt in
299             s) DO_SETUP="" ;;
300             t) DO_TOOLS="" ;;
301             p) DO_POST="" ;;
302             v) VERBOSE="-v" ;;
303             h|*) usage ;;
304         esac
305     done
306         
307     shift $(($OPTIND - 1))
308     
309     [[ -z "$@" ]] && usage
310     vserver=$1 ; shift
311     [[ -z "$@" ]] && usage
312     fcdistro=$1 ; shift
313     [[ -z "$@" ]] && usage
314     pldistro=$1 ; shift
315     if [ -n "$MYPLC_MODE" ] ; then
316         [[ -z "$@" ]] && usage
317         REPO_URL=$1 ; shift
318     fi
319     if [[ -z "$@" ]] ; then
320         personality=linux32
321     else
322         personality=$1; shift
323     fi
324     [[ -n "$@" ]] && usage
325
326     [ -n "$DO_SETUP" ] && setup_vserver $vserver $fcdistro $personality 
327     [ -n "$DO_TOOLS" ] && devel_tools $vserver $fcdistro $pldistro $personality
328     [ -n "$DO_POST" ] && post_install $vserver $personality
329
330 }
331
332 main "$@"