oops - clone cleanup was wrong
[build.git] / vbuild-init-vserver.sh
1 #!/bin/bash
2 # -*-shell-*-
3
4 COMMAND=$(basename $0)
5 DIRNAME=$(dirname $0)
6
7 # lst parsing utilities
8 PATH=$(dirname $0):$PATH . build.common
9
10 function failure () {
11     echo "$COMMAND : Bailing out"
12     exit 1
13 }
14
15 # overwrite vserver's internal yum config from what is in
16 # .distributions/<distrib>/yum/yum.conf and /yum.repos.d 
17
18 function configure_yum_in_vserver () {
19     set -x 
20     set -e 
21     trap failure ERR INT
22
23     vserver=$1; shift
24     fcdistro=$1; shift
25
26     cd /etc/vservers/.distributions/${fcdistro}
27     if [ -f yum/yum.conf ] ; then
28         echo "Initializing yum.conf in $vserver from $(pwd)/yum"
29         sed -e "s!@YUMETCDIR@!/etc!g;
30                 s!@YUMCACHEDIR@!/var/cache/yum!g;
31                 s!@YUMLOGDIR@!/var/log!g;
32                 s!@YUMLOCKDIR@!/var/lock!g;
33                " yum/yum.conf > /vservers/$vserver/etc/yum.conf
34
35         # post process the various @...@ variables from this yum.conf file.
36     else
37         echo "Using $fcdistro default for yum.conf"
38     fi
39
40     if [ -d yum.repos.d ] ; then
41         echo "Initializing yum.repos.d in $vserver from $(pwd)/yum.repos.d"
42         rm -rf /vservers/$vserver/etc/yum.repos.d
43         tar cf - yum.repos.d | tar -C /vservers/$vserver/etc -xvf -
44     else
45         echo "Cannot initialize yum.repos.d in $vserver"
46     fi
47
48     if [ -n "$MYPLC_MODE" ] ; then
49         if [ ! -d /vservers/$vserver/etc/yum.repos.d ] ; then
50             echo "WARNING : cannot create myplc repo"
51         else
52             # exclude kernel from fedora repos 
53             for i in /vservers/$vserver/etc/yum.repos.d/* ; do
54                 echo "exclude=kernel* ulogd iptables" >> $i
55             done
56             # the build repo is not signed at this stage
57             cat > /vservers/$vserver/etc/yum.repos.d/myplc.repo <<EOF
58 [myplc]
59 name= MyPLC
60 baseurl=$REPO_URL
61 enabled=1
62 gpgcheck=0
63 EOF
64         fi
65     fi
66     cd -
67 }    
68
69 function setup_vserver () {
70
71     set -x
72     set -e
73     trap failure ERR INT
74
75     vserver=$1; shift
76     fcdistro=$1; shift
77     personality=$1; shift
78
79     if [ -d /etc/vservers/$vserver ] ; then
80         echo "$COMMAND : vserver $vserver seems to exist - bailing out"
81         exit 1
82     fi
83
84     # create it
85     $personality vserver $VERBOSE $vserver build -m yum -- -d $fcdistro
86
87     if [ ! -z "$personality" ] ; then
88         l32=$(grep $personality /etc/vservers/$vserver/personality | wc -l)
89         [ $l32 -eq 0 ] && echo $personality >> /etc/vservers/$vserver/personality
90     fi
91
92     if [ -n "$VBUILD_MODE" ] ; then 
93     # set up appropriate vserver capabilities to mount, mknod and IPC_LOCK
94         BCAPFILE=/etc/vservers/$vserver/bcapabilities
95         touch $BCAPFILE
96         cap=$(grep ^CAP_SYS_ADMIN /etc/vservers/$vserver/bcapabilities | wc -l)
97         [ $cap -eq 0 ] && echo 'CAP_SYS_ADMIN' >> /etc/vservers/$vserver/bcapabilities
98         cap=$(grep ^CAP_MKNOD /etc/vservers/$vserver/bcapabilities | wc -l)
99         [ $cap -eq 0 ] && echo 'CAP_MKNOD' >> /etc/vservers/$vserver/bcapabilities
100         cap=$(grep ^CAP_IPC_LOCK /etc/vservers/$vserver/bcapabilities | wc -l)
101         [ $cap -eq 0 ] && echo 'CAP_IPC_LOCK' >> /etc/vservers/$vserver/bcapabilities
102     fi
103
104     $personality vyum $vserver -- -y install yum
105     $personality vserver $VERBOSE $vserver pkgmgmt internalize
106
107     # start the vserver so we can do the following operations
108     $personality vserver $VERBOSE $vserver start
109     $personality vserver $VERBOSE $vserver exec rm -f /var/lib/rpm/__db*
110     $personality vserver $VERBOSE $vserver exec rpm --rebuilddb
111
112     # minimal config in the vserver for yum to work
113     configure_yum_in_vserver $vserver $fcdistro 
114
115     # set up resolv.conf
116     cp /etc/resolv.conf /vservers/$vserver/etc/resolv.conf
117 }
118
119 function devel_tools () {
120
121     set -x 
122     set -e 
123     trap failure ERR INT
124
125     vserver=$1; shift
126     fcdistro=$1; shift
127     pldistro=$1; shift
128     personality=$1; shift
129
130     # check for .lst file based on pldistro
131     if [ -n "$VBUILD_MODE" ] ; then
132         lst=${pldistro}-devel.lst
133     else
134         lst=${pldistro}-shell.lst
135     fi
136     if [ -f $lst ] ; then
137         echo "$COMMAND: Using $lst"
138     elif [ -f $DIRNAME/$lst ] ; then
139         lst=$DIRNAME/$lst
140         echo "$COMMAND: Using $lst"
141     else
142         echo "$COMMAND : Cannot locate $lst - exiting"
143         usage
144     fi
145
146     # install individual packages, then groups
147     packages=$(pl_getPackages2 ${fcdistro} $lst)
148     groups=$(pl_getGroups2 ${fcdistro} $lst)
149
150     [ -n "$packages" ] && $personality vserver $vserver exec yum -y install $packages
151     [ -n "$groups" ] && $personality vserver $vserver exec yum -y groupinstall $groups
152     return 0
153 }
154
155 function post_install () {
156     if [ -n "$VBUILD_MODE" ] ; then
157         post_install_vbuild "$@" 
158     else
159         post_install_myplc "$@"
160     fi
161 }
162
163 function post_install_vbuild () {
164
165     set -x 
166     set -e 
167     trap failure ERR INT
168
169     vserver=$1; shift
170     personality=$1; shift
171
172 ### From myplc-devel-native.spec
173 # be careful to backslash $ in this, otherwise it's the root context that's going to do the evaluation
174     cat << EOF | $personality vserver $VERBOSE $vserver exec bash -x
175     # set up /dev/loop* in vserver
176     for i in \$(seq 0 255) ; do
177         mknod -m 640 /dev/loop\$i b 7 \$i
178     done
179     
180     # create symlink for /dev/fd
181     ln -fs /proc/self/fd /dev/fd
182
183     # modify /etc/rpm/macros to not use /sbin/new-kernel-pkg
184     sed -i 's,/sbin/new-kernel-pkg:,,' /etc/rpm/macros
185     if [ -h "/sbin/new-kernel-pkg" ] ; then
186         filename=\$(readlink -f /sbin/new-kernel-pkg)
187         if [ "\$filename" == "/sbin/true" ] ; then
188                 echo "WARNING: /sbin/new-kernel-pkg symlinked to /sbin/true"
189                 echo "\tmost likely /etc/rpm/macros has /sbin/new-kernel-pkg declared in _netsharedpath."
190                 echo "\tPlease remove /sbin/new-kernel-pkg from _netsharedpath and reintall mkinitrd."
191                 exit 1
192         fi
193     fi
194     
195     # customize root's prompt
196     cat << PROFILE > /root/.profile
197 export PS1="[$vserver] \\w # "
198 PROFILE
199
200     uid=2000
201     gid=2000
202     
203     # add a "build" user to the system
204     builduser=\$(grep "^build:" /etc/passwd | wc -l)
205     if [ \$builduser -eq 0 ] ; then
206         groupadd -o -g \$gid build;
207         useradd -o -c 'Automated Build' -u \$uid -g \$gid -n -M -s /bin/bash build;
208     fi
209
210 # Allow build user to build certain RPMs as root
211     if [ -f /etc/sudoers ] ; then
212         buildsudo=\$(grep "^build.*ALL=(ALL).*NOPASSWD:.*ALL"  /etc/sudoers | wc -l)
213         if [ \$buildsudo -eq 0 ] ; then
214             echo "build   ALL=(ALL)       NOPASSWD: ALL" >> /etc/sudoers
215         fi
216         sed -i 's,^Defaults.*requiretty,#Defaults requiretty,' /etc/sudoers
217     fi
218 #
219 EOF
220
221 }
222
223 function post_install_myplc  () {
224     set -x 
225     set -e 
226     trap failure ERR INT
227
228     vserver=$1; shift
229     personality=$1; shift
230
231 # be careful to backslash $ in this, otherwise it's the root context that's going to do the evaluation
232     cat << EOF | $personality vserver $VERBOSE $vserver exec bash -x
233
234     # customize root's prompt
235     cat << PROFILE > /root/.profile
236 export PS1="[$vserver] \\w # "
237 PROFILE
238
239 EOF
240 }
241
242 COMMAND_VBUILD="vbuild-init-vserver.sh"
243 COMMAND_MYPLC="myplc-init-vserver.sh"
244 function usage () {
245     set +x 
246     echo "Usage: $COMMAND_VBUILD [-s|s|p] [-v] vserver-name distribution pldistro [personality]"
247     echo "Usage: $COMMAND_MYPLC [-s|s|p] [-v] vserver-name distribution pldistro repo-url [personality]"
248     echo "Requirements: you need to have a vserver-compliant kernel,"
249     echo "  as well as the util-vserver RPM installed"
250     echo "Description:"
251     echo "  This command creates a fresh vserver instance"
252     echo "  . vserver-name : the vserver's name"
253     echo "  . distribution : for creating the root filesystem, e.g. fc6"
254     echo "  . pldistro: e.g. onelab"
255     echo "  . repo-url: for myplc vserver, used to create a yum repository"
256     echo "  . personality: last, optional, argument defaults to linux32"
257     echo "This is done in three steps"
258     echo " (*) setup phase : vserver creation, yum internalization and config (from /etc/vservers)"
259     echo " (*) tools install the tools required for building are installed"
260     echo "     based on the folowing file for the actual set of packages and groups"
261     echo "     vbuild mode :  <pldistro>-devel.lst"
262     echo "     myplc mode :   <pldistro>-shell.lst"
263     echo " (*) post-install : various tunings required, as well as create a build user (vbuild only)"
264     echo "Options:"
265     echo " -s : skips the setup phase"
266     echo " -t : skips the tools phase"
267     echo " -p : skips the post-install"
268     echo " -v : passes -v to calls to vserver"
269     exit 1
270 }
271
272 ### parse args and 
273 function main () {
274
275     set -e
276     trap failure ERR INT
277
278     case "$COMMAND" in
279         $COMMAND_VBUILD)
280             VBUILD_MODE=true ;;
281         $COMMAND_MYPLC)
282             MYPLC_MODE=true;;
283         *)
284             usage ;;
285     esac
286
287     DO_SETUP=true
288     DO_TOOLS=true
289     DO_POST=true
290     VERBOSE=
291     while getopts "stpvh" opt ; do
292         case $opt in
293             s) DO_SETUP="" ;;
294             t) DO_TOOLS="" ;;
295             p) DO_POST="" ;;
296             v) VERBOSE="-v" ;;
297             h|*) usage ;;
298         esac
299     done
300         
301     shift $(($OPTIND - 1))
302     
303     [[ -z "$@" ]] && usage
304     vserver=$1 ; shift
305     [[ -z "$@" ]] && usage
306     fcdistro=$1 ; shift
307     [[ -z "$@" ]] && usage
308     pldistro=$1 ; shift
309     if [ -n "$MYPLC_MODE" ] ; then
310         [[ -z "$@" ]] && usage
311         REPO_URL=$1 ; shift
312     fi
313     if [[ -z "$@" ]] ; then
314         personality=linux32
315     else
316         personality=$1; shift
317     fi
318     [[ -n "$@" ]] && usage
319
320     [ -n "$DO_SETUP" ] && setup_vserver $vserver $fcdistro $personality 
321     [ -n "$DO_TOOLS" ] && devel_tools $vserver $fcdistro $pldistro $personality
322     [ -n "$DO_POST" ] && post_install $vserver $personality
323
324 }
325
326 main "$@"