myplc-init-vserver.sh for creating almost empty vservers for myplc-native
[build.git] / vbuild-init-vserver.sh
1 #!/bin/bash
2 # -*-shell-*-
3
4 COMMAND=$(basename $0)
5
6 # lst parsing utilities
7 PATH=$(dirname $0):$PATH . build.common
8
9 function failure () {
10     echo "$COMMAND : Bailing out"
11     exit 1
12 }
13
14 # overwrite vserver's internal yum config from what is in
15 # .distributions/<distrib>/yum/yum.conf and /yum.repos.d 
16
17 function configure_yum_in_vserver () {
18     set -x 
19     set -e 
20     trap failure ERR INT
21
22     vserver=$1; shift
23     fcdistro=$1; shift
24     repo_url=$1; shift
25
26     cd /etc/vservers/.distributions/${fcdistro}
27     if [ -f yum/yum.conf ] ; then
28         echo "Initializing yum.conf in $vserver from $(pwd)/yum"
29         sed -e "s!@YUMETCDIR@!/etc!g;
30                 s!@YUMCACHEDIR@!/var/cache/yum!g;
31                 s!@YUMLOGDIR@!/var/log!g;
32                 s!@YUMLOCKDIR@!/var/lock!g;
33                " yum/yum.conf > /vservers/$vserver/etc/yum.conf
34
35         # post process the various @...@ variables from this yum.conf file.
36     else
37         echo "Using $fcdistro default for yum.conf"
38     fi
39
40     if [ -d yum.repos.d ] ; then
41         echo "Initializing yum.repos.d in $vserver from $(pwd)/yum.repos.d"
42         rm -rf /vservers/$vserver/etc/yum.repos.d
43         tar cf - yum.repos.d | tar -C /vservers/$vserver/etc -xvf -
44     else
45         echo "Cannot initialize yum.repos.d in $vserver"
46     fi
47
48     if [ -n "$MYPLC_MODE" ] ; then
49         if [ ! -d /vservers/$vserver/etc/yum.repos.d ] ; then
50             echo "WARNING : cannot create myplc repo"
51         else
52             cat > /vservers/$vserver/etc/yum.repos.d/myplc.repo <<EOF
53 [myplc]
54 name= MyPLC
55 baseurl=$repo_url
56 enabled=1
57 EOF
58         fi
59     fi
60     cd -
61 }    
62
63 function setup_vserver () {
64
65     set -x
66     set -e
67     trap failure ERR INT
68
69     vserver=$1; shift
70     fcdistro=$1; shift
71     personality=$1; shift
72
73     CLONED=0
74     # create the new vserver
75     if [ ! -d /etc/vservers/$vserver ] ; then
76         # check if we can create the vserver from a reference vserver
77         #if [ -d /vservers/${fcdistro}_reference ] ; then
78         if [ 0 -ne 0 -a -n "$VBUILD_MODE" ] ; then
79             $personality vserver $VERBOSE $vserver build -m clone -- --source /vservers/${fcdistro}_reference
80             CLONED=1
81         else
82             $personality vserver $VERBOSE $vserver build -m yum -- -d $fcdistro
83         fi
84     fi
85
86     if [ ! -z "$personality" ] ; then
87         l32=$(grep $personality /etc/vservers/$vserver/personality | wc -l)
88         [ $l32 -eq 0 ] && echo $personality >> /etc/vservers/$vserver/personality
89     fi
90
91     if [ -n "$VBUILD_MODE" ] ; then 
92     # set up appropriate vserver capabilities to mount, mknod and IPC_LOCK
93         BCAPFILE=/etc/vservers/$vserver/bcapabilities
94         touch $BCAPFILE
95         cap=$(grep ^CAP_SYS_ADMIN /etc/vservers/$vserver/bcapabilities | wc -l)
96         [ $cap -eq 0 ] && echo 'CAP_SYS_ADMIN' >> /etc/vservers/$vserver/bcapabilities
97         cap=$(grep ^CAP_MKNOD /etc/vservers/$vserver/bcapabilities | wc -l)
98         [ $cap -eq 0 ] && echo 'CAP_MKNOD' >> /etc/vservers/$vserver/bcapabilities
99         cap=$(grep ^CAP_IPC_LOCK /etc/vservers/$vserver/bcapabilities | wc -l)
100         [ $cap -eq 0 ] && echo 'CAP_IPC_LOCK' >> /etc/vservers/$vserver/bcapabilities
101     fi
102
103     # start the vserver so we can do the following operations
104     if [ $CLONED -eq 0 ] ; then
105         $personality vyum $vserver -- -y install yum
106         $personality vserver $VERBOSE $vserver pkgmgmt internalize
107     fi
108     $personality vserver $VERBOSE $vserver start
109     $personality vserver $VERBOSE $vserver exec rm -f /var/lib/rpm/__db*
110     $personality vserver $VERBOSE $vserver exec rpm --rebuilddb
111
112     # minimal config in the vserver for yum to work
113     configure_yum_in_vserver $vserver $fcdistro $repo_url
114
115     # set up resolv.conf
116     cp /etc/resolv.conf /vservers/$vserver/etc/resolv.conf
117 }
118
119 function devel_tools () {
120
121     set -x 
122     set -e 
123     trap failure ERR INT
124
125     vserver=$1; shift
126     fcdistro=$1; shift
127     pldistro=$1; shift
128     personality=$1; shift
129
130     # check for .lst file based on pldistro
131     if [ -n "$VBUILD_MODE" ] ; then
132         lst=${pldistro}-devel.lst
133     else
134         lst=${pldistro}-shell.lst
135     fi
136     if [ -f $lst ] ; then
137         echo "$COMMAND: Using $lst"
138     else
139         echo "$COMMAND : Cannot locate $lst - exiting"
140         usage
141     fi
142
143     # install individual packages, then groups
144     packages=$(pl_getPackages2 ${fcdistro} $lst)
145     groups=$(pl_getGroups2 ${fcdistro} $lst)
146
147     [ -n "$packages" ] && $personality vserver $vserver exec yum -y install $packages
148     [ -n "$groups" ] && $personality vserver $vserver exec yum -y groupinstall $groups
149     return 0
150 }
151
152 function post_install () {
153     if [ -n "$VBUILD_MODE" ] ; then
154         post_install_vbuild "$@" 
155     else
156         post_install_myplc "$@"
157     fi
158 }
159
160 function post_install_vbuild () {
161
162     set -x 
163     set -e 
164     trap failure ERR INT
165
166     vserver=$1; shift
167     personality=$1; shift
168
169 ### From myplc-devel-native.spec
170 # be careful to backslash $ in this, otherwise it's the root context that's going to do the evaluation
171     cat << EOF | $personality vserver $VERBOSE $vserver exec bash -x
172     # set up /dev/loop* in vserver
173     for i in \$(seq 0 255) ; do
174         mknod -m 640 /dev/loop\$i b 7 \$i
175     done
176     
177     # create symlink for /dev/fd
178     ln -fs /proc/self/fd /dev/fd
179
180     # modify /etc/rpm/macros to not use /sbin/new-kernel-pkg
181     sed -i 's,/sbin/new-kernel-pkg:,,' /etc/rpm/macros
182     if [ -h "/sbin/new-kernel-pkg" ] ; then
183         filename=\$(readlink -f /sbin/new-kernel-pkg)
184         if [ "\$filename" == "/sbin/true" ] ; then
185                 echo "WARNING: /sbin/new-kernel-pkg symlinked to /sbin/true"
186                 echo "\tmost likely /etc/rpm/macros has /sbin/new-kernel-pkg declared in _netsharedpath."
187                 echo "\tPlease remove /sbin/new-kernel-pkg from _netsharedpath and reintall mkinitrd."
188                 exit 1
189         fi
190     fi
191     
192     # customize root's prompt
193     cat << PROFILE > /root/.profile
194 export PS1="[$vserver] \\w # "
195 PROFILE
196
197     uid=2000
198     gid=2000
199     
200     # add a "build" user to the system
201     builduser=\$(grep "^build:" /etc/passwd | wc -l)
202     if [ \$builduser -eq 0 ] ; then
203         groupadd -o -g \$gid build;
204         useradd -o -c 'Automated Build' -u \$uid -g \$gid -n -M -s /bin/bash build;
205     fi
206
207 # Allow build user to build certain RPMs as root
208     if [ -f /etc/sudoers ] ; then
209         buildsudo=\$(grep "^build.*ALL=(ALL).*NOPASSWD:.*ALL"  /etc/sudoers | wc -l)
210         if [ \$buildsudo -eq 0 ] ; then
211             echo "build   ALL=(ALL)       NOPASSWD: ALL" >> /etc/sudoers
212         fi
213         sed -i 's,^Defaults.*requiretty,#Defaults requiretty,' /etc/sudoers
214     fi
215 #
216 EOF
217
218 }
219
220 function post_install_myplc  () {
221     set -x 
222     set -e 
223     trap failure ERR INT
224
225     vserver=$1; shift
226     personality=$1; shift
227
228 # be careful to backslash $ in this, otherwise it's the root context that's going to do the evaluation
229     cat << EOF | $personality vserver $VERBOSE $vserver exec bash -x
230
231     # customize root's prompt
232     cat << PROFILE > /root/.profile
233 export PS1="[$vserver] \\w # "
234 PROFILE
235
236 EOF
237 }
238
239 COMMAND_VBUILD="vbuild-init-vserver.sh"
240 COMMAND_MYPLC="myplc-init-vserver.sh"
241 function usage () {
242     set +x 
243     echo "Usage: $COMMAND_VBUILD [-s|s|p] [-v] vserver-name distribution pldistro [personality]"
244     echo "Usage: $COMMAND_MYPLC [-s|s|p] [-v] vserver-name distribution pldistro repo-url [personality]"
245     echo "Requirements: you need to have a vserver-compliant kernel,"
246     echo "  as well as the util-vserver RPM installed"
247     echo "Description:"
248     echo "  This command creates a fresh vserver instance"
249     echo "  . vserver-name : the vserver's name"
250     echo "  . distribution : for creating the root filesystem, e.g. fc6"
251     echo "  . pldistro: e.g. onelab"
252     echo "  . repo-url: for myplc vserver, used to create a yum repository"
253     echo "  . personality: last, optional, argument defaults to linux32"
254     echo "This is done in three steps"
255     echo " (*) setup phase : vserver creation, yum internalization and config (from /etc/vservers)"
256     echo " (*) tools install the tools required for building are installed"
257     echo "     based on the folowing file for the actual set of packages and groups"
258     echo "     vbuild mode :  <pldistro>-devel.lst"
259     echo "     myplc mode :   <pldistro>-shell.lst"
260     echo " (*) post-install : various tunings required, as well as create a build user (vbuild only)"
261     echo "Options:"
262     echo " -s : skips the setup phase"
263     echo " -t : skips the tools phase"
264     echo " -p : skips the post-install"
265     echo " -v : passes -v to calls to vserver"
266     exit 1
267 }
268
269 ### parse args and 
270 function main () {
271
272     set -e
273     trap failure ERR INT
274
275     case "$COMMAND" in
276         $COMMAND_VBUILD)
277             VBUILD_MODE=true ;;
278         $COMMAND_MYPLC)
279             MYPLC_MODE=true;;
280         *)
281             usage ;;
282     esac
283
284     DO_SETUP=true
285     DO_TOOLS=true
286     DO_POST=true
287     VERBOSE=
288     while getopts "stpvh" opt ; do
289         case $opt in
290             s) DO_SETUP="" ;;
291             t) DO_TOOLS="" ;;
292             p) DO_POST="" ;;
293             v) VERBOSE="-v" ;;
294             h|*) usage ;;
295         esac
296     done
297         
298     shift $(($OPTIND - 1))
299     
300     [[ -z "$@" ]] && usage
301     vserver=$1 ; shift
302     [[ -z "$@" ]] && usage
303     fcdistro=$1 ; shift
304     [[ -z "$@" ]] && usage
305     pldistro=$1 ; shift
306     if [ -n "$MYPLC_MODE" ] ; then
307         [[ -z "$@" ]] && usage
308         repo_url=$1 ; shift
309     fi
310     if [[ -z "$@" ]] ; then
311         personality=linux32
312     else
313         personality=$1; shift
314     fi
315     [[ -n "$@" ]] && usage
316
317     [ -n "$DO_SETUP" ] && setup_vserver $vserver $fcdistro $personality
318     [ -n "$DO_TOOLS" ] && devel_tools $vserver $fcdistro $pldistro $personality
319     [ -n "$DO_POST" ] && post_install $vserver $personality
320
321 }
322
323 main "$@"