script/makepkg

   1 #!/bin/sh
   2
   3 # Load shlib and modules
   4 _root="$(dirname "${0}")"; . "${_root}/lib/env.sh"
   5 want log root
   6
   7 # Dump a list of leaf ports from a working system
   8 # Leaf ports are ports that have nothing depending upon them
   9 # These are generally the top-level ports; everything else should
  10 # be pulled in by them
  11 leaf_ports() {
  12   ( cd /var/db/pkg; ls -1 ) | while read pkg
  13   do
  14     pkg_info -Rq "${pkg}" | grep -q '' || pkg_info -oq "${pkg}"
  15   done | sort
  16 }
  17
  18 ########
  19 #
  20 # Configuration variable setup
  21 #
  22 ########
  23
  24 # Base directory for everything
  25 base_dir="$(realpath "$(dirname "${0}")/../worlds")"
  26
  27 # Directory where distfiles will be stored between builds
  28 dist_dir="${base_dir}/distfiles"
  29
  30 # Final directory for built packages (Outside chroot)
  31 final_pkg_dir="${base_dir}/pkg"
  32 final_bdeps_dir="${base_dir}/bdeps"
  33
  34 # Chroot directory
  35 chroot_dir="${base_dir}/root"
  36
  37 # Package directories, must be under ${chroot_dir}
  38 pkg_dir="${chroot_dir}/pkg"
  39 bdeps_dir="${pkg_dir}/bdeps"
  40
  41 # Compute in-chroot pkg and bdeps dirs
  42 chroot_pkg_dir="${pkg_dir##${chroot_dir}}"
  43 chroot_bdeps_dir="${bdeps_dir##${chroot_dir}}"
  44
  45 # Chroot environment
  46 chroot_env="
  47 USER=root
  48 HOME=/root
  49 LOGNAME=root
  50 PATH=:/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin
  51 SHELL=/bin/sh
  52 TERM=${TERM}
  53 "
  54
  55 # Tempvars
  56 unset _port_config_recursive_cache
  57
  58 ########
  59 #
  60 # Chroot handling
  61 #
  62 ########
  63
  64 # Setup a chroot
  65 chsetup() {
  66   # Necessary mountpoints
  67   mkdir -p "${chroot_dir}/dev" || return 1
  68   mount -t devfs devfs "${chroot_dir}/dev" || return 1
  69   mkdir -p "${chroot_dir}/usr/ports" || return 1
  70   mount -t nullfs -r /usr/ports "${chroot_dir}/usr/ports" || return 1
  71   mkdir -p "${chroot_dir}/var/ports/distfiles" || return 1
  72   mount -t nullfs -w "${dist_dir}" "${chroot_dir}/var/ports/distfiles" || return 1
  73
  74   # Chroot configuration
  75   cp -f /etc/resolv.conf "${chroot_dir}/etc/resolv.conf" || return 1
  76
  77   # Target package directories
  78   mkdir -p "${pkg_dir}" || return 1
  79   mkdir -p "${bdeps_dir}" || return 1
  80 }
  81
  82 # Tear down a chroot
  83 chteardown() {
  84   umount "${chroot_dir}/var/ports/distfiles"
  85   umount "${chroot_dir}/usr/ports"
  86   umount "${chroot_dir}/dev"
  87 }
  88
  89 # Evaluate a command line within the chroot
  90 cheval() {
  91   chroot "${chroot_dir}" env -i ${chroot_env} /bin/sh -c "cd ${chroot_pkg_dir}; ${*}"
  92 }
  93
  94 # Run chrooted make
  95 chmake() {
  96   local port="/usr/ports/${1##/usr/ports/}"
  97   shift
  98   cheval "make -C ${port} ${*}"
  99 }
 100
 101 ########
 102 #
 103 # Port Dependency Tracking
 104 #
 105 ########
 106
 107 # Translate port origin to package name
 108 port2pkg() {
 109   while [ "${1}" ]
 110   do
 111     chmake "${1}" -V PKGNAME
 112     shift
 113   done
 114 }
 115
 116 # Build dependencies (shallow, recursive, package)
 117 port_bdeps() {
 118   while [ "${1}" ]
 119   do
 120     chmake "${1}" build-depends-list | sed -e 's#^/usr/ports/##'
 121     shift
 122   done
 123 }
 124 port_all_bdeps() {
 125   # rdeps for rdeps are rdeps, rdeps for bdeps are bdeps; thus:
 126   ( port_bdeps "${@}"; port_all_rdeps "${@}" ) | while read port
 127   do
 128     port_all_bdeps "${port}"
 129     port_all_rdeps "${port}"
 130   done | sort | uniq
 131 }
 132 pkg_bdeps() {
 133   port2pkg $(port_all_bdeps "${@}")
 134 }
 135
 136 # Runtime dependencies (shallow, recursive, package)
 137 port_rdeps() {
 138   while [ "${1}" ]
 139   do
 140     chmake "${1}" run-depends-list | sed -e 's#^/usr/ports/##'
 141     shift
 142   done
 143 }
 144 port_all_rdeps() {
 145   port_rdeps "${@}" | while read port
 146   do
 147     echo "${port}"
 148     port_all_rdeps "${port}"
 149   done | sort | uniq
 150 }
 151 pkg_rdeps() {
 152   port2pkg $(port_all_rdeps "${@}")
 153 }
 154
 155 # All dependencies (shallow, recursive, package)
 156 port_deps() {
 157   while [ "${1}" ]
 158   do
 159     chmake "${1}" all-depends-list | sed -e 's#^/usr/ports/##'
 160     shift
 161   done
 162 }
 163 port_all_deps() {
 164   port_deps "${@}" | while read port
 165   do
 166     echo "${port}"
 167     port_deps "${port}"
 168   done | sort | uniq
 169 }
 170 pkg_deps() {
 171   port2pkg $(port_all_deps "${@}")
 172 }
 173
 174 ########
 175 #
 176 # Port Configuration Handling
 177 #
 178 ########
 179
 180 # Run make config on a list of ports
 181 port_config() {
 182   while [ "${1}" ]
 183   do
 184     meh "port config ${1}"
 185     chmake "${1}" config < /dev/tty
 186     shift
 187   done
 188 }
 189
 190 # Make config-conditional for a list of ports, and all dependencies
 191 port_config_recursive() {
 192   while [ "${1}" ]
 193   do
 194     # Do not use config-recursive because it computes the depchain first;
 195     # instead, manually compute the depchain after each config to ensure the
 196     # proper depchain is followed. Use config-conditional to avoid dialog
 197     # if the config is already complete. Also use a cache to avoid re-config
 198     # and re-recurse on previously handled port branches.
 199     if echo "${_port_config_recursive_cache}" | grep -qv " ${1} "
 200     then
 201       meh "port config-recursive ${1}"
 202       chmake "${1}" config-conditional < /dev/tty
 203       port_config_recursive $(port_deps "${1}")
 204       _port_config_recursive_cache="${_port_config_recursive_cache} ${1} "
 205     fi
 206     shift
 207   done
 208 }
 209
 210 # Remove saved config for a list of ports
 211 port_rmconfig() {
 212   while [ "${1}" ]
 213   do
 214     meh "port rmconfig ${1}"
 215     chmake "${1}" rmconfig
 216     shift
 217   done
 218 }
 219
 220 # Remove saved config for a list of ports and all dependencies
 221 port_rmconfig_recursive() {
 222   meh "port rmconfig-recursive ${*}"
 223   port_rmconfig $(echo "${@}" $(port_all_deps "${@}") | sort | uniq)
 224 }
 225
 226 # Obliterate saved configuration for all ports
 227 port_rmconfig_all() {
 228   meh "port rmconfig-all"
 229   cheval "cd /var/db/ports; find . -name 'options' -delete; find . -type d | xargs rmdir 2>/dev/null"
 230 }
 231
 232 # Restore port build options from cpio
 233 port_load_config() {
 234   meh "port load-config"
 235   cheval "cd /var/db/ports; cpio -iv"
 236 }
 237
 238 # Dump port build options to cpio
 239 port_save_config() {
 240   meh "port save-config"
 241   cheval "cd /var/db/ports; find . -type d -o -type f -name options | cpio -ovHnewc"
 242 }
 243
 244 ########
 245 #
 246 # Port distfile handling
 247 #
 248 ########
 249
 250 # Recursively retrieve distfiles
 251 port_fetch_recursive() {
 252   while [ "${1}" ]
 253   do
 254     meh "fetch-recursive ${1}"
 255     chmake "${1}" fetch-recursive
 256   done
 257 }
 258
 259 ########
 260 #
 261 # Port building and packaging
 262 #
 263 ########
 264
 265 # Copy in and install dependency packages
 266 port_load_deps() {
 267   local port="${1}"
 268   for pkg in $(port2pkg $(port_all_deps "${port}"))
 269   do
 270     cp -f "${final_bdeps_dir}/${pkg}.tbz" "${bdeps_dir}" 2>/dev/null && meh "Loading dependent ${pkg}"
 271   done
 272   if ls "${bdeps_dir}"/*.tbz >/dev/null 2>&1
 273   then
 274     meh "Installing dependencies"
 275     cheval "cd ${chroot_bdeps_dir}; pkg_add -F *" || wtf "port_load_deps ${port} failed"
 276   fi
 277 }
 278
 279 # Build and install a port
 280 port_build() {
 281   local port="${1}"
 282   meh "Building ${port}"
 283   chmake "${port}" clean build install clean || wtf "port_build ${port} failed"
 284 }
 285
 286 # Package a port
 287 port_package() {
 288   local port="${1}"
 289   meh "Creating rdep package tree for ${port}"
 290   cheval "pkg_create -Rvb $(port2pkg "${port}")" || wtf "port_package ${port} failed"
 291 }
 292
 293 # Package port build dependencies, unless they're already run deps
 294 port_stash_bdeps() {
 295   meh "Stashing unsaved bdeps"
 296   # This doesn't work well, because there can be bdeps that aren't listed as bdeps (bison)
 297   #for pkg in $(pkg_bdeps "${1}")
 298   #do
 299   #  [ ! -f "${pkg_dir}/${pkg}.tbz" ] && cheval "cd ${chroot_bdeps_dir}; pkg_create -vb ${pkg}"
 300   #done
 301   #
 302   # Instead, just save everything that's not already in rdeps as bdeps
 303   for pkg in $(cheval pkg_info | awk '{print $1}')
 304   do
 305     if [ ! -f "${pkg_dir}/${pkg}.tbz" -a ! -f "${bdeps_dir}/${pkg}.tbz" ]
 306     then
 307       cheval "cd ${chroot_bdeps_dir}; pkg_create -vb ${pkg}" || wtf "port_stash_bdeps failed"
 308     fi
 309   done
 310 }
 311
 312 # Copy generated packages out of tree
 313 pkg_final() {
 314   meh "Moving created packages to repo"
 315   ls "${pkg_dir}"/*.tbz >/dev/null 2>&1 && mv -f "${pkg_dir}"/*.tbz "${final_pkg_dir}"
 316   ls "${bdeps_dir}"/*.tbz >/dev/null 2>&1 && mv -f "${bdeps_dir}"/*.tbz "${final_bdeps_dir}"
 317   # link everything into ${bdeps_dir} so we can find it easily later
 318   ( cd "${final_pkg_dir}"; find . -type f | cpio -plu --quiet "${final_bdeps_dir}" )
 319 }
 320
 321 # Delete all installed packages (hope you saved them first)
 322 pkg_delete_all() {
 323   meh "Clearing out installed packages"
 324   cheval "pkg_delete -f \*" || wtf "pkg_delete_all failed"
 325 }
 326
 327 ########
 328 #
 329 # All of the above?
 330 #
 331 ########
 332
 333 # Execute a complete port build, using prebuilt packages to fulfill dependencies when available
 334 # Be sure to chsetup and populate your config before running!
 335 chport() {
 336   local port="${1}"
 337   port_load_deps "${port}"
 338   port_build "${port}"
 339   port_package "${port}"
 340   port_stash_bdeps
 341   pkg_final
 342   pkg_delete_all
 343 }