tools/build/Makefile

   1 # $FreeBSD$
   2
   3 .PATH: ${.CURDIR}/../../include
   4
   5 LIB=            egacy
   6 SRC=
   7 INCSGROUPS=     INCS SYSINCS CASPERINC UFSINCS FFSINCS MSDOSFSINCS DISKINCS
   8 INCSGROUPS+=    MACHINESYSINCS RPCINCS
   9 INCS=
  10
  11 SYSINCSDIR=     ${INCLUDEDIR}/sys
  12 CASPERINCDIR=   ${INCLUDEDIR}/casper
  13 # Also add ufs/ffs/msdosfs/disk headers to allow building makefs as a bootstrap tool
  14 UFSINCSDIR=     ${INCLUDEDIR}/ufs/ufs
  15 FFSINCSDIR=     ${INCLUDEDIR}/ufs/ffs
  16 MSDOSFSINCSDIR= ${INCLUDEDIR}/fs/msdosfs
  17 DISKINCSDIR=    ${INCLUDEDIR}/sys/disk
  18 MACHINESYSINCSDIR=      ${INCLUDEDIR}/machine
  19 RPCINCSDIR=     ${INCLUDEDIR}/rpc
  20
  21 BOOTSTRAPPING?= 0
  22
  23
  24 .if ${.MAKE.OS} == "Darwin"
  25 _XCODE_ROOT!=xcode-select -p
  26 # since macOS 10.14 C headers are no longer installed in /usr but only
  27 # provided via the SDK
  28 .if ${_XCODE_ROOT} == "/Library/Developer/CommandLineTools"
  29 # Only command line tools installed -> host headers are in the SDKs directory
  30 _MACOS_SDK_DIR=${_XCODE_ROOT}/SDKs/MacOSX.sdk/
  31 .else
  32 # Full XCode installed -> host headers are below Platforms/MacOSX.platform
  33 _MACOS_SDK_DIR=${_XCODE_ROOT}/Platforms/MacOSX.platform/Developer/SDKs/MacOSX.sdk
  34 .endif
  35 HOST_INCLUDE_ROOT=${_MACOS_SDK_DIR}/usr/include
  36 .if !exists(${HOST_INCLUDE_ROOT}/stdio.h)
  37 .error You must install the macOS SDK (try xcode-select --install)
  38 .endif
  39 .else
  40 HOST_INCLUDE_ROOT=/usr/include
  41 .endif
  42
  43 # Allow building libc-internal files (also on non-FreeBSD hosts)
  44 CFLAGS+=        -I${.CURDIR}/libc-bootstrap
  45 # Symbol versioning is not required for -legacy (and macOS bootstrap)
  46 MK_SYMVER=      no
  47
  48 _WITH_PWCACHEDB!= grep -c pwcache_groupdb ${HOST_INCLUDE_ROOT}/grp.h || true
  49 .if ${_WITH_PWCACHEDB} == 0
  50 .PATH: ${.CURDIR}/../../contrib/libc-pwcache
  51 CFLAGS.pwcache.c+=      -I${.CURDIR}/../../contrib/libc-pwcache
  52 SRCS+=          pwcache.c
  53 .endif
  54
  55 _WITH_STRSVIS!= grep -c strsvis ${HOST_INCLUDE_ROOT}/vis.h 2>/dev/null || true
  56 .if ${_WITH_STRSVIS} == 0
  57 .PATH: ${.CURDIR}/../../contrib/libc-vis
  58 INCS+=          vis.h
  59 SRCS+=          vis.c unvis.c
  60 CFLAGS.vis.c+=  -I${.CURDIR}/../../contrib/libc-vis -DHAVE_VIS=0 -DHAVE_SVIS=0
  61 CFLAGS.unvis.c+=        -I${.CURDIR}/../../contrib/libc-vis -DHAVE_VIS=0 -DHAVE_SVIS=0
  62 .endif
  63
  64 _WITH_REALLOCARRAY!= grep -c reallocarray ${HOST_INCLUDE_ROOT}/stdlib.h || true
  65 .if ${_WITH_REALLOCARRAY} == 0
  66 .PATH: ${.CURDIR}/../../lib/libc/stdlib
  67 INCS+=          stdlib.h
  68 SRCS+=          reallocarray.c
  69 .endif
  70
  71 .if exists(${HOST_INCLUDE_ROOT}/sys/stat.h)
  72 _WITH_UTIMENS!= grep -c utimensat ${HOST_INCLUDE_ROOT}/sys/stat.h || true
  73 .else
  74 _WITH_UTIMENS= 0
  75 .endif
  76 .if ${_WITH_UTIMENS} == 0
  77 SYSINCS+=       stat.h
  78 SRCS+=          futimens.c utimensat.c
  79 .endif
  80
  81 _WITH_EXPLICIT_BZERO!= cat ${HOST_INCLUDE_ROOT}/strings.h ${HOST_INCLUDE_ROOT}/string.h | grep -c explicit_bzero || true
  82 .if ${_WITH_EXPLICIT_BZERO} == 0
  83 # .PATH: ${SRCTOP}/sys/libkern
  84 # Adding sys/libkern to .PATH breaks building the cross-build compat library
  85 # since that attempts to build strlcpy.c from libc and adding libkern here will
  86 # cause it to pick the file from libkern instead (which won't compile).
  87 # Avoid modifying .PATH by creating a copy in the build directory instead.
  88 explicit_bzero.c: ${SRCTOP}/sys/libkern/explicit_bzero.c
  89         cp ${.ALLSRC} ${.TARGET}
  90 CLEANFILES+=    explicit_bzero.c
  91 INCS+=          strings.h
  92 SRCS+=          explicit_bzero.c
  93 .endif
  94
  95 _WITH_FSPACECTL!= grep -c fspacectl ${HOST_INCLUDE_ROOT}/fcntl.h || true
  96 .if ${_WITH_FSPACECTL} == 0
  97 INCS+=          fcntl.h
  98 SRCS+=          fspacectl.c
  99 .endif
 100
 101 .if exists(${HOST_INCLUDE_ROOT}/capsicum_helpers.h)
 102 _WITH_CAPH_ENTER!= grep -c caph_enter ${HOST_INCLUDE_ROOT}/capsicum_helpers.h || true
 103 _WITH_CAPH_RIGHTS_LIMIT!= grep -c caph_rights_limit ${HOST_INCLUDE_ROOT}/capsicum_helpers.h || true
 104 .endif
 105 .if !defined(_WITH_CAPH_ENTER) || ${_WITH_CAPH_ENTER} == 0 || ${_WITH_CAPH_RIGHTS_LIMIT} == 0
 106 .PATH: ${SRCTOP}/lib/libcapsicum
 107 INCS+=          capsicum_helpers.h
 108 .PATH: ${SRCTOP}/lib/libcasper/libcasper
 109 INCS+=          libcasper.h
 110 .endif
 111
 112 # rpcgen should build against the source tree rpc/types.h and not the host.
 113 # This is especially important on non-FreeBSD systems where the types may
 114 # not match.
 115 RPCINCS+=       ${SRCTOP}/sys/rpc/types.h
 116
 117 INCS+=  ${SRCTOP}/include/mpool.h
 118 INCS+=  ${SRCTOP}/include/ndbm.h
 119 INCS+=  ${SRCTOP}/include/err.h
 120 INCS+=  ${SRCTOP}/include/stringlist.h
 121
 122 # Needed to build arc4random.c
 123 INCSGROUPS+=    CHACHA20INCS
 124 CHACHA20INCSDIR=        ${INCLUDEDIR}/crypto/chacha20
 125 CHACHA20INCS+=  ${SRCTOP}/sys/crypto/chacha20/_chacha.h \
 126         ${SRCTOP}/sys/crypto/chacha20/chacha.h
 127
 128 .if ${MACHINE} == "host"
 129 _host_arch= ${_HOST_ARCH}
 130 .else
 131 _host_arch=${MACHINE}
 132 .endif
 133 .if ${_host_arch} == "x86_64"
 134 # bmake on Linux/mac often prints that instead of amd64
 135 _host_arch=amd64
 136 .elif ${_host_arch} == "aarch64"
 137 # Linux calls arm64, aarch64, across the board
 138 _host_arch=arm64
 139 .elif ${_host_arch:Mppc*}
 140 _host_arch=powerpc
 141 .endif
 142 .if ${_host_arch} == "unknown"
 143 # HACK: If MACHINE is unknown, assume we are building on x86
 144 _host_arch=amd64
 145 .endif
 146 MACHINESYSINCS+=        ${SRCTOP}/sys/${_host_arch}/include/elf.h
 147 .if ${_host_arch} == "amd64" || ${_host_arch} == "i386"
 148 INCSGROUPS+=    X86INCS
 149 X86INCSDIR=     ${INCLUDEDIR}/x86
 150 X86INCS+=       ${SRCTOP}/sys/x86/include/elf.h
 151 .endif
 152
 153 # needed for btxld:
 154 MACHINESYSINCS+=        ${SRCTOP}/sys/${_host_arch}/include/exec.h
 155 MACHINESYSINCS+=        ${SRCTOP}/sys/${_host_arch}/include/reloc.h
 156 INCS+=  ${SRCTOP}/include/a.out.h
 157 INCS+=  ${SRCTOP}/include/nlist.h
 158 SYSINCS+=       ${SRCTOP}/sys/sys/imgact_aout.h
 159 SYSINCS+=       ${SRCTOP}/sys/sys/nlist_aout.h
 160
 161 # macOS's bitstring lacks FreeBSD-specific additions used by makefs's ZFS code
 162 # and Linux doesn't have it at all.  Older FreeBSD versions lack recent
 163 # additions.
 164 INCS+=  ${SRCTOP}/include/bitstring.h
 165 SYSINCS+=       ${SRCTOP}/sys/sys/bitstring.h
 166
 167 .if ${.MAKE.OS} != "FreeBSD"
 168 .PATH: ${.CURDIR}/cross-build
 169
 170 # Needed by our sys/types.h wrapper
 171 SYSINCS+=       ${SRCTOP}/sys/sys/bitcount.h
 172
 173 # dbopen() behaves differently on Linux and FreeBSD so we ensure that we
 174 # bootstrap the FreeBSD db code. The cross-build headers #define dbopen() to
 175 # __freebsd_dbopen() so that we don't ever use the host version
 176 INCS+=  ${SRCTOP}/include/db.h
 177 LIBC_SRCTOP=    ${SRCTOP}/lib/libc/
 178 .include "${LIBC_SRCTOP}/db/Makefile.inc"
 179 # Do the same as we did for dbopen() for getopt() on since it's not compatible
 180 # on Linux (and to avoid surprises also compile the FreeBSD code on macOS)
 181 .PATH: ${LIBC_SRCTOP}/stdlib
 182 SRCS+=  getopt.c getopt_long.c
 183 INCS+=   ${SRCTOP}/include/getopt.h
 184
 185 # getcap.c is needed for cap_mkdb:
 186 .PATH: ${LIBC_SRCTOP}/gen
 187 SRCS+=  getcap.c
 188 # Glibc does not provide all err*/warn* functions, and for macOS we need the
 189 # alias with the extra underscore.
 190 SRCS+=  err.c
 191 # Add various libbc functions that are not available in glibc:
 192 SRCS+=  stringlist.c setmode.c
 193 SRCS+=  strtonum.c merge.c heapsort.c reallocf.c
 194 .PATH: ${LIBC_SRCTOP}/locale
 195 SRCS+=  rpmatch.c
 196
 197 .if ${.MAKE.OS} == "Linux"
 198 # On Linux, glibc does not provide strlcpy,strlcat or strmode.
 199 .PATH: ${LIBC_SRCTOP}/string
 200 SRCS+=  strlcpy.c strlcat.c strmode.c
 201 # On Linux, glibc provides ffs* but not fls*
 202 SRCS+=  fls.c flsl.c flsll.c
 203 # Compile the fgetln/fgetwln/closefrom fallback code from libbsd:
 204 SRCS+=  fgetln_fallback.c fgetwln_fallback.c closefrom.c
 205 CFLAGS.closefrom.c+=    -DSTDC_HEADERS -DHAVE_SYS_DIR_H -DHAVE_DIRENT_H \
 206         -DHAVE_DIRFD -DHAVE_SYSCONF
 207 # Provide getprogname/setprograme
 208 SRCS+=  progname.c
 209 # Stub implementations of fflagstostr/strtofflags
 210 SRCS+=  fflags.c
 211
 212 .endif # ${MAKE.OS} == "Linux"
 213
 214 .if ${.MAKE.OS} == "Darwin"
 215 # Standalone implementation of secure_getenv(), not available on MacOS.
 216 SRCS+=  secure_getenv.c
 217 .endif # ${MAKE.OS} == "Darwin"
 218
 219 # Provide the same arc4random implementation on Linux/macOS
 220 CFLAGS.arc4random.c+=   -I${SRCTOP}/sys/crypto/chacha20 -D__isthreaded=1
 221 SRCS+=  arc4random.c arc4random_uniform.c
 222
 223 # expand_number() is not provided by either Linux or MacOS libutil
 224 .PATH: ${SRCTOP}/lib/libutil
 225 SRCS+=  expand_number.c
 226 # Linux libutil also doesn't have fparseln
 227 SRCS+=  fparseln.c
 228 # A dummy sysctl for tzsetup:
 229 SRCS+=  fake_sysctl.c
 230
 231 # capsicum support
 232 SYSINCS+=       ${SRCTOP}/sys/sys/capsicum.h
 233 SYSINCS+=       ${SRCTOP}/sys/sys/caprights.h
 234 SRCS+=  capsicum_stubs.c
 235 # XXX: we can't add ${SRCTOP}/sys/kern to .PATH since that will causes
 236 # conflicts with other files. Instead copy subr_capability to the build dir.
 237 subr_capability.c: ${SRCTOP}/sys/kern/subr_capability.c
 238         cp ${.ALLSRC} ${.TARGET}
 239 SRCS+=  subr_capability.c
 240 CLEANFILES+=    subr_capability.c
 241 .endif # ${MAKE.OS} != "FreeBSD"
 242
 243 CASPERINC+=     ${SRCTOP}/lib/libcasper/services/cap_fileargs/cap_fileargs.h
 244 CASPERINC+=     ${SRCTOP}/lib/libcasper/services/cap_net/cap_net.h
 245
 246 .if empty(SRCS)
 247 SRCS=           dummy.c
 248 .endif
 249
 250 .if defined(CROSS_BUILD_TESTING)
 251 SUBDIR=         cross-build
 252 .endif
 253
 254 # To allow bootstrapping makefs on FreeBSD 11 or non-FreeBSD systems:
 255 UFSINCS+=       ${SRCTOP}/sys/ufs/ufs/dinode.h
 256 UFSINCS+=       ${SRCTOP}/sys/ufs/ufs/dir.h
 257 FFSINCS+=       ${SRCTOP}/sys/ufs/ffs/fs.h
 258
 259 MSDOSFSINCS+=   ${SRCTOP}/sys/fs/msdosfs/bootsect.h
 260 MSDOSFSINCS+=   ${SRCTOP}/sys/fs/msdosfs/bpb.h
 261 MSDOSFSINCS+=   ${SRCTOP}/sys/fs/msdosfs/denode.h
 262 MSDOSFSINCS+=   ${SRCTOP}/sys/fs/msdosfs/direntry.h
 263 MSDOSFSINCS+=   ${SRCTOP}/sys/fs/msdosfs/fat.h
 264 MSDOSFSINCS+=   ${SRCTOP}/sys/fs/msdosfs/msdosfsmount.h
 265 DISKINCS+=      ${SRCTOP}/sys/sys/disk/bsd.h
 266
 267 # Needed to build config (since it uses libnv)
 268 SYSINCS+=       ${SRCTOP}/sys/sys/nv.h ${SRCTOP}/sys/sys/cnv.h \
 269                 ${SRCTOP}/sys/sys/dnv.h ${SRCTOP}/sys/sys/nv_namespace.h
 270
 271 # Needed when bootstrapping ldd (since it uses DF_1_PIE)
 272 SYSINCS+=       ${SRCTOP}/sys/sys/elf32.h
 273 SYSINCS+=       ${SRCTOP}/sys/sys/elf64.h
 274 SYSINCS+=       ${SRCTOP}/sys/sys/elf_common.h
 275 SYSINCS+=       ${SRCTOP}/sys/sys/elf_generic.h
 276 SYSINCS+=       ${SRCTOP}/sys/sys/queue.h
 277 SYSINCS+=       ${SRCTOP}/sys/sys/md5.h
 278 SYSINCS+=       ${SRCTOP}/sys/sys/sbuf.h
 279 SYSINCS+=       ${SRCTOP}/sys/sys/tree.h
 280
 281 # vtfontcvt is using sys/font.h
 282 SYSINCS+=       ${SRCTOP}/sys/sys/font.h
 283 # For mkscrfil.c:
 284 SYSINCS+=       ${SRCTOP}/sys/sys/consio.h
 285 # for gencat:
 286 INCS+=  ${SRCTOP}/include/nl_types.h
 287 # for vtfontcvt:
 288 SYSINCS+=       ${SRCTOP}/sys/sys/fnv_hash.h
 289 # opensolaris compatibility
 290 INCS+=  ${SRCTOP}/include/elf.h
 291 SYSINCS+=       ${SRCTOP}/sys/sys/elf.h
 292 SYSINCS+=       ${SRCTOP}/sys/sys/ctf.h
 293
 294 # We want to run the build with only ${WORLDTMP} in $PATH to ensure we don't
 295 # accidentally run tools that are incompatible but happen to be in $PATH.
 296 # This is especially important when building on Linux/MacOS where many of the
 297 # programs used during the build accept different flags or generate different
 298 # output. On those platforms we only symlink the tools known to be compatible
 299 # (e.g. basic utilities such as mkdir) into ${WORLDTMP} and build all others
 300 # from the FreeBSD sources during the bootstrap-tools stage.
 301
 302 # basic commands: It is fine to use the host version for all of these even on
 303 # Linux/MacOS since we only use flags that are supported by all of them.
 304 _host_tools_to_symlink= basename bzip2 bunzip2 chmod chown cmp comm cp date dd \
 305         dirname echo env false find fmt gzip gunzip head hostname id ln ls \
 306         mkdir mv nice patch rm sh sleep stat tee time touch tr true uname uniq \
 307         unxz wc which xz
 308
 309 # We also need a symlink to the absolute path to the make binary used for
 310 # the toplevel makefile. This is not necessarily the same as `which make`
 311 # since e.g. on Linux and MacOS that will be GNU make.
 312 _make_abs!=     which "${MAKE}"
 313 _host_abs_tools_to_symlink=     ${_make_abs}:make ${_make_abs}:bmake
 314
 315 .if ${.MAKE.OS} == "FreeBSD"
 316 # When building on FreeBSD we always copy the host tools instead of linking
 317 # into WORLDTMP to avoid issues with incompatible libraries (see r364030).
 318 # Note: we could create links if we don't intend to update the current machine.
 319 _COPY_HOST_TOOL=cp -pf
 320 .else
 321 # However, this is not necessary on Linux/macOS. Additionally, copying the host
 322 # tools to another directory with cp -p results in freezes on macOS Big Sur for
 323 # some unknown reason. It can also break building inside docker containers if
 324 # there are ACLs on shared volumes.
 325 _COPY_HOST_TOOL=ln -sfn
 326 _make_abs!=     which "${MAKE}"
 327 _host_abs_tools_to_symlink+=    ${_make_abs}:make ${_make_abs}:bmake
 328 .if ${.MAKE.OS} == "Darwin"
 329 # /usr/bin/cpp may invoke xcrun:
 330 _host_tools_to_symlink+=xcrun
 331 .endif  # ${.MAKE.OS} == "Darwin"
 332 # On Ubuntu /bin/sh is dash which is totally useless. Let's just link bash
 333 # as the build sh since that will work fine.
 334 _host_abs_tools_to_symlink+=    /bin/bash:sh
 335 _host_tools_to_symlink:=${_host_tools_to_symlink:Nsh}
 336 .endif
 337
 338 host-symlinks:
 339         @echo "Linking host tools into ${DESTDIR}/bin"
 340 .for _tool in ${_host_tools_to_symlink}
 341         @export PATH=$${PATH}:/usr/local/bin; \
 342         source_path=`which ${_tool} || echo /dev/null/no/such`; \
 343         if [ ! -e "$${source_path}" ] ; then \
 344                 echo "Cannot find host tool '${_tool}' in PATH ($$PATH)." >&2; false; \
 345         fi; \
 346         rm -f "${DESTDIR}/bin/${_tool}"; \
 347         ${_COPY_HOST_TOOL} "$${source_path}" "${DESTDIR}/bin/${_tool}"
 348 .endfor
 349 .for _tool in ${_host_abs_tools_to_symlink}
 350         @source_path="${_tool:S/:/ /:[1]}"; \
 351         target_path="${DESTDIR}/bin/${_tool:S/:/ /:[2]}"; \
 352         if [ ! -e "$${source_path}" ] ; then \
 353                 echo "Host tool '$${source_path}' is missing"; false; \
 354         fi; \
 355         rm -f "$${target_path}"; \
 356         ${_COPY_HOST_TOOL} "$${source_path}" "$${target_path}"
 357 .endfor
 358 .if exists(/usr/libexec/flua)
 359         rm -f ${DESTDIR}/usr/libexec/flua
 360         ${_COPY_HOST_TOOL} /usr/libexec/flua ${DESTDIR}/usr/libexec/flua
 361 .endif
 362
 363 # Create all the directories that are needed during the legacy, bootstrap-tools
 364 # and cross-tools stages. We do this here using mkdir since mtree may not exist
 365 # yet (this happens if we are crossbuilding from Linux/Mac).
 366 INSTALLDIR_LIST= \
 367         bin \
 368         lib/geom \
 369         usr/include/casper \
 370         usr/include/private/ucl \
 371         usr/include/private/zstd \
 372         usr/lib \
 373         usr/libdata/pkgconfig \
 374         usr/libexec
 375
 376 installdirs:
 377         mkdir -p ${INSTALLDIR_LIST:S,^,${DESTDIR}/,}
 378
 379 # Link usr/bin, sbin, and usr/sbin to bin so that it doesn't matter whether a
 380 # bootstrap tool was added to WORLTMP with a symlink or by building it in the
 381 # bootstrap-tools phase. We could also overrride BINDIR when building bootstrap
 382 # tools but adding the symlinks is easier and means all tools are also
 383 # in the directory that they are installed to normally.
 384
 385 .for _dir in sbin usr/sbin usr/bin
 386 # delete existing directories from before r340157
 387         @if [ -e ${DESTDIR}/${_dir} ] && [ ! -L ${DESTDIR}/${_dir} ]; then \
 388             echo "removing old non-symlink ${DESTDIR}/${_dir}"; \
 389             rm -rf "${DESTDIR}/${_dir}"; \
 390         fi
 391 .endfor
 392         ln -sfn bin ${DESTDIR}/sbin
 393         ln -sfn ../bin ${DESTDIR}/usr/bin
 394         ln -sfn ../bin ${DESTDIR}/usr/sbin
 395 .for _group in ${INCSGROUPS:NINCS}
 396         mkdir -p "${DESTDIR}/${${_group}DIR}"
 397 .endfor
 398
 399 .include <bsd.lib.mk>