contrib/llvm/tools/lld/ELF/Driver.cpp

   1 //===- Driver.cpp ---------------------------------------------------------===//
   2 //
   3 //                             The LLVM Linker
   4 //
   5 // This file is distributed under the University of Illinois Open Source
   6 // License. See LICENSE.TXT for details.
   7 //
   8 //===----------------------------------------------------------------------===//
   9 //
  10 // The driver drives the entire linking process. It is responsible for
  11 // parsing command line options and doing whatever it is instructed to do.
  12 //
  13 // One notable thing in the LLD's driver when compared to other linkers is
  14 // that the LLD's driver is agnostic on the host operating system.
  15 // Other linkers usually have implicit default values (such as a dynamic
  16 // linker path or library paths) for each host OS.
  17 //
  18 // I don't think implicit default values are useful because they are
  19 // usually explicitly specified by the compiler driver. They can even
  20 // be harmful when you are doing cross-linking. Therefore, in LLD, we
  21 // simply trust the compiler driver to pass all required options and
  22 // don't try to make effort on our side.
  23 //
  24 //===----------------------------------------------------------------------===//
  25
  26 #include "Driver.h"
  27 #include "Config.h"
  28 #include "Error.h"
  29 #include "Filesystem.h"
  30 #include "ICF.h"
  31 #include "InputFiles.h"
  32 #include "InputSection.h"
  33 #include "LinkerScript.h"
  34 #include "Memory.h"
  35 #include "OutputSections.h"
  36 #include "ScriptParser.h"
  37 #include "Strings.h"
  38 #include "SymbolTable.h"
  39 #include "SyntheticSections.h"
  40 #include "Target.h"
  41 #include "Threads.h"
  42 #include "Writer.h"
  43 #include "lld/Config/Version.h"
  44 #include "lld/Driver/Driver.h"
  45 #include "llvm/ADT/StringExtras.h"
  46 #include "llvm/ADT/StringSwitch.h"
  47 #include "llvm/Support/CommandLine.h"
  48 #include "llvm/Support/Compression.h"
  49 #include "llvm/Support/Path.h"
  50 #include "llvm/Support/TarWriter.h"
  51 #include "llvm/Support/TargetSelect.h"
  52 #include "llvm/Support/raw_ostream.h"
  53 #include <cstdlib>
  54 #include <utility>
  55
  56 using namespace llvm;
  57 using namespace llvm::ELF;
  58 using namespace llvm::object;
  59 using namespace llvm::sys;
  60
  61 using namespace lld;
  62 using namespace lld::elf;
  63
  64 Configuration *elf::Config;
  65 LinkerDriver *elf::Driver;
  66
  67 BumpPtrAllocator elf::BAlloc;
  68 StringSaver elf::Saver{BAlloc};
  69 std::vector<SpecificAllocBase *> elf::SpecificAllocBase::Instances;
  70
  71 static void setConfigs();
  72
  73 bool elf::link(ArrayRef<const char *> Args, bool CanExitEarly,
  74                raw_ostream &Error) {
  75   ErrorCount = 0;
  76   ErrorOS = &Error;
  77   InputSections.clear();
  78   Tar = nullptr;
  79
  80   Config = make<Configuration>();
  81   Driver = make<LinkerDriver>();
  82   Script = make<LinkerScript>();
  83   Config->Argv = {Args.begin(), Args.end()};
  84
  85   Driver->main(Args, CanExitEarly);
  86   freeArena();
  87   return !ErrorCount;
  88 }
  89
  90 // Parses a linker -m option.
  91 static std::tuple<ELFKind, uint16_t, uint8_t> parseEmulation(StringRef Emul) {
  92   uint8_t OSABI = 0;
  93   StringRef S = Emul;
  94   if (S.endswith("_fbsd")) {
  95     S = S.drop_back(5);
  96     OSABI = ELFOSABI_FREEBSD;
  97   }
  98
  99   std::pair<ELFKind, uint16_t> Ret =
 100       StringSwitch<std::pair<ELFKind, uint16_t>>(S)
 101           .Cases("aarch64elf", "aarch64linux", {ELF64LEKind, EM_AARCH64})
 102           .Cases("armelf", "armelf_linux_eabi", {ELF32LEKind, EM_ARM})
 103           .Case("elf32_x86_64", {ELF32LEKind, EM_X86_64})
 104           .Cases("elf32btsmip", "elf32btsmipn32", {ELF32BEKind, EM_MIPS})
 105           .Cases("elf32ltsmip", "elf32ltsmipn32", {ELF32LEKind, EM_MIPS})
 106           .Case("elf32ppc", {ELF32BEKind, EM_PPC})
 107           .Case("elf64btsmip", {ELF64BEKind, EM_MIPS})
 108           .Case("elf64ltsmip", {ELF64LEKind, EM_MIPS})
 109           .Case("elf64ppc", {ELF64BEKind, EM_PPC64})
 110           .Cases("elf_amd64", "elf_x86_64", {ELF64LEKind, EM_X86_64})
 111           .Case("elf_i386", {ELF32LEKind, EM_386})
 112           .Case("elf_iamcu", {ELF32LEKind, EM_IAMCU})
 113           .Default({ELFNoneKind, EM_NONE});
 114
 115   if (Ret.first == ELFNoneKind) {
 116     if (S == "i386pe" || S == "i386pep" || S == "thumb2pe")
 117       error("Windows targets are not supported on the ELF frontend: " + Emul);
 118     else
 119       error("unknown emulation: " + Emul);
 120   }
 121   return std::make_tuple(Ret.first, Ret.second, OSABI);
 122 }
 123
 124 // Returns slices of MB by parsing MB as an archive file.
 125 // Each slice consists of a member file in the archive.
 126 std::vector<std::pair<MemoryBufferRef, uint64_t>> static getArchiveMembers(
 127     MemoryBufferRef MB) {
 128   std::unique_ptr<Archive> File =
 129       check(Archive::create(MB),
 130             MB.getBufferIdentifier() + ": failed to parse archive");
 131
 132   std::vector<std::pair<MemoryBufferRef, uint64_t>> V;
 133   Error Err = Error::success();
 134   for (const ErrorOr<Archive::Child> &COrErr : File->children(Err)) {
 135     Archive::Child C =
 136         check(COrErr, MB.getBufferIdentifier() +
 137                           ": could not get the child of the archive");
 138     MemoryBufferRef MBRef =
 139         check(C.getMemoryBufferRef(),
 140               MB.getBufferIdentifier() +
 141                   ": could not get the buffer for a child of the archive");
 142     V.push_back(std::make_pair(MBRef, C.getChildOffset()));
 143   }
 144   if (Err)
 145     fatal(MB.getBufferIdentifier() + ": Archive::children failed: " +
 146           toString(std::move(Err)));
 147
 148   // Take ownership of memory buffers created for members of thin archives.
 149   for (std::unique_ptr<MemoryBuffer> &MB : File->takeThinBuffers())
 150     make<std::unique_ptr<MemoryBuffer>>(std::move(MB));
 151
 152   return V;
 153 }
 154
 155 // Opens a file and create a file object. Path has to be resolved already.
 156 void LinkerDriver::addFile(StringRef Path, bool WithLOption) {
 157   using namespace sys::fs;
 158
 159   Optional<MemoryBufferRef> Buffer = readFile(Path);
 160   if (!Buffer.hasValue())
 161     return;
 162   MemoryBufferRef MBRef = *Buffer;
 163
 164   if (InBinary) {
 165     Files.push_back(make<BinaryFile>(MBRef));
 166     return;
 167   }
 168
 169   switch (identify_magic(MBRef.getBuffer())) {
 170   case file_magic::unknown:
 171     readLinkerScript(MBRef);
 172     return;
 173   case file_magic::archive: {
 174     // Handle -whole-archive.
 175     if (InWholeArchive) {
 176       for (const auto &P : getArchiveMembers(MBRef))
 177         Files.push_back(createObjectFile(P.first, Path, P.second));
 178       return;
 179     }
 180
 181     std::unique_ptr<Archive> File =
 182         check(Archive::create(MBRef), Path + ": failed to parse archive");
 183
 184     // If an archive file has no symbol table, it is likely that a user
 185     // is attempting LTO and using a default ar command that doesn't
 186     // understand the LLVM bitcode file. It is a pretty common error, so
 187     // we'll handle it as if it had a symbol table.
 188     if (!File->isEmpty() && !File->hasSymbolTable()) {
 189       for (const auto &P : getArchiveMembers(MBRef))
 190         Files.push_back(make<LazyObjectFile>(P.first, Path, P.second));
 191       return;
 192     }
 193
 194     // Handle the regular case.
 195     Files.push_back(make<ArchiveFile>(std::move(File)));
 196     return;
 197   }
 198   case file_magic::elf_shared_object:
 199     if (Config->Relocatable) {
 200       error("attempted static link of dynamic object " + Path);
 201       return;
 202     }
 203
 204     // DSOs usually have DT_SONAME tags in their ELF headers, and the
 205     // sonames are used to identify DSOs. But if they are missing,
 206     // they are identified by filenames. We don't know whether the new
 207     // file has a DT_SONAME or not because we haven't parsed it yet.
 208     // Here, we set the default soname for the file because we might
 209     // need it later.
 210     //
 211     // If a file was specified by -lfoo, the directory part is not
 212     // significant, as a user did not specify it. This behavior is
 213     // compatible with GNU.
 214     Files.push_back(
 215         createSharedFile(MBRef, WithLOption ? path::filename(Path) : Path));
 216     return;
 217   default:
 218     if (InLib)
 219       Files.push_back(make<LazyObjectFile>(MBRef, "", 0));
 220     else
 221       Files.push_back(createObjectFile(MBRef));
 222   }
 223 }
 224
 225 // Add a given library by searching it from input search paths.
 226 void LinkerDriver::addLibrary(StringRef Name) {
 227   if (Optional<std::string> Path = searchLibrary(Name))
 228     addFile(*Path, /*WithLOption=*/true);
 229   else
 230     error("unable to find library -l" + Name);
 231 }
 232
 233 // This function is called on startup. We need this for LTO since
 234 // LTO calls LLVM functions to compile bitcode files to native code.
 235 // Technically this can be delayed until we read bitcode files, but
 236 // we don't bother to do lazily because the initialization is fast.
 237 static void initLLVM(opt::InputArgList &Args) {
 238   InitializeAllTargets();
 239   InitializeAllTargetMCs();
 240   InitializeAllAsmPrinters();
 241   InitializeAllAsmParsers();
 242
 243   // Parse and evaluate -mllvm options.
 244   std::vector<const char *> V;
 245   V.push_back("lld (LLVM option parsing)");
 246   for (auto *Arg : Args.filtered(OPT_mllvm))
 247     V.push_back(Arg->getValue());
 248   cl::ParseCommandLineOptions(V.size(), V.data());
 249 }
 250
 251 // Some command line options or some combinations of them are not allowed.
 252 // This function checks for such errors.
 253 static void checkOptions(opt::InputArgList &Args) {
 254   // The MIPS ABI as of 2016 does not support the GNU-style symbol lookup
 255   // table which is a relatively new feature.
 256   if (Config->EMachine == EM_MIPS && Config->GnuHash)
 257     error("the .gnu.hash section is not compatible with the MIPS target.");
 258
 259   if (Config->Pie && Config->Shared)
 260     error("-shared and -pie may not be used together");
 261
 262   if (!Config->Shared && !Config->FilterList.empty())
 263     error("-F may not be used without -shared");
 264
 265   if (!Config->Shared && !Config->AuxiliaryList.empty())
 266     error("-f may not be used without -shared");
 267
 268   if (Config->Relocatable) {
 269     if (Config->Shared)
 270       error("-r and -shared may not be used together");
 271     if (Config->GcSections)
 272       error("-r and --gc-sections may not be used together");
 273     if (Config->ICF)
 274       error("-r and --icf may not be used together");
 275     if (Config->Pie)
 276       error("-r and -pie may not be used together");
 277   }
 278 }
 279
 280 static int getInteger(opt::InputArgList &Args, unsigned Key, int Default) {
 281   int V = Default;
 282   if (auto *Arg = Args.getLastArg(Key)) {
 283     StringRef S = Arg->getValue();
 284     if (!to_integer(S, V, 10))
 285       error(Arg->getSpelling() + ": number expected, but got " + S);
 286   }
 287   return V;
 288 }
 289
 290 static const char *getReproduceOption(opt::InputArgList &Args) {
 291   if (auto *Arg = Args.getLastArg(OPT_reproduce))
 292     return Arg->getValue();
 293   return getenv("LLD_REPRODUCE");
 294 }
 295
 296 static bool hasZOption(opt::InputArgList &Args, StringRef Key) {
 297   for (auto *Arg : Args.filtered(OPT_z))
 298     if (Key == Arg->getValue())
 299       return true;
 300   return false;
 301 }
 302
 303 static uint64_t getZOptionValue(opt::InputArgList &Args, StringRef Key,
 304                                 uint64_t Default) {
 305   for (auto *Arg : Args.filtered(OPT_z)) {
 306     std::pair<StringRef, StringRef> KV = StringRef(Arg->getValue()).split('=');
 307     if (KV.first == Key) {
 308       uint64_t Result = Default;
 309       if (!to_integer(KV.second, Result))
 310         error("invalid " + Key + ": " + KV.second);
 311       return Result;
 312     }
 313   }
 314   return Default;
 315 }
 316
 317 void LinkerDriver::main(ArrayRef<const char *> ArgsArr, bool CanExitEarly) {
 318   ELFOptTable Parser;
 319   opt::InputArgList Args = Parser.parse(ArgsArr.slice(1));
 320
 321   // Interpret this flag early because error() depends on them.
 322   Config->ErrorLimit = getInteger(Args, OPT_error_limit, 20);
 323
 324   // Handle -help
 325   if (Args.hasArg(OPT_help)) {
 326     printHelp(ArgsArr[0]);
 327     return;
 328   }
 329
 330   // Handle -v or -version.
 331   //
 332   // A note about "compatible with GNU linkers" message: this is a hack for
 333   // scripts generated by GNU Libtool 2.4.6 (released in February 2014 and
 334   // still the newest version in March 2017) or earlier to recognize LLD as
 335   // a GNU compatible linker. As long as an output for the -v option
 336   // contains "GNU" or "with BFD", they recognize us as GNU-compatible.
 337   //
 338   // This is somewhat ugly hack, but in reality, we had no choice other
 339   // than doing this. Considering the very long release cycle of Libtool,
 340   // it is not easy to improve it to recognize LLD as a GNU compatible
 341   // linker in a timely manner. Even if we can make it, there are still a
 342   // lot of "configure" scripts out there that are generated by old version
 343   // of Libtool. We cannot convince every software developer to migrate to
 344   // the latest version and re-generate scripts. So we have this hack.
 345   if (Args.hasArg(OPT_v) || Args.hasArg(OPT_version))
 346     message(getLLDVersion() + " (compatible with GNU linkers)");
 347
 348   // ld.bfd always exits after printing out the version string.
 349   // ld.gold proceeds if a given option is -v. Because gold's behavior
 350   // is more permissive than ld.bfd, we chose what gold does here.
 351   if (Args.hasArg(OPT_version))
 352     return;
 353
 354   Config->ExitEarly = CanExitEarly && !Args.hasArg(OPT_full_shutdown);
 355
 356   if (const char *Path = getReproduceOption(Args)) {
 357     // Note that --reproduce is a debug option so you can ignore it
 358     // if you are trying to understand the whole picture of the code.
 359     Expected<std::unique_ptr<TarWriter>> ErrOrWriter =
 360         TarWriter::create(Path, path::stem(Path));
 361     if (ErrOrWriter) {
 362       Tar = ErrOrWriter->get();
 363       Tar->append("response.txt", createResponseFile(Args));
 364       Tar->append("version.txt", getLLDVersion() + "\n");
 365       make<std::unique_ptr<TarWriter>>(std::move(*ErrOrWriter));
 366     } else {
 367       error(Twine("--reproduce: failed to open ") + Path + ": " +
 368             toString(ErrOrWriter.takeError()));
 369     }
 370   }
 371
 372   readConfigs(Args);
 373   initLLVM(Args);
 374   createFiles(Args);
 375   inferMachineType();
 376   setConfigs();
 377   checkOptions(Args);
 378   if (ErrorCount)
 379     return;
 380
 381   switch (Config->EKind) {
 382   case ELF32LEKind:
 383     link<ELF32LE>(Args);
 384     return;
 385   case ELF32BEKind:
 386     link<ELF32BE>(Args);
 387     return;
 388   case ELF64LEKind:
 389     link<ELF64LE>(Args);
 390     return;
 391   case ELF64BEKind:
 392     link<ELF64BE>(Args);
 393     return;
 394   default:
 395     llvm_unreachable("unknown Config->EKind");
 396   }
 397 }
 398
 399 static bool getArg(opt::InputArgList &Args, unsigned K1, unsigned K2,
 400                    bool Default) {
 401   if (auto *Arg = Args.getLastArg(K1, K2))
 402     return Arg->getOption().getID() == K1;
 403   return Default;
 404 }
 405
 406 static std::vector<StringRef> getArgs(opt::InputArgList &Args, int Id) {
 407   std::vector<StringRef> V;
 408   for (auto *Arg : Args.filtered(Id))
 409     V.push_back(Arg->getValue());
 410   return V;
 411 }
 412
 413 static std::string getRpath(opt::InputArgList &Args) {
 414   std::vector<StringRef> V = getArgs(Args, OPT_rpath);
 415   return llvm::join(V.begin(), V.end(), ":");
 416 }
 417
 418 // Determines what we should do if there are remaining unresolved
 419 // symbols after the name resolution.
 420 static UnresolvedPolicy getUnresolvedSymbolPolicy(opt::InputArgList &Args) {
 421   // -noinhibit-exec or -r imply some default values.
 422   if (Args.hasArg(OPT_noinhibit_exec))
 423     return UnresolvedPolicy::WarnAll;
 424   if (Args.hasArg(OPT_relocatable))
 425     return UnresolvedPolicy::IgnoreAll;
 426
 427   UnresolvedPolicy ErrorOrWarn = getArg(Args, OPT_error_unresolved_symbols,
 428                                         OPT_warn_unresolved_symbols, true)
 429                                      ? UnresolvedPolicy::ReportError
 430                                      : UnresolvedPolicy::Warn;
 431
 432   // Process the last of -unresolved-symbols, -no-undefined or -z defs.
 433   for (auto *Arg : llvm::reverse(Args)) {
 434     switch (Arg->getOption().getID()) {
 435     case OPT_unresolved_symbols: {
 436       StringRef S = Arg->getValue();
 437       if (S == "ignore-all" || S == "ignore-in-object-files")
 438         return UnresolvedPolicy::Ignore;
 439       if (S == "ignore-in-shared-libs" || S == "report-all")
 440         return ErrorOrWarn;
 441       error("unknown --unresolved-symbols value: " + S);
 442       continue;
 443     }
 444     case OPT_no_undefined:
 445       return ErrorOrWarn;
 446     case OPT_z:
 447       if (StringRef(Arg->getValue()) == "defs")
 448         return ErrorOrWarn;
 449       continue;
 450     }
 451   }
 452
 453   // -shared implies -unresolved-symbols=ignore-all because missing
 454   // symbols are likely to be resolved at runtime using other DSOs.
 455   if (Config->Shared)
 456     return UnresolvedPolicy::Ignore;
 457   return ErrorOrWarn;
 458 }
 459
 460 static Target2Policy getTarget2(opt::InputArgList &Args) {
 461   StringRef S = Args.getLastArgValue(OPT_target2, "got-rel");
 462   if (S == "rel")
 463     return Target2Policy::Rel;
 464   if (S == "abs")
 465     return Target2Policy::Abs;
 466   if (S == "got-rel")
 467     return Target2Policy::GotRel;
 468   error("unknown --target2 option: " + S);
 469   return Target2Policy::GotRel;
 470 }
 471
 472 static bool isOutputFormatBinary(opt::InputArgList &Args) {
 473   if (auto *Arg = Args.getLastArg(OPT_oformat)) {
 474     StringRef S = Arg->getValue();
 475     if (S == "binary")
 476       return true;
 477     error("unknown --oformat value: " + S);
 478   }
 479   return false;
 480 }
 481
 482 static DiscardPolicy getDiscard(opt::InputArgList &Args) {
 483   if (Args.hasArg(OPT_relocatable))
 484     return DiscardPolicy::None;
 485
 486   auto *Arg =
 487       Args.getLastArg(OPT_discard_all, OPT_discard_locals, OPT_discard_none);
 488   if (!Arg)
 489     return DiscardPolicy::Default;
 490   if (Arg->getOption().getID() == OPT_discard_all)
 491     return DiscardPolicy::All;
 492   if (Arg->getOption().getID() == OPT_discard_locals)
 493     return DiscardPolicy::Locals;
 494   return DiscardPolicy::None;
 495 }
 496
 497 static StringRef getDynamicLinker(opt::InputArgList &Args) {
 498   auto *Arg = Args.getLastArg(OPT_dynamic_linker, OPT_no_dynamic_linker);
 499   if (!Arg || Arg->getOption().getID() == OPT_no_dynamic_linker)
 500     return "";
 501   return Arg->getValue();
 502 }
 503
 504 static StripPolicy getStrip(opt::InputArgList &Args) {
 505   if (Args.hasArg(OPT_relocatable))
 506     return StripPolicy::None;
 507
 508   auto *Arg = Args.getLastArg(OPT_strip_all, OPT_strip_debug);
 509   if (!Arg)
 510     return StripPolicy::None;
 511   if (Arg->getOption().getID() == OPT_strip_all)
 512     return StripPolicy::All;
 513   return StripPolicy::Debug;
 514 }
 515
 516 static uint64_t parseSectionAddress(StringRef S, opt::Arg *Arg) {
 517   uint64_t VA = 0;
 518   if (S.startswith("0x"))
 519     S = S.drop_front(2);
 520   if (!to_integer(S, VA, 16))
 521     error("invalid argument: " + toString(Arg));
 522   return VA;
 523 }
 524
 525 static StringMap<uint64_t> getSectionStartMap(opt::InputArgList &Args) {
 526   StringMap<uint64_t> Ret;
 527   for (auto *Arg : Args.filtered(OPT_section_start)) {
 528     StringRef Name;
 529     StringRef Addr;
 530     std::tie(Name, Addr) = StringRef(Arg->getValue()).split('=');
 531     Ret[Name] = parseSectionAddress(Addr, Arg);
 532   }
 533
 534   if (auto *Arg = Args.getLastArg(OPT_Ttext))
 535     Ret[".text"] = parseSectionAddress(Arg->getValue(), Arg);
 536   if (auto *Arg = Args.getLastArg(OPT_Tdata))
 537     Ret[".data"] = parseSectionAddress(Arg->getValue(), Arg);
 538   if (auto *Arg = Args.getLastArg(OPT_Tbss))
 539     Ret[".bss"] = parseSectionAddress(Arg->getValue(), Arg);
 540   return Ret;
 541 }
 542
 543 static SortSectionPolicy getSortSection(opt::InputArgList &Args) {
 544   StringRef S = Args.getLastArgValue(OPT_sort_section);
 545   if (S == "alignment")
 546     return SortSectionPolicy::Alignment;
 547   if (S == "name")
 548     return SortSectionPolicy::Name;
 549   if (!S.empty())
 550     error("unknown --sort-section rule: " + S);
 551   return SortSectionPolicy::Default;
 552 }
 553
 554 static std::pair<bool, bool> getHashStyle(opt::InputArgList &Args) {
 555   StringRef S = Args.getLastArgValue(OPT_hash_style, "sysv");
 556   if (S == "sysv")
 557     return {true, false};
 558   if (S == "gnu")
 559     return {false, true};
 560   if (S != "both")
 561     error("unknown -hash-style: " + S);
 562   return {true, true};
 563 }
 564
 565 // Parse --build-id or --build-id=<style>. We handle "tree" as a
 566 // synonym for "sha1" because all our hash functions including
 567 // -build-id=sha1 are actually tree hashes for performance reasons.
 568 static std::pair<BuildIdKind, std::vector<uint8_t>>
 569 getBuildId(opt::InputArgList &Args) {
 570   auto *Arg = Args.getLastArg(OPT_build_id, OPT_build_id_eq);
 571   if (!Arg)
 572     return {BuildIdKind::None, {}};
 573
 574   if (Arg->getOption().getID() == OPT_build_id)
 575     return {BuildIdKind::Fast, {}};
 576
 577   StringRef S = Arg->getValue();
 578   if (S == "md5")
 579     return {BuildIdKind::Md5, {}};
 580   if (S == "sha1" || S == "tree")
 581     return {BuildIdKind::Sha1, {}};
 582   if (S == "uuid")
 583     return {BuildIdKind::Uuid, {}};
 584   if (S.startswith("0x"))
 585     return {BuildIdKind::Hexstring, parseHex(S.substr(2))};
 586
 587   if (S != "none")
 588     error("unknown --build-id style: " + S);
 589   return {BuildIdKind::None, {}};
 590 }
 591
 592 static std::vector<StringRef> getLines(MemoryBufferRef MB) {
 593   SmallVector<StringRef, 0> Arr;
 594   MB.getBuffer().split(Arr, '\n');
 595
 596   std::vector<StringRef> Ret;
 597   for (StringRef S : Arr) {
 598     S = S.trim();
 599     if (!S.empty())
 600       Ret.push_back(S);
 601   }
 602   return Ret;
 603 }
 604
 605 static bool getCompressDebugSections(opt::InputArgList &Args) {
 606   StringRef S = Args.getLastArgValue(OPT_compress_debug_sections, "none");
 607   if (S == "none")
 608     return false;
 609   if (S != "zlib")
 610     error("unknown --compress-debug-sections value: " + S);
 611   if (!zlib::isAvailable())
 612     error("--compress-debug-sections: zlib is not available");
 613   return true;
 614 }
 615
 616 // Initializes Config members by the command line options.
 617 void LinkerDriver::readConfigs(opt::InputArgList &Args) {
 618   Config->AllowMultipleDefinition = Args.hasArg(OPT_allow_multiple_definition);
 619   Config->AuxiliaryList = getArgs(Args, OPT_auxiliary);
 620   Config->Bsymbolic = Args.hasArg(OPT_Bsymbolic);
 621   Config->BsymbolicFunctions = Args.hasArg(OPT_Bsymbolic_functions);
 622   Config->CompressDebugSections = getCompressDebugSections(Args);
 623   Config->DefineCommon = getArg(Args, OPT_define_common, OPT_no_define_common,
 624                                 !Args.hasArg(OPT_relocatable));
 625   Config->Demangle = getArg(Args, OPT_demangle, OPT_no_demangle, true);
 626   Config->DisableVerify = Args.hasArg(OPT_disable_verify);
 627   Config->Discard = getDiscard(Args);
 628   Config->DynamicLinker = getDynamicLinker(Args);
 629   Config->EhFrameHdr = Args.hasArg(OPT_eh_frame_hdr);
 630   Config->EmitRelocs = Args.hasArg(OPT_emit_relocs);
 631   Config->EnableNewDtags = !Args.hasArg(OPT_disable_new_dtags);
 632   Config->Entry = Args.getLastArgValue(OPT_entry);
 633   Config->ExportDynamic =
 634       getArg(Args, OPT_export_dynamic, OPT_no_export_dynamic, false);
 635   Config->FatalWarnings =
 636       getArg(Args, OPT_fatal_warnings, OPT_no_fatal_warnings, false);
 637   Config->FilterList = getArgs(Args, OPT_filter);
 638   Config->Fini = Args.getLastArgValue(OPT_fini, "_fini");
 639   Config->GcSections = getArg(Args, OPT_gc_sections, OPT_no_gc_sections, false);
 640   Config->GdbIndex = Args.hasArg(OPT_gdb_index);
 641   Config->ICF = Args.hasArg(OPT_icf);
 642   Config->Init = Args.getLastArgValue(OPT_init, "_init");
 643   Config->LTOAAPipeline = Args.getLastArgValue(OPT_lto_aa_pipeline);
 644   Config->LTONewPmPasses = Args.getLastArgValue(OPT_lto_newpm_passes);
 645   Config->LTOO = getInteger(Args, OPT_lto_O, 2);
 646   Config->LTOPartitions = getInteger(Args, OPT_lto_partitions, 1);
 647   Config->MapFile = Args.getLastArgValue(OPT_Map);
 648   Config->NoGnuUnique = Args.hasArg(OPT_no_gnu_unique);
 649   Config->NoUndefinedVersion = Args.hasArg(OPT_no_undefined_version);
 650   Config->Nostdlib = Args.hasArg(OPT_nostdlib);
 651   Config->OFormatBinary = isOutputFormatBinary(Args);
 652   Config->Omagic = Args.hasArg(OPT_omagic);
 653   Config->OptRemarksFilename = Args.getLastArgValue(OPT_opt_remarks_filename);
 654   Config->OptRemarksWithHotness = Args.hasArg(OPT_opt_remarks_with_hotness);
 655   Config->Optimize = getInteger(Args, OPT_O, 1);
 656   Config->OutputFile = Args.getLastArgValue(OPT_o);
 657   Config->Pie = getArg(Args, OPT_pie, OPT_nopie, false);
 658   Config->PrintGcSections = Args.hasArg(OPT_print_gc_sections);
 659   Config->Rpath = getRpath(Args);
 660   Config->Relocatable = Args.hasArg(OPT_relocatable);
 661   Config->SaveTemps = Args.hasArg(OPT_save_temps);
 662   Config->SearchPaths = getArgs(Args, OPT_L);
 663   Config->SectionStartMap = getSectionStartMap(Args);
 664   Config->Shared = Args.hasArg(OPT_shared);
 665   Config->SingleRoRx = Args.hasArg(OPT_no_rosegment);
 666   Config->SoName = Args.getLastArgValue(OPT_soname);
 667   Config->SortSection = getSortSection(Args);
 668   Config->Strip = getStrip(Args);
 669   Config->Sysroot = Args.getLastArgValue(OPT_sysroot);
 670   Config->Target1Rel = getArg(Args, OPT_target1_rel, OPT_target1_abs, false);
 671   Config->Target2 = getTarget2(Args);
 672   Config->ThinLTOCacheDir = Args.getLastArgValue(OPT_thinlto_cache_dir);
 673   Config->ThinLTOCachePolicy = check(
 674       parseCachePruningPolicy(Args.getLastArgValue(OPT_thinlto_cache_policy)),
 675       "--thinlto-cache-policy: invalid cache policy");
 676   Config->ThinLTOJobs = getInteger(Args, OPT_thinlto_jobs, -1u);
 677   Config->Threads = getArg(Args, OPT_threads, OPT_no_threads, true);
 678   Config->Trace = Args.hasArg(OPT_trace);
 679   Config->Undefined = getArgs(Args, OPT_undefined);
 680   Config->UnresolvedSymbols = getUnresolvedSymbolPolicy(Args);
 681   Config->Verbose = Args.hasArg(OPT_verbose);
 682   Config->WarnCommon = Args.hasArg(OPT_warn_common);
 683   Config->ZCombreloc = !hasZOption(Args, "nocombreloc");
 684   Config->ZExecstack = hasZOption(Args, "execstack");
 685   Config->ZNocopyreloc = hasZOption(Args, "nocopyreloc");
 686   Config->ZNodelete = hasZOption(Args, "nodelete");
 687   Config->ZNodlopen = hasZOption(Args, "nodlopen");
 688   Config->ZNow = hasZOption(Args, "now");
 689   Config->ZOrigin = hasZOption(Args, "origin");
 690   Config->ZRelro = !hasZOption(Args, "norelro");
 691   Config->ZRodynamic = hasZOption(Args, "rodynamic");
 692   Config->ZStackSize = getZOptionValue(Args, "stack-size", 0);
 693   Config->ZText = !hasZOption(Args, "notext");
 694   Config->ZWxneeded = hasZOption(Args, "wxneeded");
 695
 696   if (Config->LTOO > 3)
 697     error("invalid optimization level for LTO: " +
 698           Args.getLastArgValue(OPT_lto_O));
 699   if (Config->LTOPartitions == 0)
 700     error("--lto-partitions: number of threads must be > 0");
 701   if (Config->ThinLTOJobs == 0)
 702     error("--thinlto-jobs: number of threads must be > 0");
 703
 704   if (auto *Arg = Args.getLastArg(OPT_m)) {
 705     // Parse ELF{32,64}{LE,BE} and CPU type.
 706     StringRef S = Arg->getValue();
 707     std::tie(Config->EKind, Config->EMachine, Config->OSABI) =
 708         parseEmulation(S);
 709     Config->MipsN32Abi = (S == "elf32btsmipn32" || S == "elf32ltsmipn32");
 710     Config->Emulation = S;
 711   }
 712
 713   if (Args.hasArg(OPT_print_map))
 714     Config->MapFile = "-";
 715
 716   // --omagic is an option to create old-fashioned executables in which
 717   // .text segments are writable. Today, the option is still in use to
 718   // create special-purpose programs such as boot loaders. It doesn't
 719   // make sense to create PT_GNU_RELRO for such executables.
 720   if (Config->Omagic)
 721     Config->ZRelro = false;
 722
 723   std::tie(Config->SysvHash, Config->GnuHash) = getHashStyle(Args);
 724   std::tie(Config->BuildId, Config->BuildIdVector) = getBuildId(Args);
 725
 726   if (auto *Arg = Args.getLastArg(OPT_symbol_ordering_file))
 727     if (Optional<MemoryBufferRef> Buffer = readFile(Arg->getValue()))
 728       Config->SymbolOrderingFile = getLines(*Buffer);
 729
 730   // If --retain-symbol-file is used, we'll keep only the symbols listed in
 731   // the file and discard all others.
 732   if (auto *Arg = Args.getLastArg(OPT_retain_symbols_file)) {
 733     Config->DefaultSymbolVersion = VER_NDX_LOCAL;
 734     if (Optional<MemoryBufferRef> Buffer = readFile(Arg->getValue()))
 735       for (StringRef S : getLines(*Buffer))
 736         Config->VersionScriptGlobals.push_back(
 737             {S, /*IsExternCpp*/ false, /*HasWildcard*/ false});
 738   }
 739
 740   bool HasExportDynamic =
 741       getArg(Args, OPT_export_dynamic, OPT_no_export_dynamic, false);
 742
 743   // Parses -dynamic-list and -export-dynamic-symbol. They make some
 744   // symbols private. Note that -export-dynamic takes precedence over them
 745   // as it says all symbols should be exported.
 746   if (!HasExportDynamic) {
 747     for (auto *Arg : Args.filtered(OPT_dynamic_list))
 748       if (Optional<MemoryBufferRef> Buffer = readFile(Arg->getValue()))
 749         readDynamicList(*Buffer);
 750
 751     for (auto *Arg : Args.filtered(OPT_export_dynamic_symbol))
 752       Config->VersionScriptGlobals.push_back(
 753           {Arg->getValue(), /*IsExternCpp*/ false, /*HasWildcard*/ false});
 754
 755     // Dynamic lists are a simplified linker script that doesn't need the
 756     // "global:" and implicitly ends with a "local:*". Set the variables
 757     // needed to simulate that.
 758     if (Args.hasArg(OPT_dynamic_list) ||
 759         Args.hasArg(OPT_export_dynamic_symbol)) {
 760       Config->ExportDynamic = true;
 761       if (!Config->Shared)
 762         Config->DefaultSymbolVersion = VER_NDX_LOCAL;
 763     }
 764   }
 765
 766   if (auto *Arg = Args.getLastArg(OPT_version_script))
 767     if (Optional<MemoryBufferRef> Buffer = readFile(Arg->getValue()))
 768       readVersionScript(*Buffer);
 769 }
 770
 771 // Some Config members do not directly correspond to any particular
 772 // command line options, but computed based on other Config values.
 773 // This function initialize such members. See Config.h for the details
 774 // of these values.
 775 static void setConfigs() {
 776   ELFKind Kind = Config->EKind;
 777   uint16_t Machine = Config->EMachine;
 778
 779   // There is an ILP32 ABI for x86-64, although it's not very popular.
 780   // It is called the x32 ABI.
 781   bool IsX32 = (Kind == ELF32LEKind && Machine == EM_X86_64);
 782
 783   Config->CopyRelocs = (Config->Relocatable || Config->EmitRelocs);
 784   Config->Is64 = (Kind == ELF64LEKind || Kind == ELF64BEKind);
 785   Config->IsLE = (Kind == ELF32LEKind || Kind == ELF64LEKind);
 786   Config->Endianness =
 787       Config->IsLE ? support::endianness::little : support::endianness::big;
 788   Config->IsMips64EL = (Kind == ELF64LEKind && Machine == EM_MIPS);
 789   Config->IsRela = Config->Is64 || IsX32 || Config->MipsN32Abi;
 790   Config->Pic = Config->Pie || Config->Shared;
 791   Config->Wordsize = Config->Is64 ? 8 : 4;
 792 }
 793
 794 // Returns a value of "-format" option.
 795 static bool getBinaryOption(StringRef S) {
 796   if (S == "binary")
 797     return true;
 798   if (S == "elf" || S == "default")
 799     return false;
 800   error("unknown -format value: " + S +
 801         " (supported formats: elf, default, binary)");
 802   return false;
 803 }
 804
 805 void LinkerDriver::createFiles(opt::InputArgList &Args) {
 806   for (auto *Arg : Args) {
 807     switch (Arg->getOption().getID()) {
 808     case OPT_l:
 809       addLibrary(Arg->getValue());
 810       break;
 811     case OPT_INPUT:
 812       addFile(Arg->getValue(), /*WithLOption=*/false);
 813       break;
 814     case OPT_alias_script_T:
 815     case OPT_script:
 816       if (Optional<MemoryBufferRef> MB = readFile(Arg->getValue()))
 817         readLinkerScript(*MB);
 818       break;
 819     case OPT_as_needed:
 820       Config->AsNeeded = true;
 821       break;
 822     case OPT_format:
 823       InBinary = getBinaryOption(Arg->getValue());
 824       break;
 825     case OPT_no_as_needed:
 826       Config->AsNeeded = false;
 827       break;
 828     case OPT_Bstatic:
 829       Config->Static = true;
 830       break;
 831     case OPT_Bdynamic:
 832       Config->Static = false;
 833       break;
 834     case OPT_whole_archive:
 835       InWholeArchive = true;
 836       break;
 837     case OPT_no_whole_archive:
 838       InWholeArchive = false;
 839       break;
 840     case OPT_start_lib:
 841       InLib = true;
 842       break;
 843     case OPT_end_lib:
 844       InLib = false;
 845       break;
 846     }
 847   }
 848
 849   if (Files.empty() && ErrorCount == 0)
 850     error("no input files");
 851 }
 852
 853 // If -m <machine_type> was not given, infer it from object files.
 854 void LinkerDriver::inferMachineType() {
 855   if (Config->EKind != ELFNoneKind)
 856     return;
 857
 858   for (InputFile *F : Files) {
 859     if (F->EKind == ELFNoneKind)
 860       continue;
 861     Config->EKind = F->EKind;
 862     Config->EMachine = F->EMachine;
 863     Config->OSABI = F->OSABI;
 864     Config->MipsN32Abi = Config->EMachine == EM_MIPS && isMipsN32Abi(F);
 865     return;
 866   }
 867   error("target emulation unknown: -m or at least one .o file required");
 868 }
 869
 870 // Parse -z max-page-size=<value>. The default value is defined by
 871 // each target.
 872 static uint64_t getMaxPageSize(opt::InputArgList &Args) {
 873   uint64_t Val =
 874       getZOptionValue(Args, "max-page-size", Target->DefaultMaxPageSize);
 875   if (!isPowerOf2_64(Val))
 876     error("max-page-size: value isn't a power of 2");
 877   return Val;
 878 }
 879
 880 // Parses -image-base option.
 881 static uint64_t getImageBase(opt::InputArgList &Args) {
 882   // Use default if no -image-base option is given.
 883   // Because we are using "Target" here, this function
 884   // has to be called after the variable is initialized.
 885   auto *Arg = Args.getLastArg(OPT_image_base);
 886   if (!Arg)
 887     return Config->Pic ? 0 : Target->DefaultImageBase;
 888
 889   StringRef S = Arg->getValue();
 890   uint64_t V;
 891   if (!to_integer(S, V)) {
 892     error("-image-base: number expected, but got " + S);
 893     return 0;
 894   }
 895   if ((V % Config->MaxPageSize) != 0)
 896     warn("-image-base: address isn't multiple of page size: " + S);
 897   return V;
 898 }
 899
 900 // Parses --defsym=alias option.
 901 static std::vector<std::pair<StringRef, StringRef>>
 902 getDefsym(opt::InputArgList &Args) {
 903   std::vector<std::pair<StringRef, StringRef>> Ret;
 904   for (auto *Arg : Args.filtered(OPT_defsym)) {
 905     StringRef From;
 906     StringRef To;
 907     std::tie(From, To) = StringRef(Arg->getValue()).split('=');
 908     if (!isValidCIdentifier(To))
 909       error("--defsym: symbol name expected, but got " + To);
 910     Ret.push_back({From, To});
 911   }
 912   return Ret;
 913 }
 914
 915 // Parses `--exclude-libs=lib,lib,...`.
 916 // The library names may be delimited by commas or colons.
 917 static DenseSet<StringRef> getExcludeLibs(opt::InputArgList &Args) {
 918   DenseSet<StringRef> Ret;
 919   for (auto *Arg : Args.filtered(OPT_exclude_libs)) {
 920     StringRef S = Arg->getValue();
 921     for (;;) {
 922       size_t Pos = S.find_first_of(",:");
 923       if (Pos == StringRef::npos)
 924         break;
 925       Ret.insert(S.substr(0, Pos));
 926       S = S.substr(Pos + 1);
 927     }
 928     Ret.insert(S);
 929   }
 930   return Ret;
 931 }
 932
 933 // Handles the -exclude-libs option. If a static library file is specified
 934 // by the -exclude-libs option, all public symbols from the archive become
 935 // private unless otherwise specified by version scripts or something.
 936 // A special library name "ALL" means all archive files.
 937 //
 938 // This is not a popular option, but some programs such as bionic libc use it.
 939 static void excludeLibs(opt::InputArgList &Args, ArrayRef<InputFile *> Files) {
 940   DenseSet<StringRef> Libs = getExcludeLibs(Args);
 941   bool All = Libs.count("ALL");
 942
 943   for (InputFile *File : Files)
 944     if (auto *F = dyn_cast<ArchiveFile>(File))
 945       if (All || Libs.count(path::filename(F->getName())))
 946         for (Symbol *Sym : F->getSymbols())
 947           Sym->VersionId = VER_NDX_LOCAL;
 948 }
 949
 950 // Do actual linking. Note that when this function is called,
 951 // all linker scripts have already been parsed.
 952 template <class ELFT> void LinkerDriver::link(opt::InputArgList &Args) {
 953   SymbolTable<ELFT> Symtab;
 954   elf::Symtab<ELFT>::X = &Symtab;
 955   Target = getTarget();
 956
 957   Config->MaxPageSize = getMaxPageSize(Args);
 958   Config->ImageBase = getImageBase(Args);
 959
 960   // Default output filename is "a.out" by the Unix tradition.
 961   if (Config->OutputFile.empty())
 962     Config->OutputFile = "a.out";
 963
 964   // Fail early if the output file or map file is not writable. If a user has a
 965   // long link, e.g. due to a large LTO link, they do not wish to run it and
 966   // find that it failed because there was a mistake in their command-line.
 967   if (auto E = tryCreateFile(Config->OutputFile))
 968     error("cannot open output file " + Config->OutputFile + ": " + E.message());
 969   if (auto E = tryCreateFile(Config->MapFile))
 970     error("cannot open map file " + Config->MapFile + ": " + E.message());
 971   if (ErrorCount)
 972     return;
 973
 974   // Use default entry point name if no name was given via the command
 975   // line nor linker scripts. For some reason, MIPS entry point name is
 976   // different from others.
 977   Config->WarnMissingEntry =
 978       (!Config->Entry.empty() || (!Config->Shared && !Config->Relocatable));
 979   if (Config->Entry.empty() && !Config->Relocatable)
 980     Config->Entry = (Config->EMachine == EM_MIPS) ? "__start" : "_start";
 981
 982   // Handle --trace-symbol.
 983   for (auto *Arg : Args.filtered(OPT_trace_symbol))
 984     Symtab.trace(Arg->getValue());
 985
 986   // Add all files to the symbol table. This will add almost all
 987   // symbols that we need to the symbol table.
 988   for (InputFile *F : Files)
 989     Symtab.addFile(F);
 990
 991   // If an entry symbol is in a static archive, pull out that file now
 992   // to complete the symbol table. After this, no new names except a
 993   // few linker-synthesized ones will be added to the symbol table.
 994   if (Symtab.find(Config->Entry))
 995     Symtab.addUndefined(Config->Entry);
 996
 997   // Return if there were name resolution errors.
 998   if (ErrorCount)
 999     return;
1000
1001   // Handle the `--undefined <sym>` options.
1002   Symtab.scanUndefinedFlags();
1003
1004   // Handle undefined symbols in DSOs.
1005   Symtab.scanShlibUndefined();
1006
1007   // Handle the -exclude-libs option.
1008   if (Args.hasArg(OPT_exclude_libs))
1009     excludeLibs(Args, Files);
1010
1011   // Apply version scripts.
1012   Symtab.scanVersionScript();
1013
1014   // Create wrapped symbols for -wrap option.
1015   for (auto *Arg : Args.filtered(OPT_wrap))
1016     Symtab.addSymbolWrap(Arg->getValue());
1017
1018   // Create alias symbols for -defsym option.
1019   for (std::pair<StringRef, StringRef> &Def : getDefsym(Args))
1020     Symtab.addSymbolAlias(Def.first, Def.second);
1021
1022   Symtab.addCombinedLTOObject();
1023   if (ErrorCount)
1024     return;
1025
1026   // Some symbols (such as __ehdr_start) are defined lazily only when there
1027   // are undefined symbols for them, so we add these to trigger that logic.
1028   for (StringRef Sym : Script->Opt.ReferencedSymbols)
1029     Symtab.addUndefined(Sym);
1030
1031   // Apply symbol renames for -wrap and -defsym
1032   Symtab.applySymbolRenames();
1033
1034   // Now that we have a complete list of input files.
1035   // Beyond this point, no new files are added.
1036   // Aggregate all input sections into one place.
1037   for (elf::ObjectFile<ELFT> *F : Symtab.getObjectFiles())
1038     for (InputSectionBase *S : F->getSections())
1039       if (S && S != &InputSection::Discarded)
1040         InputSections.push_back(S);
1041   for (BinaryFile *F : Symtab.getBinaryFiles())
1042     for (InputSectionBase *S : F->getSections())
1043       InputSections.push_back(cast<InputSection>(S));
1044
1045   // This adds a .comment section containing a version string. We have to add it
1046   // before decompressAndMergeSections because the .comment section is a
1047   // mergeable section.
1048   if (!Config->Relocatable)
1049     InputSections.push_back(createCommentSection<ELFT>());
1050
1051   // Do size optimizations: garbage collection, merging of SHF_MERGE sections
1052   // and identical code folding.
1053   if (Config->GcSections)
1054     markLive<ELFT>();
1055   decompressAndMergeSections();
1056   if (Config->ICF)
1057     doIcf<ELFT>();
1058
1059   // Write the result to the file.
1060   writeResult<ELFT>();
1061 }