src/bootstrap/sanity.rs

   1 //! Sanity checking performed by rustbuild before actually executing anything.
   2 //!
   3 //! This module contains the implementation of ensuring that the build
   4 //! environment looks reasonable before progressing. This will verify that
   5 //! various programs like git and python exist, along with ensuring that all C
   6 //! compilers for cross-compiling are found.
   7 //!
   8 //! In theory if we get past this phase it's a bug if a build fails, but in
   9 //! practice that's likely not true!
  10
  11 use std::collections::HashMap;
  12 use std::env;
  13 use std::ffi::{OsStr, OsString};
  14 use std::fs;
  15 use std::path::PathBuf;
  16 use std::process::Command;
  17
  18 use build_helper::{output, t};
  19
  20 use crate::cache::INTERNER;
  21 use crate::config::Target;
  22 use crate::Build;
  23
  24 pub struct Finder {
  25     cache: HashMap<OsString, Option<PathBuf>>,
  26     path: OsString,
  27 }
  28
  29 impl Finder {
  30     pub fn new() -> Self {
  31         Self { cache: HashMap::new(), path: env::var_os("PATH").unwrap_or_default() }
  32     }
  33
  34     pub fn maybe_have<S: Into<OsString>>(&mut self, cmd: S) -> Option<PathBuf> {
  35         let cmd: OsString = cmd.into();
  36         let path = &self.path;
  37         self.cache
  38             .entry(cmd.clone())
  39             .or_insert_with(|| {
  40                 for path in env::split_paths(path) {
  41                     let target = path.join(&cmd);
  42                     let mut cmd_exe = cmd.clone();
  43                     cmd_exe.push(".exe");
  44
  45                     if target.is_file()                   // some/path/git
  46                     || path.join(&cmd_exe).exists()   // some/path/git.exe
  47                     || target.join(&cmd_exe).exists()
  48                     // some/path/git/git.exe
  49                     {
  50                         return Some(target);
  51                     }
  52                 }
  53                 None
  54             })
  55             .clone()
  56     }
  57
  58     pub fn must_have<S: AsRef<OsStr>>(&mut self, cmd: S) -> PathBuf {
  59         self.maybe_have(&cmd).unwrap_or_else(|| {
  60             panic!("\n\ncouldn't find required command: {:?}\n\n", cmd.as_ref());
  61         })
  62     }
  63 }
  64
  65 pub fn check(build: &mut Build) {
  66     let path = env::var_os("PATH").unwrap_or_default();
  67     // On Windows, quotes are invalid characters for filename paths, and if
  68     // one is present as part of the PATH then that can lead to the system
  69     // being unable to identify the files properly. See
  70     // https://github.com/rust-lang/rust/issues/34959 for more details.
  71     if cfg!(windows) && path.to_string_lossy().contains('\"') {
  72         panic!("PATH contains invalid character '\"'");
  73     }
  74
  75     let mut cmd_finder = Finder::new();
  76     // If we've got a git directory we're gonna need git to update
  77     // submodules and learn about various other aspects.
  78     if build.rust_info.is_git() {
  79         cmd_finder.must_have("git");
  80     }
  81
  82     // We need cmake, but only if we're actually building LLVM or sanitizers.
  83     let building_llvm = build.config.rust_codegen_backends.contains(&INTERNER.intern_str("llvm"))
  84         && build
  85             .hosts
  86             .iter()
  87             .map(|host| {
  88                 build
  89                     .config
  90                     .target_config
  91                     .get(host)
  92                     .map(|config| config.llvm_config.is_none())
  93                     .unwrap_or(true)
  94             })
  95             .any(|build_llvm_ourselves| build_llvm_ourselves);
  96     if building_llvm || build.config.any_sanitizers_enabled() {
  97         cmd_finder.must_have("cmake");
  98     }
  99
 100     build.config.python = build
 101         .config
 102         .python
 103         .take()
 104         .map(|p| cmd_finder.must_have(p))
 105         .or_else(|| env::var_os("BOOTSTRAP_PYTHON").map(PathBuf::from)) // set by bootstrap.py
 106         .or_else(|| Some(cmd_finder.must_have("python")));
 107
 108     build.config.nodejs = build
 109         .config
 110         .nodejs
 111         .take()
 112         .map(|p| cmd_finder.must_have(p))
 113         .or_else(|| cmd_finder.maybe_have("node"))
 114         .or_else(|| cmd_finder.maybe_have("nodejs"));
 115
 116     build.config.npm = build
 117         .config
 118         .npm
 119         .take()
 120         .map(|p| cmd_finder.must_have(p))
 121         .or_else(|| cmd_finder.maybe_have("npm"));
 122
 123     build.config.gdb = build
 124         .config
 125         .gdb
 126         .take()
 127         .map(|p| cmd_finder.must_have(p))
 128         .or_else(|| cmd_finder.maybe_have("gdb"));
 129
 130     // We're gonna build some custom C code here and there, host triples
 131     // also build some C++ shims for LLVM so we need a C++ compiler.
 132     for target in &build.targets {
 133         // On emscripten we don't actually need the C compiler to just
 134         // build the target artifacts, only for testing. For the sake
 135         // of easier bot configuration, just skip detection.
 136         if target.contains("emscripten") {
 137             continue;
 138         }
 139
 140         // We don't use a C compiler on wasm32
 141         if target.contains("wasm32") {
 142             continue;
 143         }
 144
 145         if !build.config.dry_run {
 146             cmd_finder.must_have(build.cc(*target));
 147             if let Some(ar) = build.ar(*target) {
 148                 cmd_finder.must_have(ar);
 149             }
 150         }
 151     }
 152
 153     for host in &build.hosts {
 154         if !build.config.dry_run {
 155             cmd_finder.must_have(build.cxx(*host).unwrap());
 156         }
 157     }
 158
 159     if build.config.rust_codegen_backends.contains(&INTERNER.intern_str("llvm")) {
 160         // Externally configured LLVM requires FileCheck to exist
 161         let filecheck = build.llvm_filecheck(build.build);
 162         if !filecheck.starts_with(&build.out) && !filecheck.exists() && build.config.codegen_tests {
 163             panic!("FileCheck executable {:?} does not exist", filecheck);
 164         }
 165     }
 166
 167     for target in &build.targets {
 168         // Can't compile for iOS unless we're on macOS
 169         if target.contains("apple-ios") && !build.build.contains("apple-darwin") {
 170             panic!("the iOS target is only supported on macOS");
 171         }
 172
 173         build
 174             .config
 175             .target_config
 176             .entry(*target)
 177             .or_insert_with(|| Target::from_triple(&target.triple));
 178
 179         if target.contains("-none-") || target.contains("nvptx") {
 180             if build.no_std(*target) == Some(false) {
 181                 panic!("All the *-none-* and nvptx* targets are no-std targets")
 182             }
 183         }
 184
 185         // Make sure musl-root is valid
 186         if target.contains("musl") {
 187             // If this is a native target (host is also musl) and no musl-root is given,
 188             // fall back to the system toolchain in /usr before giving up
 189             if build.musl_root(*target).is_none() && build.config.build == *target {
 190                 let target = build.config.target_config.entry(*target).or_default();
 191                 target.musl_root = Some("/usr".into());
 192             }
 193             match build.musl_libdir(*target) {
 194                 Some(libdir) => {
 195                     if fs::metadata(libdir.join("libc.a")).is_err() {
 196                         panic!("couldn't find libc.a in musl libdir: {}", libdir.display());
 197                     }
 198                 }
 199                 None => panic!(
 200                     "when targeting MUSL either the rust.musl-root \
 201                             option or the target.$TARGET.musl-root option must \
 202                             be specified in config.toml"
 203                 ),
 204             }
 205         }
 206
 207         if target.contains("msvc") {
 208             // There are three builds of cmake on windows: MSVC, MinGW, and
 209             // Cygwin. The Cygwin build does not have generators for Visual
 210             // Studio, so detect that here and error.
 211             let out = output(Command::new("cmake").arg("--help"));
 212             if !out.contains("Visual Studio") {
 213                 panic!(
 214                     "
 215 cmake does not support Visual Studio generators.
 216
 217 This is likely due to it being an msys/cygwin build of cmake,
 218 rather than the required windows version, built using MinGW
 219 or Visual Studio.
 220
 221 If you are building under msys2 try installing the mingw-w64-x86_64-cmake
 222 package instead of cmake:
 223
 224 $ pacman -R cmake && pacman -S mingw-w64-x86_64-cmake
 225 "
 226                 );
 227             }
 228         }
 229     }
 230
 231     if let Some(ref s) = build.config.ccache {
 232         cmd_finder.must_have(s);
 233     }
 234
 235     if build.config.channel == "stable" {
 236         let stage0 = t!(fs::read_to_string(build.src.join("src/stage0.txt")));
 237         if stage0.contains("\ndev:") {
 238             panic!(
 239                 "bootstrapping from a dev compiler in a stable release, but \
 240                     should only be bootstrapping from a released compiler!"
 241             );
 242         }
 243     }
 244 }