tests/compiletest.rs

   1 #![feature(slice_concat_ext)]
   2
   3 extern crate compiletest_rs as compiletest;
   4
   5 use std::slice::SliceConcatExt;
   6 use std::path::{PathBuf, Path};
   7 use std::io::Write;
   8 use std::env;
   9
  10 macro_rules! eprintln {
  11     ($($arg:tt)*) => {
  12         let stderr = std::io::stderr();
  13         writeln!(stderr.lock(), $($arg)*).unwrap();
  14     }
  15 }
  16
  17 fn miri_path() -> PathBuf {
  18     if rustc_test_suite().is_some() {
  19         PathBuf::from(option_env!("MIRI_PATH").unwrap())
  20     } else {
  21         PathBuf::from(concat!("target/", env!("PROFILE"), "/miri"))
  22     }
  23 }
  24
  25 fn rustc_test_suite() -> Option<PathBuf> {
  26     option_env!("RUSTC_TEST_SUITE").map(PathBuf::from)
  27 }
  28
  29 fn rustc_lib_path() -> PathBuf {
  30     option_env!("RUSTC_LIB_PATH").unwrap().into()
  31 }
  32
  33 fn compile_fail(sysroot: &Path, path: &str, target: &str, host: &str, fullmir: bool) {
  34     eprintln!(
  35         "## Running compile-fail tests in {} against miri for target {}",
  36         path,
  37         target
  38     );
  39     let mut config = compiletest::Config::default().tempdir();
  40     config.mode = "compile-fail".parse().expect("Invalid mode");
  41     config.rustc_path = miri_path();
  42     let mut flags = Vec::new();
  43     if rustc_test_suite().is_some() {
  44         config.run_lib_path = rustc_lib_path();
  45         config.compile_lib_path = rustc_lib_path();
  46     }
  47     // if we are building as part of the rustc test suite, we already have fullmir for everything
  48     if fullmir && rustc_test_suite().is_none() {
  49         if host != target {
  50             // skip fullmir on nonhost
  51             return;
  52         }
  53         let sysroot = std::env::home_dir().unwrap()
  54             .join(".xargo")
  55             .join("HOST");
  56         config.target_rustcflags = Some(format!("--sysroot {}", sysroot.to_str().unwrap()));
  57         config.src_base = PathBuf::from(path.to_string());
  58     } else {
  59         config.target_rustcflags = Some(format!("--sysroot {}", sysroot.to_str().unwrap()));
  60         config.src_base = PathBuf::from(path.to_string());
  61     }
  62     flags.push("-Zmir-emit-validate=1".to_owned());
  63     config.target_rustcflags = Some(flags.join(" "));
  64     config.target = target.to_owned();
  65     compiletest::run_tests(&config);
  66 }
  67
  68 fn run_pass(path: &str) {
  69     eprintln!("## Running run-pass tests in {} against rustc", path);
  70     let mut config = compiletest::Config::default().tempdir();
  71     config.mode = "run-pass".parse().expect("Invalid mode");
  72     config.src_base = PathBuf::from(path);
  73     if let Some(rustc_path) = rustc_test_suite() {
  74         config.rustc_path = rustc_path;
  75         config.run_lib_path = rustc_lib_path();
  76         config.compile_lib_path = rustc_lib_path();
  77         config.target_rustcflags = Some(format!("-Dwarnings --sysroot {}", get_sysroot().display()));
  78     } else {
  79         config.target_rustcflags = Some("-Dwarnings".to_owned());
  80     }
  81     config.host_rustcflags = Some("-Dwarnings".to_string());
  82     compiletest::run_tests(&config);
  83 }
  84
  85 fn miri_pass(path: &str, target: &str, host: &str, fullmir: bool, opt: bool) {
  86     let opt_str = if opt { " with optimizations" } else { "" };
  87     eprintln!(
  88         "## Running run-pass tests in {} against miri for target {}{}",
  89         path,
  90         target,
  91         opt_str
  92     );
  93     let mut config = compiletest::Config::default().tempdir();
  94     config.mode = "ui".parse().expect("Invalid mode");
  95     config.src_base = PathBuf::from(path);
  96     config.target = target.to_owned();
  97     config.host = host.to_owned();
  98     config.rustc_path = miri_path();
  99     if rustc_test_suite().is_some() {
 100         config.run_lib_path = rustc_lib_path();
 101         config.compile_lib_path = rustc_lib_path();
 102     }
 103     let mut flags = Vec::new();
 104     // Control miri logging. This is okay despite concurrent test execution as all tests
 105     // will set this env var to the same value.
 106     env::set_var("MIRI_LOG", "warn");
 107     // if we are building as part of the rustc test suite, we already have fullmir for everything
 108     if fullmir && rustc_test_suite().is_none() {
 109         if host != target {
 110             // skip fullmir on nonhost
 111             return;
 112         }
 113         let sysroot = std::env::home_dir().unwrap()
 114             .join(".xargo")
 115             .join("HOST");
 116
 117         flags.push(format!("--sysroot {}", sysroot.to_str().unwrap()));
 118     }
 119     if opt {
 120         flags.push("-Zmir-opt-level=3".to_owned());
 121     } else {
 122         flags.push("-Zmir-opt-level=0".to_owned());
 123         // For now, only validate without optimizations.  Inlining breaks validation.
 124         flags.push("-Zmir-emit-validate=1".to_owned());
 125     }
 126     config.target_rustcflags = Some(flags.join(" "));
 127     compiletest::run_tests(&config);
 128 }
 129
 130 fn is_target_dir<P: Into<PathBuf>>(path: P) -> bool {
 131     let mut path = path.into();
 132     path.push("lib");
 133     path.metadata().map(|m| m.is_dir()).unwrap_or(false)
 134 }
 135
 136 fn for_all_targets<F: FnMut(String)>(sysroot: &Path, mut f: F) {
 137     let target_dir = sysroot.join("lib").join("rustlib");
 138     for entry in std::fs::read_dir(target_dir).expect("invalid sysroot") {
 139         let entry = entry.unwrap();
 140         if !is_target_dir(entry.path()) {
 141             continue;
 142         }
 143         let target = entry.file_name().into_string().unwrap();
 144         f(target);
 145     }
 146 }
 147
 148 fn get_sysroot() -> PathBuf {
 149     let sysroot = std::env::var("MIRI_SYSROOT").unwrap_or_else(|_| {
 150         let sysroot = std::process::Command::new("rustc")
 151             .arg("--print")
 152             .arg("sysroot")
 153             .output()
 154             .expect("rustc not found")
 155             .stdout;
 156         String::from_utf8(sysroot).expect("sysroot is not utf8")
 157     });
 158     PathBuf::from(sysroot.trim())
 159 }
 160
 161 fn get_host() -> String {
 162     let rustc = rustc_test_suite().unwrap_or(PathBuf::from("rustc"));
 163     println!("using rustc at {}", rustc.display());
 164     let host = std::process::Command::new(rustc)
 165         .arg("-vV")
 166         .output()
 167         .expect("rustc not found for -vV")
 168         .stdout;
 169     let host = std::str::from_utf8(&host).expect("sysroot is not utf8");
 170     let host = host.split("\nhost: ").nth(1).expect(
 171         "no host: part in rustc -vV",
 172     );
 173     let host = host.split('\n').next().expect("no \n after host");
 174     String::from(host)
 175 }
 176
 177 fn run_pass_miri(opt: bool) {
 178     let sysroot = get_sysroot();
 179     let host = get_host();
 180
 181     for_all_targets(&sysroot, |target| {
 182         miri_pass("tests/run-pass", &target, &host, false, opt);
 183     });
 184     miri_pass("tests/run-pass-fullmir", &host, &host, true, opt);
 185 }
 186
 187 #[test]
 188 fn run_pass_miri_noopt() {
 189     run_pass_miri(false);
 190 }
 191
 192 #[test]
 193 #[ignore] // FIXME: Disabled for now, as the optimizer is pretty broken and crashes...
 194 fn run_pass_miri_opt() {
 195     run_pass_miri(true);
 196 }
 197
 198 #[test]
 199 fn run_pass_rustc() {
 200     run_pass("tests/run-pass");
 201     run_pass("tests/run-pass-fullmir");
 202 }
 203
 204 #[test]
 205 fn compile_fail_miri() {
 206     let sysroot = get_sysroot();
 207     let host = get_host();
 208
 209     for_all_targets(&sysroot, |target| {
 210         compile_fail(&sysroot, "tests/compile-fail", &target, &host, false);
 211     });
 212     compile_fail(&sysroot, "tests/compile-fail-fullmir", &host, &host, true);
 213 }