]> git.lizzy.rs Git - rust.git/blob - src/librustc_interface/passes.rs
Rollup merge of #66182 - RalfJung:invalid-value, r=Centril
[rust.git] / src / librustc_interface / passes.rs
1 use crate::interface::{Compiler, Result};
2 use crate::util;
3 use crate::proc_macro_decls;
4
5 use log::{info, warn, log_enabled};
6 use rustc::dep_graph::DepGraph;
7 use rustc::hir;
8 use rustc::hir::lowering::lower_crate;
9 use rustc::hir::def_id::{CrateNum, LOCAL_CRATE};
10 use rustc::lint;
11 use rustc::middle::{self, reachable, resolve_lifetime, stability};
12 use rustc::middle::cstore::{CrateStore, MetadataLoader, MetadataLoaderDyn};
13 use rustc::ty::{self, AllArenas, ResolverOutputs, TyCtxt, GlobalCtxt};
14 use rustc::ty::steal::Steal;
15 use rustc::traits;
16 use rustc::util::common::{time, ErrorReported};
17 use rustc::session::Session;
18 use rustc::session::config::{self, CrateType, Input, OutputFilenames, OutputType};
19 use rustc::session::search_paths::PathKind;
20 use rustc_codegen_ssa::back::link::emit_metadata;
21 use rustc_codegen_utils::codegen_backend::CodegenBackend;
22 use rustc_codegen_utils::link::filename_for_metadata;
23 use rustc_data_structures::{box_region_allow_access, declare_box_region_type, parallel};
24 use rustc_data_structures::sync::{Lrc, ParallelIterator, par_iter};
25 use rustc_errors::PResult;
26 use rustc_incremental;
27 use rustc_metadata::cstore;
28 use rustc_mir as mir;
29 use rustc_passes::{self, ast_validation, hir_stats, layout_test};
30 use rustc_plugin as plugin;
31 use rustc_plugin::registry::Registry;
32 use rustc_privacy;
33 use rustc_resolve::{Resolver, ResolverArenas};
34 use rustc_traits;
35 use rustc_typeck as typeck;
36 use syntax::{self, ast, visit};
37 use syntax::early_buffered_lints::BufferedEarlyLint;
38 use syntax_expand::base::{NamedSyntaxExtension, ExtCtxt};
39 use syntax::mut_visit::MutVisitor;
40 use syntax::parse;
41 use syntax::util::node_count::NodeCounter;
42 use syntax::symbol::Symbol;
43 use syntax_pos::FileName;
44 use syntax_ext;
45
46 use rustc_serialize::json;
47 use tempfile::Builder as TempFileBuilder;
48
49 use std::{env, fs, iter, mem};
50 use std::any::Any;
51 use std::ffi::OsString;
52 use std::io::{self, Write};
53 use std::path::PathBuf;
54 use std::cell::RefCell;
55 use std::rc::Rc;
56
57 pub fn parse<'a>(sess: &'a Session, input: &Input) -> PResult<'a, ast::Crate> {
58     sess.diagnostic()
59         .set_continue_after_error(sess.opts.debugging_opts.continue_parse_after_error);
60     let krate = time(sess, "parsing", || {
61         let _prof_timer = sess.prof.generic_activity("parse_crate");
62
63         match *input {
64             Input::File(ref file) => parse::parse_crate_from_file(file, &sess.parse_sess),
65             Input::Str {
66                 ref input,
67                 ref name,
68             } => parse::parse_crate_from_source_str(name.clone(), input.clone(), &sess.parse_sess),
69         }
70     })?;
71
72     sess.diagnostic().set_continue_after_error(true);
73
74     if sess.opts.debugging_opts.ast_json_noexpand {
75         println!("{}", json::as_json(&krate));
76     }
77
78     if sess.opts.debugging_opts.input_stats {
79         println!(
80             "Lines of code:             {}",
81             sess.source_map().count_lines()
82         );
83         println!("Pre-expansion node count:  {}", count_nodes(&krate));
84     }
85
86     if let Some(ref s) = sess.opts.debugging_opts.show_span {
87         syntax::show_span::run(sess.diagnostic(), s, &krate);
88     }
89
90     if sess.opts.debugging_opts.hir_stats {
91         hir_stats::print_ast_stats(&krate, "PRE EXPANSION AST STATS");
92     }
93
94     Ok(krate)
95 }
96
97 fn count_nodes(krate: &ast::Crate) -> usize {
98     let mut counter = NodeCounter::new();
99     visit::walk_crate(&mut counter, krate);
100     counter.count
101 }
102
103 declare_box_region_type!(
104     pub BoxedResolver,
105     for(),
106     (&mut Resolver<'_>) -> (Result<ast::Crate>, ResolverOutputs)
107 );
108
109 /// Runs the "early phases" of the compiler: initial `cfg` processing,
110 /// loading compiler plugins (including those from `addl_plugins`),
111 /// syntax expansion, secondary `cfg` expansion, synthesis of a test
112 /// harness if one is to be provided, injection of a dependency on the
113 /// standard library and prelude, and name resolution.
114 ///
115 /// Returns `None` if we're aborting after handling -W help.
116 pub fn configure_and_expand(
117     sess: Lrc<Session>,
118     lint_store: Lrc<lint::LintStore>,
119     metadata_loader: Box<MetadataLoaderDyn>,
120     krate: ast::Crate,
121     crate_name: &str,
122     plugin_info: PluginInfo,
123 ) -> Result<(ast::Crate, BoxedResolver)> {
124     // Currently, we ignore the name resolution data structures for the purposes of dependency
125     // tracking. Instead we will run name resolution and include its output in the hash of each
126     // item, much like we do for macro expansion. In other words, the hash reflects not just
127     // its contents but the results of name resolution on those contents. Hopefully we'll push
128     // this back at some point.
129     let crate_name = crate_name.to_string();
130     let (result, resolver) = BoxedResolver::new(static move || {
131         let sess = &*sess;
132         let resolver_arenas = Resolver::arenas();
133         let res = configure_and_expand_inner(
134             sess,
135             &lint_store,
136             krate,
137             &crate_name,
138             &resolver_arenas,
139             &*metadata_loader,
140             plugin_info,
141         );
142         let mut resolver = match res {
143             Err(v) => {
144                 yield BoxedResolver::initial_yield(Err(v));
145                 panic!()
146             }
147             Ok((krate, resolver)) => {
148                 yield BoxedResolver::initial_yield(Ok(krate));
149                 resolver
150             }
151         };
152         box_region_allow_access!(for(), (&mut Resolver<'_>), (&mut resolver));
153         resolver.into_outputs()
154     });
155     result.map(|k| (k, resolver))
156 }
157
158 impl BoxedResolver {
159     pub fn to_resolver_outputs(resolver: Rc<RefCell<BoxedResolver>>) -> ResolverOutputs {
160         match Rc::try_unwrap(resolver) {
161             Ok(resolver) => resolver.into_inner().complete(),
162             Err(resolver) => resolver.borrow_mut().access(|resolver| resolver.clone_outputs()),
163         }
164     }
165 }
166
167 pub struct PluginInfo {
168     syntax_exts: Vec<NamedSyntaxExtension>,
169 }
170
171 pub fn register_plugins<'a>(
172     sess: &'a Session,
173     metadata_loader: &'a dyn MetadataLoader,
174     register_lints: impl Fn(&Session, &mut lint::LintStore),
175     mut krate: ast::Crate,
176     crate_name: &str,
177 ) -> Result<(ast::Crate, PluginInfo, Lrc<lint::LintStore>)> {
178     krate = time(sess, "attributes injection", || {
179         syntax_ext::cmdline_attrs::inject(
180             krate, &sess.parse_sess, &sess.opts.debugging_opts.crate_attr
181         )
182     });
183
184     let (krate, features) = syntax::config::features(
185         krate,
186         &sess.parse_sess,
187         sess.edition(),
188         &sess.opts.debugging_opts.allow_features,
189     );
190     // these need to be set "early" so that expansion sees `quote` if enabled.
191     sess.init_features(features);
192
193     let crate_types = util::collect_crate_types(sess, &krate.attrs);
194     sess.crate_types.set(crate_types);
195
196     let disambiguator = util::compute_crate_disambiguator(sess);
197     sess.crate_disambiguator.set(disambiguator);
198     rustc_incremental::prepare_session_directory(sess, &crate_name, disambiguator);
199
200     if sess.opts.incremental.is_some() {
201         time(sess, "garbage-collect incremental cache directory", || {
202             let _prof_timer =
203                 sess.prof.generic_activity("incr_comp_garbage_collect_session_directories");
204             if let Err(e) = rustc_incremental::garbage_collect_session_directories(sess) {
205                 warn!(
206                     "Error while trying to garbage collect incremental \
207                      compilation cache directory: {}",
208                     e
209                 );
210             }
211         });
212     }
213
214     time(sess, "recursion limit", || {
215         middle::recursion_limit::update_limits(sess, &krate);
216     });
217
218     let registrars = time(sess, "plugin loading", || {
219         plugin::load::load_plugins(
220             sess,
221             metadata_loader,
222             &krate,
223             Some(sess.opts.debugging_opts.extra_plugins.clone()),
224         )
225     });
226
227     let mut lint_store = rustc_lint::new_lint_store(
228         sess.opts.debugging_opts.no_interleave_lints,
229         sess.unstable_options(),
230     );
231
232     (register_lints)(&sess, &mut lint_store);
233
234     let mut registry = Registry::new(sess, &mut lint_store, krate.span);
235
236     time(sess, "plugin registration", || {
237         for registrar in registrars {
238             registry.args_hidden = Some(registrar.args);
239             (registrar.fun)(&mut registry);
240         }
241     });
242
243     let Registry {
244         syntax_exts,
245         llvm_passes,
246         attributes,
247         ..
248     } = registry;
249
250     *sess.plugin_llvm_passes.borrow_mut() = llvm_passes;
251     *sess.plugin_attributes.borrow_mut() = attributes;
252
253     Ok((krate, PluginInfo { syntax_exts }, Lrc::new(lint_store)))
254 }
255
256 fn configure_and_expand_inner<'a>(
257     sess: &'a Session,
258     lint_store: &'a lint::LintStore,
259     mut krate: ast::Crate,
260     crate_name: &str,
261     resolver_arenas: &'a ResolverArenas<'a>,
262     metadata_loader: &'a MetadataLoaderDyn,
263     plugin_info: PluginInfo,
264 ) -> Result<(ast::Crate, Resolver<'a>)> {
265     time(sess, "pre-AST-expansion lint checks", || {
266         lint::check_ast_crate(
267             sess,
268             lint_store,
269             &krate,
270             true,
271             None,
272             rustc_lint::BuiltinCombinedPreExpansionLintPass::new());
273     });
274
275     let mut resolver = Resolver::new(
276         sess,
277         &krate,
278         crate_name,
279         metadata_loader,
280         &resolver_arenas,
281     );
282     syntax_ext::register_builtin_macros(&mut resolver, sess.edition());
283
284     krate = time(sess, "crate injection", || {
285         let alt_std_name = sess.opts.alt_std_name.as_ref().map(|s| Symbol::intern(s));
286         let (krate, name) = syntax_ext::standard_library_imports::inject(
287             krate,
288             &mut resolver,
289             &sess.parse_sess,
290             alt_std_name,
291         );
292         if let Some(name) = name {
293             sess.parse_sess.injected_crate_name.set(name);
294         }
295         krate
296     });
297
298     util::check_attr_crate_type(&krate.attrs, &mut resolver.lint_buffer());
299
300     syntax_ext::plugin_macro_defs::inject(
301         &mut krate, &mut resolver, plugin_info.syntax_exts, sess.edition()
302     );
303
304     // Expand all macros
305     krate = time(sess, "expansion", || {
306         let _prof_timer = sess.prof.generic_activity("macro_expand_crate");
307         // Windows dlls do not have rpaths, so they don't know how to find their
308         // dependencies. It's up to us to tell the system where to find all the
309         // dependent dlls. Note that this uses cfg!(windows) as opposed to
310         // targ_cfg because syntax extensions are always loaded for the host
311         // compiler, not for the target.
312         //
313         // This is somewhat of an inherently racy operation, however, as
314         // multiple threads calling this function could possibly continue
315         // extending PATH far beyond what it should. To solve this for now we
316         // just don't add any new elements to PATH which are already there
317         // within PATH. This is basically a targeted fix at #17360 for rustdoc
318         // which runs rustc in parallel but has been seen (#33844) to cause
319         // problems with PATH becoming too long.
320         let mut old_path = OsString::new();
321         if cfg!(windows) {
322             old_path = env::var_os("PATH").unwrap_or(old_path);
323             let mut new_path = sess.host_filesearch(PathKind::All).search_path_dirs();
324             for path in env::split_paths(&old_path) {
325                 if !new_path.contains(&path) {
326                     new_path.push(path);
327                 }
328             }
329             env::set_var(
330                 "PATH",
331                 &env::join_paths(
332                     new_path
333                         .iter()
334                         .filter(|p| env::join_paths(iter::once(p)).is_ok()),
335                 ).unwrap(),
336             );
337         }
338
339         // Create the config for macro expansion
340         let features = sess.features_untracked();
341         let cfg = syntax_expand::expand::ExpansionConfig {
342             features: Some(&features),
343             recursion_limit: *sess.recursion_limit.get(),
344             trace_mac: sess.opts.debugging_opts.trace_macros,
345             should_test: sess.opts.test,
346             ..syntax_expand::expand::ExpansionConfig::default(crate_name.to_string())
347         };
348
349         let mut ecx = ExtCtxt::new(&sess.parse_sess, cfg, &mut resolver);
350
351         // Expand macros now!
352         let krate = time(sess, "expand crate", || {
353             ecx.monotonic_expander().expand_crate(krate)
354         });
355
356         // The rest is error reporting
357
358         time(sess, "check unused macros", || {
359             ecx.check_unused_macros();
360         });
361
362         let mut missing_fragment_specifiers: Vec<_> = ecx.parse_sess
363             .missing_fragment_specifiers
364             .borrow()
365             .iter()
366             .cloned()
367             .collect();
368         missing_fragment_specifiers.sort();
369
370         for span in missing_fragment_specifiers {
371             let lint = lint::builtin::MISSING_FRAGMENT_SPECIFIER;
372             let msg = "missing fragment specifier";
373             resolver.lint_buffer().buffer_lint(lint, ast::CRATE_NODE_ID, span, msg);
374         }
375         if cfg!(windows) {
376             env::set_var("PATH", &old_path);
377         }
378         krate
379     });
380
381     time(sess, "maybe building test harness", || {
382         syntax_ext::test_harness::inject(
383             &sess.parse_sess,
384             &mut resolver,
385             sess.opts.test,
386             &mut krate,
387             sess.diagnostic(),
388             &sess.features_untracked(),
389             sess.panic_strategy(),
390             sess.target.target.options.panic_strategy,
391             sess.opts.debugging_opts.panic_abort_tests,
392         )
393     });
394
395     // If we're actually rustdoc then there's no need to actually compile
396     // anything, so switch everything to just looping
397     if sess.opts.actually_rustdoc {
398         util::ReplaceBodyWithLoop::new(sess).visit_crate(&mut krate);
399     }
400
401     let has_proc_macro_decls = time(sess, "AST validation", || {
402         ast_validation::check_crate(sess, &krate, &mut resolver.lint_buffer())
403     });
404
405
406     let crate_types = sess.crate_types.borrow();
407     let is_proc_macro_crate = crate_types.contains(&config::CrateType::ProcMacro);
408
409     // For backwards compatibility, we don't try to run proc macro injection
410     // if rustdoc is run on a proc macro crate without '--crate-type proc-macro' being
411     // specified. This should only affect users who manually invoke 'rustdoc', as
412     // 'cargo doc' will automatically pass the proper '--crate-type' flags.
413     // However, we do emit a warning, to let such users know that they should
414     // start passing '--crate-type proc-macro'
415     if has_proc_macro_decls && sess.opts.actually_rustdoc && !is_proc_macro_crate {
416         let mut msg = sess.diagnostic().struct_warn(&"Trying to document proc macro crate \
417             without passing '--crate-type proc-macro to rustdoc");
418
419         msg.warn("The generated documentation may be incorrect");
420         msg.emit()
421     } else {
422         krate = time(sess, "maybe creating a macro crate", || {
423             let num_crate_types = crate_types.len();
424             let is_test_crate = sess.opts.test;
425             syntax_ext::proc_macro_harness::inject(
426                 &sess.parse_sess,
427                 &mut resolver,
428                 krate,
429                 is_proc_macro_crate,
430                 has_proc_macro_decls,
431                 is_test_crate,
432                 num_crate_types,
433                 sess.diagnostic(),
434             )
435         });
436     }
437
438     // Done with macro expansion!
439
440     if sess.opts.debugging_opts.input_stats {
441         println!("Post-expansion node count: {}", count_nodes(&krate));
442     }
443
444     if sess.opts.debugging_opts.hir_stats {
445         hir_stats::print_ast_stats(&krate, "POST EXPANSION AST STATS");
446     }
447
448     if sess.opts.debugging_opts.ast_json {
449         println!("{}", json::as_json(&krate));
450     }
451
452     time(sess, "name resolution", || {
453         resolver.resolve_crate(&krate);
454     });
455
456     // Needs to go *after* expansion to be able to check the results of macro expansion.
457     time(sess, "complete gated feature checking", || {
458         syntax::feature_gate::check_crate(
459             &krate,
460             &sess.parse_sess,
461             &sess.features_untracked(),
462             sess.opts.unstable_features,
463         );
464     });
465
466     // Add all buffered lints from the `ParseSess` to the `Session`.
467     sess.parse_sess.buffered_lints.with_lock(|buffered_lints| {
468         info!("{} parse sess buffered_lints", buffered_lints.len());
469         for BufferedEarlyLint{id, span, msg, lint_id} in buffered_lints.drain(..) {
470             let lint = lint::Lint::from_parser_lint_id(lint_id);
471             resolver.lint_buffer().buffer_lint(lint, id, span, &msg);
472         }
473     });
474
475     Ok((krate, resolver))
476 }
477
478 pub fn lower_to_hir(
479     sess: &Session,
480     lint_store: &lint::LintStore,
481     resolver: &mut Resolver<'_>,
482     dep_graph: &DepGraph,
483     krate: &ast::Crate,
484 ) -> Result<hir::map::Forest> {
485     // Lower AST to HIR.
486     let hir_forest = time(sess, "lowering AST -> HIR", || {
487         let nt_to_tokenstream = syntax::parse::nt_to_tokenstream;
488         let hir_crate = lower_crate(sess, &dep_graph, &krate, resolver, nt_to_tokenstream);
489
490         if sess.opts.debugging_opts.hir_stats {
491             hir_stats::print_hir_stats(&hir_crate);
492         }
493
494         hir::map::Forest::new(hir_crate, &dep_graph)
495     });
496
497     time(sess, "early lint checks", || {
498         lint::check_ast_crate(
499             sess,
500             lint_store,
501             &krate,
502             false,
503             Some(std::mem::take(resolver.lint_buffer())),
504             rustc_lint::BuiltinCombinedEarlyLintPass::new(),
505         )
506     });
507
508     // Discard hygiene data, which isn't required after lowering to HIR.
509     if !sess.opts.debugging_opts.keep_hygiene_data {
510         syntax_pos::hygiene::clear_syntax_context_map();
511     }
512
513     Ok(hir_forest)
514 }
515
516 // Returns all the paths that correspond to generated files.
517 fn generated_output_paths(
518     sess: &Session,
519     outputs: &OutputFilenames,
520     exact_name: bool,
521     crate_name: &str,
522 ) -> Vec<PathBuf> {
523     let mut out_filenames = Vec::new();
524     for output_type in sess.opts.output_types.keys() {
525         let file = outputs.path(*output_type);
526         match *output_type {
527             // If the filename has been overridden using `-o`, it will not be modified
528             // by appending `.rlib`, `.exe`, etc., so we can skip this transformation.
529             OutputType::Exe if !exact_name => for crate_type in sess.crate_types.borrow().iter() {
530                 let p = ::rustc_codegen_utils::link::filename_for_input(
531                     sess,
532                     *crate_type,
533                     crate_name,
534                     outputs,
535                 );
536                 out_filenames.push(p);
537             },
538             OutputType::DepInfo if sess.opts.debugging_opts.dep_info_omit_d_target => {
539                 // Don't add the dep-info output when omitting it from dep-info targets
540             }
541             _ => {
542                 out_filenames.push(file);
543             }
544         }
545     }
546     out_filenames
547 }
548
549 // Runs `f` on every output file path and returns the first non-None result, or None if `f`
550 // returns None for every file path.
551 fn check_output<F, T>(output_paths: &[PathBuf], f: F) -> Option<T>
552 where
553     F: Fn(&PathBuf) -> Option<T>,
554 {
555     for output_path in output_paths {
556         if let Some(result) = f(output_path) {
557             return Some(result);
558         }
559     }
560     None
561 }
562
563 fn output_contains_path(output_paths: &[PathBuf], input_path: &PathBuf) -> bool {
564     let input_path = input_path.canonicalize().ok();
565     if input_path.is_none() {
566         return false;
567     }
568     let check = |output_path: &PathBuf| {
569         if output_path.canonicalize().ok() == input_path {
570             Some(())
571         } else {
572             None
573         }
574     };
575     check_output(output_paths, check).is_some()
576 }
577
578 fn output_conflicts_with_dir(output_paths: &[PathBuf]) -> Option<PathBuf> {
579     let check = |output_path: &PathBuf| {
580         if output_path.is_dir() {
581             Some(output_path.clone())
582         } else {
583             None
584         }
585     };
586     check_output(output_paths, check)
587 }
588
589 fn escape_dep_filename(filename: &FileName) -> String {
590     // Apparently clang and gcc *only* escape spaces:
591     // http://llvm.org/klaus/clang/commit/9d50634cfc268ecc9a7250226dd5ca0e945240d4
592     filename.to_string().replace(" ", "\\ ")
593 }
594
595 fn write_out_deps(
596     sess: &Session,
597     boxed_resolver: &Steal<Rc<RefCell<BoxedResolver>>>,
598     outputs: &OutputFilenames,
599     out_filenames: &[PathBuf],
600 ) {
601     // Write out dependency rules to the dep-info file if requested
602     if !sess.opts.output_types.contains_key(&OutputType::DepInfo) {
603         return;
604     }
605     let deps_filename = outputs.path(OutputType::DepInfo);
606
607     let result = (|| -> io::Result<()> {
608         // Build a list of files used to compile the output and
609         // write Makefile-compatible dependency rules
610         let mut files: Vec<String> = sess.source_map()
611             .files()
612             .iter()
613             .filter(|fmap| fmap.is_real_file())
614             .filter(|fmap| !fmap.is_imported())
615             .map(|fmap| escape_dep_filename(&fmap.unmapped_path.as_ref().unwrap_or(&fmap.name)))
616             .collect();
617
618         if sess.binary_dep_depinfo() {
619             boxed_resolver.borrow().borrow_mut().access(|resolver| {
620                 for cnum in resolver.cstore().crates_untracked() {
621                     let source = resolver.cstore().crate_source_untracked(cnum);
622                     if let Some((path, _)) = source.dylib {
623                         files.push(escape_dep_filename(&FileName::Real(path)));
624                     }
625                     if let Some((path, _)) = source.rlib {
626                         files.push(escape_dep_filename(&FileName::Real(path)));
627                     }
628                     if let Some((path, _)) = source.rmeta {
629                         files.push(escape_dep_filename(&FileName::Real(path)));
630                     }
631                 }
632             });
633         }
634
635         let mut file = fs::File::create(&deps_filename)?;
636         for path in out_filenames {
637             writeln!(file, "{}: {}\n", path.display(), files.join(" "))?;
638         }
639
640         // Emit a fake target for each input file to the compilation. This
641         // prevents `make` from spitting out an error if a file is later
642         // deleted. For more info see #28735
643         for path in files {
644             writeln!(file, "{}:", path)?;
645         }
646         Ok(())
647     })();
648
649     match result {
650         Ok(_) => {
651             if sess.opts.json_artifact_notifications {
652                  sess.parse_sess.span_diagnostic
653                     .emit_artifact_notification(&deps_filename, "dep-info");
654             }
655         },
656         Err(e) => {
657             sess.fatal(&format!(
658                 "error writing dependencies to `{}`: {}",
659                 deps_filename.display(),
660                 e
661             ))
662         }
663     }
664 }
665
666 pub fn prepare_outputs(
667     sess: &Session,
668     compiler: &Compiler,
669     krate: &ast::Crate,
670     boxed_resolver: &Steal<Rc<RefCell<BoxedResolver>>>,
671     crate_name: &str
672 ) -> Result<OutputFilenames> {
673     // FIXME: rustdoc passes &[] instead of &krate.attrs here
674     let outputs = util::build_output_filenames(
675         &compiler.input,
676         &compiler.output_dir,
677         &compiler.output_file,
678         &krate.attrs,
679         sess
680     );
681
682     let output_paths = generated_output_paths(
683         sess,
684         &outputs,
685         compiler.output_file.is_some(),
686         &crate_name,
687     );
688
689     // Ensure the source file isn't accidentally overwritten during compilation.
690     if let Some(ref input_path) = compiler.input_path {
691         if sess.opts.will_create_output_file() {
692             if output_contains_path(&output_paths, input_path) {
693                 sess.err(&format!(
694                     "the input file \"{}\" would be overwritten by the generated \
695                         executable",
696                     input_path.display()
697                 ));
698                 return Err(ErrorReported);
699             }
700             if let Some(dir_path) = output_conflicts_with_dir(&output_paths) {
701                 sess.err(&format!(
702                     "the generated executable for the input file \"{}\" conflicts with the \
703                         existing directory \"{}\"",
704                     input_path.display(),
705                     dir_path.display()
706                 ));
707                 return Err(ErrorReported);
708             }
709         }
710     }
711
712     write_out_deps(sess, boxed_resolver, &outputs, &output_paths);
713
714     let only_dep_info = sess.opts.output_types.contains_key(&OutputType::DepInfo)
715         && sess.opts.output_types.len() == 1;
716
717     if !only_dep_info {
718         if let Some(ref dir) = compiler.output_dir {
719             if fs::create_dir_all(dir).is_err() {
720                 sess.err("failed to find or create the directory specified by `--out-dir`");
721                 return Err(ErrorReported);
722             }
723         }
724     }
725
726     Ok(outputs)
727 }
728
729 pub fn default_provide(providers: &mut ty::query::Providers<'_>) {
730     providers.analysis = analysis;
731     proc_macro_decls::provide(providers);
732     plugin::build::provide(providers);
733     hir::provide(providers);
734     mir::provide(providers);
735     reachable::provide(providers);
736     resolve_lifetime::provide(providers);
737     rustc_privacy::provide(providers);
738     typeck::provide(providers);
739     ty::provide(providers);
740     traits::provide(providers);
741     stability::provide(providers);
742     reachable::provide(providers);
743     rustc_passes::provide(providers);
744     rustc_traits::provide(providers);
745     middle::region::provide(providers);
746     cstore::provide(providers);
747     lint::provide(providers);
748     rustc_lint::provide(providers);
749     rustc_codegen_utils::provide(providers);
750     rustc_codegen_ssa::provide(providers);
751 }
752
753 pub fn default_provide_extern(providers: &mut ty::query::Providers<'_>) {
754     cstore::provide_extern(providers);
755     rustc_codegen_ssa::provide_extern(providers);
756 }
757
758 declare_box_region_type!(
759     pub BoxedGlobalCtxt,
760     for('tcx),
761     (&'tcx GlobalCtxt<'tcx>) -> ((), ())
762 );
763
764 impl BoxedGlobalCtxt {
765     pub fn enter<F, R>(&mut self, f: F) -> R
766     where
767         F: for<'tcx> FnOnce(TyCtxt<'tcx>) -> R,
768     {
769         self.access(|gcx| ty::tls::enter_global(gcx, |tcx| f(tcx)))
770     }
771 }
772
773 pub fn create_global_ctxt(
774     compiler: &Compiler,
775     lint_store: Lrc<lint::LintStore>,
776     mut hir_forest: hir::map::Forest,
777     mut resolver_outputs: ResolverOutputs,
778     outputs: OutputFilenames,
779     crate_name: &str,
780 ) -> BoxedGlobalCtxt {
781     let sess = compiler.session().clone();
782     let codegen_backend = compiler.codegen_backend().clone();
783     let crate_name = crate_name.to_string();
784     let defs = mem::take(&mut resolver_outputs.definitions);
785
786     let ((), result) = BoxedGlobalCtxt::new(static move || {
787         let sess = &*sess;
788
789         let global_ctxt: Option<GlobalCtxt<'_>>;
790         let arenas = AllArenas::new();
791
792         // Construct the HIR map.
793         let hir_map = time(sess, "indexing HIR", || {
794             hir::map::map_crate(sess, &*resolver_outputs.cstore, &mut hir_forest, &defs)
795         });
796
797         let query_result_on_disk_cache = time(sess, "load query result cache", || {
798             rustc_incremental::load_query_result_cache(sess)
799         });
800
801         let mut local_providers = ty::query::Providers::default();
802         default_provide(&mut local_providers);
803         codegen_backend.provide(&mut local_providers);
804
805         let mut extern_providers = local_providers;
806         default_provide_extern(&mut extern_providers);
807         codegen_backend.provide_extern(&mut extern_providers);
808
809         let gcx = TyCtxt::create_global_ctxt(
810             sess,
811             lint_store,
812             local_providers,
813             extern_providers,
814             &arenas,
815             resolver_outputs,
816             hir_map,
817             query_result_on_disk_cache,
818             &crate_name,
819             &outputs
820         );
821
822         global_ctxt = Some(gcx);
823         let gcx = global_ctxt.as_ref().unwrap();
824
825         ty::tls::enter_global(gcx, |tcx| {
826             // Do some initialization of the DepGraph that can only be done with the
827             // tcx available.
828             time(tcx.sess, "dep graph tcx init", || rustc_incremental::dep_graph_tcx_init(tcx));
829         });
830
831         yield BoxedGlobalCtxt::initial_yield(());
832         box_region_allow_access!(for('tcx), (&'tcx GlobalCtxt<'tcx>), (gcx));
833
834         if sess.opts.debugging_opts.query_stats {
835             gcx.queries.print_stats();
836         }
837     });
838
839     result
840 }
841
842 /// Runs the resolution, type-checking, region checking and other
843 /// miscellaneous analysis passes on the crate.
844 fn analysis(tcx: TyCtxt<'_>, cnum: CrateNum) -> Result<()> {
845     assert_eq!(cnum, LOCAL_CRATE);
846
847     let sess = tcx.sess;
848     let mut entry_point = None;
849
850     time(sess, "misc checking 1", || {
851         parallel!({
852             entry_point = time(sess, "looking for entry point", || {
853                 rustc_passes::entry::find_entry_point(tcx)
854             });
855
856             time(sess, "looking for plugin registrar", || {
857                 plugin::build::find_plugin_registrar(tcx)
858             });
859
860             time(sess, "looking for derive registrar", || {
861                 proc_macro_decls::find(tcx)
862             });
863         }, {
864             par_iter(&tcx.hir().krate().modules).for_each(|(&module, _)| {
865                 let local_def_id = tcx.hir().local_def_id(module);
866                 tcx.ensure().check_mod_loops(local_def_id);
867                 tcx.ensure().check_mod_attrs(local_def_id);
868                 tcx.ensure().check_mod_unstable_api_usage(local_def_id);
869             });
870         });
871     });
872
873     // passes are timed inside typeck
874     typeck::check_crate(tcx)?;
875
876     time(sess, "misc checking 2", || {
877         parallel!({
878             time(sess, "match checking", || {
879                 tcx.par_body_owners(|def_id| {
880                     tcx.ensure().check_match(def_id);
881                 });
882             });
883         }, {
884             time(sess, "liveness checking + intrinsic checking", || {
885                 par_iter(&tcx.hir().krate().modules).for_each(|(&module, _)| {
886                     // this must run before MIR dump, because
887                     // "not all control paths return a value" is reported here.
888                     //
889                     // maybe move the check to a MIR pass?
890                     let local_def_id = tcx.hir().local_def_id(module);
891
892                     tcx.ensure().check_mod_liveness(local_def_id);
893                     tcx.ensure().check_mod_intrinsics(local_def_id);
894                 });
895             });
896         });
897     });
898
899     time(sess, "MIR borrow checking", || {
900         tcx.par_body_owners(|def_id| tcx.ensure().mir_borrowck(def_id));
901     });
902
903     time(sess, "dumping Chalk-like clauses", || {
904         rustc_traits::lowering::dump_program_clauses(tcx);
905     });
906
907     time(sess, "MIR effect checking", || {
908         for def_id in tcx.body_owners() {
909             mir::transform::check_unsafety::check_unsafety(tcx, def_id)
910         }
911     });
912
913     time(sess, "layout testing", || layout_test::test_layout(tcx));
914
915     // Avoid overwhelming user with errors if borrow checking failed.
916     // I'm not sure how helpful this is, to be honest, but it avoids a
917     // lot of annoying errors in the compile-fail tests (basically,
918     // lint warnings and so on -- kindck used to do this abort, but
919     // kindck is gone now). -nmatsakis
920     if sess.has_errors() {
921         return Err(ErrorReported);
922     }
923
924     time(sess, "misc checking 3", || {
925         parallel!({
926             time(sess, "privacy access levels", || {
927                 tcx.ensure().privacy_access_levels(LOCAL_CRATE);
928             });
929             parallel!({
930                 time(sess, "private in public", || {
931                     tcx.ensure().check_private_in_public(LOCAL_CRATE);
932                 });
933             }, {
934                 time(sess, "death checking", || rustc_passes::dead::check_crate(tcx));
935             },  {
936                 time(sess, "unused lib feature checking", || {
937                     stability::check_unused_or_stable_features(tcx)
938                 });
939             }, {
940                 time(sess, "lint checking", || {
941                     lint::check_crate(tcx, || rustc_lint::BuiltinCombinedLateLintPass::new());
942                 });
943             });
944         }, {
945             time(sess, "privacy checking modules", || {
946                 par_iter(&tcx.hir().krate().modules).for_each(|(&module, _)| {
947                     tcx.ensure().check_mod_privacy(tcx.hir().local_def_id(module));
948                 });
949             });
950         });
951     });
952
953     Ok(())
954 }
955
956 fn encode_and_write_metadata(
957     tcx: TyCtxt<'_>,
958     outputs: &OutputFilenames,
959 ) -> (middle::cstore::EncodedMetadata, bool) {
960     #[derive(PartialEq, Eq, PartialOrd, Ord)]
961     enum MetadataKind {
962         None,
963         Uncompressed,
964         Compressed
965     }
966
967     let metadata_kind = tcx.sess.crate_types.borrow().iter().map(|ty| {
968         match *ty {
969             CrateType::Executable |
970             CrateType::Staticlib |
971             CrateType::Cdylib => MetadataKind::None,
972
973             CrateType::Rlib => MetadataKind::Uncompressed,
974
975             CrateType::Dylib |
976             CrateType::ProcMacro => MetadataKind::Compressed,
977         }
978     }).max().unwrap_or(MetadataKind::None);
979
980     let metadata = match metadata_kind {
981         MetadataKind::None => middle::cstore::EncodedMetadata::new(),
982         MetadataKind::Uncompressed |
983         MetadataKind::Compressed => tcx.encode_metadata(),
984     };
985
986     let need_metadata_file = tcx.sess.opts.output_types.contains_key(&OutputType::Metadata);
987     if need_metadata_file {
988         let crate_name = &tcx.crate_name(LOCAL_CRATE).as_str();
989         let out_filename = filename_for_metadata(tcx.sess, crate_name, outputs);
990         // To avoid races with another rustc process scanning the output directory,
991         // we need to write the file somewhere else and atomically move it to its
992         // final destination, with an `fs::rename` call. In order for the rename to
993         // always succeed, the temporary file needs to be on the same filesystem,
994         // which is why we create it inside the output directory specifically.
995         let metadata_tmpdir = TempFileBuilder::new()
996             .prefix("rmeta")
997             .tempdir_in(out_filename.parent().unwrap())
998             .unwrap_or_else(|err| {
999                 tcx.sess.fatal(&format!("couldn't create a temp dir: {}", err))
1000             });
1001         let metadata_filename = emit_metadata(tcx.sess, &metadata, &metadata_tmpdir);
1002         if let Err(e) = fs::rename(&metadata_filename, &out_filename) {
1003             tcx.sess.fatal(&format!("failed to write {}: {}", out_filename.display(), e));
1004         }
1005         if tcx.sess.opts.json_artifact_notifications {
1006             tcx.sess.parse_sess.span_diagnostic
1007                 .emit_artifact_notification(&out_filename, "metadata");
1008         }
1009     }
1010
1011     let need_metadata_module = metadata_kind == MetadataKind::Compressed;
1012
1013     (metadata, need_metadata_module)
1014 }
1015
1016 /// Runs the codegen backend, after which the AST and analysis can
1017 /// be discarded.
1018 pub fn start_codegen<'tcx>(
1019     codegen_backend: &dyn CodegenBackend,
1020     tcx: TyCtxt<'tcx>,
1021     outputs: &OutputFilenames,
1022 ) -> Box<dyn Any> {
1023     if log_enabled!(::log::Level::Info) {
1024         println!("Pre-codegen");
1025         tcx.print_debug_stats();
1026     }
1027
1028     let (metadata, need_metadata_module) = time(tcx.sess, "metadata encoding and writing", || {
1029         encode_and_write_metadata(tcx, outputs)
1030     });
1031
1032     let codegen = time(tcx.sess, "codegen", move || {
1033         let _prof_timer = tcx.prof.generic_activity("codegen_crate");
1034         codegen_backend.codegen_crate(tcx, metadata, need_metadata_module)
1035     });
1036
1037     if log_enabled!(::log::Level::Info) {
1038         println!("Post-codegen");
1039         tcx.print_debug_stats();
1040     }
1041
1042     if tcx.sess.opts.output_types.contains_key(&OutputType::Mir) {
1043         if let Err(e) = mir::transform::dump_mir::emit_mir(tcx, outputs) {
1044             tcx.sess.err(&format!("could not emit MIR: {}", e));
1045             tcx.sess.abort_if_errors();
1046         }
1047     }
1048
1049     codegen
1050 }