compiler/rustc_session/src/parse.rs

   1 //! Contains `ParseSess` which holds state living beyond what one `Parser` might.
   2 //! It also serves as an input to the parser itself.
   3
   4 use crate::config::CheckCfg;
   5 use crate::errors::{FeatureDiagnosticForIssue, FeatureDiagnosticHelp, FeatureGateError};
   6 use crate::lint::{
   7     builtin::UNSTABLE_SYNTAX_PRE_EXPANSION, BufferedEarlyLint, BuiltinLintDiagnostics, Lint, LintId,
   8 };
   9 use rustc_ast::node_id::NodeId;
  10 use rustc_data_structures::fx::{FxHashMap, FxHashSet, FxIndexSet};
  11 use rustc_data_structures::sync::{Lock, Lrc};
  12 use rustc_errors::{emitter::SilentEmitter, ColorConfig, Handler};
  13 use rustc_errors::{
  14     fallback_fluent_bundle, Diagnostic, DiagnosticBuilder, DiagnosticId, DiagnosticMessage,
  15     EmissionGuarantee, ErrorGuaranteed, IntoDiagnostic, MultiSpan, Noted, StashKey,
  16 };
  17 use rustc_feature::{find_feature_issue, GateIssue, UnstableFeatures};
  18 use rustc_span::edition::Edition;
  19 use rustc_span::hygiene::ExpnId;
  20 use rustc_span::source_map::{FilePathMapping, SourceMap};
  21 use rustc_span::{Span, Symbol};
  22
  23 use rustc_ast::attr::AttrIdGenerator;
  24 use std::str;
  25
  26 /// The set of keys (and, optionally, values) that define the compilation
  27 /// environment of the crate, used to drive conditional compilation.
  28 pub type CrateConfig = FxIndexSet<(Symbol, Option<Symbol>)>;
  29 pub type CrateCheckConfig = CheckCfg<Symbol>;
  30
  31 /// Collected spans during parsing for places where a certain feature was
  32 /// used and should be feature gated accordingly in `check_crate`.
  33 #[derive(Default)]
  34 pub struct GatedSpans {
  35     pub spans: Lock<FxHashMap<Symbol, Vec<Span>>>,
  36 }
  37
  38 impl GatedSpans {
  39     /// Feature gate the given `span` under the given `feature`
  40     /// which is same `Symbol` used in `active.rs`.
  41     pub fn gate(&self, feature: Symbol, span: Span) {
  42         self.spans.borrow_mut().entry(feature).or_default().push(span);
  43     }
  44
  45     /// Ungate the last span under the given `feature`.
  46     /// Panics if the given `span` wasn't the last one.
  47     ///
  48     /// Using this is discouraged unless you have a really good reason to.
  49     pub fn ungate_last(&self, feature: Symbol, span: Span) {
  50         let removed_span = self.spans.borrow_mut().entry(feature).or_default().pop().unwrap();
  51         debug_assert_eq!(span, removed_span);
  52     }
  53
  54     /// Is the provided `feature` gate ungated currently?
  55     ///
  56     /// Using this is discouraged unless you have a really good reason to.
  57     pub fn is_ungated(&self, feature: Symbol) -> bool {
  58         self.spans.borrow().get(&feature).map_or(true, |spans| spans.is_empty())
  59     }
  60
  61     /// Prepend the given set of `spans` onto the set in `self`.
  62     pub fn merge(&self, mut spans: FxHashMap<Symbol, Vec<Span>>) {
  63         let mut inner = self.spans.borrow_mut();
  64         for (gate, mut gate_spans) in inner.drain() {
  65             spans.entry(gate).or_default().append(&mut gate_spans);
  66         }
  67         *inner = spans;
  68     }
  69 }
  70
  71 #[derive(Default)]
  72 pub struct SymbolGallery {
  73     /// All symbols occurred and their first occurrence span.
  74     pub symbols: Lock<FxHashMap<Symbol, Span>>,
  75 }
  76
  77 impl SymbolGallery {
  78     /// Insert a symbol and its span into symbol gallery.
  79     /// If the symbol has occurred before, ignore the new occurrence.
  80     pub fn insert(&self, symbol: Symbol, span: Span) {
  81         self.symbols.lock().entry(symbol).or_insert(span);
  82     }
  83 }
  84
  85 /// Construct a diagnostic for a language feature error due to the given `span`.
  86 /// The `feature`'s `Symbol` is the one you used in `active.rs` and `rustc_span::symbols`.
  87 pub fn feature_err<'a>(
  88     sess: &'a ParseSess,
  89     feature: Symbol,
  90     span: impl Into<MultiSpan>,
  91     explain: &str,
  92 ) -> DiagnosticBuilder<'a, ErrorGuaranteed> {
  93     feature_err_issue(sess, feature, span, GateIssue::Language, explain)
  94 }
  95
  96 /// Construct a diagnostic for a feature gate error.
  97 ///
  98 /// This variant allows you to control whether it is a library or language feature.
  99 /// Almost always, you want to use this for a language feature. If so, prefer `feature_err`.
 100 pub fn feature_err_issue<'a>(
 101     sess: &'a ParseSess,
 102     feature: Symbol,
 103     span: impl Into<MultiSpan>,
 104     issue: GateIssue,
 105     explain: &str,
 106 ) -> DiagnosticBuilder<'a, ErrorGuaranteed> {
 107     let span = span.into();
 108
 109     // Cancel an earlier warning for this same error, if it exists.
 110     if let Some(span) = span.primary_span() {
 111         sess.span_diagnostic
 112             .steal_diagnostic(span, StashKey::EarlySyntaxWarning)
 113             .map(|err| err.cancel());
 114     }
 115
 116     let mut err = sess.create_err(FeatureGateError { span, explain });
 117     add_feature_diagnostics_for_issue(&mut err, sess, feature, issue);
 118     err
 119 }
 120
 121 /// Construct a future incompatibility diagnostic for a feature gate.
 122 ///
 123 /// This diagnostic is only a warning and *does not cause compilation to fail*.
 124 pub fn feature_warn<'a>(sess: &'a ParseSess, feature: Symbol, span: Span, explain: &str) {
 125     feature_warn_issue(sess, feature, span, GateIssue::Language, explain);
 126 }
 127
 128 /// Construct a future incompatibility diagnostic for a feature gate.
 129 ///
 130 /// This diagnostic is only a warning and *does not cause compilation to fail*.
 131 ///
 132 /// This variant allows you to control whether it is a library or language feature.
 133 /// Almost always, you want to use this for a language feature. If so, prefer `feature_warn`.
 134 #[allow(rustc::diagnostic_outside_of_impl)]
 135 #[allow(rustc::untranslatable_diagnostic)]
 136 pub fn feature_warn_issue<'a>(
 137     sess: &'a ParseSess,
 138     feature: Symbol,
 139     span: Span,
 140     issue: GateIssue,
 141     explain: &str,
 142 ) {
 143     let mut err = sess.span_diagnostic.struct_span_warn(span, explain);
 144     add_feature_diagnostics_for_issue(&mut err, sess, feature, issue);
 145
 146     // Decorate this as a future-incompatibility lint as in rustc_middle::lint::struct_lint_level
 147     let lint = UNSTABLE_SYNTAX_PRE_EXPANSION;
 148     let future_incompatible = lint.future_incompatible.as_ref().unwrap();
 149     err.code(DiagnosticId::Lint {
 150         name: lint.name_lower(),
 151         has_future_breakage: false,
 152         is_force_warn: false,
 153     });
 154     err.warn(lint.desc);
 155     err.note(format!("for more information, see {}", future_incompatible.reference));
 156
 157     // A later feature_err call can steal and cancel this warning.
 158     err.stash(span, StashKey::EarlySyntaxWarning);
 159 }
 160
 161 /// Adds the diagnostics for a feature to an existing error.
 162 pub fn add_feature_diagnostics<'a>(err: &mut Diagnostic, sess: &'a ParseSess, feature: Symbol) {
 163     add_feature_diagnostics_for_issue(err, sess, feature, GateIssue::Language);
 164 }
 165
 166 /// Adds the diagnostics for a feature to an existing error.
 167 ///
 168 /// This variant allows you to control whether it is a library or language feature.
 169 /// Almost always, you want to use this for a language feature. If so, prefer
 170 /// `add_feature_diagnostics`.
 171 pub fn add_feature_diagnostics_for_issue<'a>(
 172     err: &mut Diagnostic,
 173     sess: &'a ParseSess,
 174     feature: Symbol,
 175     issue: GateIssue,
 176 ) {
 177     if let Some(n) = find_feature_issue(feature, issue) {
 178         err.subdiagnostic(FeatureDiagnosticForIssue { n });
 179     }
 180
 181     // #23973: do not suggest `#![feature(...)]` if we are in beta/stable
 182     if sess.unstable_features.is_nightly_build() {
 183         err.subdiagnostic(FeatureDiagnosticHelp { feature });
 184     }
 185 }
 186
 187 /// Info about a parsing session.
 188 pub struct ParseSess {
 189     pub span_diagnostic: Handler,
 190     pub unstable_features: UnstableFeatures,
 191     pub config: CrateConfig,
 192     pub check_config: CrateCheckConfig,
 193     pub edition: Edition,
 194     /// Places where raw identifiers were used. This is used to avoid complaining about idents
 195     /// clashing with keywords in new editions.
 196     pub raw_identifier_spans: Lock<Vec<Span>>,
 197     /// Places where identifiers that contain invalid Unicode codepoints but that look like they
 198     /// should be. Useful to avoid bad tokenization when encountering emoji. We group them to
 199     /// provide a single error per unique incorrect identifier.
 200     pub bad_unicode_identifiers: Lock<FxHashMap<Symbol, Vec<Span>>>,
 201     source_map: Lrc<SourceMap>,
 202     pub buffered_lints: Lock<Vec<BufferedEarlyLint>>,
 203     /// Contains the spans of block expressions that could have been incomplete based on the
 204     /// operation token that followed it, but that the parser cannot identify without further
 205     /// analysis.
 206     pub ambiguous_block_expr_parse: Lock<FxHashMap<Span, Span>>,
 207     pub gated_spans: GatedSpans,
 208     pub symbol_gallery: SymbolGallery,
 209     /// The parser has reached `Eof` due to an unclosed brace. Used to silence unnecessary errors.
 210     pub reached_eof: Lock<bool>,
 211     /// Environment variables accessed during the build and their values when they exist.
 212     pub env_depinfo: Lock<FxHashSet<(Symbol, Option<Symbol>)>>,
 213     /// File paths accessed during the build.
 214     pub file_depinfo: Lock<FxHashSet<Symbol>>,
 215     /// All the type ascriptions expressions that have had a suggestion for likely path typo.
 216     pub type_ascription_path_suggestions: Lock<FxHashSet<Span>>,
 217     /// Whether cfg(version) should treat the current release as incomplete
 218     pub assume_incomplete_release: bool,
 219     /// Spans passed to `proc_macro::quote_span`. Each span has a numerical
 220     /// identifier represented by its position in the vector.
 221     pub proc_macro_quoted_spans: Lock<Vec<Span>>,
 222     /// Used to generate new `AttrId`s. Every `AttrId` is unique.
 223     pub attr_id_generator: AttrIdGenerator,
 224 }
 225
 226 impl ParseSess {
 227     /// Used for testing.
 228     pub fn new(file_path_mapping: FilePathMapping) -> Self {
 229         let fallback_bundle = fallback_fluent_bundle(rustc_errors::DEFAULT_LOCALE_RESOURCES, false);
 230         let sm = Lrc::new(SourceMap::new(file_path_mapping));
 231         let handler = Handler::with_tty_emitter(
 232             ColorConfig::Auto,
 233             true,
 234             None,
 235             Some(sm.clone()),
 236             None,
 237             fallback_bundle,
 238         );
 239         ParseSess::with_span_handler(handler, sm)
 240     }
 241
 242     pub fn with_span_handler(handler: Handler, source_map: Lrc<SourceMap>) -> Self {
 243         Self {
 244             span_diagnostic: handler,
 245             unstable_features: UnstableFeatures::from_environment(None),
 246             config: FxIndexSet::default(),
 247             check_config: CrateCheckConfig::default(),
 248             edition: ExpnId::root().expn_data().edition,
 249             raw_identifier_spans: Lock::new(Vec::new()),
 250             bad_unicode_identifiers: Lock::new(Default::default()),
 251             source_map,
 252             buffered_lints: Lock::new(vec![]),
 253             ambiguous_block_expr_parse: Lock::new(FxHashMap::default()),
 254             gated_spans: GatedSpans::default(),
 255             symbol_gallery: SymbolGallery::default(),
 256             reached_eof: Lock::new(false),
 257             env_depinfo: Default::default(),
 258             file_depinfo: Default::default(),
 259             type_ascription_path_suggestions: Default::default(),
 260             assume_incomplete_release: false,
 261             proc_macro_quoted_spans: Default::default(),
 262             attr_id_generator: AttrIdGenerator::new(),
 263         }
 264     }
 265
 266     pub fn with_silent_emitter(fatal_note: Option<String>) -> Self {
 267         let fallback_bundle = fallback_fluent_bundle(rustc_errors::DEFAULT_LOCALE_RESOURCES, false);
 268         let sm = Lrc::new(SourceMap::new(FilePathMapping::empty()));
 269         let fatal_handler =
 270             Handler::with_tty_emitter(ColorConfig::Auto, false, None, None, None, fallback_bundle);
 271         let handler = Handler::with_emitter(
 272             false,
 273             None,
 274             Box::new(SilentEmitter { fatal_handler, fatal_note }),
 275         );
 276         ParseSess::with_span_handler(handler, sm)
 277     }
 278
 279     #[inline]
 280     pub fn source_map(&self) -> &SourceMap {
 281         &self.source_map
 282     }
 283
 284     pub fn clone_source_map(&self) -> Lrc<SourceMap> {
 285         self.source_map.clone()
 286     }
 287
 288     pub fn buffer_lint(
 289         &self,
 290         lint: &'static Lint,
 291         span: impl Into<MultiSpan>,
 292         node_id: NodeId,
 293         msg: &str,
 294     ) {
 295         self.buffered_lints.with_lock(|buffered_lints| {
 296             buffered_lints.push(BufferedEarlyLint {
 297                 span: span.into(),
 298                 node_id,
 299                 msg: msg.into(),
 300                 lint_id: LintId::of(lint),
 301                 diagnostic: BuiltinLintDiagnostics::Normal,
 302             });
 303         });
 304     }
 305
 306     pub fn buffer_lint_with_diagnostic(
 307         &self,
 308         lint: &'static Lint,
 309         span: impl Into<MultiSpan>,
 310         node_id: NodeId,
 311         msg: &str,
 312         diagnostic: BuiltinLintDiagnostics,
 313     ) {
 314         self.buffered_lints.with_lock(|buffered_lints| {
 315             buffered_lints.push(BufferedEarlyLint {
 316                 span: span.into(),
 317                 node_id,
 318                 msg: msg.into(),
 319                 lint_id: LintId::of(lint),
 320                 diagnostic,
 321             });
 322         });
 323     }
 324
 325     pub fn save_proc_macro_span(&self, span: Span) -> usize {
 326         let mut spans = self.proc_macro_quoted_spans.lock();
 327         spans.push(span);
 328         return spans.len() - 1;
 329     }
 330
 331     pub fn proc_macro_quoted_spans(&self) -> Vec<Span> {
 332         self.proc_macro_quoted_spans.lock().clone()
 333     }
 334
 335     pub fn create_err<'a>(
 336         &'a self,
 337         err: impl IntoDiagnostic<'a>,
 338     ) -> DiagnosticBuilder<'a, ErrorGuaranteed> {
 339         err.into_diagnostic(&self.span_diagnostic)
 340     }
 341
 342     pub fn emit_err<'a>(&'a self, err: impl IntoDiagnostic<'a>) -> ErrorGuaranteed {
 343         self.create_err(err).emit()
 344     }
 345
 346     pub fn create_warning<'a>(
 347         &'a self,
 348         warning: impl IntoDiagnostic<'a, ()>,
 349     ) -> DiagnosticBuilder<'a, ()> {
 350         warning.into_diagnostic(&self.span_diagnostic)
 351     }
 352
 353     pub fn emit_warning<'a>(&'a self, warning: impl IntoDiagnostic<'a, ()>) {
 354         self.create_warning(warning).emit()
 355     }
 356
 357     pub fn create_note<'a>(
 358         &'a self,
 359         note: impl IntoDiagnostic<'a, Noted>,
 360     ) -> DiagnosticBuilder<'a, Noted> {
 361         note.into_diagnostic(&self.span_diagnostic)
 362     }
 363
 364     pub fn emit_note<'a>(&'a self, note: impl IntoDiagnostic<'a, Noted>) -> Noted {
 365         self.create_note(note).emit()
 366     }
 367
 368     pub fn create_fatal<'a>(
 369         &'a self,
 370         fatal: impl IntoDiagnostic<'a, !>,
 371     ) -> DiagnosticBuilder<'a, !> {
 372         fatal.into_diagnostic(&self.span_diagnostic)
 373     }
 374
 375     pub fn emit_fatal<'a>(&'a self, fatal: impl IntoDiagnostic<'a, !>) -> ! {
 376         self.create_fatal(fatal).emit()
 377     }
 378
 379     #[rustc_lint_diagnostics]
 380     pub fn struct_err(
 381         &self,
 382         msg: impl Into<DiagnosticMessage>,
 383     ) -> DiagnosticBuilder<'_, ErrorGuaranteed> {
 384         self.span_diagnostic.struct_err(msg)
 385     }
 386
 387     #[rustc_lint_diagnostics]
 388     pub fn struct_warn(&self, msg: impl Into<DiagnosticMessage>) -> DiagnosticBuilder<'_, ()> {
 389         self.span_diagnostic.struct_warn(msg)
 390     }
 391
 392     #[rustc_lint_diagnostics]
 393     pub fn struct_fatal(&self, msg: impl Into<DiagnosticMessage>) -> DiagnosticBuilder<'_, !> {
 394         self.span_diagnostic.struct_fatal(msg)
 395     }
 396
 397     #[rustc_lint_diagnostics]
 398     pub fn struct_diagnostic<G: EmissionGuarantee>(
 399         &self,
 400         msg: impl Into<DiagnosticMessage>,
 401     ) -> DiagnosticBuilder<'_, G> {
 402         self.span_diagnostic.struct_diagnostic(msg)
 403     }
 404 }