src/librustc_metadata/cstore_impl.rs

   1 use crate::cstore::{self, LoadedMacro};
   2 use crate::encoder;
   3 use crate::link_args;
   4 use crate::native_libs;
   5 use crate::foreign_modules;
   6 use crate::schema;
   7
   8 use rustc::ty::query::QueryConfig;
   9 use rustc::middle::cstore::{CrateStore, DepKind,
  10                             EncodedMetadata, NativeLibraryKind};
  11 use rustc::middle::exported_symbols::ExportedSymbol;
  12 use rustc::middle::stability::DeprecationEntry;
  13 use rustc::hir::def;
  14 use rustc::hir;
  15 use rustc::session::{CrateDisambiguator, Session};
  16 use rustc::ty::{self, TyCtxt};
  17 use rustc::ty::query::Providers;
  18 use rustc::hir::def_id::{CrateNum, DefId, LOCAL_CRATE, CRATE_DEF_INDEX};
  19 use rustc::hir::map::{DefKey, DefPath, DefPathHash};
  20 use rustc::hir::map::definitions::DefPathTable;
  21 use rustc::util::nodemap::DefIdMap;
  22 use rustc_data_structures::svh::Svh;
  23
  24 use smallvec::SmallVec;
  25 use std::any::Any;
  26 use rustc_data_structures::sync::Lrc;
  27 use std::sync::Arc;
  28
  29 use syntax::ast;
  30 use syntax::attr;
  31 use syntax::source_map;
  32 use syntax::edition::Edition;
  33 use syntax::parse::source_file_to_stream;
  34 use syntax::parse::parser::emit_unclosed_delims;
  35 use syntax::symbol::Symbol;
  36 use syntax_pos::{Span, FileName};
  37 use rustc_data_structures::bit_set::BitSet;
  38
  39 macro_rules! provide {
  40     (<$lt:tt> $tcx:ident, $def_id:ident, $other:ident, $cdata:ident,
  41       $($name:ident => $compute:block)*) => {
  42         pub fn provide_extern<$lt>(providers: &mut Providers<$lt>) {
  43             // HACK(eddyb) `$lt: $lt` forces `$lt` to be early-bound, which
  44             // allows the associated type in the return type to be normalized.
  45             $(fn $name<$lt: $lt, T: IntoArgs>(
  46                 $tcx: TyCtxt<$lt>,
  47                 def_id_arg: T,
  48             ) -> <ty::queries::$name<$lt> as QueryConfig<$lt>>::Value {
  49                 #[allow(unused_variables)]
  50                 let ($def_id, $other) = def_id_arg.into_args();
  51                 assert!(!$def_id.is_local());
  52
  53                 let def_path_hash = $tcx.def_path_hash(DefId {
  54                     krate: $def_id.krate,
  55                     index: CRATE_DEF_INDEX
  56                 });
  57                 let dep_node = def_path_hash
  58                     .to_dep_node(rustc::dep_graph::DepKind::CrateMetadata);
  59                 // The DepNodeIndex of the DepNode::CrateMetadata should be
  60                 // cached somewhere, so that we can use read_index().
  61                 $tcx.dep_graph.read(dep_node);
  62
  63                 let $cdata = $tcx.crate_data_as_rc_any($def_id.krate);
  64                 let $cdata = $cdata.downcast_ref::<cstore::CrateMetadata>()
  65                     .expect("CrateStore created data is not a CrateMetadata");
  66                 $compute
  67             })*
  68
  69             *providers = Providers {
  70                 $($name,)*
  71                 ..*providers
  72             };
  73         }
  74     }
  75 }
  76
  77 // small trait to work around different signature queries all being defined via
  78 // the macro above.
  79 trait IntoArgs {
  80     fn into_args(self) -> (DefId, DefId);
  81 }
  82
  83 impl IntoArgs for DefId {
  84     fn into_args(self) -> (DefId, DefId) { (self, self) }
  85 }
  86
  87 impl IntoArgs for CrateNum {
  88     fn into_args(self) -> (DefId, DefId) { (self.as_def_id(), self.as_def_id()) }
  89 }
  90
  91 impl IntoArgs for (CrateNum, DefId) {
  92     fn into_args(self) -> (DefId, DefId) { (self.0.as_def_id(), self.1) }
  93 }
  94
  95 provide! { <'tcx> tcx, def_id, other, cdata,
  96     type_of => { cdata.get_type(def_id.index, tcx) }
  97     generics_of => {
  98         tcx.arena.alloc(cdata.get_generics(def_id.index, tcx.sess))
  99     }
 100     predicates_of => { tcx.arena.alloc(cdata.get_predicates(def_id.index, tcx)) }
 101     predicates_defined_on => {
 102         tcx.arena.alloc(cdata.get_predicates_defined_on(def_id.index, tcx))
 103     }
 104     super_predicates_of => { tcx.arena.alloc(cdata.get_super_predicates(def_id.index, tcx)) }
 105     trait_def => {
 106         tcx.arena.alloc(cdata.get_trait_def(def_id.index, tcx.sess))
 107     }
 108     adt_def => { cdata.get_adt_def(def_id.index, tcx) }
 109     adt_destructor => {
 110         let _ = cdata;
 111         tcx.calculate_dtor(def_id, &mut |_,_| Ok(()))
 112     }
 113     variances_of => { tcx.arena.alloc_from_iter(cdata.get_item_variances(def_id.index)) }
 114     associated_item_def_ids => {
 115         let mut result = SmallVec::<[_; 8]>::new();
 116         cdata.each_child_of_item(def_id.index,
 117           |child| result.push(child.res.def_id()), tcx.sess);
 118         tcx.arena.alloc_slice(&result)
 119     }
 120     associated_item => { cdata.get_associated_item(def_id.index) }
 121     impl_trait_ref => { cdata.get_impl_trait(def_id.index, tcx) }
 122     impl_polarity => { cdata.get_impl_polarity(def_id.index) }
 123     coerce_unsized_info => {
 124         cdata.get_coerce_unsized_info(def_id.index).unwrap_or_else(|| {
 125             bug!("coerce_unsized_info: `{:?}` is missing its info", def_id);
 126         })
 127     }
 128     optimized_mir => { tcx.arena.alloc(cdata.get_optimized_mir(tcx, def_id.index)) }
 129     promoted_mir => { tcx.arena.alloc(cdata.get_promoted_mir(tcx, def_id.index)) }
 130     mir_const_qualif => {
 131         (cdata.mir_const_qualif(def_id.index), tcx.arena.alloc(BitSet::new_empty(0)))
 132     }
 133     fn_sig => { cdata.fn_sig(def_id.index, tcx) }
 134     inherent_impls => { cdata.get_inherent_implementations_for_type(tcx, def_id.index) }
 135     is_const_fn_raw => { cdata.is_const_fn_raw(def_id.index) }
 136     is_async_fn { cdata.fn_asyncness(def_id.index) }
 137     is_foreign_item => { cdata.is_foreign_item(def_id.index) }
 138     static_mutability => { cdata.static_mutability(def_id.index) }
 139     def_kind => { cdata.def_kind(def_id.index) }
 140     def_span => { cdata.get_span(def_id.index, &tcx.sess) }
 141     lookup_stability => {
 142         cdata.get_stability(def_id.index).map(|s| tcx.intern_stability(s))
 143     }
 144     lookup_deprecation_entry => {
 145         cdata.get_deprecation(def_id.index).map(DeprecationEntry::external)
 146     }
 147     item_attrs => { cdata.get_item_attrs(def_id.index, tcx.sess) }
 148     // FIXME(#38501) We've skipped a `read` on the `HirBody` of
 149     // a `fn` when encoding, so the dep-tracking wouldn't work.
 150     // This is only used by rustdoc anyway, which shouldn't have
 151     // incremental recompilation ever enabled.
 152     fn_arg_names => { cdata.get_fn_param_names(def_id.index) }
 153     rendered_const => { cdata.get_rendered_const(def_id.index) }
 154     impl_parent => { cdata.get_parent_impl(def_id.index) }
 155     trait_of_item => { cdata.get_trait_of_item(def_id.index) }
 156     const_is_rvalue_promotable_to_static => {
 157         cdata.const_is_rvalue_promotable_to_static(def_id.index)
 158     }
 159     is_mir_available => { cdata.is_item_mir_available(def_id.index) }
 160
 161     dylib_dependency_formats => { cdata.get_dylib_dependency_formats(tcx) }
 162     is_panic_runtime => { cdata.root.panic_runtime }
 163     is_compiler_builtins => { cdata.root.compiler_builtins }
 164     has_global_allocator => { cdata.root.has_global_allocator }
 165     has_panic_handler => { cdata.root.has_panic_handler }
 166     is_sanitizer_runtime => { cdata.root.sanitizer_runtime }
 167     is_profiler_runtime => { cdata.root.profiler_runtime }
 168     panic_strategy => { cdata.root.panic_strategy }
 169     extern_crate => {
 170         let r = *cdata.extern_crate.lock();
 171         r.map(|c| &*tcx.arena.alloc(c))
 172     }
 173     is_no_builtins => { cdata.root.no_builtins }
 174     symbol_mangling_version => { cdata.root.symbol_mangling_version }
 175     impl_defaultness => { cdata.get_impl_defaultness(def_id.index) }
 176     reachable_non_generics => {
 177         let reachable_non_generics = tcx
 178             .exported_symbols(cdata.cnum)
 179             .iter()
 180             .filter_map(|&(exported_symbol, export_level)| {
 181                 if let ExportedSymbol::NonGeneric(def_id) = exported_symbol {
 182                     return Some((def_id, export_level))
 183                 } else {
 184                     None
 185                 }
 186             })
 187             .collect();
 188
 189         tcx.arena.alloc(reachable_non_generics)
 190     }
 191     native_libraries => { Lrc::new(cdata.get_native_libraries(tcx.sess)) }
 192     foreign_modules => { cdata.get_foreign_modules(tcx) }
 193     plugin_registrar_fn => {
 194         cdata.root.plugin_registrar_fn.map(|index| {
 195             DefId { krate: def_id.krate, index }
 196         })
 197     }
 198     proc_macro_decls_static => {
 199         cdata.root.proc_macro_decls_static.map(|index| {
 200             DefId { krate: def_id.krate, index }
 201         })
 202     }
 203     crate_disambiguator => { cdata.root.disambiguator }
 204     crate_hash => { cdata.root.hash }
 205     original_crate_name => { cdata.root.name }
 206
 207     extra_filename => { cdata.root.extra_filename.clone() }
 208
 209     implementations_of_trait => {
 210         cdata.get_implementations_for_trait(tcx, Some(other))
 211     }
 212
 213     all_trait_implementations => {
 214         cdata.get_implementations_for_trait(tcx, None)
 215     }
 216
 217     visibility => { cdata.get_visibility(def_id.index) }
 218     dep_kind => {
 219         let r = *cdata.dep_kind.lock();
 220         r
 221     }
 222     crate_name => { cdata.name }
 223     item_children => {
 224         let mut result = SmallVec::<[_; 8]>::new();
 225         cdata.each_child_of_item(def_id.index, |child| result.push(child), tcx.sess);
 226         tcx.arena.alloc_slice(&result)
 227     }
 228     defined_lib_features => { cdata.get_lib_features(tcx) }
 229     defined_lang_items => { cdata.get_lang_items(tcx) }
 230     diagnostic_items => { cdata.get_diagnostic_items(tcx) }
 231     missing_lang_items => { cdata.get_missing_lang_items(tcx) }
 232
 233     missing_extern_crate_item => {
 234         let r = match *cdata.extern_crate.borrow() {
 235             Some(extern_crate) if !extern_crate.direct => true,
 236             _ => false,
 237         };
 238         r
 239     }
 240
 241     used_crate_source => { Lrc::new(cdata.source.clone()) }
 242
 243     exported_symbols => { Arc::new(cdata.exported_symbols(tcx)) }
 244 }
 245
 246 pub fn provide(providers: &mut Providers<'_>) {
 247     // FIXME(#44234) - almost all of these queries have no sub-queries and
 248     // therefore no actual inputs, they're just reading tables calculated in
 249     // resolve! Does this work? Unsure! That's what the issue is about
 250     *providers = Providers {
 251         is_dllimport_foreign_item: |tcx, id| {
 252             tcx.native_library_kind(id) == Some(NativeLibraryKind::NativeUnknown)
 253         },
 254         is_statically_included_foreign_item: |tcx, id| {
 255             match tcx.native_library_kind(id) {
 256                 Some(NativeLibraryKind::NativeStatic) |
 257                 Some(NativeLibraryKind::NativeStaticNobundle) => true,
 258                 _ => false,
 259             }
 260         },
 261         native_library_kind: |tcx, id| {
 262             tcx.native_libraries(id.krate)
 263                 .iter()
 264                 .filter(|lib| native_libs::relevant_lib(&tcx.sess, lib))
 265                 .find(|lib| {
 266                     let fm_id = match lib.foreign_module {
 267                         Some(id) => id,
 268                         None => return false,
 269                     };
 270                     tcx.foreign_modules(id.krate)
 271                         .iter()
 272                         .find(|m| m.def_id == fm_id)
 273                         .expect("failed to find foreign module")
 274                         .foreign_items
 275                         .contains(&id)
 276                 })
 277                 .map(|l| l.kind)
 278         },
 279         native_libraries: |tcx, cnum| {
 280             assert_eq!(cnum, LOCAL_CRATE);
 281             Lrc::new(native_libs::collect(tcx))
 282         },
 283         foreign_modules: |tcx, cnum| {
 284             assert_eq!(cnum, LOCAL_CRATE);
 285             &tcx.arena.alloc(foreign_modules::collect(tcx))[..]
 286         },
 287         link_args: |tcx, cnum| {
 288             assert_eq!(cnum, LOCAL_CRATE);
 289             Lrc::new(link_args::collect(tcx))
 290         },
 291
 292         // Returns a map from a sufficiently visible external item (i.e., an
 293         // external item that is visible from at least one local module) to a
 294         // sufficiently visible parent (considering modules that re-export the
 295         // external item to be parents).
 296         visible_parent_map: |tcx, cnum| {
 297             use std::collections::vec_deque::VecDeque;
 298             use std::collections::hash_map::Entry;
 299
 300             assert_eq!(cnum, LOCAL_CRATE);
 301             let mut visible_parent_map: DefIdMap<DefId> = Default::default();
 302
 303             // Issue 46112: We want the map to prefer the shortest
 304             // paths when reporting the path to an item. Therefore we
 305             // build up the map via a breadth-first search (BFS),
 306             // which naturally yields minimal-length paths.
 307             //
 308             // Note that it needs to be a BFS over the whole forest of
 309             // crates, not just each individual crate; otherwise you
 310             // only get paths that are locally minimal with respect to
 311             // whatever crate we happened to encounter first in this
 312             // traversal, but not globally minimal across all crates.
 313             let bfs_queue = &mut VecDeque::new();
 314
 315             // Preferring shortest paths alone does not guarantee a
 316             // deterministic result; so sort by crate num to avoid
 317             // hashtable iteration non-determinism. This only makes
 318             // things as deterministic as crate-nums assignment is,
 319             // which is to say, its not deterministic in general. But
 320             // we believe that libstd is consistently assigned crate
 321             // num 1, so it should be enough to resolve #46112.
 322             let mut crates: Vec<CrateNum> = (*tcx.crates()).to_owned();
 323             crates.sort();
 324
 325             for &cnum in crates.iter() {
 326                 // Ignore crates without a corresponding local `extern crate` item.
 327                 if tcx.missing_extern_crate_item(cnum) {
 328                     continue
 329                 }
 330
 331                 bfs_queue.push_back(DefId {
 332                     krate: cnum,
 333                     index: CRATE_DEF_INDEX
 334                 });
 335             }
 336
 337             // (restrict scope of mutable-borrow of `visible_parent_map`)
 338             {
 339                 let visible_parent_map = &mut visible_parent_map;
 340                 let mut add_child = |bfs_queue: &mut VecDeque<_>,
 341                                      child: &def::Export<hir::HirId>,
 342                                      parent: DefId| {
 343                     if child.vis != ty::Visibility::Public {
 344                         return;
 345                     }
 346
 347                     if let Some(child) = child.res.opt_def_id() {
 348                         match visible_parent_map.entry(child) {
 349                             Entry::Occupied(mut entry) => {
 350                                 // If `child` is defined in crate `cnum`, ensure
 351                                 // that it is mapped to a parent in `cnum`.
 352                                 if child.krate == cnum && entry.get().krate != cnum {
 353                                     entry.insert(parent);
 354                                 }
 355                             }
 356                             Entry::Vacant(entry) => {
 357                                 entry.insert(parent);
 358                                 bfs_queue.push_back(child);
 359                             }
 360                         }
 361                     }
 362                 };
 363
 364                 while let Some(def) = bfs_queue.pop_front() {
 365                     for child in tcx.item_children(def).iter() {
 366                         add_child(bfs_queue, child, def);
 367                     }
 368                 }
 369             }
 370
 371             tcx.arena.alloc(visible_parent_map)
 372         },
 373
 374         ..*providers
 375     };
 376 }
 377
 378 impl cstore::CStore {
 379     pub fn export_macros_untracked(&self, cnum: CrateNum) {
 380         let data = self.get_crate_data(cnum);
 381         let mut dep_kind = data.dep_kind.lock();
 382         if *dep_kind == DepKind::UnexportedMacrosOnly {
 383             *dep_kind = DepKind::MacrosOnly;
 384         }
 385     }
 386
 387     pub fn dep_kind_untracked(&self, cnum: CrateNum) -> DepKind {
 388         let data = self.get_crate_data(cnum);
 389         let r = *data.dep_kind.lock();
 390         r
 391     }
 392
 393     pub fn crate_edition_untracked(&self, cnum: CrateNum) -> Edition {
 394         self.get_crate_data(cnum).root.edition
 395     }
 396
 397     pub fn struct_field_names_untracked(&self, def: DefId) -> Vec<ast::Name> {
 398         self.get_crate_data(def.krate).get_struct_field_names(def.index)
 399     }
 400
 401     pub fn ctor_kind_untracked(&self, def: DefId) -> def::CtorKind {
 402         self.get_crate_data(def.krate).get_ctor_kind(def.index)
 403     }
 404
 405     pub fn item_attrs_untracked(&self, def: DefId, sess: &Session) -> Lrc<[ast::Attribute]> {
 406         self.get_crate_data(def.krate).get_item_attrs(def.index, sess)
 407     }
 408
 409     pub fn item_children_untracked(
 410         &self,
 411         def_id: DefId,
 412         sess: &Session
 413     ) -> Vec<def::Export<hir::HirId>> {
 414         let mut result = vec![];
 415         self.get_crate_data(def_id.krate)
 416             .each_child_of_item(def_id.index, |child| result.push(child), sess);
 417         result
 418     }
 419
 420     pub fn load_macro_untracked(&self, id: DefId, sess: &Session) -> LoadedMacro {
 421         let data = self.get_crate_data(id.krate);
 422         if data.is_proc_macro_crate() {
 423             return LoadedMacro::ProcMacro(data.load_proc_macro(id.index, sess));
 424         }
 425
 426         let def = data.get_macro(id.index);
 427         let macro_full_name = data.def_path(id.index)
 428             .to_string_friendly(|_| data.imported_name);
 429         let source_name = FileName::Macros(macro_full_name);
 430
 431         let source_file = sess.parse_sess.source_map().new_source_file(source_name, def.body);
 432         let local_span = Span::with_root_ctxt(source_file.start_pos, source_file.end_pos);
 433         let (body, mut errors) = source_file_to_stream(&sess.parse_sess, source_file, None);
 434         emit_unclosed_delims(&mut errors, &sess.diagnostic());
 435
 436         // Mark the attrs as used
 437         let attrs = data.get_item_attrs(id.index, sess);
 438         for attr in attrs.iter() {
 439             attr::mark_used(attr);
 440         }
 441
 442         let name = data.def_key(id.index).disambiguated_data.data
 443             .get_opt_name().expect("no name in load_macro");
 444         sess.imported_macro_spans.borrow_mut()
 445             .insert(local_span, (name.to_string(), data.get_span(id.index, sess)));
 446
 447         LoadedMacro::MacroDef(ast::Item {
 448             // FIXME: cross-crate hygiene
 449             ident: ast::Ident::with_dummy_span(name.as_symbol()),
 450             id: ast::DUMMY_NODE_ID,
 451             span: local_span,
 452             attrs: attrs.iter().cloned().collect(),
 453             node: ast::ItemKind::MacroDef(ast::MacroDef {
 454                 tokens: body.into(),
 455                 legacy: def.legacy,
 456             }),
 457             vis: source_map::respan(local_span.shrink_to_lo(), ast::VisibilityKind::Inherited),
 458             tokens: None,
 459         })
 460     }
 461
 462     pub fn associated_item_cloned_untracked(&self, def: DefId) -> ty::AssocItem {
 463         self.get_crate_data(def.krate).get_associated_item(def.index)
 464     }
 465 }
 466
 467 impl CrateStore for cstore::CStore {
 468     fn crate_data_as_rc_any(&self, krate: CrateNum) -> Lrc<dyn Any> {
 469         self.get_crate_data(krate)
 470     }
 471
 472     fn item_generics_cloned_untracked(&self, def: DefId, sess: &Session) -> ty::Generics {
 473         self.get_crate_data(def.krate).get_generics(def.index, sess)
 474     }
 475
 476     fn crate_name_untracked(&self, cnum: CrateNum) -> Symbol
 477     {
 478         self.get_crate_data(cnum).name
 479     }
 480
 481     fn crate_is_private_dep_untracked(&self, cnum: CrateNum) -> bool {
 482         self.get_crate_data(cnum).private_dep
 483     }
 484
 485     fn crate_disambiguator_untracked(&self, cnum: CrateNum) -> CrateDisambiguator
 486     {
 487         self.get_crate_data(cnum).root.disambiguator
 488     }
 489
 490     fn crate_hash_untracked(&self, cnum: CrateNum) -> Svh
 491     {
 492         self.get_crate_data(cnum).root.hash
 493     }
 494
 495     /// Returns the `DefKey` for a given `DefId`. This indicates the
 496     /// parent `DefId` as well as some idea of what kind of data the
 497     /// `DefId` refers to.
 498     fn def_key(&self, def: DefId) -> DefKey {
 499         // Note: loading the def-key (or def-path) for a def-id is not
 500         // a *read* of its metadata. This is because the def-id is
 501         // really just an interned shorthand for a def-path, which is the
 502         // canonical name for an item.
 503         //
 504         // self.dep_graph.read(DepNode::MetaData(def));
 505         self.get_crate_data(def.krate).def_key(def.index)
 506     }
 507
 508     fn def_path(&self, def: DefId) -> DefPath {
 509         // See `Note` above in `def_key()` for why this read is
 510         // commented out:
 511         //
 512         // self.dep_graph.read(DepNode::MetaData(def));
 513         self.get_crate_data(def.krate).def_path(def.index)
 514     }
 515
 516     fn def_path_hash(&self, def: DefId) -> DefPathHash {
 517         self.get_crate_data(def.krate).def_path_hash(def.index)
 518     }
 519
 520     fn def_path_table(&self, cnum: CrateNum) -> Lrc<DefPathTable> {
 521         self.get_crate_data(cnum).def_path_table.clone()
 522     }
 523
 524     fn crates_untracked(&self) -> Vec<CrateNum>
 525     {
 526         let mut result = vec![];
 527         self.iter_crate_data(|cnum, _| result.push(cnum));
 528         result
 529     }
 530
 531     fn extern_mod_stmt_cnum_untracked(&self, emod_id: ast::NodeId) -> Option<CrateNum>
 532     {
 533         self.do_extern_mod_stmt_cnum(emod_id)
 534     }
 535
 536     fn postorder_cnums_untracked(&self) -> Vec<CrateNum> {
 537         self.do_postorder_cnums_untracked()
 538     }
 539
 540     fn encode_metadata(&self, tcx: TyCtxt<'_>) -> EncodedMetadata {
 541         encoder::encode_metadata(tcx)
 542     }
 543
 544     fn metadata_encoding_version(&self) -> &[u8]
 545     {
 546         schema::METADATA_HEADER
 547     }
 548 }