]> git.lizzy.rs Git - rust.git/blob - src/librustc_metadata/encoder.rs
Rollup merge of #41141 - michaelwoerister:direct-metadata-ich-final, r=nikomatsakis
[rust.git] / src / librustc_metadata / encoder.rs
1 // Copyright 2012-2015 The Rust Project Developers. See the COPYRIGHT
2 // file at the top-level directory of this distribution and at
3 // http://rust-lang.org/COPYRIGHT.
4 //
5 // Licensed under the Apache License, Version 2.0 <LICENSE-APACHE or
6 // http://www.apache.org/licenses/LICENSE-2.0> or the MIT license
7 // <LICENSE-MIT or http://opensource.org/licenses/MIT>, at your
8 // option. This file may not be copied, modified, or distributed
9 // except according to those terms.
10
11 use cstore;
12 use index::Index;
13 use schema::*;
14
15 use rustc::middle::cstore::{LinkMeta, LinkagePreference, NativeLibrary,
16                             EncodedMetadata, EncodedMetadataHash};
17 use rustc::hir::def_id::{CrateNum, CRATE_DEF_INDEX, DefIndex, DefId};
18 use rustc::hir::map::definitions::DefPathTable;
19 use rustc::middle::dependency_format::Linkage;
20 use rustc::middle::lang_items;
21 use rustc::mir;
22 use rustc::traits::specialization_graph;
23 use rustc::ty::{self, Ty, TyCtxt, ReprOptions};
24
25 use rustc::session::config::{self, CrateTypeProcMacro};
26 use rustc::util::nodemap::{FxHashMap, NodeSet};
27
28 use rustc_serialize::{Encodable, Encoder, SpecializedEncoder, opaque};
29 use std::hash::Hash;
30 use std::intrinsics;
31 use std::io::prelude::*;
32 use std::io::Cursor;
33 use std::rc::Rc;
34 use std::u32;
35 use syntax::ast::{self, CRATE_NODE_ID};
36 use syntax::codemap::Spanned;
37 use syntax::attr;
38 use syntax::symbol::Symbol;
39 use syntax_pos::{self, DUMMY_SP};
40
41 use rustc::hir::{self, PatKind};
42 use rustc::hir::itemlikevisit::ItemLikeVisitor;
43 use rustc::hir::intravisit::{Visitor, NestedVisitorMap};
44 use rustc::hir::intravisit;
45
46 use super::index_builder::{FromId, IndexBuilder, Untracked, EntryBuilder};
47
48 pub struct EncodeContext<'a, 'tcx: 'a> {
49     opaque: opaque::Encoder<'a>,
50     pub tcx: TyCtxt<'a, 'tcx, 'tcx>,
51     link_meta: &'a LinkMeta,
52     cstore: &'a cstore::CStore,
53     exported_symbols: &'a NodeSet,
54
55     lazy_state: LazyState,
56     type_shorthands: FxHashMap<Ty<'tcx>, usize>,
57     predicate_shorthands: FxHashMap<ty::Predicate<'tcx>, usize>,
58
59     pub metadata_hashes: Vec<EncodedMetadataHash>,
60 }
61
62 macro_rules! encoder_methods {
63     ($($name:ident($ty:ty);)*) => {
64         $(fn $name(&mut self, value: $ty) -> Result<(), Self::Error> {
65             self.opaque.$name(value)
66         })*
67     }
68 }
69
70 impl<'a, 'tcx> Encoder for EncodeContext<'a, 'tcx> {
71     type Error = <opaque::Encoder<'a> as Encoder>::Error;
72
73     fn emit_nil(&mut self) -> Result<(), Self::Error> {
74         Ok(())
75     }
76
77     encoder_methods! {
78         emit_usize(usize);
79         emit_u128(u128);
80         emit_u64(u64);
81         emit_u32(u32);
82         emit_u16(u16);
83         emit_u8(u8);
84
85         emit_isize(isize);
86         emit_i128(i128);
87         emit_i64(i64);
88         emit_i32(i32);
89         emit_i16(i16);
90         emit_i8(i8);
91
92         emit_bool(bool);
93         emit_f64(f64);
94         emit_f32(f32);
95         emit_char(char);
96         emit_str(&str);
97     }
98 }
99
100 impl<'a, 'tcx, T> SpecializedEncoder<Lazy<T>> for EncodeContext<'a, 'tcx> {
101     fn specialized_encode(&mut self, lazy: &Lazy<T>) -> Result<(), Self::Error> {
102         self.emit_lazy_distance(lazy.position, Lazy::<T>::min_size())
103     }
104 }
105
106 impl<'a, 'tcx, T> SpecializedEncoder<LazySeq<T>> for EncodeContext<'a, 'tcx> {
107     fn specialized_encode(&mut self, seq: &LazySeq<T>) -> Result<(), Self::Error> {
108         self.emit_usize(seq.len)?;
109         if seq.len == 0 {
110             return Ok(());
111         }
112         self.emit_lazy_distance(seq.position, LazySeq::<T>::min_size(seq.len))
113     }
114 }
115
116 impl<'a, 'tcx> SpecializedEncoder<Ty<'tcx>> for EncodeContext<'a, 'tcx> {
117     fn specialized_encode(&mut self, ty: &Ty<'tcx>) -> Result<(), Self::Error> {
118         self.encode_with_shorthand(ty, &ty.sty, |ecx| &mut ecx.type_shorthands)
119     }
120 }
121
122 impl<'a, 'tcx> SpecializedEncoder<ty::GenericPredicates<'tcx>> for EncodeContext<'a, 'tcx> {
123     fn specialized_encode(&mut self,
124                           predicates: &ty::GenericPredicates<'tcx>)
125                           -> Result<(), Self::Error> {
126         predicates.parent.encode(self)?;
127         predicates.predicates.len().encode(self)?;
128         for predicate in &predicates.predicates {
129             self.encode_with_shorthand(predicate, predicate, |ecx| &mut ecx.predicate_shorthands)?
130         }
131         Ok(())
132     }
133 }
134
135 impl<'a, 'tcx> EncodeContext<'a, 'tcx> {
136     pub fn position(&self) -> usize {
137         self.opaque.position()
138     }
139
140     fn emit_node<F: FnOnce(&mut Self, usize) -> R, R>(&mut self, f: F) -> R {
141         assert_eq!(self.lazy_state, LazyState::NoNode);
142         let pos = self.position();
143         self.lazy_state = LazyState::NodeStart(pos);
144         let r = f(self, pos);
145         self.lazy_state = LazyState::NoNode;
146         r
147     }
148
149     fn emit_lazy_distance(&mut self,
150                           position: usize,
151                           min_size: usize)
152                           -> Result<(), <Self as Encoder>::Error> {
153         let min_end = position + min_size;
154         let distance = match self.lazy_state {
155             LazyState::NoNode => bug!("emit_lazy_distance: outside of a metadata node"),
156             LazyState::NodeStart(start) => {
157                 assert!(min_end <= start);
158                 start - min_end
159             }
160             LazyState::Previous(last_min_end) => {
161                 assert!(last_min_end <= position);
162                 position - last_min_end
163             }
164         };
165         self.lazy_state = LazyState::Previous(min_end);
166         self.emit_usize(distance)
167     }
168
169     pub fn lazy<T: Encodable>(&mut self, value: &T) -> Lazy<T> {
170         self.emit_node(|ecx, pos| {
171             value.encode(ecx).unwrap();
172
173             assert!(pos + Lazy::<T>::min_size() <= ecx.position());
174             Lazy::with_position(pos)
175         })
176     }
177
178     pub fn lazy_seq<I, T>(&mut self, iter: I) -> LazySeq<T>
179         where I: IntoIterator<Item = T>,
180               T: Encodable
181     {
182         self.emit_node(|ecx, pos| {
183             let len = iter.into_iter().map(|value| value.encode(ecx).unwrap()).count();
184
185             assert!(pos + LazySeq::<T>::min_size(len) <= ecx.position());
186             LazySeq::with_position_and_length(pos, len)
187         })
188     }
189
190     pub fn lazy_seq_ref<'b, I, T>(&mut self, iter: I) -> LazySeq<T>
191         where I: IntoIterator<Item = &'b T>,
192               T: 'b + Encodable
193     {
194         self.emit_node(|ecx, pos| {
195             let len = iter.into_iter().map(|value| value.encode(ecx).unwrap()).count();
196
197             assert!(pos + LazySeq::<T>::min_size(len) <= ecx.position());
198             LazySeq::with_position_and_length(pos, len)
199         })
200     }
201
202     /// Encode the given value or a previously cached shorthand.
203     fn encode_with_shorthand<T, U, M>(&mut self,
204                                       value: &T,
205                                       variant: &U,
206                                       map: M)
207                                       -> Result<(), <Self as Encoder>::Error>
208         where M: for<'b> Fn(&'b mut Self) -> &'b mut FxHashMap<T, usize>,
209               T: Clone + Eq + Hash,
210               U: Encodable
211     {
212         let existing_shorthand = map(self).get(value).cloned();
213         if let Some(shorthand) = existing_shorthand {
214             return self.emit_usize(shorthand);
215         }
216
217         let start = self.position();
218         variant.encode(self)?;
219         let len = self.position() - start;
220
221         // The shorthand encoding uses the same usize as the
222         // discriminant, with an offset so they can't conflict.
223         let discriminant = unsafe { intrinsics::discriminant_value(variant) };
224         assert!(discriminant < SHORTHAND_OFFSET as u64);
225         let shorthand = start + SHORTHAND_OFFSET;
226
227         // Get the number of bits that leb128 could fit
228         // in the same space as the fully encoded type.
229         let leb128_bits = len * 7;
230
231         // Check that the shorthand is a not longer than the
232         // full encoding itself, i.e. it's an obvious win.
233         if leb128_bits >= 64 || (shorthand as u64) < (1 << leb128_bits) {
234             map(self).insert(value.clone(), shorthand);
235         }
236
237         Ok(())
238     }
239 }
240
241 impl<'a, 'b: 'a, 'tcx: 'b> EntryBuilder<'a, 'b, 'tcx> {
242     fn encode_item_variances(&mut self, def_id: DefId) -> LazySeq<ty::Variance> {
243         debug!("EntryBuilder::encode_item_variances({:?})", def_id);
244         let tcx = self.tcx;
245         self.lazy_seq_from_slice(&tcx.item_variances(def_id))
246     }
247
248     fn encode_item_type(&mut self, def_id: DefId) -> Lazy<Ty<'tcx>> {
249         let tcx = self.tcx;
250         let ty = tcx.item_type(def_id);
251         debug!("EntryBuilder::encode_item_type({:?}) => {:?}", def_id, ty);
252         self.lazy(&ty)
253     }
254
255     /// Encode data for the given variant of the given ADT. The
256     /// index of the variant is untracked: this is ok because we
257     /// will have to lookup the adt-def by its id, and that gives us
258     /// the right to access any information in the adt-def (including,
259     /// e.g., the length of the various vectors).
260     fn encode_enum_variant_info(&mut self,
261                                 (enum_did, Untracked(index)): (DefId, Untracked<usize>))
262                                 -> Entry<'tcx> {
263         let tcx = self.tcx;
264         let def = tcx.lookup_adt_def(enum_did);
265         let variant = &def.variants[index];
266         let def_id = variant.did;
267         debug!("EntryBuilder::encode_enum_variant_info({:?})", def_id);
268
269         let data = VariantData {
270             ctor_kind: variant.ctor_kind,
271             discr: variant.discr,
272             evaluated_discr: match variant.discr {
273                 ty::VariantDiscr::Explicit(def_id) => {
274                     ty::queries::monomorphic_const_eval::get(tcx, DUMMY_SP, def_id).ok()
275                 }
276                 ty::VariantDiscr::Relative(_) => None
277             },
278             struct_ctor: None,
279         };
280
281         let enum_id = tcx.hir.as_local_node_id(enum_did).unwrap();
282         let enum_vis = &tcx.hir.expect_item(enum_id).vis;
283
284         Entry {
285             kind: EntryKind::Variant(self.lazy(&data)),
286             visibility: self.lazy(&ty::Visibility::from_hir(enum_vis, enum_id, tcx)),
287             span: self.lazy(&tcx.def_span(def_id)),
288             attributes: self.encode_attributes(&tcx.get_attrs(def_id)),
289             children: self.lazy_seq(variant.fields.iter().map(|f| {
290                 assert!(f.did.is_local());
291                 f.did.index
292             })),
293             stability: self.encode_stability(def_id),
294             deprecation: self.encode_deprecation(def_id),
295
296             ty: Some(self.encode_item_type(def_id)),
297             inherent_impls: LazySeq::empty(),
298             variances: LazySeq::empty(),
299             generics: Some(self.encode_generics(def_id)),
300             predicates: Some(self.encode_predicates(def_id)),
301
302             ast: None,
303             mir: self.encode_mir(def_id),
304         }
305     }
306
307     fn encode_info_for_mod(&mut self,
308                            FromId(id, (md, attrs, vis)): FromId<(&hir::Mod,
309                                                                  &[ast::Attribute],
310                                                                  &hir::Visibility)>)
311                            -> Entry<'tcx> {
312         let tcx = self.tcx;
313         let def_id = tcx.hir.local_def_id(id);
314         debug!("EntryBuilder::encode_info_for_mod({:?})", def_id);
315
316         let data = ModData {
317             reexports: match tcx.export_map.get(&id) {
318                 Some(exports) if *vis == hir::Public => {
319                     self.lazy_seq_from_slice(exports.as_slice())
320                 }
321                 _ => LazySeq::empty(),
322             },
323         };
324
325         Entry {
326             kind: EntryKind::Mod(self.lazy(&data)),
327             visibility: self.lazy(&ty::Visibility::from_hir(vis, id, tcx)),
328             span: self.lazy(&md.inner),
329             attributes: self.encode_attributes(attrs),
330             children: self.lazy_seq(md.item_ids.iter().map(|item_id| {
331                 tcx.hir.local_def_id(item_id.id).index
332             })),
333             stability: self.encode_stability(def_id),
334             deprecation: self.encode_deprecation(def_id),
335
336             ty: None,
337             inherent_impls: LazySeq::empty(),
338             variances: LazySeq::empty(),
339             generics: None,
340             predicates: None,
341
342             ast: None,
343             mir: None
344         }
345     }
346 }
347
348 impl<'a, 'b, 'tcx> IndexBuilder<'a, 'b, 'tcx> {
349     fn encode_fields(&mut self, adt_def_id: DefId) {
350         let def = self.tcx.lookup_adt_def(adt_def_id);
351         for (variant_index, variant) in def.variants.iter().enumerate() {
352             for (field_index, field) in variant.fields.iter().enumerate() {
353                 self.record(field.did,
354                             EntryBuilder::encode_field,
355                             (adt_def_id, Untracked((variant_index, field_index))));
356             }
357         }
358     }
359 }
360
361 impl<'a, 'b: 'a, 'tcx: 'b> EntryBuilder<'a, 'b, 'tcx> {
362     /// Encode data for the given field of the given variant of the
363     /// given ADT. The indices of the variant/field are untracked:
364     /// this is ok because we will have to lookup the adt-def by its
365     /// id, and that gives us the right to access any information in
366     /// the adt-def (including, e.g., the length of the various
367     /// vectors).
368     fn encode_field(&mut self,
369                     (adt_def_id, Untracked((variant_index, field_index))): (DefId,
370                                                                             Untracked<(usize,
371                                                                                        usize)>))
372                     -> Entry<'tcx> {
373         let tcx = self.tcx;
374         let variant = &tcx.lookup_adt_def(adt_def_id).variants[variant_index];
375         let field = &variant.fields[field_index];
376
377         let def_id = field.did;
378         debug!("EntryBuilder::encode_field({:?})", def_id);
379
380         let variant_id = tcx.hir.as_local_node_id(variant.did).unwrap();
381         let variant_data = tcx.hir.expect_variant_data(variant_id);
382
383         Entry {
384             kind: EntryKind::Field,
385             visibility: self.lazy(&field.vis),
386             span: self.lazy(&tcx.def_span(def_id)),
387             attributes: self.encode_attributes(&variant_data.fields()[field_index].attrs),
388             children: LazySeq::empty(),
389             stability: self.encode_stability(def_id),
390             deprecation: self.encode_deprecation(def_id),
391
392             ty: Some(self.encode_item_type(def_id)),
393             inherent_impls: LazySeq::empty(),
394             variances: LazySeq::empty(),
395             generics: Some(self.encode_generics(def_id)),
396             predicates: Some(self.encode_predicates(def_id)),
397
398             ast: None,
399             mir: None,
400         }
401     }
402
403     fn encode_struct_ctor(&mut self, (adt_def_id, def_id): (DefId, DefId)) -> Entry<'tcx> {
404         debug!("EntryBuilder::encode_struct_ctor({:?})", def_id);
405         let tcx = self.tcx;
406         let variant = tcx.lookup_adt_def(adt_def_id).struct_variant();
407
408         let data = VariantData {
409             ctor_kind: variant.ctor_kind,
410             discr: variant.discr,
411             evaluated_discr: None,
412             struct_ctor: Some(def_id.index),
413         };
414
415         let struct_id = tcx.hir.as_local_node_id(adt_def_id).unwrap();
416         let struct_vis = &tcx.hir.expect_item(struct_id).vis;
417         let mut ctor_vis = ty::Visibility::from_hir(struct_vis, struct_id, tcx);
418         for field in &variant.fields {
419             if ctor_vis.is_at_least(field.vis, tcx) {
420                 ctor_vis = field.vis;
421             }
422         }
423
424         let repr_options = get_repr_options(&tcx, adt_def_id);
425
426         Entry {
427             kind: EntryKind::Struct(self.lazy(&data), repr_options),
428             visibility: self.lazy(&ctor_vis),
429             span: self.lazy(&tcx.def_span(def_id)),
430             attributes: LazySeq::empty(),
431             children: LazySeq::empty(),
432             stability: self.encode_stability(def_id),
433             deprecation: self.encode_deprecation(def_id),
434
435             ty: Some(self.encode_item_type(def_id)),
436             inherent_impls: LazySeq::empty(),
437             variances: LazySeq::empty(),
438             generics: Some(self.encode_generics(def_id)),
439             predicates: Some(self.encode_predicates(def_id)),
440
441             ast: None,
442             mir: self.encode_mir(def_id),
443         }
444     }
445
446     fn encode_generics(&mut self, def_id: DefId) -> Lazy<ty::Generics> {
447         debug!("EntryBuilder::encode_generics({:?})", def_id);
448         let tcx = self.tcx;
449         self.lazy(tcx.item_generics(def_id))
450     }
451
452     fn encode_predicates(&mut self, def_id: DefId) -> Lazy<ty::GenericPredicates<'tcx>> {
453         debug!("EntryBuilder::encode_predicates({:?})", def_id);
454         let tcx = self.tcx;
455         self.lazy(&tcx.item_predicates(def_id))
456     }
457
458     fn encode_info_for_trait_item(&mut self, def_id: DefId) -> Entry<'tcx> {
459         debug!("EntryBuilder::encode_info_for_trait_item({:?})", def_id);
460         let tcx = self.tcx;
461
462         let node_id = tcx.hir.as_local_node_id(def_id).unwrap();
463         let ast_item = tcx.hir.expect_trait_item(node_id);
464         let trait_item = tcx.associated_item(def_id);
465
466         let container = match trait_item.defaultness {
467             hir::Defaultness::Default { has_value: true } =>
468                 AssociatedContainer::TraitWithDefault,
469             hir::Defaultness::Default { has_value: false } =>
470                 AssociatedContainer::TraitRequired,
471             hir::Defaultness::Final =>
472                 span_bug!(ast_item.span, "traits cannot have final items"),
473         };
474
475         let kind = match trait_item.kind {
476             ty::AssociatedKind::Const => {
477                 EntryKind::AssociatedConst(container, 0)
478             }
479             ty::AssociatedKind::Method => {
480                 let fn_data = if let hir::TraitItemKind::Method(_, ref m) = ast_item.node {
481                     let arg_names = match *m {
482                         hir::TraitMethod::Required(ref names) => {
483                             self.encode_fn_arg_names(names)
484                         }
485                         hir::TraitMethod::Provided(body) => {
486                             self.encode_fn_arg_names_for_body(body)
487                         }
488                     };
489                     FnData {
490                         constness: hir::Constness::NotConst,
491                         arg_names: arg_names
492                     }
493                 } else {
494                     bug!()
495                 };
496                 EntryKind::Method(self.lazy(&MethodData {
497                     fn_data: fn_data,
498                     container: container,
499                     has_self: trait_item.method_has_self_argument,
500                 }))
501             }
502             ty::AssociatedKind::Type => EntryKind::AssociatedType(container),
503         };
504
505         Entry {
506             kind: kind,
507             visibility: self.lazy(&trait_item.vis),
508             span: self.lazy(&ast_item.span),
509             attributes: self.encode_attributes(&ast_item.attrs),
510             children: LazySeq::empty(),
511             stability: self.encode_stability(def_id),
512             deprecation: self.encode_deprecation(def_id),
513
514             ty: match trait_item.kind {
515                 ty::AssociatedKind::Const |
516                 ty::AssociatedKind::Method => {
517                     Some(self.encode_item_type(def_id))
518                 }
519                 ty::AssociatedKind::Type => {
520                     if trait_item.defaultness.has_value() {
521                         Some(self.encode_item_type(def_id))
522                     } else {
523                         None
524                     }
525                 }
526             },
527             inherent_impls: LazySeq::empty(),
528             variances: LazySeq::empty(),
529             generics: Some(self.encode_generics(def_id)),
530             predicates: Some(self.encode_predicates(def_id)),
531
532             ast: if let hir::TraitItemKind::Const(_, Some(body)) = ast_item.node {
533                 Some(self.encode_body(body))
534             } else {
535                 None
536             },
537             mir: self.encode_mir(def_id),
538         }
539     }
540
541     fn encode_info_for_impl_item(&mut self, def_id: DefId) -> Entry<'tcx> {
542         debug!("EntryBuilder::encode_info_for_impl_item({:?})", def_id);
543         let node_id = self.tcx.hir.as_local_node_id(def_id).unwrap();
544         let ast_item = self.tcx.hir.expect_impl_item(node_id);
545         let impl_item = self.tcx.associated_item(def_id);
546
547         let container = match impl_item.defaultness {
548             hir::Defaultness::Default { has_value: true } => AssociatedContainer::ImplDefault,
549             hir::Defaultness::Final => AssociatedContainer::ImplFinal,
550             hir::Defaultness::Default { has_value: false } =>
551                 span_bug!(ast_item.span, "impl items always have values (currently)"),
552         };
553
554         let kind = match impl_item.kind {
555             ty::AssociatedKind::Const => {
556                 EntryKind::AssociatedConst(container,
557                     ty::queries::mir_const_qualif::get(self.tcx, ast_item.span, def_id))
558             }
559             ty::AssociatedKind::Method => {
560                 let fn_data = if let hir::ImplItemKind::Method(ref sig, body) = ast_item.node {
561                     FnData {
562                         constness: sig.constness,
563                         arg_names: self.encode_fn_arg_names_for_body(body),
564                     }
565                 } else {
566                     bug!()
567                 };
568                 EntryKind::Method(self.lazy(&MethodData {
569                     fn_data: fn_data,
570                     container: container,
571                     has_self: impl_item.method_has_self_argument,
572                 }))
573             }
574             ty::AssociatedKind::Type => EntryKind::AssociatedType(container)
575         };
576
577         let (ast, mir) = if let hir::ImplItemKind::Const(_, body) = ast_item.node {
578             (Some(body), true)
579         } else if let hir::ImplItemKind::Method(ref sig, body) = ast_item.node {
580             let generics = self.tcx.item_generics(def_id);
581             let types = generics.parent_types as usize + generics.types.len();
582             let needs_inline = types > 0 || attr::requests_inline(&ast_item.attrs);
583             let is_const_fn = sig.constness == hir::Constness::Const;
584             let ast = if is_const_fn { Some(body) } else { None };
585             let always_encode_mir = self.tcx.sess.opts.debugging_opts.always_encode_mir;
586             (ast, needs_inline || is_const_fn || always_encode_mir)
587         } else {
588             (None, false)
589         };
590
591         Entry {
592             kind: kind,
593             visibility: self.lazy(&impl_item.vis),
594             span: self.lazy(&ast_item.span),
595             attributes: self.encode_attributes(&ast_item.attrs),
596             children: LazySeq::empty(),
597             stability: self.encode_stability(def_id),
598             deprecation: self.encode_deprecation(def_id),
599
600             ty: Some(self.encode_item_type(def_id)),
601             inherent_impls: LazySeq::empty(),
602             variances: LazySeq::empty(),
603             generics: Some(self.encode_generics(def_id)),
604             predicates: Some(self.encode_predicates(def_id)),
605
606             ast: ast.map(|body| self.encode_body(body)),
607             mir: if mir { self.encode_mir(def_id) } else { None },
608         }
609     }
610
611     fn encode_fn_arg_names_for_body(&mut self, body_id: hir::BodyId)
612                                     -> LazySeq<ast::Name> {
613         let _ignore = self.tcx.dep_graph.in_ignore();
614         let body = self.tcx.hir.body(body_id);
615         self.lazy_seq(body.arguments.iter().map(|arg| {
616             match arg.pat.node {
617                 PatKind::Binding(_, _, name, _) => name.node,
618                 _ => Symbol::intern("")
619             }
620         }))
621     }
622
623     fn encode_fn_arg_names(&mut self, names: &[Spanned<ast::Name>])
624                            -> LazySeq<ast::Name> {
625         self.lazy_seq(names.iter().map(|name| name.node))
626     }
627
628     fn encode_mir(&mut self, def_id: DefId) -> Option<Lazy<mir::Mir<'tcx>>> {
629         debug!("EntryBuilder::encode_mir({:?})", def_id);
630         self.tcx.maps.mir.borrow().get(&def_id).map(|mir| self.lazy(&*mir.borrow()))
631     }
632
633     // Encodes the inherent implementations of a structure, enumeration, or trait.
634     fn encode_inherent_implementations(&mut self, def_id: DefId) -> LazySeq<DefIndex> {
635         debug!("EntryBuilder::encode_inherent_implementations({:?})", def_id);
636         match self.tcx.maps.inherent_impls.borrow().get(&def_id) {
637             None => LazySeq::empty(),
638             Some(implementations) => {
639                 self.lazy_seq(implementations.iter().map(|&def_id| {
640                     assert!(def_id.is_local());
641                     def_id.index
642                 }))
643             }
644         }
645     }
646
647     fn encode_stability(&mut self, def_id: DefId) -> Option<Lazy<attr::Stability>> {
648         debug!("EntryBuilder::encode_stability({:?})", def_id);
649         self.tcx.lookup_stability(def_id).map(|stab| self.lazy(stab))
650     }
651
652     fn encode_deprecation(&mut self, def_id: DefId) -> Option<Lazy<attr::Deprecation>> {
653         debug!("EntryBuilder::encode_deprecation({:?})", def_id);
654         self.tcx.lookup_deprecation(def_id).map(|depr| self.lazy(&depr))
655     }
656
657     fn encode_info_for_item(&mut self, (def_id, item): (DefId, &'tcx hir::Item)) -> Entry<'tcx> {
658         let tcx = self.tcx;
659
660         debug!("EntryBuilder::encode_info_for_item({:?})", def_id);
661
662         let kind = match item.node {
663             hir::ItemStatic(_, hir::MutMutable, _) => EntryKind::MutStatic,
664             hir::ItemStatic(_, hir::MutImmutable, _) => EntryKind::ImmStatic,
665             hir::ItemConst(..) => {
666                 EntryKind::Const(ty::queries::mir_const_qualif::get(tcx, item.span, def_id))
667             }
668             hir::ItemFn(_, _, constness, .., body) => {
669                 let data = FnData {
670                     constness: constness,
671                     arg_names: self.encode_fn_arg_names_for_body(body),
672                 };
673
674                 EntryKind::Fn(self.lazy(&data))
675             }
676             hir::ItemMod(ref m) => {
677                 return self.encode_info_for_mod(FromId(item.id, (m, &item.attrs, &item.vis)));
678             }
679             hir::ItemForeignMod(_) => EntryKind::ForeignMod,
680             hir::ItemTy(..) => EntryKind::Type,
681             hir::ItemEnum(..) => EntryKind::Enum(get_repr_options(&tcx, def_id)),
682             hir::ItemStruct(ref struct_def, _) => {
683                 let variant = tcx.lookup_adt_def(def_id).struct_variant();
684
685                 // Encode def_ids for each field and method
686                 // for methods, write all the stuff get_trait_method
687                 // needs to know
688                 let struct_ctor = if !struct_def.is_struct() {
689                     Some(tcx.hir.local_def_id(struct_def.id()).index)
690                 } else {
691                     None
692                 };
693
694                 let repr_options = get_repr_options(&tcx, def_id);
695
696                 EntryKind::Struct(self.lazy(&VariantData {
697                     ctor_kind: variant.ctor_kind,
698                     discr: variant.discr,
699                     evaluated_discr: None,
700                     struct_ctor: struct_ctor,
701                 }), repr_options)
702             }
703             hir::ItemUnion(..) => {
704                 let variant = tcx.lookup_adt_def(def_id).struct_variant();
705                 let repr_options = get_repr_options(&tcx, def_id);
706
707                 EntryKind::Union(self.lazy(&VariantData {
708                     ctor_kind: variant.ctor_kind,
709                     discr: variant.discr,
710                     evaluated_discr: None,
711                     struct_ctor: None,
712                 }), repr_options)
713             }
714             hir::ItemDefaultImpl(..) => {
715                 let data = ImplData {
716                     polarity: hir::ImplPolarity::Positive,
717                     parent_impl: None,
718                     coerce_unsized_info: None,
719                     trait_ref: tcx.impl_trait_ref(def_id).map(|trait_ref| self.lazy(&trait_ref)),
720                 };
721
722                 EntryKind::DefaultImpl(self.lazy(&data))
723             }
724             hir::ItemImpl(_, polarity, ..) => {
725                 let trait_ref = tcx.impl_trait_ref(def_id);
726                 let parent = if let Some(trait_ref) = trait_ref {
727                     let trait_def = tcx.lookup_trait_def(trait_ref.def_id);
728                     trait_def.ancestors(def_id).skip(1).next().and_then(|node| {
729                         match node {
730                             specialization_graph::Node::Impl(parent) => Some(parent),
731                             _ => None,
732                         }
733                     })
734                 } else {
735                     None
736                 };
737
738                 // if this is an impl of `CoerceUnsized`, create its
739                 // "unsized info", else just store None
740                 let coerce_unsized_info =
741                     trait_ref.and_then(|t| {
742                         if Some(t.def_id) == tcx.lang_items.coerce_unsized_trait() {
743                             Some(ty::queries::coerce_unsized_info::get(tcx, item.span, def_id))
744                         } else {
745                             None
746                         }
747                     });
748
749                 let data = ImplData {
750                     polarity: polarity,
751                     parent_impl: parent,
752                     coerce_unsized_info: coerce_unsized_info,
753                     trait_ref: trait_ref.map(|trait_ref| self.lazy(&trait_ref)),
754                 };
755
756                 EntryKind::Impl(self.lazy(&data))
757             }
758             hir::ItemTrait(..) => {
759                 let trait_def = tcx.lookup_trait_def(def_id);
760                 let data = TraitData {
761                     unsafety: trait_def.unsafety,
762                     paren_sugar: trait_def.paren_sugar,
763                     has_default_impl: tcx.trait_has_default_impl(def_id),
764                     super_predicates: self.lazy(&tcx.item_super_predicates(def_id)),
765                 };
766
767                 EntryKind::Trait(self.lazy(&data))
768             }
769             hir::ItemExternCrate(_) |
770             hir::ItemUse(..) => bug!("cannot encode info for item {:?}", item),
771         };
772
773         Entry {
774             kind: kind,
775             visibility: self.lazy(&ty::Visibility::from_hir(&item.vis, item.id, tcx)),
776             span: self.lazy(&item.span),
777             attributes: self.encode_attributes(&item.attrs),
778             children: match item.node {
779                 hir::ItemForeignMod(ref fm) => {
780                     self.lazy_seq(fm.items
781                         .iter()
782                         .map(|foreign_item| tcx.hir.local_def_id(foreign_item.id).index))
783                 }
784                 hir::ItemEnum(..) => {
785                     let def = self.tcx.lookup_adt_def(def_id);
786                     self.lazy_seq(def.variants.iter().map(|v| {
787                         assert!(v.did.is_local());
788                         v.did.index
789                     }))
790                 }
791                 hir::ItemStruct(..) |
792                 hir::ItemUnion(..) => {
793                     let def = self.tcx.lookup_adt_def(def_id);
794                     self.lazy_seq(def.struct_variant().fields.iter().map(|f| {
795                         assert!(f.did.is_local());
796                         f.did.index
797                     }))
798                 }
799                 hir::ItemImpl(..) |
800                 hir::ItemTrait(..) => {
801                     self.lazy_seq(tcx.associated_item_def_ids(def_id).iter().map(|&def_id| {
802                         assert!(def_id.is_local());
803                         def_id.index
804                     }))
805                 }
806                 _ => LazySeq::empty(),
807             },
808             stability: self.encode_stability(def_id),
809             deprecation: self.encode_deprecation(def_id),
810
811             ty: match item.node {
812                 hir::ItemStatic(..) |
813                 hir::ItemConst(..) |
814                 hir::ItemFn(..) |
815                 hir::ItemTy(..) |
816                 hir::ItemEnum(..) |
817                 hir::ItemStruct(..) |
818                 hir::ItemUnion(..) |
819                 hir::ItemImpl(..) => Some(self.encode_item_type(def_id)),
820                 _ => None,
821             },
822             inherent_impls: self.encode_inherent_implementations(def_id),
823             variances: match item.node {
824                 hir::ItemEnum(..) |
825                 hir::ItemStruct(..) |
826                 hir::ItemUnion(..) |
827                 hir::ItemTrait(..) => self.encode_item_variances(def_id),
828                 _ => LazySeq::empty(),
829             },
830             generics: match item.node {
831                 hir::ItemStatic(..) |
832                 hir::ItemConst(..) |
833                 hir::ItemFn(..) |
834                 hir::ItemTy(..) |
835                 hir::ItemEnum(..) |
836                 hir::ItemStruct(..) |
837                 hir::ItemUnion(..) |
838                 hir::ItemImpl(..) |
839                 hir::ItemTrait(..) => Some(self.encode_generics(def_id)),
840                 _ => None,
841             },
842             predicates: match item.node {
843                 hir::ItemStatic(..) |
844                 hir::ItemConst(..) |
845                 hir::ItemFn(..) |
846                 hir::ItemTy(..) |
847                 hir::ItemEnum(..) |
848                 hir::ItemStruct(..) |
849                 hir::ItemUnion(..) |
850                 hir::ItemImpl(..) |
851                 hir::ItemTrait(..) => Some(self.encode_predicates(def_id)),
852                 _ => None,
853             },
854
855             ast: match item.node {
856                 hir::ItemConst(_, body) |
857                 hir::ItemFn(_, _, hir::Constness::Const, _, _, body) => {
858                     Some(self.encode_body(body))
859                 }
860                 _ => None,
861             },
862             mir: match item.node {
863                 hir::ItemStatic(..) if self.tcx.sess.opts.debugging_opts.always_encode_mir => {
864                     self.encode_mir(def_id)
865                 }
866                 hir::ItemConst(..) => self.encode_mir(def_id),
867                 hir::ItemFn(_, _, constness, _, ref generics, _) => {
868                     let tps_len = generics.ty_params.len();
869                     let needs_inline = tps_len > 0 || attr::requests_inline(&item.attrs);
870                     let always_encode_mir = self.tcx.sess.opts.debugging_opts.always_encode_mir;
871                     if needs_inline || constness == hir::Constness::Const || always_encode_mir {
872                         self.encode_mir(def_id)
873                     } else {
874                         None
875                     }
876                 }
877                 _ => None,
878             },
879         }
880     }
881
882     /// Serialize the text of exported macros
883     fn encode_info_for_macro_def(&mut self, macro_def: &hir::MacroDef) -> Entry<'tcx> {
884         use syntax::print::pprust;
885         Entry {
886             kind: EntryKind::MacroDef(self.lazy(&MacroDef {
887                 body: pprust::tts_to_string(&macro_def.body.trees().collect::<Vec<_>>()),
888             })),
889             visibility: self.lazy(&ty::Visibility::Public),
890             span: self.lazy(&macro_def.span),
891
892             attributes: self.encode_attributes(&macro_def.attrs),
893             children: LazySeq::empty(),
894             stability: None,
895             deprecation: None,
896             ty: None,
897             inherent_impls: LazySeq::empty(),
898             variances: LazySeq::empty(),
899             generics: None,
900             predicates: None,
901             ast: None,
902             mir: None,
903         }
904     }
905 }
906
907 impl<'a, 'b, 'tcx> IndexBuilder<'a, 'b, 'tcx> {
908     /// In some cases, along with the item itself, we also
909     /// encode some sub-items. Usually we want some info from the item
910     /// so it's easier to do that here then to wait until we would encounter
911     /// normally in the visitor walk.
912     fn encode_addl_info_for_item(&mut self, item: &hir::Item) {
913         let def_id = self.tcx.hir.local_def_id(item.id);
914         match item.node {
915             hir::ItemStatic(..) |
916             hir::ItemConst(..) |
917             hir::ItemFn(..) |
918             hir::ItemMod(..) |
919             hir::ItemForeignMod(..) |
920             hir::ItemExternCrate(..) |
921             hir::ItemUse(..) |
922             hir::ItemDefaultImpl(..) |
923             hir::ItemTy(..) => {
924                 // no sub-item recording needed in these cases
925             }
926             hir::ItemEnum(..) => {
927                 self.encode_fields(def_id);
928
929                 let def = self.tcx.lookup_adt_def(def_id);
930                 for (i, variant) in def.variants.iter().enumerate() {
931                     self.record(variant.did,
932                                 EntryBuilder::encode_enum_variant_info,
933                                 (def_id, Untracked(i)));
934                 }
935             }
936             hir::ItemStruct(ref struct_def, _) => {
937                 self.encode_fields(def_id);
938
939                 // If the struct has a constructor, encode it.
940                 if !struct_def.is_struct() {
941                     let ctor_def_id = self.tcx.hir.local_def_id(struct_def.id());
942                     self.record(ctor_def_id,
943                                 EntryBuilder::encode_struct_ctor,
944                                 (def_id, ctor_def_id));
945                 }
946             }
947             hir::ItemUnion(..) => {
948                 self.encode_fields(def_id);
949             }
950             hir::ItemImpl(..) => {
951                 for &trait_item_def_id in self.tcx.associated_item_def_ids(def_id).iter() {
952                     self.record(trait_item_def_id,
953                                 EntryBuilder::encode_info_for_impl_item,
954                                 trait_item_def_id);
955                 }
956             }
957             hir::ItemTrait(..) => {
958                 for &item_def_id in self.tcx.associated_item_def_ids(def_id).iter() {
959                     self.record(item_def_id,
960                                 EntryBuilder::encode_info_for_trait_item,
961                                 item_def_id);
962                 }
963             }
964         }
965     }
966 }
967
968 impl<'a, 'b: 'a, 'tcx: 'b> EntryBuilder<'a, 'b, 'tcx> {
969     fn encode_info_for_foreign_item(&mut self,
970                                     (def_id, nitem): (DefId, &hir::ForeignItem))
971                                     -> Entry<'tcx> {
972         let tcx = self.tcx;
973
974         debug!("EntryBuilder::encode_info_for_foreign_item({:?})", def_id);
975
976         let kind = match nitem.node {
977             hir::ForeignItemFn(_, ref names, _) => {
978                 let data = FnData {
979                     constness: hir::Constness::NotConst,
980                     arg_names: self.encode_fn_arg_names(names),
981                 };
982                 EntryKind::ForeignFn(self.lazy(&data))
983             }
984             hir::ForeignItemStatic(_, true) => EntryKind::ForeignMutStatic,
985             hir::ForeignItemStatic(_, false) => EntryKind::ForeignImmStatic,
986         };
987
988         Entry {
989             kind: kind,
990             visibility: self.lazy(&ty::Visibility::from_hir(&nitem.vis, nitem.id, tcx)),
991             span: self.lazy(&nitem.span),
992             attributes: self.encode_attributes(&nitem.attrs),
993             children: LazySeq::empty(),
994             stability: self.encode_stability(def_id),
995             deprecation: self.encode_deprecation(def_id),
996
997             ty: Some(self.encode_item_type(def_id)),
998             inherent_impls: LazySeq::empty(),
999             variances: LazySeq::empty(),
1000             generics: Some(self.encode_generics(def_id)),
1001             predicates: Some(self.encode_predicates(def_id)),
1002
1003             ast: None,
1004             mir: None,
1005         }
1006     }
1007 }
1008
1009 struct EncodeVisitor<'a, 'b: 'a, 'tcx: 'b> {
1010     index: IndexBuilder<'a, 'b, 'tcx>,
1011 }
1012
1013 impl<'a, 'b, 'tcx> Visitor<'tcx> for EncodeVisitor<'a, 'b, 'tcx> {
1014     fn nested_visit_map<'this>(&'this mut self) -> NestedVisitorMap<'this, 'tcx> {
1015         NestedVisitorMap::OnlyBodies(&self.index.tcx.hir)
1016     }
1017     fn visit_expr(&mut self, ex: &'tcx hir::Expr) {
1018         intravisit::walk_expr(self, ex);
1019         self.index.encode_info_for_expr(ex);
1020     }
1021     fn visit_item(&mut self, item: &'tcx hir::Item) {
1022         intravisit::walk_item(self, item);
1023         let def_id = self.index.tcx.hir.local_def_id(item.id);
1024         match item.node {
1025             hir::ItemExternCrate(_) |
1026             hir::ItemUse(..) => (), // ignore these
1027             _ => self.index.record(def_id, EntryBuilder::encode_info_for_item, (def_id, item)),
1028         }
1029         self.index.encode_addl_info_for_item(item);
1030     }
1031     fn visit_foreign_item(&mut self, ni: &'tcx hir::ForeignItem) {
1032         intravisit::walk_foreign_item(self, ni);
1033         let def_id = self.index.tcx.hir.local_def_id(ni.id);
1034         self.index.record(def_id,
1035                           EntryBuilder::encode_info_for_foreign_item,
1036                           (def_id, ni));
1037     }
1038     fn visit_generics(&mut self, generics: &'tcx hir::Generics) {
1039         intravisit::walk_generics(self, generics);
1040         self.index.encode_info_for_generics(generics);
1041     }
1042     fn visit_ty(&mut self, ty: &'tcx hir::Ty) {
1043         intravisit::walk_ty(self, ty);
1044         self.index.encode_info_for_ty(ty);
1045     }
1046     fn visit_macro_def(&mut self, macro_def: &'tcx hir::MacroDef) {
1047         let def_id = self.index.tcx.hir.local_def_id(macro_def.id);
1048         self.index.record(def_id, EntryBuilder::encode_info_for_macro_def, macro_def);
1049     }
1050 }
1051
1052 impl<'a, 'b, 'tcx> IndexBuilder<'a, 'b, 'tcx> {
1053     fn encode_info_for_generics(&mut self, generics: &hir::Generics) {
1054         for ty_param in &generics.ty_params {
1055             let def_id = self.tcx.hir.local_def_id(ty_param.id);
1056             let has_default = Untracked(ty_param.default.is_some());
1057             self.record(def_id, EntryBuilder::encode_info_for_ty_param, (def_id, has_default));
1058         }
1059     }
1060
1061     fn encode_info_for_ty(&mut self, ty: &hir::Ty) {
1062         if let hir::TyImplTrait(_) = ty.node {
1063             let def_id = self.tcx.hir.local_def_id(ty.id);
1064             self.record(def_id, EntryBuilder::encode_info_for_anon_ty, def_id);
1065         }
1066     }
1067
1068     fn encode_info_for_expr(&mut self, expr: &hir::Expr) {
1069         match expr.node {
1070             hir::ExprClosure(..) => {
1071                 let def_id = self.tcx.hir.local_def_id(expr.id);
1072                 self.record(def_id, EntryBuilder::encode_info_for_closure, def_id);
1073             }
1074             _ => {}
1075         }
1076     }
1077 }
1078
1079 impl<'a, 'b: 'a, 'tcx: 'b> EntryBuilder<'a, 'b, 'tcx> {
1080     fn encode_info_for_ty_param(&mut self,
1081                                 (def_id, Untracked(has_default)): (DefId, Untracked<bool>))
1082                                 -> Entry<'tcx> {
1083         debug!("EntryBuilder::encode_info_for_ty_param({:?})", def_id);
1084         let tcx = self.tcx;
1085         Entry {
1086             kind: EntryKind::Type,
1087             visibility: self.lazy(&ty::Visibility::Public),
1088             span: self.lazy(&tcx.def_span(def_id)),
1089             attributes: LazySeq::empty(),
1090             children: LazySeq::empty(),
1091             stability: None,
1092             deprecation: None,
1093
1094             ty: if has_default {
1095                 Some(self.encode_item_type(def_id))
1096             } else {
1097                 None
1098             },
1099             inherent_impls: LazySeq::empty(),
1100             variances: LazySeq::empty(),
1101             generics: None,
1102             predicates: None,
1103
1104             ast: None,
1105             mir: None,
1106         }
1107     }
1108
1109     fn encode_info_for_anon_ty(&mut self, def_id: DefId) -> Entry<'tcx> {
1110         debug!("EntryBuilder::encode_info_for_anon_ty({:?})", def_id);
1111         let tcx = self.tcx;
1112         Entry {
1113             kind: EntryKind::Type,
1114             visibility: self.lazy(&ty::Visibility::Public),
1115             span: self.lazy(&tcx.def_span(def_id)),
1116             attributes: LazySeq::empty(),
1117             children: LazySeq::empty(),
1118             stability: None,
1119             deprecation: None,
1120
1121             ty: Some(self.encode_item_type(def_id)),
1122             inherent_impls: LazySeq::empty(),
1123             variances: LazySeq::empty(),
1124             generics: Some(self.encode_generics(def_id)),
1125             predicates: Some(self.encode_predicates(def_id)),
1126
1127             ast: None,
1128             mir: None,
1129         }
1130     }
1131
1132     fn encode_info_for_closure(&mut self, def_id: DefId) -> Entry<'tcx> {
1133         debug!("EntryBuilder::encode_info_for_closure({:?})", def_id);
1134         let tcx = self.tcx;
1135
1136         let data = ClosureData {
1137             kind: tcx.closure_kind(def_id),
1138             ty: self.lazy(&tcx.closure_type(def_id)),
1139         };
1140
1141         Entry {
1142             kind: EntryKind::Closure(self.lazy(&data)),
1143             visibility: self.lazy(&ty::Visibility::Public),
1144             span: self.lazy(&tcx.def_span(def_id)),
1145             attributes: self.encode_attributes(&tcx.get_attrs(def_id)),
1146             children: LazySeq::empty(),
1147             stability: None,
1148             deprecation: None,
1149
1150             ty: Some(self.encode_item_type(def_id)),
1151             inherent_impls: LazySeq::empty(),
1152             variances: LazySeq::empty(),
1153             generics: Some(self.encode_generics(def_id)),
1154             predicates: None,
1155
1156             ast: None,
1157             mir: self.encode_mir(def_id),
1158         }
1159     }
1160
1161     fn encode_attributes(&mut self, attrs: &[ast::Attribute]) -> LazySeq<ast::Attribute> {
1162         // NOTE: This must use lazy_seq_from_slice(), not lazy_seq() because
1163         //       we really on the HashStable specialization for [Attribute]
1164         //       to properly filter things out.
1165         self.lazy_seq_from_slice(attrs)
1166     }
1167 }
1168
1169 impl<'a, 'tcx> EncodeContext<'a, 'tcx> {
1170     fn encode_info_for_items(&mut self) -> Index {
1171         let krate = self.tcx.hir.krate();
1172         let mut index = IndexBuilder::new(self);
1173         index.record(DefId::local(CRATE_DEF_INDEX),
1174                      EntryBuilder::encode_info_for_mod,
1175                      FromId(CRATE_NODE_ID, (&krate.module, &krate.attrs, &hir::Public)));
1176         let mut visitor = EncodeVisitor { index: index };
1177         krate.visit_all_item_likes(&mut visitor.as_deep_visitor());
1178         for macro_def in &krate.exported_macros {
1179             visitor.visit_macro_def(macro_def);
1180         }
1181         visitor.index.into_items()
1182     }
1183
1184     fn encode_crate_deps(&mut self) -> LazySeq<CrateDep> {
1185         fn get_ordered_deps(cstore: &cstore::CStore) -> Vec<(CrateNum, Rc<cstore::CrateMetadata>)> {
1186             // Pull the cnums and name,vers,hash out of cstore
1187             let mut deps = Vec::new();
1188             cstore.iter_crate_data(|cnum, val| {
1189                 deps.push((cnum, val.clone()));
1190             });
1191
1192             // Sort by cnum
1193             deps.sort_by(|kv1, kv2| kv1.0.cmp(&kv2.0));
1194
1195             // Sanity-check the crate numbers
1196             let mut expected_cnum = 1;
1197             for &(n, _) in &deps {
1198                 assert_eq!(n, CrateNum::new(expected_cnum));
1199                 expected_cnum += 1;
1200             }
1201
1202             deps
1203         }
1204
1205         // We're just going to write a list of crate 'name-hash-version's, with
1206         // the assumption that they are numbered 1 to n.
1207         // FIXME (#2166): This is not nearly enough to support correct versioning
1208         // but is enough to get transitive crate dependencies working.
1209         let deps = get_ordered_deps(self.cstore);
1210         self.lazy_seq(deps.iter().map(|&(_, ref dep)| {
1211             CrateDep {
1212                 name: dep.name(),
1213                 hash: dep.hash(),
1214                 kind: dep.dep_kind.get(),
1215             }
1216         }))
1217     }
1218
1219     fn encode_lang_items(&mut self) -> (LazySeq<(DefIndex, usize)>, LazySeq<lang_items::LangItem>) {
1220         let tcx = self.tcx;
1221         let lang_items = tcx.lang_items.items().iter();
1222         (self.lazy_seq(lang_items.enumerate().filter_map(|(i, &opt_def_id)| {
1223             if let Some(def_id) = opt_def_id {
1224                 if def_id.is_local() {
1225                     return Some((def_id.index, i));
1226                 }
1227             }
1228             None
1229         })),
1230          self.lazy_seq_ref(&tcx.lang_items.missing))
1231     }
1232
1233     fn encode_native_libraries(&mut self) -> LazySeq<NativeLibrary> {
1234         let used_libraries = self.tcx.sess.cstore.used_libraries();
1235         self.lazy_seq(used_libraries)
1236     }
1237
1238     fn encode_codemap(&mut self) -> LazySeq<syntax_pos::FileMap> {
1239         let codemap = self.tcx.sess.codemap();
1240         let all_filemaps = codemap.files.borrow();
1241         self.lazy_seq_ref(all_filemaps.iter()
1242             .filter(|filemap| {
1243                 // No need to re-export imported filemaps, as any downstream
1244                 // crate will import them from their original source.
1245                 !filemap.is_imported()
1246             })
1247             .map(|filemap| &**filemap))
1248     }
1249
1250     fn encode_def_path_table(&mut self) -> Lazy<DefPathTable> {
1251         let definitions = self.tcx.hir.definitions();
1252         self.lazy(definitions.def_path_table())
1253     }
1254 }
1255
1256 struct ImplVisitor<'a, 'tcx: 'a> {
1257     tcx: TyCtxt<'a, 'tcx, 'tcx>,
1258     impls: FxHashMap<DefId, Vec<DefIndex>>,
1259 }
1260
1261 impl<'a, 'tcx, 'v> ItemLikeVisitor<'v> for ImplVisitor<'a, 'tcx> {
1262     fn visit_item(&mut self, item: &hir::Item) {
1263         if let hir::ItemImpl(..) = item.node {
1264             let impl_id = self.tcx.hir.local_def_id(item.id);
1265             if let Some(trait_ref) = self.tcx.impl_trait_ref(impl_id) {
1266                 self.impls
1267                     .entry(trait_ref.def_id)
1268                     .or_insert(vec![])
1269                     .push(impl_id.index);
1270             }
1271         }
1272     }
1273
1274     fn visit_trait_item(&mut self, _trait_item: &'v hir::TraitItem) {}
1275
1276     fn visit_impl_item(&mut self, _impl_item: &'v hir::ImplItem) {
1277         // handled in `visit_item` above
1278     }
1279 }
1280
1281 impl<'a, 'tcx> EncodeContext<'a, 'tcx> {
1282     /// Encodes an index, mapping each trait to its (local) implementations.
1283     fn encode_impls(&mut self) -> LazySeq<TraitImpls> {
1284         let mut visitor = ImplVisitor {
1285             tcx: self.tcx,
1286             impls: FxHashMap(),
1287         };
1288         self.tcx.hir.krate().visit_all_item_likes(&mut visitor);
1289
1290         let all_impls: Vec<_> = visitor.impls
1291             .into_iter()
1292             .map(|(trait_def_id, impls)| {
1293                 TraitImpls {
1294                     trait_id: (trait_def_id.krate.as_u32(), trait_def_id.index),
1295                     impls: self.lazy_seq(impls),
1296                 }
1297             })
1298             .collect();
1299
1300         self.lazy_seq(all_impls)
1301     }
1302
1303     // Encodes all symbols exported from this crate into the metadata.
1304     //
1305     // This pass is seeded off the reachability list calculated in the
1306     // middle::reachable module but filters out items that either don't have a
1307     // symbol associated with them (they weren't translated) or if they're an FFI
1308     // definition (as that's not defined in this crate).
1309     fn encode_exported_symbols(&mut self) -> LazySeq<DefIndex> {
1310         let exported_symbols = self.exported_symbols;
1311         let tcx = self.tcx;
1312         self.lazy_seq(exported_symbols.iter().map(|&id| tcx.hir.local_def_id(id).index))
1313     }
1314
1315     fn encode_dylib_dependency_formats(&mut self) -> LazySeq<Option<LinkagePreference>> {
1316         match self.tcx.sess.dependency_formats.borrow().get(&config::CrateTypeDylib) {
1317             Some(arr) => {
1318                 self.lazy_seq(arr.iter().map(|slot| {
1319                     match *slot {
1320                         Linkage::NotLinked |
1321                         Linkage::IncludedFromDylib => None,
1322
1323                         Linkage::Dynamic => Some(LinkagePreference::RequireDynamic),
1324                         Linkage::Static => Some(LinkagePreference::RequireStatic),
1325                     }
1326                 }))
1327             }
1328             None => LazySeq::empty(),
1329         }
1330     }
1331 }
1332
1333 impl<'a, 'tcx> EncodeContext<'a, 'tcx> {
1334     fn encode_crate_root(&mut self) -> Lazy<CrateRoot> {
1335         let mut i = self.position();
1336         let crate_deps = self.encode_crate_deps();
1337         let dylib_dependency_formats = self.encode_dylib_dependency_formats();
1338         let dep_bytes = self.position() - i;
1339
1340         // Encode the language items.
1341         i = self.position();
1342         let (lang_items, lang_items_missing) = self.encode_lang_items();
1343         let lang_item_bytes = self.position() - i;
1344
1345         // Encode the native libraries used
1346         i = self.position();
1347         let native_libraries = self.encode_native_libraries();
1348         let native_lib_bytes = self.position() - i;
1349
1350         // Encode codemap
1351         i = self.position();
1352         let codemap = self.encode_codemap();
1353         let codemap_bytes = self.position() - i;
1354
1355         // Encode DefPathTable
1356         i = self.position();
1357         let def_path_table = self.encode_def_path_table();
1358         let def_path_table_bytes = self.position() - i;
1359
1360         // Encode the def IDs of impls, for coherence checking.
1361         i = self.position();
1362         let impls = self.encode_impls();
1363         let impl_bytes = self.position() - i;
1364
1365         // Encode exported symbols info.
1366         i = self.position();
1367         let exported_symbols = self.encode_exported_symbols();
1368         let exported_symbols_bytes = self.position() - i;
1369
1370         // Encode and index the items.
1371         i = self.position();
1372         let items = self.encode_info_for_items();
1373         let item_bytes = self.position() - i;
1374
1375         i = self.position();
1376         let index = items.write_index(&mut self.opaque.cursor);
1377         let index_bytes = self.position() - i;
1378
1379         let tcx = self.tcx;
1380         let link_meta = self.link_meta;
1381         let is_proc_macro = tcx.sess.crate_types.borrow().contains(&CrateTypeProcMacro);
1382         let root = self.lazy(&CrateRoot {
1383             name: link_meta.crate_name,
1384             triple: tcx.sess.opts.target_triple.clone(),
1385             hash: link_meta.crate_hash,
1386             disambiguator: tcx.sess.local_crate_disambiguator(),
1387             panic_strategy: tcx.sess.panic_strategy(),
1388             plugin_registrar_fn: tcx.sess
1389                 .plugin_registrar_fn
1390                 .get()
1391                 .map(|id| tcx.hir.local_def_id(id).index),
1392             macro_derive_registrar: if is_proc_macro {
1393                 let id = tcx.sess.derive_registrar_fn.get().unwrap();
1394                 Some(tcx.hir.local_def_id(id).index)
1395             } else {
1396                 None
1397             },
1398
1399             crate_deps: crate_deps,
1400             dylib_dependency_formats: dylib_dependency_formats,
1401             lang_items: lang_items,
1402             lang_items_missing: lang_items_missing,
1403             native_libraries: native_libraries,
1404             codemap: codemap,
1405             def_path_table: def_path_table,
1406             impls: impls,
1407             exported_symbols: exported_symbols,
1408             index: index,
1409         });
1410
1411         let total_bytes = self.position();
1412
1413         if self.tcx.sess.meta_stats() {
1414             let mut zero_bytes = 0;
1415             for e in self.opaque.cursor.get_ref() {
1416                 if *e == 0 {
1417                     zero_bytes += 1;
1418                 }
1419             }
1420
1421             println!("metadata stats:");
1422             println!("             dep bytes: {}", dep_bytes);
1423             println!("       lang item bytes: {}", lang_item_bytes);
1424             println!("          native bytes: {}", native_lib_bytes);
1425             println!("         codemap bytes: {}", codemap_bytes);
1426             println!("            impl bytes: {}", impl_bytes);
1427             println!("    exp. symbols bytes: {}", exported_symbols_bytes);
1428             println!("  def-path table bytes: {}", def_path_table_bytes);
1429             println!("            item bytes: {}", item_bytes);
1430             println!("           index bytes: {}", index_bytes);
1431             println!("            zero bytes: {}", zero_bytes);
1432             println!("           total bytes: {}", total_bytes);
1433         }
1434
1435         root
1436     }
1437 }
1438
1439 // NOTE(eddyb) The following comment was preserved for posterity, even
1440 // though it's no longer relevant as EBML (which uses nested & tagged
1441 // "documents") was replaced with a scheme that can't go out of bounds.
1442 //
1443 // And here we run into yet another obscure archive bug: in which metadata
1444 // loaded from archives may have trailing garbage bytes. Awhile back one of
1445 // our tests was failing sporadically on the macOS 64-bit builders (both nopt
1446 // and opt) by having ebml generate an out-of-bounds panic when looking at
1447 // metadata.
1448 //
1449 // Upon investigation it turned out that the metadata file inside of an rlib
1450 // (and ar archive) was being corrupted. Some compilations would generate a
1451 // metadata file which would end in a few extra bytes, while other
1452 // compilations would not have these extra bytes appended to the end. These
1453 // extra bytes were interpreted by ebml as an extra tag, so they ended up
1454 // being interpreted causing the out-of-bounds.
1455 //
1456 // The root cause of why these extra bytes were appearing was never
1457 // discovered, and in the meantime the solution we're employing is to insert
1458 // the length of the metadata to the start of the metadata. Later on this
1459 // will allow us to slice the metadata to the precise length that we just
1460 // generated regardless of trailing bytes that end up in it.
1461
1462 pub fn encode_metadata<'a, 'tcx>(tcx: TyCtxt<'a, 'tcx, 'tcx>,
1463                                  cstore: &cstore::CStore,
1464                                  link_meta: &LinkMeta,
1465                                  exported_symbols: &NodeSet)
1466                                  -> EncodedMetadata
1467 {
1468     let mut cursor = Cursor::new(vec![]);
1469     cursor.write_all(METADATA_HEADER).unwrap();
1470
1471     // Will be filed with the root position after encoding everything.
1472     cursor.write_all(&[0, 0, 0, 0]).unwrap();
1473
1474     let (root, metadata_hashes) = {
1475         let mut ecx = EncodeContext {
1476             opaque: opaque::Encoder::new(&mut cursor),
1477             tcx: tcx,
1478             link_meta: link_meta,
1479             cstore: cstore,
1480             exported_symbols: exported_symbols,
1481             lazy_state: LazyState::NoNode,
1482             type_shorthands: Default::default(),
1483             predicate_shorthands: Default::default(),
1484             metadata_hashes: Vec::new(),
1485         };
1486
1487         // Encode the rustc version string in a predictable location.
1488         rustc_version().encode(&mut ecx).unwrap();
1489
1490         // Encode all the entries and extra information in the crate,
1491         // culminating in the `CrateRoot` which points to all of it.
1492         let root = ecx.encode_crate_root();
1493         (root, ecx.metadata_hashes)
1494     };
1495     let mut result = cursor.into_inner();
1496
1497     // Encode the root position.
1498     let header = METADATA_HEADER.len();
1499     let pos = root.position;
1500     result[header + 0] = (pos >> 24) as u8;
1501     result[header + 1] = (pos >> 16) as u8;
1502     result[header + 2] = (pos >> 8) as u8;
1503     result[header + 3] = (pos >> 0) as u8;
1504
1505     EncodedMetadata {
1506         raw_data: result,
1507         hashes: metadata_hashes,
1508     }
1509 }
1510
1511 pub fn get_repr_options<'a, 'tcx, 'gcx>(tcx: &TyCtxt<'a, 'tcx, 'gcx>, did: DefId) -> ReprOptions {
1512     let ty = tcx.item_type(did);
1513     match ty.sty {
1514         ty::TyAdt(ref def, _) => return def.repr,
1515         _ => bug!("{} is not an ADT", ty),
1516     }
1517 }