src/librustc_codegen_llvm/common.rs

   1 // Copyright 2012-2014 The Rust Project Developers. See the COPYRIGHT
   2 // file at the top-level directory of this distribution and at
   3 // http://rust-lang.org/COPYRIGHT.
   4 //
   5 // Licensed under the Apache License, Version 2.0 <LICENSE-APACHE or
   6 // http://www.apache.org/licenses/LICENSE-2.0> or the MIT license
   7 // <LICENSE-MIT or http://opensource.org/licenses/MIT>, at your
   8 // option. This file may not be copied, modified, or distributed
   9 // except according to those terms.
  10
  11 #![allow(non_camel_case_types, non_snake_case)]
  12
  13 //! Code that is useful in various codegen modules.
  14
  15 use llvm::{self, TypeKind};
  16 use llvm::{True, False, Bool, BasicBlock};
  17 use rustc::hir::def_id::DefId;
  18 use rustc::middle::lang_items::LangItem;
  19 use abi;
  20 use base;
  21 use builder::Builder;
  22 use consts;
  23 use declare;
  24 use type_::Type;
  25 use type_of::LayoutLlvmExt;
  26 use value::Value;
  27 use interfaces::{Backend, CommonMethods};
  28
  29 use rustc::ty::{self, Ty, TyCtxt};
  30 use rustc::ty::layout::{HasDataLayout, LayoutOf};
  31 use rustc::hir;
  32 use interfaces::BuilderMethods;
  33
  34 use libc::{c_uint, c_char};
  35
  36 use syntax::symbol::LocalInternedString;
  37 use syntax_pos::{Span, DUMMY_SP};
  38
  39 pub use context::CodegenCx;
  40
  41 pub fn type_needs_drop<'a, 'tcx>(tcx: TyCtxt<'a, 'tcx, 'tcx>, ty: Ty<'tcx>) -> bool {
  42     ty.needs_drop(tcx, ty::ParamEnv::reveal_all())
  43 }
  44
  45 pub fn type_is_sized<'a, 'tcx>(tcx: TyCtxt<'a, 'tcx, 'tcx>, ty: Ty<'tcx>) -> bool {
  46     ty.is_sized(tcx.at(DUMMY_SP), ty::ParamEnv::reveal_all())
  47 }
  48
  49 pub fn type_is_freeze<'a, 'tcx>(tcx: TyCtxt<'a, 'tcx, 'tcx>, ty: Ty<'tcx>) -> bool {
  50     ty.is_freeze(tcx, ty::ParamEnv::reveal_all(), DUMMY_SP)
  51 }
  52
  53 pub struct OperandBundleDef<'a, Value : 'a> {
  54     pub name: &'a str,
  55     pub val: Value
  56 }
  57
  58 impl OperandBundleDef<'ll, &'ll Value> {
  59     pub fn new(name: &'ll str, val: &'ll Value) -> Self {
  60         OperandBundleDef {
  61             name,
  62             val
  63         }
  64     }
  65 }
  66
  67 pub enum IntPredicate {
  68     IntEQ,
  69     IntNE,
  70     IntUGT,
  71     IntUGE,
  72     IntULT,
  73     IntULE,
  74     IntSGT,
  75     IntSGE,
  76     IntSLT,
  77     IntSLE
  78 }
  79
  80 #[allow(dead_code)]
  81 pub enum RealPredicate {
  82     RealPredicateFalse,
  83     RealOEQ,
  84     RealOGT,
  85     RealOGE,
  86     RealOLT,
  87     RealOLE,
  88     RealONE,
  89     RealORD,
  90     RealUNO,
  91     RealUEQ,
  92     RealUGT,
  93     RealUGE,
  94     RealULT,
  95     RealULE,
  96     RealUNE,
  97     RealPredicateTrue
  98 }
  99
 100 pub enum AtomicRmwBinOp {
 101     AtomicXchg,
 102     AtomicAdd,
 103     AtomicSub,
 104     AtomicAnd,
 105     AtomicNand,
 106     AtomicOr,
 107     AtomicXor,
 108     AtomicMax,
 109     AtomicMin,
 110     AtomicUMax,
 111     AtomicUMin
 112 }
 113
 114 pub enum AtomicOrdering {
 115     #[allow(dead_code)]
 116     NotAtomic,
 117     Unordered,
 118     Monotonic,
 119     // Consume,  // Not specified yet.
 120     Acquire,
 121     Release,
 122     AcquireRelease,
 123     SequentiallyConsistent,
 124 }
 125
 126 pub enum SynchronizationScope {
 127     // FIXME: figure out if this variant is needed at all.
 128     #[allow(dead_code)]
 129     Other,
 130     SingleThread,
 131     CrossThread,
 132 }
 133
 134 /*
 135 * A note on nomenclature of linking: "extern", "foreign", and "upcall".
 136 *
 137 * An "extern" is an LLVM symbol we wind up emitting an undefined external
 138 * reference to. This means "we don't have the thing in this compilation unit,
 139 * please make sure you link it in at runtime". This could be a reference to
 140 * C code found in a C library, or rust code found in a rust crate.
 141 *
 142 * Most "externs" are implicitly declared (automatically) as a result of a
 143 * user declaring an extern _module_ dependency; this causes the rust driver
 144 * to locate an extern crate, scan its compilation metadata, and emit extern
 145 * declarations for any symbols used by the declaring crate.
 146 *
 147 * A "foreign" is an extern that references C (or other non-rust ABI) code.
 148 * There is no metadata to scan for extern references so in these cases either
 149 * a header-digester like bindgen, or manual function prototypes, have to
 150 * serve as declarators. So these are usually given explicitly as prototype
 151 * declarations, in rust code, with ABI attributes on them noting which ABI to
 152 * link via.
 153 *
 154 * An "upcall" is a foreign call generated by the compiler (not corresponding
 155 * to any user-written call in the code) into the runtime library, to perform
 156 * some helper task such as bringing a task to life, allocating memory, etc.
 157 *
 158 */
 159
 160 /// A structure representing an active landing pad for the duration of a basic
 161 /// block.
 162 ///
 163 /// Each `Block` may contain an instance of this, indicating whether the block
 164 /// is part of a landing pad or not. This is used to make decision about whether
 165 /// to emit `invoke` instructions (e.g. in a landing pad we don't continue to
 166 /// use `invoke`) and also about various function call metadata.
 167 ///
 168 /// For GNU exceptions (`landingpad` + `resume` instructions) this structure is
 169 /// just a bunch of `None` instances (not too interesting), but for MSVC
 170 /// exceptions (`cleanuppad` + `cleanupret` instructions) this contains data.
 171 /// When inside of a landing pad, each function call in LLVM IR needs to be
 172 /// annotated with which landing pad it's a part of. This is accomplished via
 173 /// the `OperandBundleDef` value created for MSVC landing pads.
 174 pub struct Funclet<'ll> {
 175     cleanuppad: &'ll Value,
 176     operand: OperandBundleDef<'ll, &'ll Value>,
 177 }
 178
 179 impl Funclet<'ll> {
 180     pub fn new(cleanuppad: &'ll Value) -> Self {
 181         Funclet {
 182             cleanuppad,
 183             operand: OperandBundleDef::new("funclet", cleanuppad),
 184         }
 185     }
 186
 187     pub fn cleanuppad(&self) -> &'ll Value {
 188         self.cleanuppad
 189     }
 190
 191     pub fn bundle(&self) -> &OperandBundleDef<'ll, &'ll Value> {
 192         &self.operand
 193     }
 194 }
 195
 196 impl Backend for CodegenCx<'ll, 'tcx> {
 197     type Value = &'ll Value;
 198     type BasicBlock = &'ll BasicBlock;
 199     type Type = &'ll Type;
 200     type Context = &'ll llvm::Context;
 201 }
 202
 203 impl<'ll, 'tcx : 'll> CommonMethods for CodegenCx<'ll, 'tcx> {
 204     fn val_ty(v: &'ll Value) -> &'ll Type {
 205         unsafe {
 206             llvm::LLVMTypeOf(v)
 207         }
 208     }
 209
 210     // LLVM constant constructors.
 211     fn c_null(t: &'ll Type) -> &'ll Value {
 212         unsafe {
 213             llvm::LLVMConstNull(t)
 214         }
 215     }
 216
 217     fn c_undef(t: &'ll Type) -> &'ll Value {
 218         unsafe {
 219             llvm::LLVMGetUndef(t)
 220         }
 221     }
 222
 223     fn c_int(t: &'ll Type, i: i64) -> &'ll Value {
 224         unsafe {
 225             llvm::LLVMConstInt(t, i as u64, True)
 226         }
 227     }
 228
 229     fn c_uint(t: &'ll Type, i: u64) -> &'ll Value {
 230         unsafe {
 231             llvm::LLVMConstInt(t, i, False)
 232         }
 233     }
 234
 235     fn c_uint_big(t: &'ll Type, u: u128) -> &'ll Value {
 236         unsafe {
 237             let words = [u as u64, (u >> 64) as u64];
 238             llvm::LLVMConstIntOfArbitraryPrecision(t, 2, words.as_ptr())
 239         }
 240     }
 241
 242     fn c_bool(&self, val: bool) -> &'ll Value {
 243         Self::c_uint(Type::i1(&self), val as u64)
 244     }
 245
 246     fn c_i32(&self, i: i32) -> &'ll Value {
 247         Self::c_int(Type::i32(&self), i as i64)
 248     }
 249
 250     fn c_u32(&self, i: u32) -> &'ll Value {
 251         Self::c_uint(Type::i32(&self), i as u64)
 252     }
 253
 254     fn c_u64(&self, i: u64) -> &'ll Value {
 255         Self::c_uint(Type::i64(&self), i)
 256     }
 257
 258     fn c_usize(&self, i: u64) -> &'ll Value {
 259         let bit_size = self.data_layout().pointer_size.bits();
 260         if bit_size < 64 {
 261             // make sure it doesn't overflow
 262             assert!(i < (1<<bit_size));
 263         }
 264
 265         Self::c_uint(&self.isize_ty, i)
 266     }
 267
 268     fn c_u8(&self, i: u8) -> &'ll Value {
 269         Self::c_uint(Type::i8(&self), i as u64)
 270     }
 271
 272
 273     // This is a 'c-like' raw string, which differs from
 274     // our boxed-and-length-annotated strings.
 275     fn c_cstr(
 276         &self,
 277         s: LocalInternedString,
 278         null_terminated: bool,
 279     ) -> &'ll Value {
 280         unsafe {
 281             if let Some(&llval) = &self.const_cstr_cache.borrow().get(&s) {
 282                 return llval;
 283             }
 284
 285             let sc = llvm::LLVMConstStringInContext(&self.llcx,
 286                                                     s.as_ptr() as *const c_char,
 287                                                     s.len() as c_uint,
 288                                                     !null_terminated as Bool);
 289             let sym = &self.generate_local_symbol_name("str");
 290             let g = declare::define_global(&self, &sym[..], Self::val_ty(sc)).unwrap_or_else(||{
 291                 bug!("symbol `{}` is already defined", sym);
 292             });
 293             llvm::LLVMSetInitializer(g, sc);
 294             llvm::LLVMSetGlobalConstant(g, True);
 295             llvm::LLVMRustSetLinkage(g, llvm::Linkage::InternalLinkage);
 296
 297             &self.const_cstr_cache.borrow_mut().insert(s, g);
 298             g
 299         }
 300     }
 301
 302     // NB: Do not use `do_spill_noroot` to make this into a constant string, or
 303     // you will be kicked off fast isel. See issue #4352 for an example of this.
 304     fn c_str_slice(&self, s: LocalInternedString) -> &'ll Value {
 305         let len = s.len();
 306         let cs = consts::ptrcast(&self.c_cstr(s, false),
 307             &self.layout_of(&self.tcx.mk_str()).llvm_type(&self).ptr_to());
 308         &self.c_fat_ptr(cs, &self.c_usize(len as u64))
 309     }
 310
 311     fn c_fat_ptr(
 312         &self,
 313         ptr: &'ll Value,
 314         meta: &'ll Value
 315     ) -> &'ll Value {
 316         assert_eq!(abi::FAT_PTR_ADDR, 0);
 317         assert_eq!(abi::FAT_PTR_EXTRA, 1);
 318         &self.c_struct(&[ptr, meta], false)
 319     }
 320
 321     fn c_struct(
 322         &self,
 323         elts: &[&'ll Value],
 324         packed: bool
 325     ) -> &'ll Value {
 326         Self::c_struct_in_context(&self.llcx, elts, packed)
 327     }
 328
 329     fn c_struct_in_context(
 330         llcx: &'a llvm::Context,
 331         elts: &[&'a Value],
 332         packed: bool,
 333     ) -> &'a Value {
 334         unsafe {
 335             llvm::LLVMConstStructInContext(llcx,
 336                                            elts.as_ptr(), elts.len() as c_uint,
 337                                            packed as Bool)
 338         }
 339     }
 340
 341     fn c_array(ty: &'ll Type, elts: &[&'ll Value]) -> &'ll Value {
 342         unsafe {
 343             return llvm::LLVMConstArray(ty, elts.as_ptr(), elts.len() as c_uint);
 344         }
 345     }
 346
 347     fn c_vector(elts: &[&'ll Value]) -> &'ll Value {
 348         unsafe {
 349             return llvm::LLVMConstVector(elts.as_ptr(), elts.len() as c_uint);
 350         }
 351     }
 352
 353     fn c_bytes(&self, bytes: &[u8]) -> &'ll Value {
 354         Self::c_bytes_in_context(&self.llcx, bytes)
 355     }
 356
 357     fn c_bytes_in_context(llcx: &'ll llvm::Context, bytes: &[u8]) -> &'ll Value {
 358         unsafe {
 359             let ptr = bytes.as_ptr() as *const c_char;
 360             return llvm::LLVMConstStringInContext(llcx, ptr, bytes.len() as c_uint, True);
 361         }
 362     }
 363
 364     fn const_get_elt(v: &'ll Value, idx: u64) -> &'ll Value {
 365         unsafe {
 366             assert_eq!(idx as c_uint as u64, idx);
 367             let us = &[idx as c_uint];
 368             let r = llvm::LLVMConstExtractValue(v, us.as_ptr(), us.len() as c_uint);
 369
 370             debug!("const_get_elt(v={:?}, idx={}, r={:?})",
 371                    v, idx, r);
 372
 373             r
 374         }
 375     }
 376
 377     fn const_get_real(v: &'ll Value) -> Option<(f64, bool)> {
 378         unsafe {
 379             if Self::is_const_real(v) {
 380                 let mut loses_info: llvm::Bool = ::std::mem::uninitialized();
 381                 let r = llvm::LLVMConstRealGetDouble(v, &mut loses_info);
 382                 let loses_info = if loses_info == 1 { true } else { false };
 383                 Some((r, loses_info))
 384             } else {
 385                 None
 386             }
 387         }
 388     }
 389
 390     fn const_to_uint(v: &'ll Value) -> u64 {
 391         unsafe {
 392             llvm::LLVMConstIntGetZExtValue(v)
 393         }
 394     }
 395
 396     fn is_const_integral(v: &'ll Value) -> bool {
 397         unsafe {
 398             llvm::LLVMIsAConstantInt(v).is_some()
 399         }
 400     }
 401
 402     fn is_const_real(v: &'ll Value) -> bool {
 403         unsafe {
 404             llvm::LLVMIsAConstantFP(v).is_some()
 405         }
 406     }
 407
 408     fn const_to_opt_u128(v: &'ll Value, sign_ext: bool) -> Option<u128> {
 409         unsafe {
 410             if Self::is_const_integral(v) {
 411                 let (mut lo, mut hi) = (0u64, 0u64);
 412                 let success = llvm::LLVMRustConstInt128Get(v, sign_ext,
 413                                                            &mut hi, &mut lo);
 414                 if success {
 415                     Some(hi_lo_to_u128(lo, hi))
 416                 } else {
 417                     None
 418                 }
 419             } else {
 420                 None
 421             }
 422         }
 423     }
 424 }
 425
 426 #[inline]
 427 fn hi_lo_to_u128(lo: u64, hi: u64) -> u128 {
 428     ((hi as u128) << 64) | (lo as u128)
 429 }
 430
 431 pub fn langcall(tcx: TyCtxt,
 432                 span: Option<Span>,
 433                 msg: &str,
 434                 li: LangItem)
 435                 -> DefId {
 436     tcx.lang_items().require(li).unwrap_or_else(|s| {
 437         let msg = format!("{} {}", msg, s);
 438         match span {
 439             Some(span) => tcx.sess.span_fatal(span, &msg[..]),
 440             None => tcx.sess.fatal(&msg[..]),
 441         }
 442     })
 443 }
 444
 445 // To avoid UB from LLVM, these two functions mask RHS with an
 446 // appropriate mask unconditionally (i.e. the fallback behavior for
 447 // all shifts). For 32- and 64-bit types, this matches the semantics
 448 // of Java. (See related discussion on #1877 and #10183.)
 449
 450 pub fn build_unchecked_lshift(
 451     bx: &Builder<'a, 'll, 'tcx>,
 452     lhs: &'ll Value,
 453     rhs: &'ll Value
 454 ) -> &'ll Value {
 455     let rhs = base::cast_shift_expr_rhs(bx, hir::BinOpKind::Shl, lhs, rhs);
 456     // #1877, #10183: Ensure that input is always valid
 457     let rhs = shift_mask_rhs(bx, rhs);
 458     bx.shl(lhs, rhs)
 459 }
 460
 461 pub fn build_unchecked_rshift(
 462     bx: &Builder<'a, 'll, 'tcx>, lhs_t: Ty<'tcx>, lhs: &'ll Value, rhs: &'ll Value
 463 ) -> &'ll Value {
 464     let rhs = base::cast_shift_expr_rhs(bx, hir::BinOpKind::Shr, lhs, rhs);
 465     // #1877, #10183: Ensure that input is always valid
 466     let rhs = shift_mask_rhs(bx, rhs);
 467     let is_signed = lhs_t.is_signed();
 468     if is_signed {
 469         bx.ashr(lhs, rhs)
 470     } else {
 471         bx.lshr(lhs, rhs)
 472     }
 473 }
 474
 475 fn shift_mask_rhs(bx: &Builder<'a, 'll, 'tcx>, rhs: &'ll Value) -> &'ll Value {
 476     let rhs_llty = CodegenCx::val_ty(rhs);
 477     bx.and(rhs, shift_mask_val(bx, rhs_llty, rhs_llty, false))
 478 }
 479
 480 pub fn shift_mask_val(
 481     bx: &Builder<'a, 'll, 'tcx>,
 482     llty: &'ll Type,
 483     mask_llty: &'ll Type,
 484     invert: bool
 485 ) -> &'ll Value {
 486     let kind = llty.kind();
 487     match kind {
 488         TypeKind::Integer => {
 489             // i8/u8 can shift by at most 7, i16/u16 by at most 15, etc.
 490             let val = llty.int_width() - 1;
 491             if invert {
 492                 CodegenCx::c_int(mask_llty, !val as i64)
 493             } else {
 494                 CodegenCx::c_uint(mask_llty, val)
 495             }
 496         },
 497         TypeKind::Vector => {
 498             let mask = shift_mask_val(bx, llty.element_type(), mask_llty.element_type(), invert);
 499             bx.vector_splat(mask_llty.vector_length(), mask)
 500         },
 501         _ => bug!("shift_mask_val: expected Integer or Vector, found {:?}", kind),
 502     }
 503 }