mk/rt.mk

   1 # Copyright 2014 The Rust Project Developers. See the COPYRIGHT
   2 # file at the top-level directory of this distribution and at
   3 # http://rust-lang.org/COPYRIGHT.
   4 #
   5 # Licensed under the Apache License, Version 2.0 <LICENSE-APACHE or
   6 # http://www.apache.org/licenses/LICENSE-2.0> or the MIT license
   7 # <LICENSE-MIT or http://opensource.org/licenses/MIT>, at your
   8 # option. This file may not be copied, modified, or distributed
   9 # except according to those terms.
  10
  11 ################################################################################
  12 # Native libraries built as part of the rust build process
  13 #
  14 # This portion of the rust build system is meant to keep track of native
  15 # dependencies and how to build them. It is currently required that all native
  16 # dependencies are built as static libraries, as slinging around dynamic
  17 # libraries isn't exactly the most fun thing to do.
  18 #
  19 # This section should need minimal modification to add new libraries. The
  20 # relevant variables are:
  21 #
  22 #   NATIVE_LIBS
  23 #       This is a list of all native libraries which are built as part of the
  24 #       build process. It will build all libraries into RT_OUTPUT_DIR with the
  25 #       appropriate name of static library as dictated by the target platform
  26 #
  27 #   NATIVE_DEPS_<lib>
  28 #       This is a list of files relative to the src/rt directory which are
  29 #       needed to build the native library. Each file will be compiled to an
  30 #       object file, and then all the object files will be assembled into an
  31 #       archive (static library). The list contains files of any extension
  32 #
  33 # If adding a new library, you should update the NATIVE_LIBS list, and then list
  34 # the required files below it. The list of required files is a list of files
  35 # that's per-target so you're allowed to conditionally add files based on the
  36 # target.
  37 ################################################################################
  38 NATIVE_LIBS := hoedown miniz rust_test_helpers
  39
  40 # $(1) is the target triple
  41 define NATIVE_LIBRARIES
  42
  43 NATIVE_DEPS_hoedown_$(1) := hoedown/src/autolink.c \
  44                         hoedown/src/buffer.c \
  45                         hoedown/src/document.c \
  46                         hoedown/src/escape.c \
  47                         hoedown/src/html.c \
  48                         hoedown/src/html_blocks.c \
  49                         hoedown/src/html_smartypants.c \
  50                         hoedown/src/stack.c \
  51                         hoedown/src/version.c
  52 NATIVE_DEPS_miniz_$(1) = miniz.c
  53 NATIVE_DEPS_rust_test_helpers_$(1) := rust_test_helpers.c
  54
  55 ################################################################################
  56 # You shouldn't find it that necessary to edit anything below this line.
  57 ################################################################################
  58
  59 # While we're defining the native libraries for each target, we define some
  60 # common rules used to build files for various targets.
  61
  62 RT_OUTPUT_DIR_$(1) := $(1)/rt
  63
  64 $$(RT_OUTPUT_DIR_$(1))/%.o: $(S)src/rt/%.c $$(MKFILE_DEPS)
  65         @mkdir -p $$(@D)
  66         @$$(call E, compile: $$@)
  67         $$(Q)$$(call CFG_COMPILE_C_$(1), $$@, \
  68                 $$(call CFG_CC_INCLUDE_$(1),$$(S)src/rt/hoedown/src) \
  69                 $$(call CFG_CC_INCLUDE_$(1),$$(S)src/rt) \
  70                  $$(RUNTIME_CFLAGS_$(1))) $$<
  71
  72 $$(RT_OUTPUT_DIR_$(1))/%.o: $(S)src/rt/%.S $$(MKFILE_DEPS) \
  73             $$(LLVM_CONFIG_$$(CFG_BUILD))
  74         @mkdir -p $$(@D)
  75         @$$(call E, compile: $$@)
  76         $$(Q)$$(call CFG_ASSEMBLE_$(1),$$@,$$<)
  77
  78 # On MSVC targets the compiler's default include path (e.g. where to find system
  79 # headers) is specified by the INCLUDE environment variable. This may not be set
  80 # so the ./configure script scraped the relevant values and this is the location
  81 # that we put them into cl.exe's environment.
  82 ifeq ($$(findstring msvc,$(1)),msvc)
  83 $$(RT_OUTPUT_DIR_$(1))/%.o: \
  84         export INCLUDE := $$(CFG_MSVC_INCLUDE_PATH_$$(HOST_$(1)))
  85 $(1)/rustllvm/%.o: \
  86         export INCLUDE := $$(CFG_MSVC_INCLUDE_PATH_$$(HOST_$(1)))
  87 endif
  88 endef
  89
  90 $(foreach target,$(CFG_TARGET),$(eval $(call NATIVE_LIBRARIES,$(target))))
  91
  92 # A macro for devining how to build third party libraries listed above (based
  93 # on their dependencies).
  94 #
  95 # $(1) is the target
  96 # $(2) is the lib name
  97 define THIRD_PARTY_LIB
  98
  99 OBJS_$(2)_$(1) := $$(NATIVE_DEPS_$(2)_$(1):%=$$(RT_OUTPUT_DIR_$(1))/%)
 100 OBJS_$(2)_$(1) := $$(OBJS_$(2)_$(1):.c=.o)
 101 OBJS_$(2)_$(1) := $$(OBJS_$(2)_$(1):.cpp=.o)
 102 OBJS_$(2)_$(1) := $$(OBJS_$(2)_$(1):.S=.o)
 103 NATIVE_$(2)_$(1) := $$(call CFG_STATIC_LIB_NAME_$(1),$(2))
 104 $$(RT_OUTPUT_DIR_$(1))/$$(NATIVE_$(2)_$(1)): $$(OBJS_$(2)_$(1))
 105         @$$(call E, link: $$@)
 106         $$(Q)$$(call CFG_CREATE_ARCHIVE_$(1),$$@) $$^
 107
 108 endef
 109
 110 $(foreach lib,$(NATIVE_LIBS), \
 111  $(foreach target,$(CFG_TARGET), \
 112   $(eval $(call THIRD_PARTY_LIB,$(target),$(lib)))))
 113
 114
 115 ################################################################################
 116 # Building third-party targets with external build systems
 117 #
 118 # This location is meant for dependencies which have external build systems. It
 119 # is still assumed that the output of each of these steps is a static library
 120 # in the correct location.
 121 ################################################################################
 122
 123 define DEF_THIRD_PARTY_TARGETS
 124
 125 # $(1) is the target triple
 126
 127 ifeq ($$(CFG_WINDOWSY_$(1)),1)
 128   # A bit of history here, this used to be --enable-lazy-lock added in #14006
 129   # which was filed with jemalloc in jemalloc/jemalloc#83 which was also
 130   # reported to MinGW: http://sourceforge.net/p/mingw-w64/bugs/395/
 131   #
 132   # When updating jemalloc to 4.0, however, it was found that binaries would
 133   # exit with the status code STATUS_RESOURCE_NOT_OWNED indicating that a thread
 134   # was unlocking a mutex it never locked. Disabling this "lazy lock" option
 135   # seems to fix the issue, but it was enabled by default for MinGW targets in
 136   # 13473c7 for jemalloc.
 137   #
 138   # As a result of all that, force disabling lazy lock on Windows, and after
 139   # reading some code it at least *appears* that the initialization of mutexes
 140   # is otherwise ok in jemalloc, so shouldn't cause problems hopefully...
 141   #
 142   # tl;dr: make windows behave like other platforms by disabling lazy locking,
 143   #        but requires passing an option due to a historical default with
 144   #        jemalloc.
 145   JEMALLOC_ARGS_$(1) := --disable-lazy-lock
 146 else ifeq ($(OSTYPE_$(1)), apple-ios)
 147   JEMALLOC_ARGS_$(1) := --disable-tls
 148 else ifeq ($(findstring android, $(OSTYPE_$(1))), android)
 149   JEMALLOC_ARGS_$(1) := --disable-tls
 150 endif
 151
 152 ifdef CFG_ENABLE_DEBUG_JEMALLOC
 153   JEMALLOC_ARGS_$(1) += --enable-debug --enable-fill
 154 endif
 155
 156 ################################################################################
 157 # jemalloc
 158 ################################################################################
 159
 160 ifdef CFG_ENABLE_FAST_MAKE
 161 JEMALLOC_DEPS := $(S)/.gitmodules
 162 else
 163 JEMALLOC_DEPS := $(wildcard \
 164                    $(S)src/jemalloc/* \
 165                    $(S)src/jemalloc/*/* \
 166                    $(S)src/jemalloc/*/*/* \
 167                    $(S)src/jemalloc/*/*/*/*)
 168 endif
 169
 170 # See #17183 for details, this file is touched during the build process so we
 171 # don't want to consider it as a dependency.
 172 JEMALLOC_DEPS := $(filter-out $(S)src/jemalloc/VERSION,$$(JEMALLOC_DEPS))
 173
 174 JEMALLOC_NAME_$(1) := $$(call CFG_STATIC_LIB_NAME_$(1),jemalloc)
 175 ifeq ($$(CFG_WINDOWSY_$(1)),1)
 176   JEMALLOC_REAL_NAME_$(1) := $$(call CFG_STATIC_LIB_NAME_$(1),jemalloc_s)
 177 else
 178   JEMALLOC_REAL_NAME_$(1) := $$(call CFG_STATIC_LIB_NAME_$(1),jemalloc_pic)
 179 endif
 180 JEMALLOC_LIB_$(1) := $$(RT_OUTPUT_DIR_$(1))/$$(JEMALLOC_NAME_$(1))
 181 JEMALLOC_BUILD_DIR_$(1) := $$(RT_OUTPUT_DIR_$(1))/jemalloc
 182 JEMALLOC_LOCAL_$(1) := $$(JEMALLOC_BUILD_DIR_$(1))/lib/$$(JEMALLOC_REAL_NAME_$(1))
 183
 184 $$(JEMALLOC_LOCAL_$(1)): $$(JEMALLOC_DEPS) $$(MKFILE_DEPS)
 185         @$$(call E, make: jemalloc)
 186         cd "$$(JEMALLOC_BUILD_DIR_$(1))"; "$(S)src/jemalloc/configure" \
 187                 $$(JEMALLOC_ARGS_$(1)) --with-jemalloc-prefix=je_ $(CFG_JEMALLOC_FLAGS) \
 188                 --build=$$(CFG_GNU_TRIPLE_$(CFG_BUILD)) --host=$$(CFG_GNU_TRIPLE_$(1)) \
 189                 CC="$$(CC_$(1)) $$(CFG_JEMALLOC_CFLAGS_$(1))" \
 190                 AR="$$(AR_$(1))" \
 191                 RANLIB="$$(AR_$(1)) s" \
 192                 CPPFLAGS="-I $(S)src/rt/" \
 193                 EXTRA_CFLAGS="-g1 -ffunction-sections -fdata-sections"
 194         $$(Q)$$(MAKE) -C "$$(JEMALLOC_BUILD_DIR_$(1))" build_lib_static
 195
 196 ifeq ($(1),$$(CFG_BUILD))
 197 ifneq ($$(CFG_JEMALLOC_ROOT),)
 198 $$(JEMALLOC_LIB_$(1)): $$(CFG_JEMALLOC_ROOT)/libjemalloc_pic.a
 199         @$$(call E, copy: jemalloc)
 200         $$(Q)cp $$< $$@
 201 else
 202 $$(JEMALLOC_LIB_$(1)): $$(JEMALLOC_LOCAL_$(1))
 203         $$(Q)cp $$< $$@
 204 endif
 205 else
 206 $$(JEMALLOC_LIB_$(1)): $$(JEMALLOC_LOCAL_$(1))
 207         $$(Q)cp $$< $$@
 208 endif
 209
 210 ################################################################################
 211 # compiler-rt
 212 ################################################################################
 213
 214 ifdef CFG_ENABLE_FAST_MAKE
 215 COMPRT_DEPS := $(S)/.gitmodules
 216 else
 217 COMPRT_DEPS := $(wildcard \
 218               $(S)src/compiler-rt/* \
 219               $(S)src/compiler-rt/*/* \
 220               $(S)src/compiler-rt/*/*/* \
 221               $(S)src/compiler-rt/*/*/*/*)
 222 endif
 223
 224 COMPRT_NAME_$(1) := $$(call CFG_STATIC_LIB_NAME_$(1),compiler-rt)
 225 COMPRT_LIB_$(1) := $$(RT_OUTPUT_DIR_$(1))/$$(COMPRT_NAME_$(1))
 226 COMPRT_BUILD_DIR_$(1) := $$(RT_OUTPUT_DIR_$(1))/compiler-rt
 227
 228 ifeq ($$(findstring msvc,$(1)),msvc)
 229 $$(COMPRT_LIB_$(1)): $$(COMPRT_DEPS) $$(MKFILE_DEPS) $$(LLVM_CONFIG_$(1))
 230         @$$(call E, cmake: compiler-rt)
 231         $$(Q)cd "$$(COMPRT_BUILD_DIR_$(1))"; $$(CFG_CMAKE) "$(S)src/compiler-rt" \
 232                 -DCMAKE_BUILD_TYPE=$$(LLVM_BUILD_CONFIG_MODE) \
 233                 -DLLVM_CONFIG_PATH=$$(LLVM_CONFIG_$(1)) \
 234                 -G"$$(CFG_CMAKE_GENERATOR)"
 235         $$(Q)$$(CFG_CMAKE) --build "$$(COMPRT_BUILD_DIR_$(1))" \
 236                 --target lib/builtins/builtins \
 237                 --config $$(LLVM_BUILD_CONFIG_MODE) \
 238                 -- //v:m //nologo
 239         $$(Q)cp $$(COMPRT_BUILD_DIR_$(1))/lib/windows/$$(LLVM_BUILD_CONFIG_MODE)/clang_rt.builtins-$$(HOST_$(1)).lib $$@
 240 else
 241 COMPRT_CC_$(1) := $$(CC_$(1))
 242 COMPRT_AR_$(1) := $$(AR_$(1))
 243 # We chomp -Werror here because GCC warns about the type signature of
 244 # builtins not matching its own and the build fails. It's a bit hacky,
 245 # but what can we do, we're building libclang-rt using GCC ......
 246 COMPRT_CFLAGS_$(1) := $$(subst -Werror,,$$(CFG_GCCISH_CFLAGS_$(1))) -std=c99
 247
 248 # FreeBSD Clang's packaging is problematic; it doesn't copy unwind.h to
 249 # the standard include directory. This should really be in our changes to
 250 # compiler-rt, but we override the CFLAGS here so there isn't much choice
 251 ifeq ($$(findstring freebsd,$(1)),freebsd)
 252         COMPRT_CFLAGS_$(1) += -I/usr/include/c++/v1
 253 endif
 254
 255 $$(COMPRT_LIB_$(1)): $$(COMPRT_DEPS) $$(MKFILE_DEPS)
 256         @$$(call E, make: compiler-rt)
 257         $$(Q)$$(MAKE) -C "$(S)src/compiler-rt" \
 258                 ProjSrcRoot="$(S)src/compiler-rt" \
 259                 ProjObjRoot="$$(abspath $$(COMPRT_BUILD_DIR_$(1)))" \
 260                 CC='$$(COMPRT_CC_$(1))' \
 261                 AR='$$(COMPRT_AR_$(1))' \
 262                 RANLIB='$$(COMPRT_AR_$(1)) s' \
 263                 CFLAGS="$$(COMPRT_CFLAGS_$(1))" \
 264                 TargetTriple=$(1) \
 265                 triple-builtins
 266         $$(Q)cp $$(COMPRT_BUILD_DIR_$(1))/triple/builtins/libcompiler_rt.a $$@
 267 endif
 268 ################################################################################
 269 # libbacktrace
 270 #
 271 # We use libbacktrace on linux to get symbols in backtraces, but only on linux.
 272 # Elsewhere we use other system utilities, so this library is only built on
 273 # linux.
 274 ################################################################################
 275
 276 BACKTRACE_NAME_$(1) := $$(call CFG_STATIC_LIB_NAME_$(1),backtrace)
 277 BACKTRACE_LIB_$(1) := $$(RT_OUTPUT_DIR_$(1))/$$(BACKTRACE_NAME_$(1))
 278 BACKTRACE_BUILD_DIR_$(1) := $$(RT_OUTPUT_DIR_$(1))/libbacktrace
 279
 280 # We don't use this on platforms that aren't linux-based (with the exception of
 281 # msys2/mingw builds on windows, which use it to read the dwarf debug
 282 # information) so just make the file available, the compilation of libstd won't
 283 # actually build it.
 284 ifeq ($$(findstring darwin,$$(OSTYPE_$(1))),darwin)
 285 # See comment above
 286 $$(BACKTRACE_LIB_$(1)):
 287         touch $$@
 288
 289 else
 290 ifeq ($$(findstring ios,$$(OSTYPE_$(1))),ios)
 291 # See comment above
 292 $$(BACKTRACE_LIB_$(1)):
 293         touch $$@
 294 else
 295
 296 ifeq ($$(findstring msvc,$(1)),msvc)
 297 # See comment above
 298 $$(BACKTRACE_LIB_$(1)):
 299         touch $$@
 300 else
 301
 302 ifdef CFG_ENABLE_FAST_MAKE
 303 BACKTRACE_DEPS := $(S)/.gitmodules
 304 else
 305 BACKTRACE_DEPS := $(wildcard $(S)src/libbacktrace/*)
 306 endif
 307
 308 # We need to export CFLAGS because otherwise it doesn't pick up cross compile
 309 # builds. If libbacktrace doesn't realize this, it will attempt to read 64-bit
 310 # elf headers when compiled for a 32-bit system, yielding blank backtraces.
 311 #
 312 # This also removes the -Werror flag specifically to prevent errors during
 313 # configuration.
 314 #
 315 # Down below you'll also see echos into the config.h generated by the
 316 # ./configure script. This is done to force libbacktrace to *not* use the
 317 # atomic/sync functionality because it pulls in unnecessary dependencies and we
 318 # never use it anyway.
 319 #
 320 # We also use `env PWD=` to clear the PWD environment variable, and then
 321 # execute the command in a new shell. This is necessary to workaround a
 322 # buildbot/msys2 bug: the shell is launched with PWD set to a windows-style path,
 323 # which results in all further uses of `pwd` also printing a windows-style path,
 324 # which breaks libbacktrace's configure script. Clearing PWD within the same
 325 # shell is not sufficient.
 326
 327 $$(BACKTRACE_BUILD_DIR_$(1))/Makefile: $$(BACKTRACE_DEPS) $$(MKFILE_DEPS)
 328         @$$(call E, configure: libbacktrace for $(1))
 329         $$(Q)rm -rf $$(BACKTRACE_BUILD_DIR_$(1))
 330         $$(Q)mkdir -p $$(BACKTRACE_BUILD_DIR_$(1))
 331         $$(Q)(cd $$(BACKTRACE_BUILD_DIR_$(1)) && env \
 332               PWD= \
 333               CC="$$(CC_$(1))" \
 334               AR="$$(AR_$(1))" \
 335               RANLIB="$$(AR_$(1)) s" \
 336               CFLAGS="$$(CFG_GCCISH_CFLAGS_$(1):-Werror=) -fno-stack-protector" \
 337               $(S)src/libbacktrace/configure --build=$(CFG_GNU_TRIPLE_$(CFG_BUILD)) --host=$(CFG_GNU_TRIPLE_$(1)))
 338         $$(Q)echo '#undef HAVE_ATOMIC_FUNCTIONS' >> \
 339               $$(BACKTRACE_BUILD_DIR_$(1))/config.h
 340         $$(Q)echo '#undef HAVE_SYNC_FUNCTIONS' >> \
 341               $$(BACKTRACE_BUILD_DIR_$(1))/config.h
 342
 343 $$(BACKTRACE_LIB_$(1)): $$(BACKTRACE_BUILD_DIR_$(1))/Makefile $$(MKFILE_DEPS)
 344         @$$(call E, make: libbacktrace)
 345         $$(Q)$$(MAKE) -C $$(BACKTRACE_BUILD_DIR_$(1)) \
 346                 INCDIR=$(S)src/libbacktrace
 347         $$(Q)cp $$(BACKTRACE_BUILD_DIR_$(1))/.libs/libbacktrace.a $$@
 348
 349 endif # endif for msvc
 350 endif # endif for ios
 351 endif # endif for darwin
 352
 353 ################################################################################
 354 # libc/libunwind for musl
 355 #
 356 # When we're building a musl-like target we're going to link libc/libunwind
 357 # statically into the standard library and liblibc, so we need to make sure
 358 # they're in a location that we can find
 359 ################################################################################
 360
 361 ifeq ($$(findstring musl,$(1)),musl)
 362 $$(RT_OUTPUT_DIR_$(1))/%: $$(CFG_MUSL_ROOT)/lib/%
 363         cp $$^ $$@
 364 else
 365 # Ask gcc where it is
 366 $$(RT_OUTPUT_DIR_$(1))/%:
 367         cp $$(shell $$(CC_$(1)) -print-file-name=$$(@F)) $$@
 368 endif
 369
 370 endef
 371
 372 # Instantiate template for all stages/targets
 373 $(foreach target,$(CFG_TARGET), \
 374      $(eval $(call DEF_THIRD_PARTY_TARGETS,$(target))))