mk/rt.mk

   1 # Copyright 2014 The Rust Project Developers. See the COPYRIGHT
   2 # file at the top-level directory of this distribution and at
   3 # http://rust-lang.org/COPYRIGHT.
   4 #
   5 # Licensed under the Apache License, Version 2.0 <LICENSE-APACHE or
   6 # http://www.apache.org/licenses/LICENSE-2.0> or the MIT license
   7 # <LICENSE-MIT or http://opensource.org/licenses/MIT>, at your
   8 # option. This file may not be copied, modified, or distributed
   9 # except according to those terms.
  10
  11 ################################################################################
  12 # Native libraries built as part of the rust build process
  13 #
  14 # This portion of the rust build system is meant to keep track of native
  15 # dependencies and how to build them. It is currently required that all native
  16 # dependencies are built as static libraries, as slinging around dynamic
  17 # libraries isn't exactly the most fun thing to do.
  18 #
  19 # This section should need minimal modification to add new libraries. The
  20 # relevant variables are:
  21 #
  22 #   NATIVE_LIBS
  23 #       This is a list of all native libraries which are built as part of the
  24 #       build process. It will build all libraries into RT_OUTPUT_DIR with the
  25 #       appropriate name of static library as dictated by the target platform
  26 #
  27 #   NATIVE_DEPS_<lib>
  28 #       This is a list of files relative to the src/rt directory which are
  29 #       needed to build the native library. Each file will be compiled to an
  30 #       object file, and then all the object files will be assembled into an
  31 #       archive (static library). The list contains files of any extension
  32 #
  33 # If adding a new library, you should update the NATIVE_LIBS list, and then list
  34 # the required files below it. The list of required files is a list of files
  35 # that's per-target so you're allowed to conditionally add files based on the
  36 # target.
  37 ################################################################################
  38 NATIVE_LIBS := hoedown miniz rust_test_helpers
  39
  40 # $(1) is the target triple
  41 define NATIVE_LIBRARIES
  42
  43 NATIVE_DEPS_hoedown_$(1) := hoedown/src/autolink.c \
  44                         hoedown/src/buffer.c \
  45                         hoedown/src/document.c \
  46                         hoedown/src/escape.c \
  47                         hoedown/src/html.c \
  48                         hoedown/src/html_blocks.c \
  49                         hoedown/src/html_smartypants.c \
  50                         hoedown/src/stack.c \
  51                         hoedown/src/version.c
  52 NATIVE_DEPS_miniz_$(1) = miniz.c
  53 NATIVE_DEPS_rust_test_helpers_$(1) := rust_test_helpers.c
  54
  55 ################################################################################
  56 # You shouldn't find it that necessary to edit anything below this line.
  57 ################################################################################
  58
  59 # While we're defining the native libraries for each target, we define some
  60 # common rules used to build files for various targets.
  61
  62 RT_OUTPUT_DIR_$(1) := $(1)/rt
  63
  64 $$(RT_OUTPUT_DIR_$(1))/%.o: $(S)src/rt/%.c $$(MKFILE_DEPS)
  65         @mkdir -p $$(@D)
  66         @$$(call E, compile: $$@)
  67         $$(Q)$$(call CFG_COMPILE_C_$(1), $$@, \
  68                 $$(call CFG_CC_INCLUDE_$(1),$$(S)src/rt/hoedown/src) \
  69                 $$(call CFG_CC_INCLUDE_$(1),$$(S)src/rt) \
  70                  $$(RUNTIME_CFLAGS_$(1))) $$<
  71
  72 $$(RT_OUTPUT_DIR_$(1))/%.o: $(S)src/rt/%.S $$(MKFILE_DEPS) \
  73             $$(LLVM_CONFIG_$$(CFG_BUILD))
  74         @mkdir -p $$(@D)
  75         @$$(call E, compile: $$@)
  76         $$(Q)$$(call CFG_ASSEMBLE_$(1),$$@,$$<)
  77
  78 # On MSVC targets the compiler's default include path (e.g. where to find system
  79 # headers) is specified by the INCLUDE environment variable. This may not be set
  80 # so the ./configure script scraped the relevant values and this is the location
  81 # that we put them into cl.exe's environment.
  82 ifeq ($$(findstring msvc,$(1)),msvc)
  83 $$(RT_OUTPUT_DIR_$(1))/%.o: \
  84         export INCLUDE := $$(CFG_MSVC_INCLUDE_PATH_$$(HOST_$(1)))
  85 $(1)/rustllvm/%.o: \
  86         export INCLUDE := $$(CFG_MSVC_INCLUDE_PATH_$$(HOST_$(1)))
  87 endif
  88 endef
  89
  90 $(foreach target,$(CFG_TARGET),$(eval $(call NATIVE_LIBRARIES,$(target))))
  91
  92 # A macro for devining how to build third party libraries listed above (based
  93 # on their dependencies).
  94 #
  95 # $(1) is the target
  96 # $(2) is the lib name
  97 define THIRD_PARTY_LIB
  98
  99 OBJS_$(2)_$(1) := $$(NATIVE_DEPS_$(2)_$(1):%=$$(RT_OUTPUT_DIR_$(1))/%)
 100 OBJS_$(2)_$(1) := $$(OBJS_$(2)_$(1):.c=.o)
 101 OBJS_$(2)_$(1) := $$(OBJS_$(2)_$(1):.cpp=.o)
 102 OBJS_$(2)_$(1) := $$(OBJS_$(2)_$(1):.S=.o)
 103 NATIVE_$(2)_$(1) := $$(call CFG_STATIC_LIB_NAME_$(1),$(2))
 104 $$(RT_OUTPUT_DIR_$(1))/$$(NATIVE_$(2)_$(1)): $$(OBJS_$(2)_$(1))
 105         @$$(call E, link: $$@)
 106         $$(Q)$$(call CFG_CREATE_ARCHIVE_$(1),$$@) $$^
 107
 108 endef
 109
 110 $(foreach target,$(CFG_TARGET), \
 111  $(eval $(call RUNTIME_RULES,$(target))))
 112 $(foreach lib,$(NATIVE_LIBS), \
 113  $(foreach target,$(CFG_TARGET), \
 114   $(eval $(call THIRD_PARTY_LIB,$(target),$(lib)))))
 115
 116
 117 ################################################################################
 118 # Building third-party targets with external build systems
 119 #
 120 # This location is meant for dependencies which have external build systems. It
 121 # is still assumed that the output of each of these steps is a static library
 122 # in the correct location.
 123 ################################################################################
 124
 125 define DEF_THIRD_PARTY_TARGETS
 126
 127 # $(1) is the target triple
 128
 129 ifeq ($$(CFG_WINDOWSY_$(1)),1)
 130   # A bit of history here, this used to be --enable-lazy-lock added in #14006
 131   # which was filed with jemalloc in jemalloc/jemalloc#83 which was also
 132   # reported to MinGW: http://sourceforge.net/p/mingw-w64/bugs/395/
 133   #
 134   # When updating jemalloc to 4.0, however, it was found that binaries would
 135   # exit with the status code STATUS_RESOURCE_NOT_OWNED indicating that a thread
 136   # was unlocking a mutex it never locked. Disabling this "lazy lock" option
 137   # seems to fix the issue, but it was enabled by default for MinGW targets in
 138   # 13473c7 for jemalloc.
 139   #
 140   # As a result of all that, force disabling lazy lock on Windows, and after
 141   # reading some code it at least *appears* that the initialization of mutexes
 142   # is otherwise ok in jemalloc, so shouldn't cause problems hopefully...
 143   #
 144   # tl;dr: make windows behave like other platforms by disabling lazy locking,
 145   #        but requires passing an option due to a historical default with
 146   #        jemalloc.
 147   JEMALLOC_ARGS_$(1) := --disable-lazy-lock
 148 else ifeq ($(OSTYPE_$(1)), apple-ios)
 149   JEMALLOC_ARGS_$(1) := --disable-tls
 150 else ifeq ($(findstring android, $(OSTYPE_$(1))), android)
 151   JEMALLOC_ARGS_$(1) := --disable-tls
 152 endif
 153
 154 ifdef CFG_ENABLE_DEBUG_JEMALLOC
 155   JEMALLOC_ARGS_$(1) += --enable-debug --enable-fill
 156 endif
 157
 158 ################################################################################
 159 # jemalloc
 160 ################################################################################
 161
 162 ifdef CFG_ENABLE_FAST_MAKE
 163 JEMALLOC_DEPS := $(S)/.gitmodules
 164 else
 165 JEMALLOC_DEPS := $(wildcard \
 166                    $(S)src/jemalloc/* \
 167                    $(S)src/jemalloc/*/* \
 168                    $(S)src/jemalloc/*/*/* \
 169                    $(S)src/jemalloc/*/*/*/*)
 170 endif
 171
 172 # See #17183 for details, this file is touched during the build process so we
 173 # don't want to consider it as a dependency.
 174 JEMALLOC_DEPS := $(filter-out $(S)src/jemalloc/VERSION,$(JEMALLOC_DEPS))
 175
 176 JEMALLOC_NAME_$(1) := $$(call CFG_STATIC_LIB_NAME_$(1),jemalloc)
 177 ifeq ($$(CFG_WINDOWSY_$(1)),1)
 178   JEMALLOC_REAL_NAME_$(1) := $$(call CFG_STATIC_LIB_NAME_$(1),jemalloc_s)
 179 else
 180   JEMALLOC_REAL_NAME_$(1) := $$(call CFG_STATIC_LIB_NAME_$(1),jemalloc_pic)
 181 endif
 182 JEMALLOC_LIB_$(1) := $$(RT_OUTPUT_DIR_$(1))/$$(JEMALLOC_NAME_$(1))
 183 JEMALLOC_BUILD_DIR_$(1) := $$(RT_OUTPUT_DIR_$(1))/jemalloc
 184 JEMALLOC_LOCAL_$(1) := $$(JEMALLOC_BUILD_DIR_$(1))/lib/$$(JEMALLOC_REAL_NAME_$(1))
 185
 186 $$(JEMALLOC_LOCAL_$(1)): $$(JEMALLOC_DEPS) $$(MKFILE_DEPS)
 187         @$$(call E, make: jemalloc)
 188         cd "$$(JEMALLOC_BUILD_DIR_$(1))"; "$(S)src/jemalloc/configure" \
 189                 $$(JEMALLOC_ARGS_$(1)) --with-jemalloc-prefix=je_ $(CFG_JEMALLOC_FLAGS) \
 190                 --build=$$(CFG_GNU_TRIPLE_$(CFG_BUILD)) --host=$$(CFG_GNU_TRIPLE_$(1)) \
 191                 CC="$$(CC_$(1)) $$(CFG_JEMALLOC_CFLAGS_$(1))" \
 192                 AR="$$(AR_$(1))" \
 193                 RANLIB="$$(AR_$(1)) s" \
 194                 CPPFLAGS="-I $(S)src/rt/" \
 195                 EXTRA_CFLAGS="-g1 -ffunction-sections -fdata-sections"
 196         $$(Q)$$(MAKE) -C "$$(JEMALLOC_BUILD_DIR_$(1))" build_lib_static
 197
 198 ifeq ($(1),$$(CFG_BUILD))
 199 ifneq ($$(CFG_JEMALLOC_ROOT),)
 200 $$(JEMALLOC_LIB_$(1)): $$(CFG_JEMALLOC_ROOT)/libjemalloc_pic.a
 201         @$$(call E, copy: jemalloc)
 202         $$(Q)cp $$< $$@
 203 else
 204 $$(JEMALLOC_LIB_$(1)): $$(JEMALLOC_LOCAL_$(1))
 205         $$(Q)cp $$< $$@
 206 endif
 207 else
 208 $$(JEMALLOC_LIB_$(1)): $$(JEMALLOC_LOCAL_$(1))
 209         $$(Q)cp $$< $$@
 210 endif
 211
 212 ################################################################################
 213 # compiler-rt
 214 ################################################################################
 215
 216 ifdef CFG_ENABLE_FAST_MAKE
 217 COMPRT_DEPS := $(S)/.gitmodules
 218 else
 219 COMPRT_DEPS := $(wildcard \
 220               $(S)src/compiler-rt/* \
 221               $(S)src/compiler-rt/*/* \
 222               $(S)src/compiler-rt/*/*/* \
 223               $(S)src/compiler-rt/*/*/*/*)
 224 endif
 225
 226 COMPRT_NAME_$(1) := $$(call CFG_STATIC_LIB_NAME_$(1),compiler-rt)
 227 COMPRT_LIB_$(1) := $$(RT_OUTPUT_DIR_$(1))/$$(COMPRT_NAME_$(1))
 228 COMPRT_BUILD_DIR_$(1) := $$(RT_OUTPUT_DIR_$(1))/compiler-rt
 229
 230 ifeq ($$(findstring msvc,$(1)),msvc)
 231 $$(COMPRT_LIB_$(1)): $$(COMPRT_DEPS) $$(MKFILE_DEPS) $$(LLVM_CONFIG_$(1))
 232         @$$(call E, cmake: compiler-rt)
 233         $$(Q)cd "$$(COMPRT_BUILD_DIR_$(1))"; $$(CFG_CMAKE) "$(S)src/compiler-rt" \
 234                 -DCMAKE_BUILD_TYPE=$$(LLVM_BUILD_CONFIG_MODE) \
 235                 -DLLVM_CONFIG_PATH=$$(LLVM_CONFIG_$(1)) \
 236                 -G"$$(CFG_CMAKE_GENERATOR)"
 237         $$(Q)$$(CFG_CMAKE) --build "$$(COMPRT_BUILD_DIR_$(1))" \
 238                 --target lib/builtins/builtins \
 239                 --config $$(LLVM_BUILD_CONFIG_MODE) \
 240                 -- //v:m //nologo
 241         $$(Q)cp $$(COMPRT_BUILD_DIR_$(1))/lib/windows/$$(LLVM_BUILD_CONFIG_MODE)/clang_rt.builtins-$$(HOST_$(1)).lib $$@
 242 else
 243 COMPRT_CC_$(1) := $$(CC_$(1))
 244 COMPRT_AR_$(1) := $$(AR_$(1))
 245 # We chomp -Werror here because GCC warns about the type signature of
 246 # builtins not matching its own and the build fails. It's a bit hacky,
 247 # but what can we do, we're building libclang-rt using GCC ......
 248 COMPRT_CFLAGS_$(1) := $$(subst -Werror,,$$(CFG_GCCISH_CFLAGS_$(1))) -std=c99
 249
 250 # FreeBSD Clang's packaging is problematic; it doesn't copy unwind.h to
 251 # the standard include directory. This should really be in our changes to
 252 # compiler-rt, but we override the CFLAGS here so there isn't much choice
 253 ifeq ($$(findstring freebsd,$(1)),freebsd)
 254         COMPRT_CFLAGS_$(1) += -I/usr/include/c++/v1
 255 endif
 256
 257 $$(COMPRT_LIB_$(1)): $$(COMPRT_DEPS) $$(MKFILE_DEPS)
 258         @$$(call E, make: compiler-rt)
 259         $$(Q)$$(MAKE) -C "$(S)src/compiler-rt" \
 260                 ProjSrcRoot="$(S)src/compiler-rt" \
 261                 ProjObjRoot="$$(abspath $$(COMPRT_BUILD_DIR_$(1)))" \
 262                 CC='$$(COMPRT_CC_$(1))' \
 263                 AR='$$(COMPRT_AR_$(1))' \
 264                 RANLIB='$$(COMPRT_AR_$(1)) s' \
 265                 CFLAGS="$$(COMPRT_CFLAGS_$(1))" \
 266                 TargetTriple=$(1) \
 267                 triple-builtins
 268         $$(Q)cp $$(COMPRT_BUILD_DIR_$(1))/triple/builtins/libcompiler_rt.a $$@
 269 endif
 270 ################################################################################
 271 # libbacktrace
 272 #
 273 # We use libbacktrace on linux to get symbols in backtraces, but only on linux.
 274 # Elsewhere we use other system utilities, so this library is only built on
 275 # linux.
 276 ################################################################################
 277
 278 BACKTRACE_NAME_$(1) := $$(call CFG_STATIC_LIB_NAME_$(1),backtrace)
 279 BACKTRACE_LIB_$(1) := $$(RT_OUTPUT_DIR_$(1))/$$(BACKTRACE_NAME_$(1))
 280 BACKTRACE_BUILD_DIR_$(1) := $$(RT_OUTPUT_DIR_$(1))/libbacktrace
 281
 282 # We don't use this on platforms that aren't linux-based (with the exception of
 283 # msys2/mingw builds on windows, which use it to read the dwarf debug
 284 # information) so just make the file available, the compilation of libstd won't
 285 # actually build it.
 286 ifeq ($$(findstring darwin,$$(OSTYPE_$(1))),darwin)
 287 # See comment above
 288 $$(BACKTRACE_LIB_$(1)):
 289         touch $$@
 290
 291 else
 292 ifeq ($$(findstring ios,$$(OSTYPE_$(1))),ios)
 293 # See comment above
 294 $$(BACKTRACE_LIB_$(1)):
 295         touch $$@
 296 else
 297
 298 ifeq ($$(findstring msvc,$(1)),msvc)
 299 # See comment above
 300 $$(BACKTRACE_LIB_$(1)):
 301         touch $$@
 302 else
 303
 304 ifdef CFG_ENABLE_FAST_MAKE
 305 BACKTRACE_DEPS := $(S)/.gitmodules
 306 else
 307 BACKTRACE_DEPS := $(wildcard $(S)src/libbacktrace/*)
 308 endif
 309
 310 # We need to export CFLAGS because otherwise it doesn't pick up cross compile
 311 # builds. If libbacktrace doesn't realize this, it will attempt to read 64-bit
 312 # elf headers when compiled for a 32-bit system, yielding blank backtraces.
 313 #
 314 # This also removes the -Werror flag specifically to prevent errors during
 315 # configuration.
 316 #
 317 # Down below you'll also see echos into the config.h generated by the
 318 # ./configure script. This is done to force libbacktrace to *not* use the
 319 # atomic/sync functionality because it pulls in unnecessary dependencies and we
 320 # never use it anyway.
 321 #
 322 # We also use `env PWD=` to clear the PWD environment variable, and then
 323 # execute the command in a new shell. This is necessary to workaround a
 324 # buildbot/msys2 bug: the shell is launched with PWD set to a windows-style path,
 325 # which results in all further uses of `pwd` also printing a windows-style path,
 326 # which breaks libbacktrace's configure script. Clearing PWD within the same
 327 # shell is not sufficient.
 328
 329 $$(BACKTRACE_BUILD_DIR_$(1))/Makefile: $$(BACKTRACE_DEPS) $$(MKFILE_DEPS)
 330         @$$(call E, configure: libbacktrace for $(1))
 331         $$(Q)rm -rf $$(BACKTRACE_BUILD_DIR_$(1))
 332         $$(Q)mkdir -p $$(BACKTRACE_BUILD_DIR_$(1))
 333         $$(Q)(cd $$(BACKTRACE_BUILD_DIR_$(1)) && env \
 334               PWD= \
 335               CC="$$(CC_$(1))" \
 336               AR="$$(AR_$(1))" \
 337               RANLIB="$$(AR_$(1)) s" \
 338               CFLAGS="$$(CFG_GCCISH_CFLAGS_$(1):-Werror=) -fno-stack-protector" \
 339               $(S)src/libbacktrace/configure --build=$(CFG_GNU_TRIPLE_$(CFG_BUILD)) --host=$(CFG_GNU_TRIPLE_$(1)))
 340         $$(Q)echo '#undef HAVE_ATOMIC_FUNCTIONS' >> \
 341               $$(BACKTRACE_BUILD_DIR_$(1))/config.h
 342         $$(Q)echo '#undef HAVE_SYNC_FUNCTIONS' >> \
 343               $$(BACKTRACE_BUILD_DIR_$(1))/config.h
 344
 345 $$(BACKTRACE_LIB_$(1)): $$(BACKTRACE_BUILD_DIR_$(1))/Makefile $$(MKFILE_DEPS)
 346         @$$(call E, make: libbacktrace)
 347         $$(Q)$$(MAKE) -C $$(BACKTRACE_BUILD_DIR_$(1)) \
 348                 INCDIR=$(S)src/libbacktrace
 349         $$(Q)cp $$(BACKTRACE_BUILD_DIR_$(1))/.libs/libbacktrace.a $$@
 350
 351 endif # endif for msvc
 352 endif # endif for ios
 353 endif # endif for darwin
 354
 355 ################################################################################
 356 # libc/libunwind for musl
 357 #
 358 # When we're building a musl-like target we're going to link libc/libunwind
 359 # statically into the standard library and liblibc, so we need to make sure
 360 # they're in a location that we can find
 361 ################################################################################
 362
 363 ifeq ($$(findstring musl,$(1)),musl)
 364 $$(RT_OUTPUT_DIR_$(1))/%: $$(CFG_MUSL_ROOT)/lib/%
 365         cp $$^ $$@
 366 else
 367 # Ask gcc where it is
 368 $$(RT_OUTPUT_DIR_$(1))/%:
 369         cp $$(shell $$(CC_$(1)) -print-file-name=$$(@F)) $$@
 370 endif
 371
 372 endef
 373
 374 # Instantiate template for all stages/targets
 375 $(foreach target,$(CFG_TARGET), \
 376      $(eval $(call DEF_THIRD_PARTY_TARGETS,$(target))))