src/Makefile

   1 # --------------------------------------------------------------------------
   2 #
   3 # Copyright
   4 #   Markus Wittmann, 2016-2017
   5 #   RRZE, University of Erlangen-Nuremberg, Germany
   6 #   markus.wittmann -at- fau.de or hpc -at- rrze.fau.de
   7 #
   8 #   Viktor Haag, 2016
   9 #   LSS, University of Erlangen-Nuremberg, Germany
  10 #
  11 #  This file is part of the Lattice Boltzmann Benchmark Kernels (LbmBenchKernels).
  12 #
  13 #  LbmBenchKernels is free software: you can redistribute it and/or modify
  14 #  it under the terms of the GNU General Public License as published by
  15 #  the Free Software Foundation, either version 3 of the License, or
  16 #  (at your option) any later version.
  17 #
  18 #  LbmBenchKernels is distributed in the hope that it will be useful,
  19 #  but WITHOUT ANY WARRANTY; without even the implied warranty of
  20 #  MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  21 #  GNU General Public License for more details.
  22 #
  23 #  You should have received a copy of the GNU General Public License
  24 #  along with LbmBenchKernels.  If not, see <http://www.gnu.org/licenses/>.
  25 #
  26 # --------------------------------------------------------------------------
  27
  28 # Default configuration to chose.
  29 # CONFIG ?= linux-gcc
  30 CONFIG ?= linux-intel
  31
  32 BUILD ?= debug
  33
  34 # If we compile for BENCHMARK all verifcation and statistics are disabled,
  35 # if not specified otherwise.
  36 ifeq (on,$(BENCHMARK))
  37   VERIFICATION ?= off
  38   VTK_OUTPUT   ?= off
  39   STATISTICS   ?= off
  40 endif
  41
  42 VERIFICATION ?= on
  43
  44 STATISTICS ?= on
  45
  46 VTK_OUTPUT ?= on
  47
  48 COLOR ?= on
  49
  50 OPENMP ?= on
  51
  52 VTK_OUTPUT_ASCII ?= off
  53
  54 LID_DRIVEN_CAVITY ?= off
  55
  56 ISA ?= avx
  57
  58 LIKWID ?= off
  59
  60 # Global settings for the Makefile
  61 SHELL      = sh
  62
  63 ifdef V
  64   Q        =
  65 else
  66   Q        = @
  67 endif
  68
  69 AR         = ar
  70 CMP        = cmp
  71 CHMOD      = chmod
  72 CPP        = cpp
  73 DIFF       = diff
  74 ECHO       = echo
  75 ECHO_E     = echo -e
  76 ECHO_N     = echo -n
  77 GIT        = git
  78 GREP       = grep
  79 MKDIR      = mkdir
  80 MKDIR_P    = mkdir -p
  81 NM         = nm
  82 RM         = rm
  83 RM_F       = rm -f
  84 RM_RF      = rm -rf
  85 TAR        = tar
  86 TAR_CZF    = tar czf
  87 TOUCH      = touch
  88 SED        = sed
  89
  90
  91
  92 # Where to store objects and dependency files.
  93 OBJECT_DIR      = obj/$(CONFIG)-$(BUILD)$(TAG)
  94 DEP_DIR         = obj/$(CONFIG)-$(BUILD)$(TAG)-dep
  95
  96 # Sources to consider.
  97 SOURCES_C = Main.c Memory.c Geometry.c Kernel.c \
  98             Vtk.c Pinning.c
  99
 100 # ------------------------------------------------------------------------
 101 # NO CHANGE BELOW SHOULD BE NEEDED
 102 # ------------------------------------------------------------------------
 103
 104 OBJ_C = $(foreach SOURCE,$(SOURCES_C),$(OBJECT_DIR)/$(SOURCE:%.c=%.o)) \
 105                 $(OBJECT_DIR)/BenchKernelD3Q19Common_PullSoA.o \
 106                 $(OBJECT_DIR)/BenchKernelD3Q19Common_PullAoS.o \
 107                 $(OBJECT_DIR)/BenchKernelD3Q19Common_PushSoA.o \
 108                 $(OBJECT_DIR)/BenchKernelD3Q19Common_PushAoS.o \
 109                 $(OBJECT_DIR)/BenchKernelD3Q19_PullSoA.o \
 110                 $(OBJECT_DIR)/BenchKernelD3Q19_PullAoS.o \
 111                 $(OBJECT_DIR)/BenchKernelD3Q19_PushSoA.o \
 112                 $(OBJECT_DIR)/BenchKernelD3Q19_PushAoS.o \
 113                 $(OBJECT_DIR)/BenchKernelD3Q19List_PushSoA.o \
 114                 $(OBJECT_DIR)/BenchKernelD3Q19ListCommon_PushSoA.o \
 115                 $(OBJECT_DIR)/BenchKernelD3Q19List_PushAoS.o \
 116                 $(OBJECT_DIR)/BenchKernelD3Q19ListCommon_PushAoS.o \
 117                 $(OBJECT_DIR)/BenchKernelD3Q19List_PullSoA.o \
 118                 $(OBJECT_DIR)/BenchKernelD3Q19ListCommon_PullSoA.o \
 119                 $(OBJECT_DIR)/BenchKernelD3Q19List_PullAoS.o \
 120                 $(OBJECT_DIR)/BenchKernelD3Q19ListCommon_PullAoS.o \
 121                 $(OBJECT_DIR)/BenchKernelD3Q19ListAa_PushSoA.o \
 122                 $(OBJECT_DIR)/BenchKernelD3Q19ListAaCommon_PushSoA.o \
 123                 $(OBJECT_DIR)/BenchKernelD3Q19ListAa_PushAoS.o \
 124                 $(OBJECT_DIR)/BenchKernelD3Q19ListAaCommon_PushAoS.o \
 125                 $(OBJECT_DIR)/BenchKernelD3Q19ListAaRia_PushSoA.o \
 126                 $(OBJECT_DIR)/BenchKernelD3Q19ListAaRiaCommon_PushSoA.o \
 127                 $(OBJECT_DIR)/BenchKernelD3Q19ListAaPv_PushSoA.o \
 128                 $(OBJECT_DIR)/BenchKernelD3Q19ListAaPvCommon_PushSoA.o \
 129                 $(OBJECT_DIR)/BenchKernelD3Q19ListPullSplitNt_PullSoA.o \
 130                 $(OBJECT_DIR)/BenchKernelD3Q19ListPullSplitNtCommon_PullSoA.o
 131
 132 OBJ = $(OBJ_C)
 133
 134 include ./config.$(CONFIG).mk
 135
 136
 137 # Colorize command lines.
 138 ifeq (on,$(COLOR))
 139   COLOR_GRAY        =\033[1;30m
 140   COLOR_LIGHT_GRAY  =\033[0;37m
 141   COLOR_CYAN        =\033[0;36m
 142   COLOR_LIGHT_CYAN  =\033[1;36m
 143   COLOR_MAGENTA     =\033[0;35m
 144   COLOR_DARK_MAGENTA=\033[1;35m
 145   COLOR_NO          =\033[0m
 146   COLOR_RED         =\033[0;31m
 147   COLOR_DARK_RED    =\033[1;31m
 148   COLOR_GREEN       =\033[0;32m
 149   COLOR_DARK_GREEEN =\033[1;32m
 150 else
 151   COLOR_GRAY        =
 152   COLOR_LIGHT_GRAY  =
 153   COLOR_CYAN        =
 154   COLOR_LIGHT_CYAN  =
 155   COLOR_MAGENTA     =
 156   COLOR_DARK_MAGENTA=
 157   COLOR_NO          =
 158   COLOR_RED         =
 159   COLOR_DARK_RED    =
 160   COLOR_GREEN       =
 161   COLOR_DARK_GREEEN =
 162 endif
 163
 164 # Dependencies which are not source files, that require
 165 # rebuilding the application.
 166 REBUILD_DEPS = $(filter-out %.d,$(MAKEFILE_LIST)) $(OBJECT_DIR)/.target $(DEP_DIR)/.target
 167
 168 BUILD_CONFIG=
 169
 170 # Verify computed flow field
 171 ifeq (on,$(VERIFICATION))
 172   PP_FLAGS      += $(D)VERIFICATION
 173 endif
 174
 175 ifeq (on,$(VTK_OUTPUT))
 176   PP_FLAGS += $(D)VTK_OUTPUT
 177 endif
 178
 179 ifeq (on,$(STATISTICS))
 180   PP_FLAGS += $(D)STATISTICS
 181 endif
 182
 183 ifeq (on,$(VTK_OUTPUT_ASCII))
 184   PP_FLAGS += $(D)VTK_OUTPUT_ASCII
 185 endif
 186
 187 ifeq (on,$(LID_DRIVEN_CAVITY))
 188   PP_FLAGS += $(D)LID_DRIVEN_CAVITY
 189 endif
 190
 191 ifeq (avx,$(ISA))
 192   PP_FLAGS += $(D)VECTOR_AVX
 193 endif
 194 ifeq (sse,$(ISA))
 195   PP_FLAGS += $(D)VECTOR_SSE
 196 endif
 197
 198 # Required for posix_memalign
 199 PP_FLAGS += $(D)_POSIX_C_SOURCE=200112L
 200
 201 ifeq (on,$(LIKWID))
 202   PP_FLAGS += $(LIKWID_INC) $(D)HAVE_LIKWID
 203   LD_LIBS  += $(LIKWID_LIB) -llikwid
 204 endif
 205
 206 .phony: all clean clean-all
 207
 208 $(info $(shell $(ECHO_E) "# Configuration:   CONFIG=$(COLOR_CYAN)$(CONFIG)$(COLOR_NO)   BUILD=$(COLOR_CYAN)$(BUILD)$(COLOR_NO)   VERIFICATION=$(COLOR_CYAN)$(VERIFICATION)$(COLOR_NO)   STATISTICS=$(COLOR_CYAN)$(STATISTICS)$(COLOR_NO)   VTK_OUTPUT=$(COLOR_CYAN)$(VTK_OUTPUT)$(COLOR_NO)  OPENMP=$(COLOR_CYAN)$(OPENMP)$(COLOR_NO)   ISA=$(COLOR_CYAN)$(ISA)$(COLOR_NO)   LIKWID=$(COLOR_CYAN)$(LIKWID)$(COLOR_NO)   building $(.DEFAULT_GOAL)..."))
 209
 210
 211 $(info # Object dir:      $(OBJECT_DIR))
 212 $(info # Dependency dir:  $(DEP_DIR))
 213 # $(info # objects:        $(OBJ))
 214
 215 BIN_DIR=../bin
 216
 217 all: $(BIN_DIR)/lbmbenchk-$(CONFIG)-$(BUILD)$(BUILD_CONFIG)$(TAG)
 218
 219
 220 # ------------------------------------------------------------------------
 221 # TODO: Include dependencies, if they exist and no clean target is specified.
 222
 223 #ifeq (,$(SKIP_DEP_INCLUDE))
 224 #  ifneq (,$(OBJ))
 225 #    TMP_OBJ__ = $(patsubst $(OBJECT_DIR)/%,$(DEP_DIR)/%,$(OBJ))
 226 #    $(warning TMP_OBJ__: $(TMP_OBJ__))
 227 #    $(warning OBJ: $(OBJ))
 228 #    $(warning DEPS:      $(patsubst %.o,%.d,$(TMP_OBJ__)))
 229 #    $(warning $(patsubst $(OBJECT_DIR)/%.o,$(DEP_DIR)/%.d,$(OBJ)))
 230     -include $(patsubst $(OBJECT_DIR)/%.o,$(DEP_DIR)/%.d,$(OBJ))
 231 #  endif
 232 #endif
 233
 234
 235 $(BIN_DIR):
 236         [ -d "$@" ] || mkdir -p "$@"
 237
 238 $(BIN_DIR)/lbmbenchk-$(CONFIG)-$(BUILD)$(BUILD_CONFIG)$(TAG): $(OBJ) $(REBUILD_DEPS) $(DEP_DIR)/.target | $(BIN_DIR)
 239         @$(ECHO_E) "linking: $(COLOR_CYAN)$@$(COLOR_NO)"
 240         $(LD) $(LD_FLAGS) -o $@ $(filter-out $(REBUILD_DEPS),$^) $(LD_LIBS)
 241         @$(ECHO_E) "# Builded binary:      $(COLOR_CYAN)$@$(COLOR_NO)"
 242         @$(ECHO_E) "# Configuration was:   CONFIG=$(COLOR_CYAN)$(CONFIG)$(COLOR_NO)   BUILD=$(COLOR_CYAN)$(BUILD)$(COLOR_NO)   VERIFICATION=$(COLOR_CYAN)$(VERIFICATION)$(COLOR_NO)   STATISTICS=$(COLOR_CYAN)$(STATISTICS)$(COLOR_NO)   VTK_OUTPUT=$(COLOR_CYAN)$(VTK_OUTPUT)$(COLOR_NO)  OPENMP=$(COLOR_CYAN)$(OPENMP)$(COLOR_NO)   ISA=$(COLOR_CYAN)$(ISA)$(COLOR_NO)   LIKWID=$(COLOR_CYAN)$(LIKWID)$(COLOR_NO)   target=$(.DEFAULT_GOAL)"
 243
 244 $(OBJECT_DIR)/%_SoA.o: %.c $(REBUILD_DEPS)
 245         @$(ECHO_E) "compiling: $(COLOR_CYAN)$@$(COLOR_NO)    $(COLOR_MAGENTA)DATA_LAYOUT_SOA$(COLOR_NO)"
 246         $(CC) $(strip $(C_FLAGS)) $(strip $(PP_FLAGS)) $(D)DATA_LAYOUT_SOA -c $< -o $@
 247
 248 $(OBJECT_DIR)/%_PushSoA.o: %.c $(REBUILD_DEPS)
 249         @$(ECHO_E) "compiling: $(COLOR_CYAN)$@$(COLOR_NO)    $(COLOR_MAGENTA)DATA_LAYOUT_SOA$(COLOR_NO) $(COLOR_MAGENTA)PROP_MODEL_PUSH$(COLOR_NO)"
 250         $(CC) $(strip $(C_FLAGS)) $(strip $(PP_FLAGS)) $(D)DATA_LAYOUT_SOA $(D)PROP_MODEL_PUSH -c $< -o $@
 251
 252 $(OBJECT_DIR)/%_PushAoS.o: %.c $(REBUILD_DEPS)
 253         @$(ECHO_E) "compiling: $(COLOR_CYAN)$@$(COLOR_NO)    $(COLOR_MAGENTA)DATA_LAYOUT_AOS$(COLOR_NO) $(COLOR_MAGENTA)PROP_MODEL_PUSH$(COLOR_NO)"
 254         $(CC) $(strip $(C_FLAGS)) $(strip $(PP_FLAGS)) $(D)DATA_LAYOUT_AOS $(D)PROP_MODEL_PUSH -c $< -o $@
 255
 256 $(OBJECT_DIR)/%_PullSoA.o: %.c $(REBUILD_DEPS)
 257         @$(ECHO_E) "compiling: $(COLOR_CYAN)$@$(COLOR_NO)    $(COLOR_MAGENTA)DATA_LAYOUT_SOA$(COLOR_NO) $(COLOR_MAGENTA)PROP_MODEL_PULL$(COLOR_NO)"
 258         $(CC) $(strip $(C_FLAGS)) $(strip $(PP_FLAGS)) $(D)DATA_LAYOUT_SOA $(D)PROP_MODEL_PULL -c $< -o $@
 259
 260 $(OBJECT_DIR)/%_PullAoS.o: %.c $(REBUILD_DEPS)
 261         @$(ECHO_E) "compiling: $(COLOR_CYAN)$@$(COLOR_NO)    $(COLOR_MAGENTA)DATA_LAYOUT_AOS$(COLOR_NO) $(COLOR_MAGENTA)PROP_MODEL_PULL$(COLOR_NO)"
 262         $(CC) $(strip $(C_FLAGS)) $(strip $(PP_FLAGS)) $(D)DATA_LAYOUT_AOS $(D)PROP_MODEL_PULL -c $< -o $@
 263
 264 $(OBJECT_DIR)/%_AoS.o: %.c $(REBUILD_DEPS)
 265         @$(ECHO_E) "compiling: $(COLOR_CYAN)$@$(COLOR_NO)    $(COLOR_MAGENTA)DATA_LAYOUT_AOS$(COLOR_NO)"
 266         $(CC) $(strip $(C_FLAGS)) $(strip $(PP_FLAGS)) $(D)DATA_LAYOUT_AOS -c $< -o $@
 267
 268
 269 $(OBJECT_DIR)/%.o: %.c $(REBUILD_DEPS)
 270         @$(ECHO_E) "compiling: $(COLOR_CYAN)$@$(COLOR_NO)"
 271         $(CC) $(strip $(C_FLAGS)) $(strip $(PP_FLAGS)) -c $< -o $@
 272
 273
 274 # ------------------------------------------------------------------------
 275 # Following targets in princibal make only sure, that the directories
 276 # are created if the do not exist already.
 277
 278 $(DEP_DIR)/.target:
 279         $(Q)$(MKDIR_P) $(DEP_DIR)
 280         $(Q)$(TOUCH) $@
 281
 282 # ------------------------------------------------------------------------
 283 # Current configuration.
 284 MAKE_CFG = SYSTEM=$(SYSTEM) // BUILD=$(BUILD) // MAKEOVERRIDES=\"$(strip $(MAKEOVERRIDES))\" // VERIFICATION=$(VERIFICATION) // STATISTICS=$(STATISTICS) // VTK_OUTPUT=$(VTK_OUTPUT) // VTK_OUTPUT_ASCII=$(VTK_OUTPUT_ASCII) // LID_DRIVEN_CAVITY=$(LID_DRIVEN_CAVITY) // ISA=$(ISA) // LIKWID=$(LIKWID)
 285
 286 # Compare current configuration to the last one so we know when to
 287 # rebuild this system/target despite when sources have not changed.
 288 $(OBJECT_DIR)/.target::
 289         $(Q)$(MKDIR_P) $(OBJECT_DIR)
 290         @ ( [ -f $(OBJECT_DIR)/.target ] && $(ECHO) $(MAKE_CFG) | $(CMP) -s $(OBJECT_DIR)/.target - )           \
 291        || ( $(ECHO) $(MAKE_CFG) > $(OBJECT_DIR)/.target; $(ECHO) "# configuration variables changed, rebuilding ..." )
 292
 293
 294 clean:
 295         -rm $(OBJECT_DIR)/*.o $(DEP_DIR)/*.d
 296
 297 clean-all:
 298         -[ -d obj ] && rm -r obj