Configure

   1 #! /usr/bin/env perl
   2 # -*- mode: perl; -*-
   3 # Copyright 2016-2018 The OpenSSL Project Authors. All Rights Reserved.
   4 #
   5 # Licensed under the Apache License 2.0 (the "License").  You may not use
   6 # this file except in compliance with the License.  You can obtain a copy
   7 # in the file LICENSE in the source distribution or at
   8 # https://www.openssl.org/source/license.html
   9
  10 ##  Configure -- OpenSSL source tree configuration script
  11
  12 use 5.10.0;
  13 use strict;
  14 use Config;
  15 use FindBin;
  16 use lib "$FindBin::Bin/util/perl";
  17 use File::Basename;
  18 use File::Spec::Functions qw/:DEFAULT abs2rel rel2abs splitdir/;
  19 use File::Path qw/mkpath/;
  20 use OpenSSL::Glob;
  21
  22 # see INSTALL for instructions.
  23
  24 my $orig_death_handler = $SIG{__DIE__};
  25 $SIG{__DIE__} = \&death_handler;
  26
  27 my $usage="Usage: Configure [no-<cipher> ...] [enable-<cipher> ...] [-Dxxx] [-lxxx] [-Lxxx] [-fxxx] [-Kxxx] [no-hw-xxx|no-hw] [[no-]threads] [[no-]shared] [[no-]zlib|zlib-dynamic] [no-asm] [no-dso] [no-egd] [sctp] [386] [--prefix=DIR] [--openssldir=OPENSSLDIR] [--with-xxx[=vvv]] [--config=FILE] os/compiler[:flags]\n";
  28
  29 # Options:
  30 #
  31 # --config      add the given configuration file, which will be read after
  32 #               any "Configurations*" files that are found in the same
  33 #               directory as this script.
  34 # --prefix      prefix for the OpenSSL installation, which includes the
  35 #               directories bin, lib, include, share/man, share/doc/openssl
  36 #               This becomes the value of INSTALLTOP in Makefile
  37 #               (Default: /usr/local)
  38 # --openssldir  OpenSSL data area, such as openssl.cnf, certificates and keys.
  39 #               If it's a relative directory, it will be added on the directory
  40 #               given with --prefix.
  41 #               This becomes the value of OPENSSLDIR in Makefile and in C.
  42 #               (Default: PREFIX/ssl)
  43 #
  44 # --cross-compile-prefix Add specified prefix to binutils components.
  45 #
  46 # --api         One of 0.9.8, 1.0.0, 1.0.1, 1.0.2, 1.1.0, 1.1.1, or 3.0.0 / 3.
  47 #               Do not compile support for interfaces deprecated as of the
  48 #               specified OpenSSL version.
  49 #
  50 # no-hw-xxx     do not compile support for specific crypto hardware.
  51 #               Generic OpenSSL-style methods relating to this support
  52 #               are always compiled but return NULL if the hardware
  53 #               support isn't compiled.
  54 # no-hw         do not compile support for any crypto hardware.
  55 # [no-]threads  [don't] try to create a library that is suitable for
  56 #               multithreaded applications (default is "threads" if we
  57 #               know how to do it)
  58 # [no-]shared   [don't] try to create shared libraries when supported.
  59 # [no-]pic      [don't] try to build position independent code when supported.
  60 #               If disabled, it also disables shared and dynamic-engine.
  61 # no-asm        do not use assembler
  62 # no-dso        do not compile in any native shared-library methods. This
  63 #               will ensure that all methods just return NULL.
  64 # no-egd        do not compile support for the entropy-gathering daemon APIs
  65 # [no-]zlib     [don't] compile support for zlib compression.
  66 # zlib-dynamic  Like "zlib", but the zlib library is expected to be a shared
  67 #               library and will be loaded in run-time by the OpenSSL library.
  68 # sctp          include SCTP support
  69 # enable-weak-ssl-ciphers
  70 #               Enable weak ciphers that are disabled by default.
  71 # 386           generate 80386 code in assembly modules
  72 # no-sse2       disables IA-32 SSE2 code in assembly modules, the above
  73 #               mentioned '386' option implies this one
  74 # no-<cipher>   build without specified algorithm (rsa, idea, rc5, ...)
  75 # -<xxx> +<xxx> compiler options are passed through
  76 # -static       while -static is also a pass-through compiler option (and
  77 #               as such is limited to environments where it's actually
  78 #               meaningful), it triggers a number configuration options,
  79 #               namely no-dso, no-pic, no-shared and no-threads. It is
  80 #               argued that the only reason to produce statically linked
  81 #               binaries (and in context it means executables linked with
  82 #               -static flag, and not just executables linked with static
  83 #               libcrypto.a) is to eliminate dependency on specific run-time,
  84 #               a.k.a. libc version. The mentioned config options are meant
  85 #               to achieve just that. Unfortunately on Linux it's impossible
  86 #               to eliminate the dependency completely for openssl executable
  87 #               because of getaddrinfo and gethostbyname calls, which can
  88 #               invoke dynamically loadable library facility anyway to meet
  89 #               the lookup requests. For this reason on Linux statically
  90 #               linked openssl executable has rather debugging value than
  91 #               production quality.
  92 #
  93 # DEBUG_SAFESTACK use type-safe stacks to enforce type-safety on stack items
  94 #               provided to stack calls. Generates unique stack functions for
  95 #               each possible stack type.
  96 # BN_LLONG      use the type 'long long' in crypto/bn/bn.h
  97 # RC4_CHAR      use 'char' instead of 'int' for RC4_INT in crypto/rc4/rc4.h
  98 # Following are set automatically by this script
  99 #
 100 # MD5_ASM       use some extra md5 assembler,
 101 # SHA1_ASM      use some extra sha1 assembler, must define L_ENDIAN for x86
 102 # RMD160_ASM    use some extra ripemd160 assembler,
 103 # SHA256_ASM    sha256_block is implemented in assembler
 104 # SHA512_ASM    sha512_block is implemented in assembler
 105 # AES_ASM       AES_[en|de]crypt is implemented in assembler
 106
 107 # Minimum warning options... any contributions to OpenSSL should at least get
 108 # past these.
 109
 110 # DEBUG_UNUSED enables __owur (warn unused result) checks.
 111 # -DPEDANTIC complements -pedantic and is meant to mask code that
 112 # is not strictly standard-compliant and/or implementation-specific,
 113 # e.g. inline assembly, disregards to alignment requirements, such
 114 # that -pedantic would complain about. Incidentally -DPEDANTIC has
 115 # to be used even in sanitized builds, because sanitizer too is
 116 # supposed to and does take notice of non-standard behaviour. Then
 117 # -pedantic with pre-C9x compiler would also complain about 'long
 118 # long' not being supported. As 64-bit algorithms are common now,
 119 # it grew impossible to resolve this without sizeable additional
 120 # code, so we just tell compiler to be pedantic about everything
 121 # but 'long long' type.
 122
 123 my %gcc_devteam_warn = ();
 124 {
 125     my @common = qw( -DDEBUG_UNUSED
 126                      -DPEDANTIC -pedantic -Wno-long-long
 127                      -Wall
 128                      -Wextra
 129                      -Wno-unused-parameter
 130                      -Wno-missing-field-initializers
 131                      -Wswitch
 132                      -Wsign-compare
 133                      -Wshadow
 134                      -Wformat
 135                      -Wtype-limits
 136                      -Wundef
 137                      -Werror );
 138     %gcc_devteam_warn = (
 139         CFLAGS          => [ @common, qw( -Wmissing-prototypes
 140                                           -Wstrict-prototypes ) ],
 141         CXXFLAGS        => [ @common ]
 142     );
 143 }
 144
 145 # These are used in addition to $gcc_devteam_warn when the compiler is clang.
 146 # TODO(openssl-team): fix problems and investigate if (at least) the
 147 # following warnings can also be enabled:
 148 #       -Wcast-align
 149 #       -Wunreachable-code -- no, too ugly/compiler-specific
 150 #       -Wlanguage-extension-token -- no, we use asm()
 151 #       -Wunused-macros -- no, too tricky for BN and _XOPEN_SOURCE etc
 152 #       -Wextended-offsetof -- no, needed in CMS ASN1 code
 153 my %clang_devteam_warn = ();
 154 {
 155     my @common = qw( -Wswitch-default
 156                      -Wno-parentheses-equality
 157                      -Wno-language-extension-token
 158                      -Wno-extended-offsetof
 159                      -Wconditional-uninitialized
 160                      -Wincompatible-pointer-types-discards-qualifiers
 161                      -Wno-unknown-warning-option );
 162     %clang_devteam_warn = (
 163         CFLAGS          => [ @common, qw( -Wmissing-variable-declarations ) ],
 164         CXXFLAGS        => [ @common ]
 165     );
 166 }
 167
 168 # This adds backtrace information to the memory leak info.  Is only used
 169 # when crypto-mdebug-backtrace is enabled.
 170 my $memleak_devteam_backtrace = "-rdynamic";
 171
 172 my $strict_warnings = 0;
 173
 174 # As for $BSDthreads. Idea is to maintain "collective" set of flags,
 175 # which would cover all BSD flavors. -pthread applies to them all,
 176 # but is treated differently. OpenBSD expands is as -D_POSIX_THREAD
 177 # -lc_r, which is sufficient. FreeBSD 4.x expands it as -lc_r,
 178 # which has to be accompanied by explicit -D_THREAD_SAFE and
 179 # sometimes -D_REENTRANT. FreeBSD 5.x expands it as -lc_r, which
 180 # seems to be sufficient?
 181 our $BSDthreads="-pthread -D_THREAD_SAFE -D_REENTRANT";
 182
 183 #
 184 # API compatibility name to version number mapping.
 185 #
 186 my $maxapi = "3.0.0";           # API for "no-deprecated" builds
 187 my $apitable = {
 188     "3.0.0" => 3,
 189     "1.1.1" => 2,
 190     "1.1.0" => 2,
 191     "1.0.2" => 1,
 192     "1.0.1" => 1,
 193     "1.0.0" => 1,
 194     "0.9.8" => 0,
 195 };
 196
 197 our %table = ();
 198 our %config = ();
 199 our %withargs = ();
 200 our $now_printing;      # set to current entry's name in print_table_entry
 201                         # (todo: right thing would be to encapsulate name
 202                         # into %target [class] and make print_table_entry
 203                         # a method)
 204
 205 # Forward declarations ###############################################
 206
 207 # read_config(filename)
 208 #
 209 # Reads a configuration file and populates %table with the contents
 210 # (which the configuration file places in %targets).
 211 sub read_config;
 212
 213 # resolve_config(target)
 214 #
 215 # Resolves all the late evaluations, inheritances and so on for the
 216 # chosen target and any target it inherits from.
 217 sub resolve_config;
 218
 219
 220 # Information collection #############################################
 221
 222 # Unified build supports separate build dir
 223 my $srcdir = catdir(absolutedir(dirname($0))); # catdir ensures local syntax
 224 my $blddir = catdir(absolutedir("."));         # catdir ensures local syntax
 225 my $dofile = abs2rel(catfile($srcdir, "util/dofile.pl"));
 226
 227 my $local_config_envname = 'OPENSSL_LOCAL_CONFIG_DIR';
 228
 229 $config{sourcedir} = abs2rel($srcdir);
 230 $config{builddir} = abs2rel($blddir);
 231
 232 # Collect reconfiguration information if needed
 233 my @argvcopy=@ARGV;
 234
 235 if (grep /^reconf(igure)?$/, @argvcopy) {
 236     die "reconfiguring with other arguments present isn't supported"
 237         if scalar @argvcopy > 1;
 238     if (-f "./configdata.pm") {
 239         my $file = "./configdata.pm";
 240         unless (my $return = do $file) {
 241             die "couldn't parse $file: $@" if $@;
 242             die "couldn't do $file: $!"    unless defined $return;
 243             die "couldn't run $file"       unless $return;
 244         }
 245
 246         @argvcopy = defined($configdata::config{perlargv}) ?
 247             @{$configdata::config{perlargv}} : ();
 248         die "Incorrect data to reconfigure, please do a normal configuration\n"
 249             if (grep(/^reconf/,@argvcopy));
 250         $config{perlenv} = $configdata::config{perlenv} // {};
 251     } else {
 252         die "Insufficient data to reconfigure, please do a normal configuration\n";
 253     }
 254 }
 255
 256 $config{perlargv} = [ @argvcopy ];
 257
 258 # Collect version numbers
 259 $config{major} = "unknown";
 260 $config{minor} = "unknown";
 261 $config{patch} = "unknown";
 262 $config{prerelease} = "";
 263 $config{build_metadata} = "";
 264 $config{shlib_version} = "unknown";
 265
 266 collect_information(
 267     collect_from_file(catfile($srcdir,'include/openssl/opensslv.h')),
 268     qr/#\s+define\s+OPENSSL_VERSION_MAJOR\s+(\d+)/ =>
 269         sub { $config{major} = $1; },
 270     qr/#\s+define\s+OPENSSL_VERSION_MINOR\s+(\d+)/ =>
 271         sub { $config{minor} = $1; },
 272     qr/#\s+define\s+OPENSSL_VERSION_PATCH\s+(\d+)/ =>
 273         sub { $config{patch} = $1; },
 274     qr/#\s+define\s+OPENSSL_VERSION_PRE_RELEASE\s+"((?:\\.|[^"])*)"/ =>
 275         sub { $config{prerelease} = $1; },
 276     qr/#\s+define\s+OPENSSL_VERSION_BUILD_METADATA\s+"((?:\\.|[^"])*)"/ =>
 277         sub { $config{build_metadata} = $1; },
 278     qr/#\s+define\s+OPENSSL_SHLIB_VERSION\s+([\d\.]+)/ =>
 279         sub { $config{shlib_version} = $1; },
 280     );
 281 die "erroneous version information in opensslv.h: ",
 282     "$config{major}.$config{minor}.$config{patch}, $config{shlib_version}\n"
 283     if ($config{major} eq "unknown"
 284             || $config{minor} eq "unknown"
 285             || $config{patch} eq "unknown"
 286             || $config{shlib_version} eq "unknown");
 287
 288 $config{version} = "$config{major}.$config{minor}.$config{patch}";
 289 $config{full_version} = "$config{version}$config{prerelease}$config{build_metadata}";
 290
 291 # Collect target configurations
 292
 293 my $pattern = catfile(dirname($0), "Configurations", "*.conf");
 294 foreach (sort glob($pattern)) {
 295     &read_config($_);
 296 }
 297
 298 if (defined env($local_config_envname)) {
 299     if ($^O eq 'VMS') {
 300         # VMS environment variables are logical names,
 301         # which can be used as is
 302         $pattern = $local_config_envname . ':' . '*.conf';
 303     } else {
 304         $pattern = catfile(env($local_config_envname), '*.conf');
 305     }
 306
 307     foreach (sort glob($pattern)) {
 308         &read_config($_);
 309     }
 310 }
 311
 312 # Save away perl command information
 313 $config{perl_cmd} = $^X;
 314 $config{perl_version} = $Config{version};
 315 $config{perl_archname} = $Config{archname};
 316
 317 $config{prefix}="";
 318 $config{openssldir}="";
 319 $config{processor}="";
 320 $config{libdir}="";
 321 my $auto_threads=1;    # enable threads automatically? true by default
 322 my $default_ranlib;
 323
 324 # Known TLS and DTLS protocols
 325 my @tls = qw(ssl3 tls1 tls1_1 tls1_2 tls1_3);
 326 my @dtls = qw(dtls1 dtls1_2);
 327
 328 # Explicitly known options that are possible to disable.  They can
 329 # be regexps, and will be used like this: /^no-${option}$/
 330 # For developers: keep it sorted alphabetically
 331
 332 my @disablables = (
 333     "ktls",
 334     "afalgeng",
 335     "aria",
 336     "asan",
 337     "asm",
 338     "async",
 339     "autoalginit",
 340     "autoerrinit",
 341     "autoload-config",
 342     "bf",
 343     "blake2",
 344     "camellia",
 345     "capieng",
 346     "cast",
 347     "chacha",
 348     "cmac",
 349     "cms",
 350     "comp",
 351     "crypto-mdebug",
 352     "crypto-mdebug-backtrace",
 353     "ct",
 354     "deprecated",
 355     "des",
 356     "devcryptoeng",
 357     "dgram",
 358     "dh",
 359     "dsa",
 360     "dso",
 361     "dtls",
 362     "dynamic-engine",
 363     "ec",
 364     "ec2m",
 365     "ecdh",
 366     "ecdsa",
 367     "ec_nistp_64_gcc_128",
 368     "egd",
 369     "engine",
 370     "err",
 371     "external-tests",
 372     "filenames",
 373     "fuzz-libfuzzer",
 374     "fuzz-afl",
 375     "gost",
 376     "heartbeats",
 377     "hw(-.+)?",
 378     "idea",
 379     "makedepend",
 380     "md2",
 381     "md4",
 382     "mdc2",
 383     "msan",
 384     "multiblock",
 385     "nextprotoneg",
 386     "pinshared",
 387     "ocb",
 388     "ocsp",
 389     "pic",
 390     "poly1305",
 391     "posix-io",
 392     "psk",
 393     "rc2",
 394     "rc4",
 395     "rc5",
 396     "rdrand",
 397     "rfc3779",
 398     "rmd160",
 399     "scrypt",
 400     "sctp",
 401     "seed",
 402     "shared",
 403     "siphash",
 404     "siv",
 405     "sm2",
 406     "sm3",
 407     "sm4",
 408     "sock",
 409     "srp",
 410     "srtp",
 411     "sse2",
 412     "ssl",
 413     "ssl-trace",
 414     "static-engine",
 415     "stdio",
 416     "tests",
 417     "threads",
 418     "tls",
 419     "ts",
 420     "ubsan",
 421     "ui-console",
 422     "unit-test",
 423     "whirlpool",
 424     "weak-ssl-ciphers",
 425     "zlib",
 426     "zlib-dynamic",
 427     );
 428 foreach my $proto ((@tls, @dtls))
 429         {
 430         push(@disablables, $proto);
 431         push(@disablables, "$proto-method") unless $proto eq "tls1_3";
 432         }
 433
 434 my %deprecated_disablables = (
 435     "ssl2" => undef,
 436     "buf-freelists" => undef,
 437     "ripemd" => "rmd160",
 438     "ui" => "ui-console",
 439     );
 440
 441 # All of the following are disabled by default:
 442
 443 our %disabled = ( # "what"         => "comment"
 444                   "asan"                => "default",
 445                   "crypto-mdebug"       => "default",
 446                   "crypto-mdebug-backtrace" => "default",
 447                   "devcryptoeng"        => "default",
 448                   "ec_nistp_64_gcc_128" => "default",
 449                   "egd"                 => "default",
 450                   "external-tests"      => "default",
 451                   "fuzz-libfuzzer"      => "default",
 452                   "fuzz-afl"            => "default",
 453                   "heartbeats"          => "default",
 454                   "md2"                 => "default",
 455                   "msan"                => "default",
 456                   "rc5"                 => "default",
 457                   "sctp"                => "default",
 458                   "ssl-trace"           => "default",
 459                   "ssl3"                => "default",
 460                   "ssl3-method"         => "default",
 461                   "ubsan"               => "default",
 462                   "unit-test"           => "default",
 463                   "weak-ssl-ciphers"    => "default",
 464                   "zlib"                => "default",
 465                   "zlib-dynamic"        => "default",
 466                   "ktls"                => "default",
 467                 );
 468
 469 # Note: => pair form used for aesthetics, not to truly make a hash table
 470 my @disable_cascades = (
 471     # "what"            => [ "cascade", ... ]
 472     sub { $config{processor} eq "386" }
 473                         => [ "sse2" ],
 474     "ssl"               => [ "ssl3" ],
 475     "ssl3-method"       => [ "ssl3" ],
 476     "zlib"              => [ "zlib-dynamic" ],
 477     "des"               => [ "mdc2" ],
 478     "ec"                => [ "ecdsa", "ecdh" ],
 479
 480     "dgram"             => [ "dtls", "sctp" ],
 481     "sock"              => [ "dgram" ],
 482     "dtls"              => [ @dtls ],
 483     sub { 0 == scalar grep { !$disabled{$_} } @dtls }
 484                         => [ "dtls" ],
 485
 486     "tls"               => [ @tls ],
 487     sub { 0 == scalar grep { !$disabled{$_} } @tls }
 488                         => [ "tls" ],
 489
 490     "crypto-mdebug"     => [ "crypto-mdebug-backtrace" ],
 491
 492     # Without DSO, we can't load dynamic engines, so don't build them dynamic
 493     "dso"               => [ "dynamic-engine" ],
 494
 495     # Without position independent code, there can be no shared libraries or DSOs
 496     "pic"               => [ "shared" ],
 497     "shared"            => [ "dynamic-engine" ],
 498     "engine"            => [ "afalgeng", "devcryptoeng" ],
 499
 500     # no-autoalginit is only useful when building non-shared
 501     "autoalginit"       => [ "shared", "apps" ],
 502
 503     "stdio"             => [ "apps", "capieng", "egd" ],
 504     "apps"              => [ "tests" ],
 505     "tests"             => [ "external-tests" ],
 506     "comp"              => [ "zlib" ],
 507     "ec"                => [ "tls1_3", "sm2" ],
 508     "sm3"               => [ "sm2" ],
 509     sub { !$disabled{"unit-test"} } => [ "heartbeats" ],
 510
 511     sub { !$disabled{"msan"} } => [ "asm" ],
 512
 513     sub { $disabled{cmac}; } => [ "siv" ],
 514     );
 515
 516 # Avoid protocol support holes.  Also disable all versions below N, if version
 517 # N is disabled while N+1 is enabled.
 518 #
 519 my @list = (reverse @tls);
 520 while ((my $first, my $second) = (shift @list, shift @list)) {
 521     last unless @list;
 522     push @disable_cascades, ( sub { !$disabled{$first} && $disabled{$second} }
 523                               => [ @list ] );
 524     unshift @list, $second;
 525 }
 526 my @list = (reverse @dtls);
 527 while ((my $first, my $second) = (shift @list, shift @list)) {
 528     last unless @list;
 529     push @disable_cascades, ( sub { !$disabled{$first} && $disabled{$second} }
 530                               => [ @list ] );
 531     unshift @list, $second;
 532 }
 533
 534 # Explicit "no-..." options will be collected in %disabled along with the defaults.
 535 # To remove something from %disabled, use "enable-foo".
 536 # For symmetry, "disable-foo" is a synonym for "no-foo".
 537
 538 &usage if ($#ARGV < 0);
 539
 540 # For the "make variables" CINCLUDES and CDEFINES, we support lists with
 541 # platform specific list separators.  Users from those platforms should
 542 # recognise those separators from how you set up the PATH to find executables.
 543 # The default is the Unix like separator, :, but as an exception, we also
 544 # support the space as separator.
 545 my $list_separator_re =
 546     { VMS           => qr/(?<!\^),/,
 547       MSWin32       => qr/(?<!\\);/ } -> {$^O} // qr/(?<!\\)[:\s]/;
 548 # All the "make variables" we support
 549 # Some get pre-populated for the sake of backward compatibility
 550 # (we supported those before the change to "make variable" support.
 551 my %user = (
 552     AR          => env('AR'),
 553     ARFLAGS     => [],
 554     AS          => undef,
 555     ASFLAGS     => [],
 556     CC          => env('CC'),
 557     CFLAGS      => [ env('CFLAGS') || () ],
 558     CXX         => env('CXX'),
 559     CXXFLAGS    => [ env('CXXFLAGS') || () ],
 560     CPP         => undef,
 561     CPPFLAGS    => [ env('CPPFLAGS') || () ],  # -D, -I, -Wp,
 562     CPPDEFINES  => [],  # Alternative for -D
 563     CPPINCLUDES => [],  # Alternative for -I
 564     CROSS_COMPILE => env('CROSS_COMPILE'),
 565     HASHBANGPERL=> env('HASHBANGPERL') || env('PERL'),
 566     LD          => undef,
 567     LDFLAGS     => [ env('LDFLAGS') || () ],  # -L, -Wl,
 568     LDLIBS      => [ env('LDLIBS') || () ],  # -l
 569     MT          => undef,
 570     MTFLAGS     => [],
 571     PERL        => env('PERL') || ($^O ne "VMS" ? $^X : "perl"),
 572     RANLIB      => env('RANLIB'),
 573     RC          => env('RC') || env('WINDRES'),
 574     RCFLAGS     => [],
 575     RM          => undef,
 576    );
 577 # Info about what "make variables" may be prefixed with the cross compiler
 578 # prefix.  This should NEVER mention any such variable with a list for value.
 579 my @user_crossable = qw ( AR AS CC CXX CPP LD MT RANLIB RC );
 580 # The same but for flags given as Configure options.  These are *additional*
 581 # input, as opposed to the VAR=string option that override the corresponding
 582 # config target attributes
 583 my %useradd = (
 584     CPPDEFINES  => [],
 585     CPPINCLUDES => [],
 586     CPPFLAGS    => [],
 587     CFLAGS      => [],
 588     CXXFLAGS    => [],
 589     LDFLAGS     => [],
 590     LDLIBS      => [],
 591    );
 592
 593 my %user_synonyms = (
 594     HASHBANGPERL=> 'PERL',
 595     RC          => 'WINDRES',
 596    );
 597
 598 # Some target attributes have been renamed, this is the translation table
 599 my %target_attr_translate =(
 600     ar          => 'AR',
 601     as          => 'AS',
 602     cc          => 'CC',
 603     cxx         => 'CXX',
 604     cpp         => 'CPP',
 605     hashbangperl => 'HASHBANGPERL',
 606     ld          => 'LD',
 607     mt          => 'MT',
 608     ranlib      => 'RANLIB',
 609     rc          => 'RC',
 610     rm          => 'RM',
 611    );
 612
 613 # Initialisers coming from 'config' scripts
 614 $config{defines} = [ split(/$list_separator_re/, env('__CNF_CPPDEFINES')) ];
 615 $config{includes} = [ split(/$list_separator_re/, env('__CNF_CPPINCLUDES')) ];
 616 $config{cppflags} = [ env('__CNF_CPPFLAGS') || () ];
 617 $config{cflags} = [ env('__CNF_CFLAGS') || () ];
 618 $config{cxxflags} = [ env('__CNF_CXXFLAGS') || () ];
 619 $config{lflags} = [ env('__CNF_LDFLAGS') || () ];
 620 $config{ex_libs} = [ env('__CNF_LDLIBS') || () ];
 621
 622 $config{openssl_api_defines}=[];
 623 $config{openssl_sys_defines}=[];
 624 $config{openssl_feature_defines}=[];
 625 $config{options}="";
 626 $config{build_type} = "release";
 627 my $target="";
 628
 629 my %cmdvars = ();               # Stores FOO='blah' type arguments
 630 my %unsupported_options = ();
 631 my %deprecated_options = ();
 632 # If you change this, update apps/version.c
 633 my @known_seed_sources = qw(getrandom devrandom os egd none rdcpu librandom);
 634 my @seed_sources = ();
 635 while (@argvcopy)
 636         {
 637         $_ = shift @argvcopy;
 638
 639         # Support env variable assignments among the options
 640         if (m|^(\w+)=(.+)?$|)
 641                 {
 642                 $cmdvars{$1} = $2;
 643                 # Every time a variable is given as a configuration argument,
 644                 # it acts as a reset if the variable.
 645                 if (exists $user{$1})
 646                         {
 647                         $user{$1} = ref $user{$1} eq "ARRAY" ? [] : undef;
 648                         }
 649                 #if (exists $useradd{$1})
 650                 #       {
 651                 #       $useradd{$1} = [];
 652                 #       }
 653                 next;
 654                 }
 655
 656         # VMS is a case insensitive environment, and depending on settings
 657         # out of our control, we may receive options uppercased.  Let's
 658         # downcase at least the part before any equal sign.
 659         if ($^O eq "VMS")
 660                 {
 661                 s/^([^=]*)/lc($1)/e;
 662                 }
 663
 664         # some people just can't read the instructions, clang people have to...
 665         s/^-no-(?!integrated-as)/no-/;
 666
 667         # rewrite some options in "enable-..." form
 668         s /^-?-?shared$/enable-shared/;
 669         s /^sctp$/enable-sctp/;
 670         s /^threads$/enable-threads/;
 671         s /^zlib$/enable-zlib/;
 672         s /^zlib-dynamic$/enable-zlib-dynamic/;
 673
 674         if (/^(no|disable|enable)-(.+)$/)
 675                 {
 676                 my $word = $2;
 677                 if (!exists $deprecated_disablables{$word}
 678                         && !grep { $word =~ /^${_}$/ } @disablables)
 679                         {
 680                         $unsupported_options{$_} = 1;
 681                         next;
 682                         }
 683                 }
 684         if (/^no-(.+)$/ || /^disable-(.+)$/)
 685                 {
 686                 foreach my $proto ((@tls, @dtls))
 687                         {
 688                         if ($1 eq "$proto-method")
 689                                 {
 690                                 $disabled{"$proto"} = "option($proto-method)";
 691                                 last;
 692                                 }
 693                         }
 694                 if ($1 eq "dtls")
 695                         {
 696                         foreach my $proto (@dtls)
 697                                 {
 698                                 $disabled{$proto} = "option(dtls)";
 699                                 }
 700                         $disabled{"dtls"} = "option(dtls)";
 701                         }
 702                 elsif ($1 eq "ssl")
 703                         {
 704                         # Last one of its kind
 705                         $disabled{"ssl3"} = "option(ssl)";
 706                         }
 707                 elsif ($1 eq "tls")
 708                         {
 709                         # XXX: Tests will fail if all SSL/TLS
 710                         # protocols are disabled.
 711                         foreach my $proto (@tls)
 712                                 {
 713                                 $disabled{$proto} = "option(tls)";
 714                                 }
 715                         }
 716                 elsif ($1 eq "static-engine")
 717                         {
 718                         delete $disabled{"dynamic-engine"};
 719                         }
 720                 elsif ($1 eq "dynamic-engine")
 721                         {
 722                         $disabled{"dynamic-engine"} = "option";
 723                         }
 724                 elsif (exists $deprecated_disablables{$1})
 725                         {
 726                         $deprecated_options{$_} = 1;
 727                         if (defined $deprecated_disablables{$1})
 728                                 {
 729                                 $disabled{$deprecated_disablables{$1}} = "option";
 730                                 }
 731                         }
 732                 else
 733                         {
 734                         $disabled{$1} = "option";
 735                         }
 736                 # No longer an automatic choice
 737                 $auto_threads = 0 if ($1 eq "threads");
 738                 }
 739         elsif (/^enable-(.+)$/)
 740                 {
 741                 if ($1 eq "static-engine")
 742                         {
 743                         $disabled{"dynamic-engine"} = "option";
 744                         }
 745                 elsif ($1 eq "dynamic-engine")
 746                         {
 747                         delete $disabled{"dynamic-engine"};
 748                         }
 749                 elsif ($1 eq "zlib-dynamic")
 750                         {
 751                         delete $disabled{"zlib"};
 752                         }
 753                 my $algo = $1;
 754                 delete $disabled{$algo};
 755
 756                 # No longer an automatic choice
 757                 $auto_threads = 0 if ($1 eq "threads");
 758                 }
 759         elsif (/^--strict-warnings$/)
 760                 {
 761                 # Pretend that our strict flags is a C flag, and replace it
 762                 # with the proper flags later on
 763                 push @{$useradd{CFLAGS}}, '--ossl-strict-warnings';
 764                 push @{$useradd{CXXFLAGS}}, '--ossl-strict-warnings';
 765                 $strict_warnings=1;
 766                 }
 767         elsif (/^--debug$/)
 768                 {
 769                 $config{build_type} = "debug";
 770                 }
 771         elsif (/^--release$/)
 772                 {
 773                 $config{build_type} = "release";
 774                 }
 775         elsif (/^386$/)
 776                 { $config{processor}=386; }
 777         elsif (/^fips$/)
 778                 {
 779                 die "FIPS mode not supported\n";
 780                 }
 781         elsif (/^rsaref$/)
 782                 {
 783                 # No RSAref support any more since it's not needed.
 784                 # The check for the option is there so scripts aren't
 785                 # broken
 786                 }
 787         elsif (/^nofipscanistercheck$/)
 788                 {
 789                 die "FIPS mode not supported\n";
 790                 }
 791         elsif (/^[-+]/)
 792                 {
 793                 if (/^--prefix=(.*)$/)
 794                         {
 795                         $config{prefix}=$1;
 796                         die "Directory given with --prefix MUST be absolute\n"
 797                                 unless file_name_is_absolute($config{prefix});
 798                         }
 799                 elsif (/^--api=(.*)$/)
 800                         {
 801                         $config{api}=$1;
 802                         }
 803                 elsif (/^--libdir=(.*)$/)
 804                         {
 805                         $config{libdir}=$1;
 806                         }
 807                 elsif (/^--openssldir=(.*)$/)
 808                         {
 809                         $config{openssldir}=$1;
 810                         }
 811                 elsif (/^--with-zlib-lib=(.*)$/)
 812                         {
 813                         $withargs{zlib_lib}=$1;
 814                         }
 815                 elsif (/^--with-zlib-include=(.*)$/)
 816                         {
 817                         $withargs{zlib_include}=$1;
 818                         }
 819                 elsif (/^--with-fuzzer-lib=(.*)$/)
 820                         {
 821                         $withargs{fuzzer_lib}=$1;
 822                         }
 823                 elsif (/^--with-fuzzer-include=(.*)$/)
 824                         {
 825                         $withargs{fuzzer_include}=$1;
 826                         }
 827                 elsif (/^--with-rand-seed=(.*)$/)
 828                         {
 829                         foreach my $x (split(m|,|, $1))
 830                             {
 831                             die "Unknown --with-rand-seed choice $x\n"
 832                                 if ! grep { $x eq $_ } @known_seed_sources;
 833                             push @seed_sources, $x;
 834                             }
 835                         }
 836                 elsif (/^--cross-compile-prefix=(.*)$/)
 837                         {
 838                         $user{CROSS_COMPILE}=$1;
 839                         }
 840                 elsif (/^--config=(.*)$/)
 841                         {
 842                         read_config $1;
 843                         }
 844                 elsif (/^-l(.*)$/)
 845                         {
 846                         push @{$useradd{LDLIBS}}, $_;
 847                         }
 848                 elsif (/^-framework$/)
 849                         {
 850                         push @{$useradd{LDLIBS}}, $_, shift(@argvcopy);
 851                         }
 852                 elsif (/^-L(.*)$/ or /^-Wl,/)
 853                         {
 854                         push @{$useradd{LDFLAGS}}, $_;
 855                         }
 856                 elsif (/^-rpath$/ or /^-R$/)
 857                         # -rpath is the OSF1 rpath flag
 858                         # -R is the old Solaris rpath flag
 859                         {
 860                         my $rpath = shift(@argvcopy) || "";
 861                         $rpath .= " " if $rpath ne "";
 862                         push @{$useradd{LDFLAGS}}, $_, $rpath;
 863                         }
 864                 elsif (/^-static$/)
 865                         {
 866                         push @{$useradd{LDFLAGS}}, $_;
 867                         $disabled{"dso"} = "forced";
 868                         $disabled{"pic"} = "forced";
 869                         $disabled{"shared"} = "forced";
 870                         $disabled{"threads"} = "forced";
 871                         }
 872                 elsif (/^-D(.*)$/)
 873                         {
 874                         push @{$useradd{CPPDEFINES}}, $1;
 875                         }
 876                 elsif (/^-I(.*)$/)
 877                         {
 878                         push @{$useradd{CPPINCLUDES}}, $1;
 879                         }
 880                 elsif (/^-Wp,$/)
 881                         {
 882                         push @{$useradd{CPPFLAGS}}, $1;
 883                         }
 884                 else    # common if (/^[-+]/), just pass down...
 885                         {
 886                         $_ =~ s/%([0-9a-f]{1,2})/chr(hex($1))/gei;
 887                         push @{$useradd{CFLAGS}}, $_;
 888                         push @{$useradd{CXXFLAGS}}, $_;
 889                         }
 890                 }
 891         else
 892                 {
 893                 die "target already defined - $target (offending arg: $_)\n" if ($target ne "");
 894                 $target=$_;
 895                 }
 896         unless ($_ eq $target || /^no-/ || /^disable-/)
 897                 {
 898                 # "no-..." follows later after implied deactivations
 899                 # have been derived.  (Don't take this too seriously,
 900                 # we really only write OPTIONS to the Makefile out of
 901                 # nostalgia.)
 902
 903                 if ($config{options} eq "")
 904                         { $config{options} = $_; }
 905                 else
 906                         { $config{options} .= " ".$_; }
 907                 }
 908         }
 909
 910 if (defined($config{api}) && !exists $apitable->{$config{api}}) {
 911         die "***** Unsupported api compatibility level: $config{api}\n",
 912 }
 913
 914 if (keys %deprecated_options)
 915         {
 916         warn "***** Deprecated options: ",
 917                 join(", ", keys %deprecated_options), "\n";
 918         }
 919 if (keys %unsupported_options)
 920         {
 921         die "***** Unsupported options: ",
 922                 join(", ", keys %unsupported_options), "\n";
 923         }
 924
 925 # If any %useradd entry has been set, we must check that the "make
 926 # variables" haven't been set.  We start by checking of any %useradd entry
 927 # is set.
 928 if (grep { scalar @$_ > 0 } values %useradd) {
 929     # Hash of env / make variables names.  The possible values are:
 930     # 1 - "make vars"
 931     # 2 - %useradd entry set
 932     # 3 - both set
 933     my %detected_vars =
 934         map { my $v = 0;
 935               $v += 1 if $cmdvars{$_};
 936               $v += 2 if @{$useradd{$_}};
 937               $_ => $v }
 938         keys %useradd;
 939
 940     # If any of the corresponding "make variables" is set, we error
 941     if (grep { $_ & 1 } values %detected_vars) {
 942         my $names = join(', ', grep { $detected_vars{$_} > 0 }
 943                                sort keys %detected_vars);
 944         die <<"_____";
 945 ***** Mixing make variables and additional compiler/linker flags as
 946 ***** configure command line option is not permitted.
 947 ***** Affected make variables: $names
 948 _____
 949     }
 950 }
 951
 952 # Check through all supported command line variables to see if any of them
 953 # were set, and canonicalise the values we got.  If no compiler or linker
 954 # flag or anything else that affects %useradd was set, we also check the
 955 # environment for values.
 956 my $anyuseradd =
 957     grep { defined $_ && (ref $_ ne 'ARRAY' || @$_) } values %useradd;
 958 foreach (keys %user) {
 959     my $value = $cmdvars{$_};
 960     $value //= env($_) unless $anyuseradd;
 961     $value //=
 962         defined $user_synonyms{$_} ? $cmdvars{$user_synonyms{$_}} : undef;
 963     $value //= defined $user_synonyms{$_} ? env($user_synonyms{$_}) : undef
 964         unless $anyuseradd;
 965
 966     if (defined $value) {
 967         if (ref $user{$_} eq 'ARRAY') {
 968             $user{$_} = [ split /$list_separator_re/, $value ];
 969         } elsif (!defined $user{$_}) {
 970             $user{$_} = $value;
 971         }
 972     }
 973 }
 974
 975 if (grep { /-rpath\b/ } ($user{LDFLAGS} ? @{$user{LDFLAGS}} : ())
 976     && !$disabled{shared}
 977     && !($disabled{asan} && $disabled{msan} && $disabled{ubsan})) {
 978     die "***** Cannot simultaneously use -rpath, shared libraries, and\n",
 979         "***** any of asan, msan or ubsan\n";
 980 }
 981
 982 my @tocheckfor = (keys %disabled);
 983 while (@tocheckfor) {
 984     my %new_tocheckfor = ();
 985     my @cascade_copy = (@disable_cascades);
 986     while (@cascade_copy) {
 987         my ($test, $descendents) = (shift @cascade_copy, shift @cascade_copy);
 988         if (ref($test) eq "CODE" ? $test->() : defined($disabled{$test})) {
 989             foreach(grep { !defined($disabled{$_}) } @$descendents) {
 990                 $new_tocheckfor{$_} = 1; $disabled{$_} = "forced";
 991             }
 992         }
 993     }
 994     @tocheckfor = (keys %new_tocheckfor);
 995 }
 996
 997 our $die = sub { die @_; };
 998 if ($target eq "TABLE") {
 999     local $die = sub { warn @_; };
1000     foreach (sort keys %table) {
1001         print_table_entry($_, "TABLE");
1002     }
1003     exit 0;
1004 }
1005
1006 if ($target eq "LIST") {
1007     foreach (sort keys %table) {
1008         print $_,"\n" unless $table{$_}->{template};
1009     }
1010     exit 0;
1011 }
1012
1013 if ($target eq "HASH") {
1014     local $die = sub { warn @_; };
1015     print "%table = (\n";
1016     foreach (sort keys %table) {
1017         print_table_entry($_, "HASH");
1018     }
1019     exit 0;
1020 }
1021
1022 print "Configuring OpenSSL version $config{full_version} ";
1023 print "for target $target\n";
1024
1025 if (scalar(@seed_sources) == 0) {
1026     print "Using os-specific seed configuration\n";
1027     push @seed_sources, 'os';
1028 }
1029 if (scalar(grep { $_ eq 'none' } @seed_sources) > 0) {
1030     die "Cannot seed with none and anything else" if scalar(@seed_sources) > 1;
1031     warn <<_____ if scalar(@seed_sources) == 1;
1032
1033 ============================== WARNING ===============================
1034 You have selected the --with-rand-seed=none option, which effectively
1035 disables automatic reseeding of the OpenSSL random generator.
1036 All operations depending on the random generator such as creating keys
1037 will not work unless the random generator is seeded manually by the
1038 application.
1039
1040 Please read the 'Note on random number generation' section in the
1041 INSTALL instructions and the RAND_DRBG(7) manual page for more details.
1042 ============================== WARNING ===============================
1043
1044 _____
1045 }
1046 push @{$config{openssl_feature_defines}},
1047      map { (my $x = $_) =~ tr|[\-a-z]|[_A-Z]|; "OPENSSL_RAND_SEED_$x" }
1048         @seed_sources;
1049
1050 # Backward compatibility?
1051 if ($target =~ m/^CygWin32(-.*)$/) {
1052     $target = "Cygwin".$1;
1053 }
1054
1055 # Support for legacy targets having a name starting with 'debug-'
1056 my ($d, $t) = $target =~ m/^(debug-)?(.*)$/;
1057 if ($d) {
1058     $config{build_type} = "debug";
1059
1060     # If we do not find debug-foo in the table, the target is set to foo.
1061     if (!$table{$target}) {
1062         $target = $t;
1063     }
1064 }
1065
1066 &usage if !$table{$target} || $table{$target}->{template};
1067
1068 $config{target} = $target;
1069 my %target = resolve_config($target);
1070
1071 foreach (keys %target_attr_translate) {
1072     $target{$target_attr_translate{$_}} = $target{$_}
1073         if $target{$_};
1074     delete $target{$_};
1075 }
1076
1077 %target = ( %{$table{DEFAULTS}}, %target );
1078
1079 # Make the flags to build DSOs the same as for shared libraries unless they
1080 # are already defined
1081 $target{module_cflags} = $target{shared_cflag} unless defined $target{module_cflags};
1082 $target{module_cxxflags} = $target{shared_cxxflag} unless defined $target{module_cxxflags};
1083 $target{module_ldflags} = $target{shared_ldflag} unless defined $target{module_ldflags};
1084 {
1085     my $shared_info_pl =
1086         catfile(dirname($0), "Configurations", "shared-info.pl");
1087     my %shared_info = read_eval_file($shared_info_pl);
1088     push @{$target{_conf_fname_int}}, $shared_info_pl;
1089     my $si = $target{shared_target};
1090     while (ref $si ne "HASH") {
1091         last if ! defined $si;
1092         if (ref $si eq "CODE") {
1093             $si = $si->();
1094         } else {
1095             $si = $shared_info{$si};
1096         }
1097     }
1098
1099     # Some of the 'shared_target' values don't have any entried in
1100     # %shared_info.  That's perfectly fine, AS LONG AS the build file
1101     # template knows how to handle this.  That is currently the case for
1102     # Windows and VMS.
1103     if (defined $si) {
1104         # Just as above, copy certain shared_* attributes to the corresponding
1105         # module_ attribute unless the latter is already defined
1106         $si->{module_cflags} = $si->{shared_cflag} unless defined $si->{module_cflags};
1107         $si->{module_cxxflags} = $si->{shared_cxxflag} unless defined $si->{module_cxxflags};
1108         $si->{module_ldflags} = $si->{shared_ldflag} unless defined $si->{module_ldflags};
1109         foreach (sort keys %$si) {
1110             $target{$_} = defined $target{$_}
1111                 ? add($si->{$_})->($target{$_})
1112                 : $si->{$_};
1113         }
1114     }
1115 }
1116
1117 my %conf_files = map { $_ => 1 } (@{$target{_conf_fname_int}});
1118 $config{conf_files} = [ sort keys %conf_files ];
1119
1120 foreach my $feature (@{$target{disable}}) {
1121     if (exists $deprecated_disablables{$feature}) {
1122         warn "***** config $target disables deprecated feature $feature\n";
1123     } elsif (!grep { $feature eq $_ } @disablables) {
1124         die "***** config $target disables unknown feature $feature\n";
1125     }
1126     $disabled{$feature} = 'config';
1127 }
1128 foreach my $feature (@{$target{enable}}) {
1129     if ("default" eq ($disabled{$feature} // "")) {
1130         if (exists $deprecated_disablables{$feature}) {
1131             warn "***** config $target enables deprecated feature $feature\n";
1132         } elsif (!grep { $feature eq $_ } @disablables) {
1133             die "***** config $target enables unknown feature $feature\n";
1134         }
1135         delete $disabled{$feature};
1136     }
1137 }
1138
1139 $target{CXXFLAGS}//=$target{CFLAGS} if $target{CXX};
1140 $target{cxxflags}//=$target{cflags} if $target{CXX};
1141 $target{exe_extension}=".exe" if ($config{target} eq "DJGPP");
1142 $target{exe_extension}=".pm"  if ($config{target} =~ /vos/);
1143
1144 # Fill %config with values from %user, and in case those are undefined or
1145 # empty, use values from %target (acting as a default).
1146 foreach (keys %user) {
1147     my $ref_type = ref $user{$_};
1148
1149     # Temporary function.  Takes an intended ref type (empty string or "ARRAY")
1150     # and a value that's to be coerced into that type.
1151     my $mkvalue = sub {
1152         my $type = shift;
1153         my $value = shift;
1154         my $undef_p = shift;
1155
1156         die "Too many arguments for \$mkvalue" if @_;
1157
1158         while (ref $value eq 'CODE') {
1159             $value = $value->();
1160         }
1161
1162         if ($type eq 'ARRAY') {
1163             return undef unless defined $value;
1164             return undef if ref $value ne 'ARRAY' && !$value;
1165             return undef if ref $value eq 'ARRAY' && !@$value;
1166             return [ $value ] unless ref $value eq 'ARRAY';
1167         }
1168         return undef unless $value;
1169         return $value;
1170     };
1171
1172     $config{$_} =
1173         $mkvalue->($ref_type, $user{$_})
1174         || $mkvalue->($ref_type, $target{$_});
1175     delete $config{$_} unless defined $config{$_};
1176 }
1177
1178 # Allow overriding the build file name
1179 $config{build_file} = env('BUILDFILE') || $target{build_file} || "Makefile";
1180
1181 ######################################################################
1182 # Build up information for skipping certain directories depending on disabled
1183 # features, as well as setting up macros for disabled features.
1184
1185 # This is a tentative database of directories to skip.  Some entries may not
1186 # correspond to anything real, but that's ok, they will simply be ignored.
1187 # The actual processing of these entries is done in the build.info lookup
1188 # loop further down.
1189 #
1190 # The key is a Unix formated path in the source tree, the value is an index
1191 # into %disabled_info, so any existing path gets added to a corresponding
1192 # 'skipped' entry in there with the list of skipped directories.
1193 my %skipdir = ();
1194 my %disabled_info = ();         # For configdata.pm
1195 foreach my $what (sort keys %disabled) {
1196     $config{options} .= " no-$what";
1197
1198     if (!grep { $what eq $_ } ( 'dso', 'threads', 'shared', 'pic',
1199                                 'dynamic-engine', 'makedepend',
1200                                 'zlib-dynamic', 'zlib', 'sse2' )) {
1201         (my $WHAT = uc $what) =~ s|-|_|g;
1202         my $skipdir = $what;
1203
1204         # fix-up crypto/directory name(s)
1205         $skipdir = "ripemd" if $what eq "rmd160";
1206         $skipdir = "whrlpool" if $what eq "whirlpool";
1207
1208         my $macro = $disabled_info{$what}->{macro} = "OPENSSL_NO_$WHAT";
1209         push @{$config{openssl_feature_defines}}, $macro;
1210
1211         $skipdir{engines} = $what if $what eq 'engine';
1212         $skipdir{"crypto/$skipdir"} = $what
1213             unless $what eq 'async' || $what eq 'err';
1214     }
1215 }
1216
1217 # Make sure build_scheme is consistent.
1218 $target{build_scheme} = [ $target{build_scheme} ]
1219     if ref($target{build_scheme}) ne "ARRAY";
1220
1221 my ($builder, $builder_platform, @builder_opts) =
1222     @{$target{build_scheme}};
1223
1224 foreach my $checker (($builder_platform."-".$target{build_file}."-checker.pm",
1225                       $builder_platform."-checker.pm")) {
1226     my $checker_path = catfile($srcdir, "Configurations", $checker);
1227     if (-f $checker_path) {
1228         my $fn = $ENV{CONFIGURE_CHECKER_WARN}
1229             ? sub { warn $@; } : sub { die $@; };
1230         if (! do $checker_path) {
1231             if ($@) {
1232                 $fn->($@);
1233             } elsif ($!) {
1234                 $fn->($!);
1235             } else {
1236                 $fn->("The detected tools didn't match the platform\n");
1237             }
1238         }
1239         last;
1240     }
1241 }
1242
1243 push @{$config{defines}}, "NDEBUG"    if $config{build_type} eq "release";
1244
1245 if ($target =~ /^mingw/ && `$config{CC} --target-help 2>&1` =~ m/-mno-cygwin/m)
1246         {
1247         push @{$config{cflags}}, "-mno-cygwin";
1248         push @{$config{cxxflags}}, "-mno-cygwin" if $config{CXX};
1249         push @{$config{shared_ldflag}}, "-mno-cygwin";
1250         }
1251
1252 if ($target =~ /linux.*-mips/ && !$disabled{asm}
1253         && !grep { $_ !~ /-m(ips|arch=)/ } (@{$user{CFLAGS}},
1254                                             @{$useradd{CFLAGS}})) {
1255         # minimally required architecture flags for assembly modules
1256         my $value;
1257         $value = '-mips2' if ($target =~ /mips32/);
1258         $value = '-mips3' if ($target =~ /mips64/);
1259         unshift @{$config{cflags}}, $value;
1260         unshift @{$config{cxxflags}}, $value if $config{CXX};
1261 }
1262
1263 # If threads aren't disabled, check how possible they are
1264 unless ($disabled{threads}) {
1265     if ($auto_threads) {
1266         # Enabled by default, disable it forcibly if unavailable
1267         if ($target{thread_scheme} eq "(unknown)") {
1268             $disabled{threads} = "unavailable";
1269         }
1270     } else {
1271         # The user chose to enable threads explicitly, let's see
1272         # if there's a chance that's possible
1273         if ($target{thread_scheme} eq "(unknown)") {
1274             # If the user asked for "threads" and we don't have internal
1275             # knowledge how to do it, [s]he is expected to provide any
1276             # system-dependent compiler options that are necessary.  We
1277             # can't truly check that the given options are correct, but
1278             # we expect the user to know what [s]He is doing.
1279             if (!@{$user{CFLAGS}} && !@{$useradd{CFLAGS}}
1280                     && !@{$user{CPPDEFINES}} && !@{$useradd{CPPDEFINES}}) {
1281                 die "You asked for multi-threading support, but didn't\n"
1282                     ,"provide any system-specific compiler options\n";
1283             }
1284         }
1285     }
1286 }
1287
1288 # If threads still aren't disabled, add a C macro to ensure the source
1289 # code knows about it.  Any other flag is taken care of by the configs.
1290 unless($disabled{threads}) {
1291     push @{$config{openssl_feature_defines}}, "OPENSSL_THREADS";
1292 }
1293
1294 # With "deprecated" disable all deprecated features.
1295 if (defined($disabled{"deprecated"})) {
1296         $config{api} = $maxapi;
1297 }
1298
1299 my $no_shared_warn=0;
1300 if ($target{shared_target} eq "")
1301         {
1302         $no_shared_warn = 1
1303             if (!$disabled{shared} || !$disabled{"dynamic-engine"});
1304         $disabled{shared} = "no-shared-target";
1305         $disabled{pic} = $disabled{shared} = $disabled{"dynamic-engine"} =
1306             "no-shared-target";
1307         }
1308
1309 if ($disabled{"dynamic-engine"}) {
1310         push @{$config{openssl_feature_defines}}, "OPENSSL_NO_DYNAMIC_ENGINE";
1311         $config{dynamic_engines} = 0;
1312 } else {
1313         push @{$config{openssl_feature_defines}}, "OPENSSL_NO_STATIC_ENGINE";
1314         $config{dynamic_engines} = 1;
1315 }
1316
1317 unless ($disabled{asan}) {
1318     push @{$config{cflags}}, "-fsanitize=address";
1319     push @{$config{cxxflags}}, "-fsanitize=address" if $config{CXX};
1320 }
1321
1322 unless ($disabled{ubsan}) {
1323     # -DPEDANTIC or -fnosanitize=alignment may also be required on some
1324     # platforms.
1325     push @{$config{cflags}}, "-fsanitize=undefined", "-fno-sanitize-recover=all";
1326     push @{$config{cxxflags}}, "-fsanitize=undefined", "-fno-sanitize-recover=all"
1327         if $config{CXX};
1328 }
1329
1330 unless ($disabled{msan}) {
1331   push @{$config{cflags}}, "-fsanitize=memory";
1332   push @{$config{cxxflags}}, "-fsanitize=memory" if $config{CXX};
1333 }
1334
1335 unless ($disabled{"fuzz-libfuzzer"} && $disabled{"fuzz-afl"}
1336         && $disabled{asan} && $disabled{ubsan} && $disabled{msan}) {
1337     push @{$config{cflags}}, "-fno-omit-frame-pointer", "-g";
1338     push @{$config{cxxflags}}, "-fno-omit-frame-pointer", "-g" if $config{CXX};
1339 }
1340 #
1341 # Platform fix-ups
1342 #
1343
1344 # This saves the build files from having to check
1345 if ($disabled{pic})
1346         {
1347         foreach (qw(shared_cflag shared_cxxflag shared_cppflag
1348                     shared_defines shared_includes shared_ldflag
1349                     module_cflags module_cxxflags module_cppflags
1350                     module_defines module_includes module_lflags))
1351                 {
1352                 delete $config{$_};
1353                 $target{$_} = "";
1354                 }
1355         }
1356 else
1357         {
1358         push @{$config{lib_defines}}, "OPENSSL_PIC";
1359         }
1360
1361 if ($target{sys_id} ne "")
1362         {
1363         push @{$config{openssl_sys_defines}}, "OPENSSL_SYS_$target{sys_id}";
1364         }
1365
1366 unless ($disabled{asm}) {
1367     $target{cpuid_asm_src}=$table{DEFAULTS}->{cpuid_asm_src} if ($config{processor} eq "386");
1368     push @{$config{lib_defines}}, "OPENSSL_CPUID_OBJ" if ($target{cpuid_asm_src} ne "mem_clr.c");
1369
1370     $target{bn_asm_src} =~ s/\w+-gf2m.c// if (defined($disabled{ec2m}));
1371
1372     # bn-586 is the only one implementing bn_*_part_words
1373     push @{$config{lib_defines}}, "OPENSSL_BN_ASM_PART_WORDS" if ($target{bn_asm_src} =~ /bn-586/);
1374     push @{$config{lib_defines}}, "OPENSSL_IA32_SSE2" if (!$disabled{sse2} && $target{bn_asm_src} =~ /86/);
1375
1376     push @{$config{lib_defines}}, "OPENSSL_BN_ASM_MONT" if ($target{bn_asm_src} =~ /-mont/);
1377     push @{$config{lib_defines}}, "OPENSSL_BN_ASM_MONT5" if ($target{bn_asm_src} =~ /-mont5/);
1378     push @{$config{lib_defines}}, "OPENSSL_BN_ASM_GF2m" if ($target{bn_asm_src} =~ /-gf2m/);
1379     push @{$config{lib_defines}}, "BN_DIV3W" if ($target{bn_asm_src} =~ /-div3w/);
1380
1381     if ($target{sha1_asm_src}) {
1382         push @{$config{lib_defines}}, "SHA1_ASM"   if ($target{sha1_asm_src} =~ /sx86/ || $target{sha1_asm_src} =~ /sha1/);
1383         push @{$config{lib_defines}}, "SHA256_ASM" if ($target{sha1_asm_src} =~ /sha256/);
1384         push @{$config{lib_defines}}, "SHA512_ASM" if ($target{sha1_asm_src} =~ /sha512/);
1385     }
1386     if ($target{keccak1600_asm_src} ne $table{DEFAULTS}->{keccak1600_asm_src}) {
1387         push @{$config{lib_defines}}, "KECCAK1600_ASM";
1388     }
1389     if ($target{rc4_asm_src} ne $table{DEFAULTS}->{rc4_asm_src}) {
1390         push @{$config{lib_defines}}, "RC4_ASM";
1391     }
1392     if ($target{md5_asm_src}) {
1393         push @{$config{lib_defines}}, "MD5_ASM";
1394     }
1395     $target{cast_asm_src}=$table{DEFAULTS}->{cast_asm_src} unless $disabled{pic}; # CAST assembler is not PIC
1396     if ($target{rmd160_asm_src}) {
1397         push @{$config{lib_defines}}, "RMD160_ASM";
1398     }
1399     if ($target{aes_asm_src}) {
1400         push @{$config{lib_defines}}, "AES_ASM" if ($target{aes_asm_src} =~ m/\baes-/);;
1401         # aes-ctr.fake is not a real file, only indication that assembler
1402         # module implements AES_ctr32_encrypt...
1403         push @{$config{lib_defines}}, "AES_CTR_ASM" if ($target{aes_asm_src} =~ s/\s*aes-ctr\.fake//);
1404         # aes-xts.fake indicates presence of AES_xts_[en|de]crypt...
1405         push @{$config{lib_defines}}, "AES_XTS_ASM" if ($target{aes_asm_src} =~ s/\s*aes-xts\.fake//);
1406         $target{aes_asm_src} =~ s/\s*(vpaes|aesni)-x86\.s//g if ($disabled{sse2});
1407         push @{$config{lib_defines}}, "VPAES_ASM" if ($target{aes_asm_src} =~ m/vpaes/);
1408         push @{$config{lib_defines}}, "BSAES_ASM" if ($target{aes_asm_src} =~ m/bsaes/);
1409     }
1410     if ($target{wp_asm_src} =~ /mmx/) {
1411         if ($config{processor} eq "386") {
1412             $target{wp_asm_src}=$table{DEFAULTS}->{wp_asm_src};
1413         } elsif (!$disabled{"whirlpool"}) {
1414             push @{$config{lib_defines}}, "WHIRLPOOL_ASM";
1415         }
1416     }
1417     if ($target{modes_asm_src} =~ /ghash-/) {
1418         push @{$config{lib_defines}}, "GHASH_ASM";
1419     }
1420     if ($target{ec_asm_src} =~ /ecp_nistz256/) {
1421         push @{$config{lib_defines}}, "ECP_NISTZ256_ASM";
1422     }
1423     if ($target{ec_asm_src} =~ /x25519/) {
1424         push @{$config{lib_defines}}, "X25519_ASM";
1425     }
1426     if ($target{padlock_asm_src} ne $table{DEFAULTS}->{padlock_asm_src}) {
1427         push @{$config{dso_defines}}, "PADLOCK_ASM";
1428     }
1429     if ($target{poly1305_asm_src} ne "") {
1430         push @{$config{lib_defines}}, "POLY1305_ASM";
1431     }
1432 }
1433
1434 my %predefined_C = compiler_predefined($config{CROSS_COMPILE}.$config{CC});
1435 my %predefined_CXX = $config{CXX}
1436     ? compiler_predefined($config{CROSS_COMPILE}.$config{CXX})
1437     : ();
1438
1439 # Check for makedepend capabilities.
1440 if (!$disabled{makedepend}) {
1441     if ($config{target} =~ /^(VC|vms)-/) {
1442         # For VC- and vms- targets, there's nothing more to do here.  The
1443         # functionality is hard coded in the corresponding build files for
1444         # cl (Windows) and CC/DECC (VMS).
1445     } elsif (($predefined_C{__GNUC__} // -1) >= 3
1446              && !($predefined_C{__APPLE_CC__} && !$predefined_C{__clang__})) {
1447         # We know that GNU C version 3 and up as well as all clang
1448         # versions support dependency generation, but Xcode did not
1449         # handle $cc -M before clang support (but claims __GNUC__ = 3)
1450         $config{makedepprog} = "\$(CROSS_COMPILE)$config{CC}";
1451     } else {
1452         # In all other cases, we look for 'makedepend', and disable the
1453         # capability if not found.
1454         $config{makedepprog} = which('makedepend');
1455         $disabled{makedepend} = "unavailable" unless $config{makedepprog};
1456     }
1457 }
1458
1459 if (!$disabled{asm} && !$predefined_C{__MACH__} && $^O ne 'VMS') {
1460     # probe for -Wa,--noexecstack option...
1461     if ($predefined_C{__clang__}) {
1462         # clang has builtin assembler, which doesn't recognize --help,
1463         # but it apparently recognizes the option in question on all
1464         # supported platforms even when it's meaningless. In other words
1465         # probe would fail, but probed option always accepted...
1466         push @{$config{cflags}}, "-Wa,--noexecstack", "-Qunused-arguments";
1467     } else {
1468         my $cc = $config{CROSS_COMPILE}.$config{CC};
1469         open(PIPE, "$cc -Wa,--help -c -o null.$$.o -x assembler /dev/null 2>&1 |");
1470         while(<PIPE>) {
1471             if (m/--noexecstack/) {
1472                 push @{$config{cflags}}, "-Wa,--noexecstack";
1473                 last;
1474             }
1475         }
1476         close(PIPE);
1477         unlink("null.$$.o");
1478     }
1479 }
1480
1481 # Deal with bn_ops ###################################################
1482
1483 $config{bn_ll}                  =0;
1484 $config{export_var_as_fn}       =0;
1485 my $def_int="unsigned int";
1486 $config{rc4_int}                =$def_int;
1487 ($config{b64l},$config{b64},$config{b32})=(0,0,1);
1488
1489 my $count = 0;
1490 foreach (sort split(/\s+/,$target{bn_ops})) {
1491     $count++ if /SIXTY_FOUR_BIT|SIXTY_FOUR_BIT_LONG|THIRTY_TWO_BIT/;
1492     $config{export_var_as_fn}=1                 if $_ eq 'EXPORT_VAR_AS_FN';
1493     $config{bn_ll}=1                            if $_ eq 'BN_LLONG';
1494     $config{rc4_int}="unsigned char"            if $_ eq 'RC4_CHAR';
1495     ($config{b64l},$config{b64},$config{b32})
1496         =(0,1,0)                                if $_ eq 'SIXTY_FOUR_BIT';
1497     ($config{b64l},$config{b64},$config{b32})
1498         =(1,0,0)                                if $_ eq 'SIXTY_FOUR_BIT_LONG';
1499     ($config{b64l},$config{b64},$config{b32})
1500         =(0,0,1)                                if $_ eq 'THIRTY_TWO_BIT';
1501 }
1502 die "Exactly one of SIXTY_FOUR_BIT|SIXTY_FOUR_BIT_LONG|THIRTY_TWO_BIT can be set in bn_ops\n"
1503     if $count > 1;
1504
1505
1506 # Hack cflags for better warnings (dev option) #######################
1507
1508 # "Stringify" the C and C++ flags string.  This permits it to be made part of
1509 # a string and works as well on command lines.
1510 $config{cflags} = [ map { (my $x = $_) =~ s/([\\\"])/\\$1/g; $x }
1511                         @{$config{cflags}} ];
1512 $config{cxxflags} = [ map { (my $x = $_) =~ s/([\\\"])/\\$1/g; $x }
1513                           @{$config{cxxflags}} ] if $config{CXX};
1514
1515 $config{openssl_api_defines} = [
1516     "OPENSSL_MIN_API=".($apitable->{$config{api} // ""} // -1)
1517 ];
1518
1519 my %strict_warnings_collection=( CFLAGS => [], CXXFLAGS => []);
1520 if ($strict_warnings)
1521         {
1522         my $wopt;
1523         my $gccver = $predefined_C{__GNUC__} // -1;
1524         my $gxxver = $predefined_CXX{__GNUC__} // -1;
1525
1526         warn "WARNING --strict-warnings requires gcc[>=4] or gcc-alike"
1527             unless $gccver >= 4;
1528         warn "WARNING --strict-warnings requires g++[>=4] or g++-alike"
1529             unless $gxxver >= 4;
1530         foreach (qw(CFLAGS CXXFLAGS))
1531                 {
1532                 push @{$strict_warnings_collection{$_}},
1533                         @{$gcc_devteam_warn{$_}};
1534                 }
1535         push @{$strict_warnings_collection{CFLAGS}},
1536                 @{$clang_devteam_warn{CFLAGS}}
1537                         if (defined($predefined_C{__clang__}));
1538         push @{$strict_warnings_collection{CXXFLAGS}},
1539                 @{$clang_devteam_warn{CXXFLAGS}}
1540                         if (defined($predefined_CXX{__clang__}));
1541         }
1542 foreach my $idx (qw(CFLAGS CXXFLAGS))
1543         {
1544         $useradd{$idx} = [ map { $_ eq '--ossl-strict-warnings'
1545                                      ? @{$strict_warnings_collection{$idx}}
1546                                      : ( $_ ) }
1547                                @{$useradd{$idx}} ];
1548         }
1549
1550 unless ($disabled{"crypto-mdebug-backtrace"})
1551         {
1552         foreach my $wopt (split /\s+/, $memleak_devteam_backtrace)
1553                 {
1554                 push @{$config{cflags}}, $wopt
1555                         unless grep { $_ eq $wopt } @{$config{cflags}};
1556                 push @{$config{cxxflags}}, $wopt
1557                         if ($config{CXX}
1558                             && !grep { $_ eq $wopt } @{$config{cxxflags}});
1559                 }
1560         if ($target =~ /^BSD-/)
1561                 {
1562                 push @{$config{ex_libs}}, "-lexecinfo";
1563                 }
1564         }
1565
1566 unless ($disabled{afalgeng}) {
1567     $config{afalgeng}="";
1568     if (grep { $_ eq 'afalgeng' } @{$target{enable}}) {
1569         my $minver = 4*10000 + 1*100 + 0;
1570         if ($config{CROSS_COMPILE} eq "") {
1571             my $verstr = `uname -r`;
1572             my ($ma, $mi1, $mi2) = split("\\.", $verstr);
1573             ($mi2) = $mi2 =~ /(\d+)/;
1574             my $ver = $ma*10000 + $mi1*100 + $mi2;
1575             if ($ver < $minver) {
1576                 $disabled{afalgeng} = "too-old-kernel";
1577             } else {
1578                 push @{$config{engdirs}}, "afalg";
1579             }
1580         } else {
1581             $disabled{afalgeng} = "cross-compiling";
1582         }
1583     } else {
1584         $disabled{afalgeng}  = "not-linux";
1585     }
1586 }
1587
1588 push @{$config{openssl_feature_defines}}, "OPENSSL_NO_AFALGENG" if ($disabled{afalgeng});
1589
1590 unless ($disabled{ktls}) {
1591     $config{ktls}="";
1592     if ($target =~ m/^linux/) {
1593         my $usr = "/usr/$config{cross_compile_prefix}";
1594         chop($usr);
1595         if ($config{cross_compile_prefix} eq "") {
1596             $usr = "/usr";
1597         }
1598         my $minver = (4 << 16) + (13 << 8) + 0;
1599         my @verstr = split(" ",`cat $usr/include/linux/version.h | grep LINUX_VERSION_CODE`);
1600
1601         if ($verstr[2] < $minver) {
1602             $disabled{ktls} = "too-old-kernel";
1603         }
1604     } else {
1605         $disabled{ktls}  = "not-linux";
1606     }
1607 }
1608
1609 push @{$config{openssl_other_defines}}, "OPENSSL_NO_KTLS" if ($disabled{ktls});
1610
1611 # Finish up %config by appending things the user gave us on the command line
1612 # apart from "make variables"
1613 foreach (keys %useradd) {
1614     # The must all be lists, so we assert that here
1615     die "internal error: \$useradd{$_} isn't an ARRAY\n"
1616         unless ref $useradd{$_} eq 'ARRAY';
1617
1618     if (defined $config{$_}) {
1619         push @{$config{$_}}, @{$useradd{$_}};
1620     } else {
1621         $config{$_} = [ @{$useradd{$_}} ];
1622     }
1623 }
1624
1625 # ALL MODIFICATIONS TO %config and %target MUST BE DONE FROM HERE ON
1626
1627 # If we use the unified build, collect information from build.info files
1628 my %unified_info = ();
1629
1630 my $buildinfo_debug = defined($ENV{CONFIGURE_DEBUG_BUILDINFO});
1631 if ($builder eq "unified") {
1632     use with_fallback qw(Text::Template);
1633
1634     sub cleandir {
1635         my $base = shift;
1636         my $dir = shift;
1637         my $relativeto = shift || ".";
1638
1639         $dir = catdir($base,$dir) unless isabsolute($dir);
1640
1641         # Make sure the directories we're building in exists
1642         mkpath($dir);
1643
1644         my $res = abs2rel(absolutedir($dir), rel2abs($relativeto));
1645         #print STDERR "DEBUG[cleandir]: $dir , $base => $res\n";
1646         return $res;
1647     }
1648
1649     sub cleanfile {
1650         my $base = shift;
1651         my $file = shift;
1652         my $relativeto = shift || ".";
1653
1654         $file = catfile($base,$file) unless isabsolute($file);
1655
1656         my $d = dirname($file);
1657         my $f = basename($file);
1658
1659         # Make sure the directories we're building in exists
1660         mkpath($d);
1661
1662         my $res = abs2rel(catfile(absolutedir($d), $f), rel2abs($relativeto));
1663         #print STDERR "DEBUG[cleanfile]: $d , $f => $res\n";
1664         return $res;
1665     }
1666
1667     # Store the name of the template file we will build the build file from
1668     # in %config.  This may be useful for the build file itself.
1669     my @build_file_template_names =
1670         ( $builder_platform."-".$target{build_file}.".tmpl",
1671           $target{build_file}.".tmpl" );
1672     my @build_file_templates = ();
1673
1674     # First, look in the user provided directory, if given
1675     if (defined env($local_config_envname)) {
1676         @build_file_templates =
1677             map {
1678                 if ($^O eq 'VMS') {
1679                     # VMS environment variables are logical names,
1680                     # which can be used as is
1681                     $local_config_envname . ':' . $_;
1682                 } else {
1683                     catfile(env($local_config_envname), $_);
1684                 }
1685             }
1686             @build_file_template_names;
1687     }
1688     # Then, look in our standard directory
1689     push @build_file_templates,
1690         ( map { cleanfile($srcdir, catfile("Configurations", $_), $blddir) }
1691           @build_file_template_names );
1692
1693     my $build_file_template;
1694     for $_ (@build_file_templates) {
1695         $build_file_template = $_;
1696         last if -f $build_file_template;
1697
1698         $build_file_template = undef;
1699     }
1700     if (!defined $build_file_template) {
1701         die "*** Couldn't find any of:\n", join("\n", @build_file_templates), "\n";
1702     }
1703     $config{build_file_templates}
1704       = [ cleanfile($srcdir, catfile("Configurations", "common0.tmpl"),
1705                     $blddir),
1706           $build_file_template,
1707           cleanfile($srcdir, catfile("Configurations", "common.tmpl"),
1708                     $blddir) ];
1709
1710     my @build_dirs = ( [ ] );   # current directory
1711
1712     $config{build_infos} = [ ];
1713
1714     my %ordinals = ();
1715     while (@build_dirs) {
1716         my @curd = @{shift @build_dirs};
1717         my $sourced = catdir($srcdir, @curd);
1718         my $buildd = catdir($blddir, @curd);
1719
1720         my $unixdir = join('/', @curd);
1721         if (exists $skipdir{$unixdir}) {
1722             my $what = $skipdir{$unixdir};
1723             push @{$disabled_info{$what}->{skipped}}, catdir(@curd);
1724             next;
1725         }
1726
1727         mkpath($buildd);
1728
1729         my $f = 'build.info';
1730         # The basic things we're trying to build
1731         my @programs = ();
1732         my @libraries = ();
1733         my @modules = ();
1734         my @scripts = ();
1735
1736         my %attributes = ();
1737         my %sources = ();
1738         my %shared_sources = ();
1739         my %includes = ();
1740         my %defines = ();
1741         my %depends = ();
1742         my %generate = ();
1743
1744         # We want to detect configdata.pm in the source tree, so we
1745         # don't use it if the build tree is different.
1746         my $src_configdata = cleanfile($srcdir, "configdata.pm", $blddir);
1747
1748         push @{$config{build_infos}}, catfile(abs2rel($sourced, $blddir), $f);
1749         my $template =
1750             Text::Template->new(TYPE => 'FILE',
1751                                 SOURCE => catfile($sourced, $f),
1752                                 PREPEND => qq{use lib "$FindBin::Bin/util/perl";});
1753         die "Something went wrong with $sourced/$f: $!\n" unless $template;
1754         my @text =
1755             split /^/m,
1756             $template->fill_in(HASH => { config => \%config,
1757                                          target => \%target,
1758                                          disabled => \%disabled,
1759                                          withargs => \%withargs,
1760                                          builddir => abs2rel($buildd, $blddir),
1761                                          sourcedir => abs2rel($sourced, $blddir),
1762                                          buildtop => abs2rel($blddir, $blddir),
1763                                          sourcetop => abs2rel($srcdir, $blddir) },
1764                                DELIMITERS => [ "{-", "-}" ]);
1765
1766         # The top item of this stack has the following values
1767         # -2 positive already run and we found ELSE (following ELSIF should fail)
1768         # -1 positive already run (skip until ENDIF)
1769         # 0 negatives so far (if we're at a condition, check it)
1770         # 1 last was positive (don't skip lines until next ELSE, ELSIF or ENDIF)
1771         # 2 positive ELSE (following ELSIF should fail)
1772         my @skip = ();
1773         collect_information(
1774             collect_from_array([ @text ],
1775                                qr/\\$/ => sub { my $l1 = shift; my $l2 = shift;
1776                                                 $l1 =~ s/\\$//; $l1.$l2 }),
1777             # Info we're looking for
1778             qr/^\s*IF\[((?:\\.|[^\\\]])*)\]\s*$/
1779             => sub {
1780                 if (! @skip || $skip[$#skip] > 0) {
1781                     push @skip, !! $1;
1782                 } else {
1783                     push @skip, -1;
1784                 }
1785             },
1786             qr/^\s*ELSIF\[((?:\\.|[^\\\]])*)\]\s*$/
1787             => sub { die "ELSIF out of scope" if ! @skip;
1788                      die "ELSIF following ELSE" if abs($skip[$#skip]) == 2;
1789                      $skip[$#skip] = -1 if $skip[$#skip] != 0;
1790                      $skip[$#skip] = !! $1
1791                          if $skip[$#skip] == 0; },
1792             qr/^\s*ELSE\s*$/
1793             => sub { die "ELSE out of scope" if ! @skip;
1794                      $skip[$#skip] = -2 if $skip[$#skip] != 0;
1795                      $skip[$#skip] = 2 if $skip[$#skip] == 0; },
1796             qr/^\s*ENDIF\s*$/
1797             => sub { die "ENDIF out of scope" if ! @skip;
1798                      pop @skip; },
1799             qr/^\s*SUBDIRS\s*=\s*(.*)\s*$/
1800             => sub {
1801                 if (!@skip || $skip[$#skip] > 0) {
1802                     foreach (tokenize($1)) {
1803                         push @build_dirs, [ @curd, splitdir($_, 1) ];
1804                     }
1805                 }
1806             },
1807             qr/^\s*PROGRAMS(?:{([\w=]+(?:\s*,\s*[\w=]+)*)})?\s*=\s*(.*)\s*$/
1808             => sub {
1809                 if (!@skip || $skip[$#skip] > 0) {
1810                     my @a = tokenize($1, qr|\s*,\s*|);
1811                     my @p = tokenize($2);
1812                     push @programs, @p;
1813                     foreach my $a (@a) {
1814                         my $ak = $a;
1815                         my $av = 1;
1816                         if ($a =~ m|^(.*?)\s*=\s*(.*?)$|) {
1817                             $ak = $1;
1818                             $av = $2;
1819                         }
1820                         foreach my $p (@p) {
1821                             $attributes{$p}->{$ak} = $av;
1822                         }
1823                     }
1824                 }
1825             },
1826             qr/^\s*LIBS(?:{([\w=]+(?:\s*,\s*[\w=]+)*)})?\s*=\s*(.*)\s*$/
1827             => sub {
1828                 if (!@skip || $skip[$#skip] > 0) {
1829                     my @a = tokenize($1, qr|\s*,\s*|);
1830                     my @l = tokenize($2);
1831                     push @libraries, @l;
1832                     foreach my $a (@a) {
1833                         my $ak = $a;
1834                         my $av = 1;
1835                         if ($a =~ m|^(.*?)\s*=\s*(.*?)$|) {
1836                             $ak = $1;
1837                             $av = $2;
1838                         }
1839                         foreach my $l (@l) {
1840                             $attributes{$l}->{$ak} = $av;
1841                         }
1842                     }
1843                 }
1844             },
1845             qr/^\s*MODULES(?:{([\w=]+(?:\s*,\s*[\w=]+)*)})?\s*=\s*(.*)\s*$/
1846             => sub {
1847                 if (!@skip || $skip[$#skip] > 0) {
1848                     my @a = tokenize($1, qr|\s*,\s*|);
1849                     my @m = tokenize($2);
1850                     push @modules, @m;
1851                     foreach my $a (@a) {
1852                         my $ak = $a;
1853                         my $av = 1;
1854                         if ($a =~ m|^(.*?)\s*=\s*(.*?)$|) {
1855                             $ak = $1;
1856                             $av = $2;
1857                         }
1858                         foreach my $m (@m) {
1859                             $attributes{$m}->{$ak} = $av;
1860                         }
1861                     }
1862                 }
1863             },
1864             qr/^\s*SCRIPTS(?:{([\w=]+(?:\s*,\s*[\w=]+)*)})?\s*=\s*(.*)\s*$/
1865             => sub {
1866                 if (!@skip || $skip[$#skip] > 0) {
1867                     my @a = tokenize($1, qr|\s*,\s*|);
1868                     my @s = tokenize($2);
1869                     push @scripts, @s;
1870                     foreach my $a (@a) {
1871                         my $ak = $a;
1872                         my $av = 1;
1873                         if ($a =~ m|^(.*?)\s*=\s*(.*?)$|) {
1874                             $ak = $1;
1875                             $av = $2;
1876                         }
1877                         foreach my $s (@s) {
1878                             $attributes{$s}->{$ak} = $av;
1879                         }
1880                     }
1881                 }
1882             },
1883
1884             qr/^\s*ORDINALS\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/,
1885             => sub { push @{$ordinals{$1}}, tokenize($2)
1886                          if !@skip || $skip[$#skip] > 0 },
1887             qr/^\s*SOURCE\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
1888             => sub { push @{$sources{$1}}, tokenize($2)
1889                          if !@skip || $skip[$#skip] > 0 },
1890             qr/^\s*SHARED_SOURCE\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
1891             => sub { push @{$shared_sources{$1}}, tokenize($2)
1892                          if !@skip || $skip[$#skip] > 0 },
1893             qr/^\s*INCLUDE\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
1894             => sub { push @{$includes{$1}}, tokenize($2)
1895                          if !@skip || $skip[$#skip] > 0 },
1896             qr/^\s*DEFINE\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
1897             => sub { push @{$defines{$1}}, tokenize($2)
1898                          if !@skip || $skip[$#skip] > 0 },
1899             qr/^\s*DEPEND\[((?:\\.|[^\\\]])*)\]\s*=\s*(.*)\s*$/
1900             => sub { push @{$depends{$1}}, tokenize($2)
1901                          if !@skip || $skip[$#skip] > 0 },
1902             qr/^\s*GENERATE\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
1903             => sub { push @{$generate{$1}}, $2
1904                          if !@skip || $skip[$#skip] > 0 },
1905             qr/^\s*(?:#.*)?$/ => sub { },
1906             "OTHERWISE" => sub { die "Something wrong with this line:\n$_\nat $sourced/$f" },
1907             "BEFORE" => sub {
1908                 if ($buildinfo_debug) {
1909                     print STDERR "DEBUG: Parsing ",join(" ", @_),"\n";
1910                     print STDERR "DEBUG: ... before parsing, skip stack is ",join(" ", map { int($_) } @skip),"\n";
1911                 }
1912             },
1913             "AFTER" => sub {
1914                 if ($buildinfo_debug) {
1915                     print STDERR "DEBUG: .... after parsing, skip stack is ",join(" ", map { int($_) } @skip),"\n";
1916                 }
1917             },
1918             );
1919         die "runaway IF?" if (@skip);
1920
1921         if (grep { defined $attributes{$_}->{engine} } keys %attributes
1922                 and !$config{dynamic_engines}) {
1923             die <<"EOF"
1924 ENGINES can only be used if configured with 'dynamic-engine'.
1925 This is usually a fault in a build.info file.
1926 EOF
1927         }
1928
1929         foreach (keys %attributes) {
1930             my $dest = $_;
1931             my $ddest = cleanfile($buildd, $_, $blddir);
1932             foreach (keys %{$attributes{$dest} // {}}) {
1933                 $unified_info{attributes}->{$ddest}->{$_} =
1934                     $attributes{$dest}->{$_};
1935             }
1936         }
1937
1938         {
1939             my %infos = ( programs  => [ @programs  ],
1940                           libraries => [ @libraries ],
1941                           modules   => [ @modules   ],
1942                           scripts   => [ @scripts   ] );
1943             foreach my $k (keys %infos) {
1944                 foreach (@{$infos{$k}}) {
1945                     my $item = cleanfile($buildd, $_, $blddir);
1946                     $unified_info{$k}->{$item} = 1;
1947                 }
1948             }
1949         }
1950
1951         # Check that we haven't defined any library as both shared and
1952         # explicitly static.  That is forbidden.
1953         my @doubles = ();
1954         foreach (grep /\.a$/, keys %{$unified_info{libraries}}) {
1955             (my $l = $_) =~ s/\.a$//;
1956             push @doubles, $l if defined $unified_info{libraries}->{$l};
1957         }
1958         die "these libraries are both explicitly static and shared:\n  ",
1959             join(" ", @doubles), "\n"
1960             if @doubles;
1961
1962         foreach (keys %sources) {
1963             my $dest = $_;
1964             my $ddest = cleanfile($buildd, $_, $blddir);
1965             foreach (@{$sources{$dest}}) {
1966                 my $s = cleanfile($sourced, $_, $blddir);
1967
1968                 # If it isn't in the source tree, we assume it's generated
1969                 # in the build tree
1970                 if ($s eq $src_configdata || ! -f $s || $generate{$_}) {
1971                     $s = cleanfile($buildd, $_, $blddir);
1972                 }
1973                 # We recognise C++, C and asm files
1974                 if ($s =~ /\.(cc|cpp|c|s|S)$/) {
1975                     my $o = $_;
1976                     $o =~ s/\.[csS]$/.o/; # C and assembler
1977                     $o =~ s/\.(cc|cpp)$/_cc.o/; # C++
1978                     $o = cleanfile($buildd, $o, $blddir);
1979                     $unified_info{sources}->{$ddest}->{$o} = -1;
1980                     $unified_info{sources}->{$o}->{$s} = -1;
1981                 } elsif ($s =~ /\.rc$/) {
1982                     # We also recognise resource files
1983                     my $o = $_;
1984                     $o =~ s/\.rc$/.res/; # Resource configuration
1985                     my $o = cleanfile($buildd, $o, $blddir);
1986                     $unified_info{sources}->{$ddest}->{$o} = -1;
1987                     $unified_info{sources}->{$o}->{$s} = -1;
1988                 } else {
1989                     $unified_info{sources}->{$ddest}->{$s} = 1;
1990                 }
1991             }
1992         }
1993
1994         foreach (keys %shared_sources) {
1995             my $dest = $_;
1996             my $ddest = cleanfile($buildd, $_, $blddir);
1997             foreach (@{$shared_sources{$dest}}) {
1998                 my $s = cleanfile($sourced, $_, $blddir);
1999
2000                 # If it isn't in the source tree, we assume it's generated
2001                 # in the build tree
2002                 if ($s eq $src_configdata || ! -f $s || $generate{$_}) {
2003                     $s = cleanfile($buildd, $_, $blddir);
2004                 }
2005
2006                 if ($s =~ /\.(cc|cpp|c|s|S)$/) {
2007                     # We recognise C++, C and asm files
2008                     my $o = $_;
2009                     $o =~ s/\.[csS]$/.o/; # C and assembler
2010                     $o =~ s/\.(cc|cpp)$/_cc.o/; # C++
2011                     $o = cleanfile($buildd, $o, $blddir);
2012                     $unified_info{shared_sources}->{$ddest}->{$o} = -1;
2013                     $unified_info{sources}->{$o}->{$s} = -1;
2014                 } elsif ($s =~ /\.rc$/) {
2015                     # We also recognise resource files
2016                     my $o = $_;
2017                     $o =~ s/\.rc$/.res/; # Resource configuration
2018                     my $o = cleanfile($buildd, $o, $blddir);
2019                     $unified_info{shared_sources}->{$ddest}->{$o} = -1;
2020                     $unified_info{sources}->{$o}->{$s} = -1;
2021                 } elsif ($s =~ /\.ld$/) {
2022                     # We also recognise linker scripts (or corresponding)
2023                     # We know they are generated files
2024                     my $ld = cleanfile($buildd, $_, $blddir);
2025                     $unified_info{shared_sources}->{$ddest}->{$ld} = 1;
2026                 } else {
2027                     die "unrecognised source file type for shared library: $s\n";
2028                 }
2029             }
2030         }
2031
2032         foreach (keys %generate) {
2033             my $dest = $_;
2034             my $ddest = cleanfile($buildd, $_, $blddir);
2035             die "more than one generator for $dest: "
2036                     ,join(" ", @{$generate{$_}}),"\n"
2037                     if scalar @{$generate{$_}} > 1;
2038             my @generator = split /\s+/, $generate{$dest}->[0];
2039             $generator[0] = cleanfile($sourced, $generator[0], $blddir),
2040             $unified_info{generate}->{$ddest} = [ @generator ];
2041         }
2042
2043         foreach (keys %depends) {
2044             my $dest = $_;
2045             my $ddest = $dest eq "" ? "" : cleanfile($sourced, $_, $blddir);
2046
2047             # If the destination doesn't exist in source, it can only be
2048             # a generated file in the build tree.
2049             if ($ddest ne "" && ($ddest eq $src_configdata || ! -f $ddest)) {
2050                 $ddest = cleanfile($buildd, $_, $blddir);
2051             }
2052             foreach (@{$depends{$dest}}) {
2053                 my $d = cleanfile($sourced, $_, $blddir);
2054
2055                 # If we know it's generated, or assume it is because we can't
2056                 # find it in the source tree, we set file we depend on to be
2057                 # in the build tree rather than the source tree, and assume
2058                 # and that there are lines to build it in a BEGINRAW..ENDRAW
2059                 # section or in the Makefile template.
2060                 if ($d eq $src_configdata
2061                     || ! -f $d
2062                     || (grep { $d eq $_ }
2063                         map { cleanfile($srcdir, $_, $blddir) }
2064                         grep { /\.h$/ } keys %{$unified_info{generate}})) {
2065                     $d = cleanfile($buildd, $_, $blddir);
2066                 }
2067                 # Take note if the file to depend on is being renamed
2068                 # Take extra care with files ending with .a, they should
2069                 # be treated without that extension, and the extension
2070                 # should be added back after treatment.
2071                 $d =~ /(\.a)?$/;
2072                 my $e = $1 // "";
2073                 $d = $`.$e;
2074                 $unified_info{depends}->{$ddest}->{$d} = 1;
2075             }
2076         }
2077
2078         foreach (keys %includes) {
2079             my $dest = $_;
2080             my $ddest = cleanfile($sourced, $_, $blddir);
2081
2082             # If the destination doesn't exist in source, it can only be
2083             # a generated file in the build tree.
2084             if ($ddest eq $src_configdata || ! -f $ddest) {
2085                 $ddest = cleanfile($buildd, $_, $blddir);
2086             }
2087             foreach (@{$includes{$dest}}) {
2088                 my $is = cleandir($sourced, $_, $blddir);
2089                 my $ib = cleandir($buildd, $_, $blddir);
2090                 push @{$unified_info{includes}->{$ddest}->{source}}, $is
2091                     unless grep { $_ eq $is } @{$unified_info{includes}->{$ddest}->{source}};
2092                 push @{$unified_info{includes}->{$ddest}->{build}}, $ib
2093                     unless grep { $_ eq $ib } @{$unified_info{includes}->{$ddest}->{build}};
2094             }
2095         }
2096
2097         foreach (keys %defines) {
2098             my $dest = $_;
2099             my $ddest = cleanfile($sourced, $_, $blddir);
2100
2101             # If the destination doesn't exist in source, it can only be
2102             # a generated file in the build tree.
2103             if (! -f $ddest) {
2104                 $ddest = cleanfile($buildd, $_, $blddir);
2105                 if ($unified_info{rename}->{$ddest}) {
2106                     $ddest = $unified_info{rename}->{$ddest};
2107                 }
2108             }
2109             foreach (@{$defines{$dest}}) {
2110                 m|^([^=]*)(=.*)?$|;
2111                 die "0 length macro name not permitted\n" if $1 eq "";
2112                 die "$1 defined more than once\n"
2113                     if defined $unified_info{defines}->{$ddest}->{$1};
2114                 $unified_info{defines}->{$ddest}->{$1} = $2;
2115             }
2116         }
2117     }
2118
2119     my $ordinals_text = join(', ', sort keys %ordinals);
2120     warn <<"EOF" if $ordinals_text;
2121
2122 WARNING: ORDINALS were specified for $ordinals_text
2123 They are ignored and should be replaced with a combination of GENERATE,
2124 DEPEND and SHARED_SOURCE.
2125 EOF
2126
2127     # Massage the result
2128
2129     # If we depend on a header file or a perl module, add an inclusion of
2130     # its directory to allow smoothe inclusion
2131     foreach my $dest (keys %{$unified_info{depends}}) {
2132         next if $dest eq "";
2133         foreach my $d (keys %{$unified_info{depends}->{$dest}}) {
2134             next unless $d =~ /\.(h|pm)$/;
2135             my $i = dirname($d);
2136             my $spot =
2137                 $d eq "configdata.pm" || defined($unified_info{generate}->{$d})
2138                 ? 'build' : 'source';
2139             push @{$unified_info{includes}->{$dest}->{$spot}}, $i
2140                 unless grep { $_ eq $i } @{$unified_info{includes}->{$dest}->{$spot}};
2141         }
2142     }
2143
2144     # Go through all intermediary files and change their names to something that
2145     # reflects what they will be built for.  Note that for some source files,
2146     # this leads to duplicate object files because they are used multiple times.
2147     # the goal is to rename all object files according to this scheme:
2148     #    {productname}-{midfix}-{origobjname}.[o|res]
2149     # the {midfix} is a keyword indicating the type of product, which is mostly
2150     # valuable for libraries since they come in two forms.
2151     #
2152     # This also reorganises the {sources} and {shared_sources} so that the
2153     # former only contains ALL object files that are supposed to end up in
2154     # static libraries and programs, while the latter contains ALL object files
2155     # that are supposed to end up in shared libraries and DSOs.
2156     # The main reason for having two different source structures is to allow
2157     # the same name to be used for the static and the shared variants of a
2158     # library.
2159     {
2160         # Take copies so we don't get interference from added stuff
2161         my %unified_copy = ();
2162         foreach (('sources', 'shared_sources')) {
2163             $unified_copy{$_} = { %{$unified_info{$_}} }
2164                 if defined($unified_info{$_});
2165             delete $unified_info{$_};
2166         }
2167         foreach my $prodtype (('programs', 'libraries', 'modules', 'scripts')) {
2168             # $intent serves multi purposes:
2169             # - give a prefix for the new object files names
2170             # - in the case of libraries, rearrange the object files so static
2171             #   libraries use the 'sources' structure exclusively, while shared
2172             #   libraries use the 'shared_sources' structure exclusively.
2173             my $intent = {
2174                 programs  => { bin    => { src => [ 'sources' ],
2175                                            dst => 'sources' } },
2176                 libraries => { lib    => { src => [ 'sources' ],
2177                                            dst => 'sources' },
2178                                shlib  => { prodselect =>
2179                                                sub { grep !/\.a$/, @_ },
2180                                            src => [ 'sources',
2181                                                     'shared_sources' ],
2182                                            dst => 'shared_sources' } },
2183                 modules   => { dso    => { src => [ 'sources',
2184                                                     'shared_sources' ],
2185                                            dst => 'shared_sources' } },
2186                 scripts   => { script => { src => [ 'sources' ],
2187                                            dst => 'sources' } }
2188                } -> {$prodtype};
2189             foreach my $kind (keys %$intent) {
2190                 next if ($intent->{$kind}->{dst} eq 'shared_sources'
2191                              && $disabled{shared});
2192
2193                 my @src = @{$intent->{$kind}->{src}};
2194                 my $dst = $intent->{$kind}->{dst};
2195                 my $prodselect = $intent->{$kind}->{prodselect} // sub { @_ };
2196                 foreach my $prod ($prodselect->(keys %{$unified_info{$prodtype}})) {
2197                     # %prod_sources has all applicable objects as keys, and
2198                     # their corresponding sources as values
2199                     my %prod_sources =
2200                         map { $_ => [ keys %{$unified_copy{sources}->{$_}} ] }
2201                         map { keys %{$unified_copy{$_}->{$prod}} }
2202                         @src;
2203                     foreach (keys %prod_sources) {
2204                         # Only affect object files and resource files,
2205                         # the others simply get a new value
2206                         # (+1 instead of -1)
2207                         if ($_ =~ /\.(o|res)$/) {
2208                             (my $prodname = $prod) =~ s|\.a$||;
2209                             my $newobj =
2210                                 catfile(dirname($_),
2211                                         basename($prodname)
2212                                             . '-' . $kind
2213                                             . '-' . basename($_));
2214                             $unified_info{$dst}->{$prod}->{$newobj} = 1;
2215                             foreach my $src (@{$prod_sources{$_}}) {
2216                                 $unified_info{sources}->{$newobj}->{$src} = 1;
2217                             }
2218                             # Adjust dependencies
2219                             foreach my $deps (keys %{$unified_info{depends}->{$_}}) {
2220                                 $unified_info{depends}->{$_}->{$deps} = -1;
2221                                 $unified_info{depends}->{$newobj}->{$deps} = 1;
2222                             }
2223                             # Adjust includes
2224                             foreach my $k (('source', 'build')) {
2225                                 next unless
2226                                     defined($unified_info{includes}->{$_}->{$k});
2227                                 my @incs = @{$unified_info{includes}->{$_}->{$k}};
2228                                 $unified_info{includes}->{$newobj}->{$k} = [ @incs ];
2229                             }
2230                         } else {
2231                             $unified_info{$dst}->{$prod}->{$_} = 1;
2232                         }
2233                     }
2234                 }
2235             }
2236         }
2237     }
2238     # At this point, we have a number of sources with the value -1.  They
2239     # aren't part of the local build and are probably meant for a different
2240     # platform, and can therefore be cleaned away.  That happens when making
2241     # %unified_info more efficient below.
2242
2243     ### Make unified_info a bit more efficient
2244     # One level structures
2245     foreach (("programs", "libraries", "modules", "scripts")) {
2246         $unified_info{$_} = [ sort keys %{$unified_info{$_}} ];
2247     }
2248     # Two level structures
2249     foreach my $l1 (("sources", "shared_sources", "ldadd", "depends")) {
2250         foreach my $l2 (sort keys %{$unified_info{$l1}}) {
2251             my @items =
2252                 sort
2253                 grep { $unified_info{$l1}->{$l2}->{$_} > 0 }
2254                 keys %{$unified_info{$l1}->{$l2}};
2255             if (@items) {
2256                 $unified_info{$l1}->{$l2} = [ @items ];
2257             } else {
2258                 delete $unified_info{$l1}->{$l2};
2259             }
2260         }
2261     }
2262     # Defines
2263     foreach my $dest (sort keys %{$unified_info{defines}}) {
2264         $unified_info{defines}->{$dest}
2265             = [ map { $_.$unified_info{defines}->{$dest}->{$_} }
2266                 sort keys %{$unified_info{defines}->{$dest}} ];
2267     }
2268     # Includes
2269     foreach my $dest (sort keys %{$unified_info{includes}}) {
2270         if (defined($unified_info{includes}->{$dest}->{build})) {
2271             my @source_includes = ();
2272             @source_includes = ( @{$unified_info{includes}->{$dest}->{source}} )
2273                 if defined($unified_info{includes}->{$dest}->{source});
2274             $unified_info{includes}->{$dest} =
2275                 [ @{$unified_info{includes}->{$dest}->{build}} ];
2276             foreach my $inc (@source_includes) {
2277                 push @{$unified_info{includes}->{$dest}}, $inc
2278                     unless grep { $_ eq $inc } @{$unified_info{includes}->{$dest}};
2279             }
2280         } elsif (defined($unified_info{includes}->{$dest}->{source})) {
2281             $unified_info{includes}->{$dest} =
2282                 [ @{$unified_info{includes}->{$dest}->{source}} ];
2283         } else {
2284             delete $unified_info{includes}->{$dest};
2285         }
2286     }
2287
2288     # For convenience collect information regarding directories where
2289     # files are generated, those generated files and the end product
2290     # they end up in where applicable.  Then, add build rules for those
2291     # directories
2292     my %loopinfo = ( "lib" => [ @{$unified_info{libraries}} ],
2293                      "dso" => [ @{$unified_info{modules}} ],
2294                      "bin" => [ @{$unified_info{programs}} ],
2295                      "script" => [ @{$unified_info{scripts}} ] );
2296     foreach my $type (keys %loopinfo) {
2297         foreach my $product (@{$loopinfo{$type}}) {
2298             my %dirs = ();
2299             my $pd = dirname($product);
2300
2301             foreach (@{$unified_info{sources}->{$product} // []},
2302                      @{$unified_info{shared_sources}->{$product} // []}) {
2303                 my $d = dirname($_);
2304
2305                 # We don't want to create targets for source directories
2306                 # when building out of source
2307                 next if ($config{sourcedir} ne $config{builddir}
2308                              && $d =~ m|^\Q$config{sourcedir}\E|);
2309                 # We already have a "test" target, and the current directory
2310                 # is just silly to make a target for
2311                 next if $d eq "test" || $d eq ".";
2312
2313                 $dirs{$d} = 1;
2314                 push @{$unified_info{dirinfo}->{$d}->{deps}}, $_
2315                     if $d ne $pd;
2316             }
2317             foreach (keys %dirs) {
2318                 push @{$unified_info{dirinfo}->{$_}->{products}->{$type}},
2319                     $product;
2320             }
2321         }
2322     }
2323 }
2324
2325 # For the schemes that need it, we provide the old *_obj configs
2326 # from the *_asm_obj ones
2327 foreach (grep /_(asm|aux)_src$/, keys %target) {
2328     my $src = $_;
2329     (my $obj = $_) =~ s/_(asm|aux)_src$/_obj/;
2330     $target{$obj} = $target{$src};
2331     $target{$obj} =~ s/\.[csS]\b/.o/g; # C and assembler
2332     $target{$obj} =~ s/\.(cc|cpp)\b/_cc.o/g; # C++
2333 }
2334
2335 # Write down our configuration where it fits #########################
2336
2337 print "Creating configdata.pm\n";
2338 open(OUT,">configdata.pm") || die "unable to create configdata.pm: $!\n";
2339 print OUT <<"EOF";
2340 #! $config{HASHBANGPERL}
2341
2342 package configdata;
2343
2344 use strict;
2345 use warnings;
2346
2347 use Exporter;
2348 #use vars qw(\@ISA \@EXPORT);
2349 our \@ISA = qw(Exporter);
2350 our \@EXPORT = qw(\%config \%target \%disabled \%withargs \%unified_info \@disablables);
2351
2352 EOF
2353 print OUT "our %config = (\n";
2354 foreach (sort keys %config) {
2355     if (ref($config{$_}) eq "ARRAY") {
2356         print OUT "  ", $_, " => [ ", join(", ",
2357                                            map { quotify("perl", $_) }
2358                                            @{$config{$_}}), " ],\n";
2359     } elsif (ref($config{$_}) eq "HASH") {
2360         print OUT "  ", $_, " => {";
2361         if (scalar keys %{$config{$_}} > 0) {
2362             print OUT "\n";
2363             foreach my $key (sort keys %{$config{$_}}) {
2364                 print OUT "      ",
2365                     join(" => ",
2366                          quotify("perl", $key),
2367                          defined $config{$_}->{$key}
2368                              ? quotify("perl", $config{$_}->{$key})
2369                              : "undef");
2370                 print OUT ",\n";
2371             }
2372             print OUT "  ";
2373         }
2374         print OUT "},\n";
2375     } else {
2376         print OUT "  ", $_, " => ", quotify("perl", $config{$_}), ",\n"
2377     }
2378 }
2379 print OUT <<"EOF";
2380 );
2381
2382 EOF
2383 print OUT "our %target = (\n";
2384 foreach (sort keys %target) {
2385     if (ref($target{$_}) eq "ARRAY") {
2386         print OUT "  ", $_, " => [ ", join(", ",
2387                                            map { quotify("perl", $_) }
2388                                            @{$target{$_}}), " ],\n";
2389     } else {
2390         print OUT "  ", $_, " => ", quotify("perl", $target{$_}), ",\n"
2391     }
2392 }
2393 print OUT <<"EOF";
2394 );
2395
2396 EOF
2397 print OUT "our \%available_protocols = (\n";
2398 print OUT "  tls => [ ", join(", ", map { quotify("perl", $_) } @tls), " ],\n";
2399 print OUT "  dtls => [ ", join(", ", map { quotify("perl", $_) } @dtls), " ],\n";
2400 print OUT <<"EOF";
2401 );
2402
2403 EOF
2404 print OUT "our \@disablables = (\n";
2405 foreach (@disablables) {
2406     print OUT "  ", quotify("perl", $_), ",\n";
2407 }
2408 print OUT <<"EOF";
2409 );
2410
2411 EOF
2412 print OUT "our \%disabled = (\n";
2413 foreach (sort keys %disabled) {
2414     print OUT "  ", quotify("perl", $_), " => ", quotify("perl", $disabled{$_}), ",\n";
2415 }
2416 print OUT <<"EOF";
2417 );
2418
2419 EOF
2420 print OUT "our %withargs = (\n";
2421 foreach (sort keys %withargs) {
2422     if (ref($withargs{$_}) eq "ARRAY") {
2423         print OUT "  ", $_, " => [ ", join(", ",
2424                                            map { quotify("perl", $_) }
2425                                            @{$withargs{$_}}), " ],\n";
2426     } else {
2427         print OUT "  ", $_, " => ", quotify("perl", $withargs{$_}), ",\n"
2428     }
2429 }
2430 print OUT <<"EOF";
2431 );
2432
2433 EOF
2434 if ($builder eq "unified") {
2435     my $recurse;
2436     $recurse = sub {
2437         my $indent = shift;
2438         foreach (@_) {
2439             if (ref $_ eq "ARRAY") {
2440                 print OUT " "x$indent, "[\n";
2441                 foreach (@$_) {
2442                     $recurse->($indent + 4, $_);
2443                 }
2444                 print OUT " "x$indent, "],\n";
2445             } elsif (ref $_ eq "HASH") {
2446                 my %h = %$_;
2447                 print OUT " "x$indent, "{\n";
2448                 foreach (sort keys %h) {
2449                     if (ref $h{$_} eq "") {
2450                         print OUT " "x($indent + 4), quotify("perl", $_), " => ", quotify("perl", $h{$_}), ",\n";
2451                     } else {
2452                         print OUT " "x($indent + 4), quotify("perl", $_), " =>\n";
2453                         $recurse->($indent + 8, $h{$_});
2454                     }
2455                 }
2456                 print OUT " "x$indent, "},\n";
2457             } else {
2458                 print OUT " "x$indent, quotify("perl", $_), ",\n";
2459             }
2460         }
2461     };
2462     print OUT "our %unified_info = (\n";
2463     foreach (sort keys %unified_info) {
2464         if (ref $unified_info{$_} eq "") {
2465             print OUT " "x4, quotify("perl", $_), " => ", quotify("perl", $unified_info{$_}), ",\n";
2466         } else {
2467             print OUT " "x4, quotify("perl", $_), " =>\n";
2468             $recurse->(8, $unified_info{$_});
2469         }
2470     }
2471     print OUT <<"EOF";
2472 );
2473
2474 EOF
2475 }
2476 print OUT
2477     "# The following data is only used when this files is use as a script\n";
2478 print OUT "my \@makevars = (\n";
2479 foreach (sort keys %user) {
2480     print OUT "    '",$_,"',\n";
2481 }
2482 print OUT ");\n";
2483 print OUT "my \%disabled_info = (\n";
2484 foreach my $what (sort keys %disabled_info) {
2485     print OUT "    '$what' => {\n";
2486     foreach my $info (sort keys %{$disabled_info{$what}}) {
2487         if (ref $disabled_info{$what}->{$info} eq 'ARRAY') {
2488             print OUT "        $info => [ ",
2489                 join(', ', map { "'$_'" } @{$disabled_info{$what}->{$info}}),
2490                 " ],\n";
2491         } else {
2492             print OUT "        $info => '", $disabled_info{$what}->{$info},
2493                 "',\n";
2494         }
2495     }
2496     print OUT "    },\n";
2497 }
2498 print OUT ");\n";
2499 print OUT 'my @user_crossable = qw( ', join (' ', @user_crossable), " );\n";
2500 print OUT << 'EOF';
2501 # If run directly, we can give some answers, and even reconfigure
2502 unless (caller) {
2503     use Getopt::Long;
2504     use File::Spec::Functions;
2505     use File::Basename;
2506     use Pod::Usage;
2507
2508     my $here = dirname($0);
2509
2510     my $dump = undef;
2511     my $cmdline = undef;
2512     my $options = undef;
2513     my $target = undef;
2514     my $envvars = undef;
2515     my $makevars = undef;
2516     my $buildparams = undef;
2517     my $reconf = undef;
2518     my $verbose = undef;
2519     my $help = undef;
2520     my $man = undef;
2521     GetOptions('dump|d'                 => \$dump,
2522                'command-line|c'         => \$cmdline,
2523                'options|o'              => \$options,
2524                'target|t'               => \$target,
2525                'environment|e'          => \$envvars,
2526                'make-variables|m'       => \$makevars,
2527                'build-parameters|b'     => \$buildparams,
2528                'reconfigure|reconf|r'   => \$reconf,
2529                'verbose|v'              => \$verbose,
2530                'help'                   => \$help,
2531                'man'                    => \$man)
2532         or die "Errors in command line arguments\n";
2533
2534     unless ($dump || $cmdline || $options || $target || $envvars || $makevars
2535             || $buildparams || $reconf || $verbose || $help || $man) {
2536         print STDERR <<"_____";
2537 You must give at least one option.
2538 For more information, do '$0 --help'
2539 _____
2540         exit(2);
2541     }
2542
2543     if ($help) {
2544         pod2usage(-exitval => 0,
2545                   -verbose => 1);
2546     }
2547     if ($man) {
2548         pod2usage(-exitval => 0,
2549                   -verbose => 2);
2550     }
2551     if ($dump || $cmdline) {
2552         print "\nCommand line (with current working directory = $here):\n\n";
2553         print '    ',join(' ',
2554                           $config{PERL},
2555                           catfile($config{sourcedir}, 'Configure'),
2556                           @{$config{perlargv}}), "\n";
2557         print "\nPerl information:\n\n";
2558         print '    ',$config{perl_cmd},"\n";
2559         print '    ',$config{perl_version},' for ',$config{perl_archname},"\n";
2560     }
2561     if ($dump || $options) {
2562         my $longest = 0;
2563         my $longest2 = 0;
2564         foreach my $what (@disablables) {
2565             $longest = length($what) if $longest < length($what);
2566             $longest2 = length($disabled{$what})
2567                 if $disabled{$what} && $longest2 < length($disabled{$what});
2568         }
2569         print "\nEnabled features:\n\n";
2570         foreach my $what (@disablables) {
2571             print "    $what\n" unless $disabled{$what};
2572         }
2573         print "\nDisabled features:\n\n";
2574         foreach my $what (@disablables) {
2575             if ($disabled{$what}) {
2576                 print "    $what", ' ' x ($longest - length($what) + 1),
2577                     "[$disabled{$what}]", ' ' x ($longest2 - length($disabled{$what}) + 1);
2578                 print $disabled_info{$what}->{macro}
2579                     if $disabled_info{$what}->{macro};
2580                 print ' (skip ',
2581                     join(', ', @{$disabled_info{$what}->{skipped}}),
2582                     ')'
2583                     if $disabled_info{$what}->{skipped};
2584                 print "\n";
2585             }
2586         }
2587     }
2588     if ($dump || $target) {
2589         print "\nConfig target attributes:\n\n";
2590         foreach (sort keys %target) {
2591             next if $_ =~ m|^_| || $_ eq 'template';
2592             my $quotify = sub {
2593                 map { (my $x = $_) =~ s|([\\\$\@"])|\\$1|g; "\"$x\""} @_;
2594             };
2595             print '    ', $_, ' => ';
2596             if (ref($target{$_}) eq "ARRAY") {
2597                 print '[ ', join(', ', $quotify->(@{$target{$_}})), " ],\n";
2598             } else {
2599                 print $quotify->($target{$_}), ",\n"
2600             }
2601         }
2602     }
2603     if ($dump || $envvars) {
2604         print "\nRecorded environment:\n\n";
2605         foreach (sort keys %{$config{perlenv}}) {
2606             print '    ',$_,' = ',($config{perlenv}->{$_} || ''),"\n";
2607         }
2608     }
2609     if ($dump || $makevars) {
2610         print "\nMakevars:\n\n";
2611         foreach my $var (@makevars) {
2612             my $prefix = '';
2613             $prefix = $config{CROSS_COMPILE}
2614                 if grep { $var eq $_ } @user_crossable;
2615             $prefix //= '';
2616             print '    ',$var,' ' x (16 - length $var),'= ',
2617                 (ref $config{$var} eq 'ARRAY'
2618                  ? join(' ', @{$config{$var}})
2619                  : $prefix.$config{$var}),
2620                 "\n"
2621                 if defined $config{$var};
2622         }
2623
2624         my @buildfile = ($config{builddir}, $config{build_file});
2625         unshift @buildfile, $here
2626             unless file_name_is_absolute($config{builddir});
2627         my $buildfile = canonpath(catdir(@buildfile));
2628         print <<"_____";
2629
2630 NOTE: These variables only represent the configuration view.  The build file
2631 template may have processed these variables further, please have a look at the
2632 build file for more exact data:
2633     $buildfile
2634 _____
2635     }
2636     if ($dump || $buildparams) {
2637         my @buildfile = ($config{builddir}, $config{build_file});
2638         unshift @buildfile, $here
2639             unless file_name_is_absolute($config{builddir});
2640         print "\nbuild file:\n\n";
2641         print "    ", canonpath(catfile(@buildfile)),"\n";
2642
2643         print "\nbuild file templates:\n\n";
2644         foreach (@{$config{build_file_templates}}) {
2645             my @tmpl = ($_);
2646             unshift @tmpl, $here
2647                 unless file_name_is_absolute($config{sourcedir});
2648             print '    ',canonpath(catfile(@tmpl)),"\n";
2649         }
2650     }
2651     if ($reconf) {
2652         if ($verbose) {
2653             print 'Reconfiguring with: ', join(' ',@{$config{perlargv}}), "\n";
2654             foreach (sort keys %{$config{perlenv}}) {
2655                 print '    ',$_,' = ',($config{perlenv}->{$_} || ""),"\n";
2656             }
2657         }
2658
2659         chdir $here;
2660         exec $^X,catfile($config{sourcedir}, 'Configure'),'reconf';
2661     }
2662 }
2663
2664 1;
2665
2666 __END__
2667
2668 =head1 NAME
2669
2670 configdata.pm - configuration data for OpenSSL builds
2671
2672 =head1 SYNOPSIS
2673
2674 Interactive:
2675
2676   perl configdata.pm [options]
2677
2678 As data bank module:
2679
2680   use configdata;
2681
2682 =head1 DESCRIPTION
2683
2684 This module can be used in two modes, interactively and as a module containing
2685 all the data recorded by OpenSSL's Configure script.
2686
2687 When used interactively, simply run it as any perl script, with at least one
2688 option, and you will get the information you ask for.  See L</OPTIONS> below.
2689
2690 When loaded as a module, you get a few databanks with useful information to
2691 perform build related tasks.  The databanks are:
2692
2693     %config             Configured things.
2694     %target             The OpenSSL config target with all inheritances
2695                         resolved.
2696     %disabled           The features that are disabled.
2697     @disablables        The list of features that can be disabled.
2698     %withargs           All data given through --with-THING options.
2699     %unified_info       All information that was computed from the build.info
2700                         files.
2701
2702 =head1 OPTIONS
2703
2704 =over 4
2705
2706 =item B<--help>
2707
2708 Print a brief help message and exit.
2709
2710 =item B<--man>
2711
2712 Print the manual page and exit.
2713
2714 =item B<--dump> | B<-d>
2715
2716 Print all relevant configuration data.  This is equivalent to B<--command-line>
2717 B<--options> B<--target> B<--environment> B<--make-variables>
2718 B<--build-parameters>.
2719
2720 =item B<--command-line> | B<-c>
2721
2722 Print the current configuration command line.
2723
2724 =item B<--options> | B<-o>
2725
2726 Print the features, both enabled and disabled, and display defined macro and
2727 skipped directories where applicable.
2728
2729 =item B<--target> | B<-t>
2730
2731 Print the config attributes for this config target.
2732
2733 =item B<--environment> | B<-e>
2734
2735 Print the environment variables and their values at the time of configuration.
2736
2737 =item B<--make-variables> | B<-m>
2738
2739 Print the main make variables generated in the current configuration
2740
2741 =item B<--build-parameters> | B<-b>
2742
2743 Print the build parameters, i.e. build file and build file templates.
2744
2745 =item B<--reconfigure> | B<--reconf> | B<-r>
2746
2747 Redo the configuration.
2748
2749 =item B<--verbose> | B<-v>
2750
2751 Verbose output.
2752
2753 =back
2754
2755 =cut
2756
2757 EOF
2758 close(OUT);
2759 if ($builder_platform eq 'unix') {
2760     my $mode = (0755 & ~umask);
2761     chmod $mode, 'configdata.pm'
2762         or warn sprintf("WARNING: Couldn't change mode for 'configdata.pm' to 0%03o: %s\n",$mode,$!);
2763 }
2764
2765 my %builders = (
2766     unified => sub {
2767         print 'Creating ',$target{build_file},"\n";
2768         run_dofile(catfile($blddir, $target{build_file}),
2769                    @{$config{build_file_templates}});
2770     },
2771     );
2772
2773 $builders{$builder}->($builder_platform, @builder_opts);
2774
2775 $SIG{__DIE__} = $orig_death_handler;
2776
2777 print <<"EOF" if ($disabled{threads} eq "unavailable");
2778
2779 The library could not be configured for supporting multi-threaded
2780 applications as the compiler options required on this system are not known.
2781 See file INSTALL for details if you need multi-threading.
2782 EOF
2783
2784 print <<"EOF" if ($no_shared_warn);
2785
2786 The options 'shared', 'pic' and 'dynamic-engine' aren't supported on this
2787 platform, so we will pretend you gave the option 'no-pic', which also disables
2788 'shared' and 'dynamic-engine'.  If you know how to implement shared libraries
2789 or position independent code, please let us know (but please first make sure
2790 you have tried with a current version of OpenSSL).
2791 EOF
2792
2793 print <<"EOF";
2794
2795 **********************************************************************
2796 ***                                                                ***
2797 ***   OpenSSL has been successfully configured                     ***
2798 ***                                                                ***
2799 ***   If you encounter a problem while building, please open an    ***
2800 ***   issue on GitHub <https://github.com/openssl/openssl/issues>  ***
2801 ***   and include the output from the following command:           ***
2802 ***                                                                ***
2803 ***       perl configdata.pm --dump                                ***
2804 ***                                                                ***
2805 ***   (If you are new to OpenSSL, you might want to consult the    ***
2806 ***   'Troubleshooting' section in the INSTALL file first)         ***
2807 ***                                                                ***
2808 **********************************************************************
2809 EOF
2810
2811 exit(0);
2812
2813 ######################################################################
2814 #
2815 # Helpers and utility functions
2816 #
2817
2818 # Death handler, to print a helpful message in case of failure #######
2819 #
2820 sub death_handler {
2821     die @_ if $^S;              # To prevent the added message in eval blocks
2822     my $build_file = $target{build_file} // "build file";
2823     my @message = ( <<"_____", @_ );
2824
2825 Failure!  $build_file wasn't produced.
2826 Please read INSTALL and associated NOTES files.  You may also have to look over
2827 your available compiler tool chain or change your configuration.
2828
2829 _____
2830
2831     # Dying is terminal, so it's ok to reset the signal handler here.
2832     $SIG{__DIE__} = $orig_death_handler;
2833     die @message;
2834 }
2835
2836 # Configuration file reading #########################################
2837
2838 # Note: All of the helper functions are for lazy evaluation.  They all
2839 # return a CODE ref, which will return the intended value when evaluated.
2840 # Thus, whenever there's mention of a returned value, it's about that
2841 # intended value.
2842
2843 # Helper function to implement conditional inheritance depending on the
2844 # value of $disabled{asm}.  Used in inherit_from values as follows:
2845 #
2846 #      inherit_from => [ "template", asm("asm_tmpl") ]
2847 #
2848 sub asm {
2849     my @x = @_;
2850     sub {
2851         $disabled{asm} ? () : @x;
2852     }
2853 }
2854
2855 # Helper function to implement conditional value variants, with a default
2856 # plus additional values based on the value of $config{build_type}.
2857 # Arguments are given in hash table form:
2858 #
2859 #       picker(default => "Basic string: ",
2860 #              debug   => "debug",
2861 #              release => "release")
2862 #
2863 # When configuring with --debug, the resulting string will be
2864 # "Basic string: debug", and when not, it will be "Basic string: release"
2865 #
2866 # This can be used to create variants of sets of flags according to the
2867 # build type:
2868 #
2869 #       cflags => picker(default => "-Wall",
2870 #                        debug   => "-g -O0",
2871 #                        release => "-O3")
2872 #
2873 sub picker {
2874     my %opts = @_;
2875     return sub { add($opts{default} || (),
2876                      $opts{$config{build_type}} || ())->(); }
2877 }
2878
2879 # Helper function to combine several values of different types into one.
2880 # This is useful if you want to combine a string with the result of a
2881 # lazy function, such as:
2882 #
2883 #       cflags => combine("-Wall", sub { $disabled{zlib} ? () : "-DZLIB" })
2884 #
2885 sub combine {
2886     my @stuff = @_;
2887     return sub { add(@stuff)->(); }
2888 }
2889
2890 # Helper function to implement conditional values depending on the value
2891 # of $disabled{threads}.  Can be used as follows:
2892 #
2893 #       cflags => combine("-Wall", threads("-pthread"))
2894 #
2895 sub threads {
2896     my @flags = @_;
2897     return sub { add($disabled{threads} ? () : @flags)->(); }
2898 }
2899
2900 sub shared {
2901     my @flags = @_;
2902     return sub { add($disabled{shared} ? () : @flags)->(); }
2903 }
2904
2905 our $add_called = 0;
2906 # Helper function to implement adding values to already existing configuration
2907 # values.  It handles elements that are ARRAYs, CODEs and scalars
2908 sub _add {
2909     my $separator = shift;
2910
2911     # If there's any ARRAY in the collection of values OR the separator
2912     # is undef, we will return an ARRAY of combined values, otherwise a
2913     # string of joined values with $separator as the separator.
2914     my $found_array = !defined($separator);
2915
2916     my @values =
2917         map {
2918             my $res = $_;
2919             while (ref($res) eq "CODE") {
2920                 $res = $res->();
2921             }
2922             if (defined($res)) {
2923                 if (ref($res) eq "ARRAY") {
2924                     $found_array = 1;
2925                     @$res;
2926                 } else {
2927                     $res;
2928                 }
2929             } else {
2930                 ();
2931             }
2932     } (@_);
2933
2934     $add_called = 1;
2935
2936     if ($found_array) {
2937         [ @values ];
2938     } else {
2939         join($separator, grep { defined($_) && $_ ne "" } @values);
2940     }
2941 }
2942 sub add_before {
2943     my $separator = " ";
2944     if (ref($_[$#_]) eq "HASH") {
2945         my $opts = pop;
2946         $separator = $opts->{separator};
2947     }
2948     my @x = @_;
2949     sub { _add($separator, @x, @_) };
2950 }
2951 sub add {
2952     my $separator = " ";
2953     if (ref($_[$#_]) eq "HASH") {
2954         my $opts = pop;
2955         $separator = $opts->{separator};
2956     }
2957     my @x = @_;
2958     sub { _add($separator, @_, @x) };
2959 }
2960
2961 sub read_eval_file {
2962     my $fname = shift;
2963     my $content;
2964     my @result;
2965
2966     open F, "< $fname" or die "Can't open '$fname': $!\n";
2967     {
2968         undef local $/;
2969         $content = <F>;
2970     }
2971     close F;
2972     {
2973         local $@;
2974
2975         @result = ( eval $content );
2976         warn $@ if $@;
2977     }
2978     return wantarray ? @result : $result[0];
2979 }
2980
2981 # configuration reader, evaluates the input file as a perl script and expects
2982 # it to fill %targets with target configurations.  Those are then added to
2983 # %table.
2984 sub read_config {
2985     my $fname = shift;
2986     my %targets;
2987
2988     {
2989         # Protect certain tables from tampering
2990         local %table = ();
2991
2992         %targets = read_eval_file($fname);
2993     }
2994     my %preexisting = ();
2995     foreach (sort keys %targets) {
2996         $preexisting{$_} = 1 if $table{$_};
2997     }
2998     die <<"EOF",
2999 The following config targets from $fname
3000 shadow pre-existing config targets with the same name:
3001 EOF
3002         map { "  $_\n" } sort keys %preexisting
3003         if %preexisting;
3004
3005
3006     # For each target, check that it's configured with a hash table.
3007     foreach (keys %targets) {
3008         if (ref($targets{$_}) ne "HASH") {
3009             if (ref($targets{$_}) eq "") {
3010                 warn "Deprecated target configuration for $_, ignoring...\n";
3011             } else {
3012                 warn "Misconfigured target configuration for $_ (should be a hash table), ignoring...\n";
3013             }
3014             delete $targets{$_};
3015         } else {
3016             $targets{$_}->{_conf_fname_int} = add([ $fname ]);
3017         }
3018     }
3019
3020     %table = (%table, %targets);
3021
3022 }
3023
3024 # configuration resolver.  Will only resolve all the lazy evaluation
3025 # codeblocks for the chosen target and all those it inherits from,
3026 # recursively
3027 sub resolve_config {
3028     my $target = shift;
3029     my @breadcrumbs = @_;
3030
3031 #    my $extra_checks = defined($ENV{CONFIGURE_EXTRA_CHECKS});
3032
3033     if (grep { $_ eq $target } @breadcrumbs) {
3034         die "inherit_from loop!  target backtrace:\n  "
3035             ,$target,"\n  ",join("\n  ", @breadcrumbs),"\n";
3036     }
3037
3038     if (!defined($table{$target})) {
3039         warn "Warning! target $target doesn't exist!\n";
3040         return ();
3041     }
3042     # Recurse through all inheritances.  They will be resolved on the
3043     # fly, so when this operation is done, they will all just be a
3044     # bunch of attributes with string values.
3045     # What we get here, though, are keys with references to lists of
3046     # the combined values of them all.  We will deal with lists after
3047     # this stage is done.
3048     my %combined_inheritance = ();
3049     if ($table{$target}->{inherit_from}) {
3050         my @inherit_from =
3051             map { ref($_) eq "CODE" ? $_->() : $_ } @{$table{$target}->{inherit_from}};
3052         foreach (@inherit_from) {
3053             my %inherited_config = resolve_config($_, $target, @breadcrumbs);
3054
3055             # 'template' is a marker that's considered private to
3056             # the config that had it.
3057             delete $inherited_config{template};
3058
3059             foreach (keys %inherited_config) {
3060                 if (!$combined_inheritance{$_}) {
3061                     $combined_inheritance{$_} = [];
3062                 }
3063                 push @{$combined_inheritance{$_}}, $inherited_config{$_};
3064             }
3065         }
3066     }
3067
3068     # We won't need inherit_from in this target any more, since we've
3069     # resolved all the inheritances that lead to this
3070     delete $table{$target}->{inherit_from};
3071
3072     # Now is the time to deal with those lists.  Here's the place to
3073     # decide what shall be done with those lists, all based on the
3074     # values of the target we're currently dealing with.
3075     # - If a value is a coderef, it will be executed with the list of
3076     #   inherited values as arguments.
3077     # - If the corresponding key doesn't have a value at all or is the
3078     #   empty string, the inherited value list will be run through the
3079     #   default combiner (below), and the result becomes this target's
3080     #   value.
3081     # - Otherwise, this target's value is assumed to be a string that
3082     #   will simply override the inherited list of values.
3083     my $default_combiner = add();
3084
3085     my %all_keys =
3086         map { $_ => 1 } (keys %combined_inheritance,
3087                          keys %{$table{$target}});
3088
3089     sub process_values {
3090         my $object    = shift;
3091         my $inherited = shift;  # Always a [ list ]
3092         my $target    = shift;
3093         my $entry     = shift;
3094
3095         $add_called = 0;
3096
3097         while(ref($object) eq "CODE") {
3098             $object = $object->(@$inherited);
3099         }
3100         if (!defined($object)) {
3101             return ();
3102         }
3103         elsif (ref($object) eq "ARRAY") {
3104             local $add_called;  # To make sure recursive calls don't affect it
3105             return [ map { process_values($_, $inherited, $target, $entry) }
3106                      @$object ];
3107         } elsif (ref($object) eq "") {
3108             return $object;
3109         } else {
3110             die "cannot handle reference type ",ref($object)
3111                 ," found in target ",$target," -> ",$entry,"\n";
3112         }
3113     }
3114
3115     foreach (sort keys %all_keys) {
3116         my $previous = $combined_inheritance{$_};
3117
3118         # Current target doesn't have a value for the current key?
3119         # Assign it the default combiner, the rest of this loop body
3120         # will handle it just like any other coderef.
3121         if (!exists $table{$target}->{$_}) {
3122             $table{$target}->{$_} = $default_combiner;
3123         }
3124
3125         $table{$target}->{$_} = process_values($table{$target}->{$_},
3126                                                $combined_inheritance{$_},
3127                                                $target, $_);
3128         unless(defined($table{$target}->{$_})) {
3129             delete $table{$target}->{$_};
3130         }
3131 #        if ($extra_checks &&
3132 #            $previous && !($add_called ||  $previous ~~ $table{$target}->{$_})) {
3133 #            warn "$_ got replaced in $target\n";
3134 #        }
3135     }
3136
3137     # Finally done, return the result.
3138     return %{$table{$target}};
3139 }
3140
3141 sub usage
3142         {
3143         print STDERR $usage;
3144         print STDERR "\npick os/compiler from:\n";
3145         my $j=0;
3146         my $i;
3147         my $k=0;
3148         foreach $i (sort keys %table)
3149                 {
3150                 next if $table{$i}->{template};
3151                 next if $i =~ /^debug/;
3152                 $k += length($i) + 1;
3153                 if ($k > 78)
3154                         {
3155                         print STDERR "\n";
3156                         $k=length($i);
3157                         }
3158                 print STDERR $i . " ";
3159                 }
3160         foreach $i (sort keys %table)
3161                 {
3162                 next if $table{$i}->{template};
3163                 next if $i !~ /^debug/;
3164                 $k += length($i) + 1;
3165                 if ($k > 78)
3166                         {
3167                         print STDERR "\n";
3168                         $k=length($i);
3169                         }
3170                 print STDERR $i . " ";
3171                 }
3172         print STDERR "\n\nNOTE: If in doubt, on Unix-ish systems use './config'.\n";
3173         exit(1);
3174         }
3175
3176 sub run_dofile
3177 {
3178     my $out = shift;
3179     my @templates = @_;
3180
3181     unlink $out || warn "Can't remove $out, $!"
3182         if -f $out;
3183     foreach (@templates) {
3184         die "Can't open $_, $!" unless -f $_;
3185     }
3186     my $perlcmd = (quotify("maybeshell", $config{PERL}))[0];
3187     my $cmd = "$perlcmd \"-I.\" \"-Mconfigdata\" \"$dofile\" -o\"Configure\" \"".join("\" \"",@templates)."\" > \"$out.new\"";
3188     #print STDERR "DEBUG[run_dofile]: \$cmd = $cmd\n";
3189     system($cmd);
3190     exit 1 if $? != 0;
3191     rename("$out.new", $out) || die "Can't rename $out.new, $!";
3192 }
3193
3194 sub compiler_predefined {
3195     state %predefined;
3196     my $cc = shift;
3197
3198     return () if $^O eq 'VMS';
3199
3200     die 'compiler_predefined called without a compiler command'
3201         unless $cc;
3202
3203     if (! $predefined{$cc}) {
3204
3205         $predefined{$cc} = {};
3206
3207         # collect compiler pre-defines from gcc or gcc-alike...
3208         open(PIPE, "$cc -dM -E -x c /dev/null 2>&1 |");
3209         while (my $l = <PIPE>) {
3210             $l =~ m/^#define\s+(\w+(?:\(\w+\))?)(?:\s+(.+))?/ or last;
3211             $predefined{$cc}->{$1} = $2 // '';
3212         }
3213         close(PIPE);
3214     }
3215
3216     return %{$predefined{$cc}};
3217 }
3218
3219 sub which
3220 {
3221     my ($name)=@_;
3222
3223     if (eval { require IPC::Cmd; 1; }) {
3224         IPC::Cmd->import();
3225         return scalar IPC::Cmd::can_run($name);
3226     } else {
3227         # if there is $directories component in splitpath,
3228         # then it's not something to test with $PATH...
3229         return $name if (File::Spec->splitpath($name))[1];
3230
3231         foreach (File::Spec->path()) {
3232             my $fullpath = catfile($_, "$name$target{exe_extension}");
3233             if (-f $fullpath and -x $fullpath) {
3234                 return $fullpath;
3235             }
3236         }
3237     }
3238 }
3239
3240 sub env
3241 {
3242     my $name = shift;
3243     my %opts = @_;
3244
3245     unless ($opts{cacheonly}) {
3246         # Note that if $ENV{$name} doesn't exist or is undefined,
3247         # $config{perlenv}->{$name} will be created with the value
3248         # undef.  This is intentional.
3249
3250         $config{perlenv}->{$name} = $ENV{$name}
3251             if ! exists $config{perlenv}->{$name};
3252     }
3253     return $config{perlenv}->{$name};
3254 }
3255
3256 # Configuration printer ##############################################
3257
3258 sub print_table_entry
3259 {
3260     local $now_printing = shift;
3261     my %target = resolve_config($now_printing);
3262     my $type = shift;
3263
3264     # Don't print the templates
3265     return if $target{template};
3266
3267     my @sequence = (
3268         "sys_id",
3269         "cpp",
3270         "cppflags",
3271         "defines",
3272         "includes",
3273         "cc",
3274         "cflags",
3275         "unistd",
3276         "ld",
3277         "lflags",
3278         "loutflag",
3279         "ex_libs",
3280         "bn_ops",
3281         "apps_aux_src",
3282         "cpuid_asm_src",
3283         "uplink_aux_src",
3284         "bn_asm_src",
3285         "ec_asm_src",
3286         "des_asm_src",
3287         "aes_asm_src",
3288         "bf_asm_src",
3289         "md5_asm_src",
3290         "cast_asm_src",
3291         "sha1_asm_src",
3292         "rc4_asm_src",
3293         "rmd160_asm_src",
3294         "rc5_asm_src",
3295         "wp_asm_src",
3296         "cmll_asm_src",
3297         "modes_asm_src",
3298         "padlock_asm_src",
3299         "chacha_asm_src",
3300         "poly1035_asm_src",
3301         "thread_scheme",
3302         "perlasm_scheme",
3303         "dso_scheme",
3304         "shared_target",
3305         "shared_cflag",
3306         "shared_defines",
3307         "shared_ldflag",
3308         "shared_rcflag",
3309         "shared_extension",
3310         "dso_extension",
3311         "obj_extension",
3312         "exe_extension",
3313         "ranlib",
3314         "ar",
3315         "arflags",
3316         "aroutflag",
3317         "rc",
3318         "rcflags",
3319         "rcoutflag",
3320         "mt",
3321         "mtflags",
3322         "mtinflag",
3323         "mtoutflag",
3324         "multilib",
3325         "build_scheme",
3326         );
3327
3328     if ($type eq "TABLE") {
3329         print "\n";
3330         print "*** $now_printing\n";
3331         foreach (@sequence) {
3332             if (ref($target{$_}) eq "ARRAY") {
3333                 printf "\$%-12s = %s\n", $_, join(" ", @{$target{$_}});
3334             } else {
3335                 printf "\$%-12s = %s\n", $_, $target{$_};
3336             }
3337         }
3338     } elsif ($type eq "HASH") {
3339         my $largest =
3340             length((sort { length($a) <=> length($b) } @sequence)[-1]);
3341         print "    '$now_printing' => {\n";
3342         foreach (@sequence) {
3343             if ($target{$_}) {
3344                 if (ref($target{$_}) eq "ARRAY") {
3345                     print "      '",$_,"'"," " x ($largest - length($_))," => [ ",join(", ", map { "'$_'" } @{$target{$_}})," ],\n";
3346                 } else {
3347                     print "      '",$_,"'"," " x ($largest - length($_))," => '",$target{$_},"',\n";
3348                 }
3349             }
3350         }
3351         print "    },\n";
3352     }
3353 }
3354
3355 # Utility routines ###################################################
3356
3357 # On VMS, if the given file is a logical name, File::Spec::Functions
3358 # will consider it an absolute path.  There are cases when we want a
3359 # purely syntactic check without checking the environment.
3360 sub isabsolute {
3361     my $file = shift;
3362
3363     # On non-platforms, we just use file_name_is_absolute().
3364     return file_name_is_absolute($file) unless $^O eq "VMS";
3365
3366     # If the file spec includes a device or a directory spec,
3367     # file_name_is_absolute() is perfectly safe.
3368     return file_name_is_absolute($file) if $file =~ m|[:\[]|;
3369
3370     # Here, we know the given file spec isn't absolute
3371     return 0;
3372 }
3373
3374 # Makes a directory absolute and cleans out /../ in paths like foo/../bar
3375 # On some platforms, this uses rel2abs(), while on others, realpath() is used.
3376 # realpath() requires that at least all path components except the last is an
3377 # existing directory.  On VMS, the last component of the directory spec must
3378 # exist.
3379 sub absolutedir {
3380     my $dir = shift;
3381
3382     # realpath() is quite buggy on VMS.  It uses LIB$FID_TO_NAME, which
3383     # will return the volume name for the device, no matter what.  Also,
3384     # it will return an incorrect directory spec if the argument is a
3385     # directory that doesn't exist.
3386     if ($^O eq "VMS") {
3387         return rel2abs($dir);
3388     }
3389
3390     # We use realpath() on Unix, since no other will properly clean out
3391     # a directory spec.
3392     use Cwd qw/realpath/;
3393
3394     return realpath($dir);
3395 }
3396
3397 sub quotify {
3398     my %processors = (
3399         perl    => sub { my $x = shift;
3400                          $x =~ s/([\\\$\@"])/\\$1/g;
3401                          return '"'.$x.'"'; },
3402         maybeshell => sub { my $x = shift;
3403                             (my $y = $x) =~ s/([\\\"])/\\$1/g;
3404                             if ($x ne $y || $x =~ m|\s|) {
3405                                 return '"'.$y.'"';
3406                             } else {
3407                                 return $x;
3408                             }
3409                         },
3410         );
3411     my $for = shift;
3412     my $processor =
3413         defined($processors{$for}) ? $processors{$for} : sub { shift; };
3414
3415     return map { $processor->($_); } @_;
3416 }
3417
3418 # collect_from_file($filename, $line_concat_cond_re, $line_concat)
3419 # $filename is a file name to read from
3420 # $line_concat_cond_re is a regexp detecting a line continuation ending
3421 # $line_concat is a CODEref that takes care of concatenating two lines
3422 sub collect_from_file {
3423     my $filename = shift;
3424     my $line_concat_cond_re = shift;
3425     my $line_concat = shift;
3426
3427     open my $fh, $filename || die "unable to read $filename: $!\n";
3428     return sub {
3429         my $saved_line = "";
3430         $_ = "";
3431         while (<$fh>) {
3432             s|\R$||;
3433             if (defined $line_concat) {
3434                 $_ = $line_concat->($saved_line, $_);
3435                 $saved_line = "";
3436             }
3437             if (defined $line_concat_cond_re && /$line_concat_cond_re/) {
3438                 $saved_line = $_;
3439                 next;
3440             }
3441             return $_;
3442         }
3443         die "$filename ending with continuation line\n" if $_;
3444         close $fh;
3445         return undef;
3446     }
3447 }
3448
3449 # collect_from_array($array, $line_concat_cond_re, $line_concat)
3450 # $array is an ARRAYref of lines
3451 # $line_concat_cond_re is a regexp detecting a line continuation ending
3452 # $line_concat is a CODEref that takes care of concatenating two lines
3453 sub collect_from_array {
3454     my $array = shift;
3455     my $line_concat_cond_re = shift;
3456     my $line_concat = shift;
3457     my @array = (@$array);
3458
3459     return sub {
3460         my $saved_line = "";
3461         $_ = "";
3462         while (defined($_ = shift @array)) {
3463             s|\R$||;
3464             if (defined $line_concat) {
3465                 $_ = $line_concat->($saved_line, $_);
3466                 $saved_line = "";
3467             }
3468             if (defined $line_concat_cond_re && /$line_concat_cond_re/) {
3469                 $saved_line = $_;
3470                 next;
3471             }
3472             return $_;
3473         }
3474         die "input text ending with continuation line\n" if $_;
3475         return undef;
3476     }
3477 }
3478
3479 # collect_information($lineiterator, $line_continue, $regexp => $CODEref, ...)
3480 # $lineiterator is a CODEref that delivers one line at a time.
3481 # All following arguments are regex/CODEref pairs, where the regexp detects a
3482 # line and the CODEref does something with the result of the regexp.
3483 sub collect_information {
3484     my $lineiterator = shift;
3485     my %collectors = @_;
3486
3487     while(defined($_ = $lineiterator->())) {
3488         s|\R$||;
3489         my $found = 0;
3490         if ($collectors{"BEFORE"}) {
3491             $collectors{"BEFORE"}->($_);
3492         }
3493         foreach my $re (keys %collectors) {
3494             if ($re !~ /^OTHERWISE|BEFORE|AFTER$/ && /$re/) {
3495                 $collectors{$re}->($lineiterator);
3496                 $found = 1;
3497             };
3498         }
3499         if ($collectors{"OTHERWISE"}) {
3500             $collectors{"OTHERWISE"}->($lineiterator, $_)
3501                 unless $found || !defined $collectors{"OTHERWISE"};
3502         }
3503         if ($collectors{"AFTER"}) {
3504             $collectors{"AFTER"}->($_);
3505         }
3506     }
3507 }
3508
3509 # tokenize($line)
3510 # tokenize($line,$separator)
3511 # $line is a line of text to split up into tokens
3512 # $separator [optional] is a regular expression that separates the tokens,
3513 # the default being spaces.  Do not use quotes of any kind as separators,
3514 # that will give undefined results.
3515 # Returns a list of tokens.
3516 #
3517 # Tokens are divided by separator (spaces by default).  If the tokens include
3518 # the separators, they have to be quoted with single or double quotes.
3519 # Double quotes inside a double quoted token must be escaped.  Escaping is done
3520 # with backslash.
3521 # Basically, the same quoting rules apply for " and ' as in any
3522 # Unix shell.
3523 sub tokenize {
3524     my $line = my $debug_line = shift;
3525     my $separator = shift // qr|\s+|;
3526     my @result = ();
3527
3528     if ($ENV{CONFIGURE_DEBUG_TOKENIZE}) {
3529         print STDERR "DEBUG[tokenize]: \$separator = $separator\n";
3530     }
3531
3532     while ($line =~ s|^${separator}||, $line ne "") {
3533         my $token = "";
3534     again:
3535         $line =~ m/^(.*?)(${separator}|"|'|$)/;
3536         $token .= $1;
3537         $line = $2.$';
3538
3539         if ($line =~ m/^"((?:[^"\\]+|\\.)*)"/) {
3540             $token .= $1;
3541             $line = $';
3542             goto again;
3543         } elsif ($line =~ m/^'([^']*)'/) {
3544             $token .= $1;
3545             $line = $';
3546             goto again;
3547         }
3548         push @result, $token;
3549     }
3550
3551     if ($ENV{CONFIGURE_DEBUG_TOKENIZE}) {
3552         print STDERR "DEBUG[tokenize]: Parsed '$debug_line' into:\n";
3553         print STDERR "DEBUG[tokenize]: ('", join("', '", @result), "')\n";
3554     }
3555     return @result;
3556 }