Configure

   1 #! /usr/bin/env perl
   2 # -*- mode: perl; -*-
   3 # Copyright 2016-2018 The OpenSSL Project Authors. All Rights Reserved.
   4 #
   5 # Licensed under the Apache License 2.0 (the "License").  You may not use
   6 # this file except in compliance with the License.  You can obtain a copy
   7 # in the file LICENSE in the source distribution or at
   8 # https://www.openssl.org/source/license.html
   9
  10 ##  Configure -- OpenSSL source tree configuration script
  11
  12 use 5.10.0;
  13 use strict;
  14 use Config;
  15 use FindBin;
  16 use lib "$FindBin::Bin/util/perl";
  17 use File::Basename;
  18 use File::Spec::Functions qw/:DEFAULT abs2rel rel2abs splitdir/;
  19 use File::Path qw/mkpath/;
  20 use OpenSSL::Glob;
  21
  22 # see INSTALL for instructions.
  23
  24 my $orig_death_handler = $SIG{__DIE__};
  25 $SIG{__DIE__} = \&death_handler;
  26
  27 my $usage="Usage: Configure [no-<cipher> ...] [enable-<cipher> ...] [-Dxxx] [-lxxx] [-Lxxx] [-fxxx] [-Kxxx] [no-hw-xxx|no-hw] [[no-]threads] [[no-]shared] [[no-]zlib|zlib-dynamic] [no-asm] [no-egd] [sctp] [386] [--prefix=DIR] [--openssldir=OPENSSLDIR] [--with-xxx[=vvv]] [--config=FILE] os/compiler[:flags]\n";
  28
  29 # Options:
  30 #
  31 # --config      add the given configuration file, which will be read after
  32 #               any "Configurations*" files that are found in the same
  33 #               directory as this script.
  34 # --prefix      prefix for the OpenSSL installation, which includes the
  35 #               directories bin, lib, include, share/man, share/doc/openssl
  36 #               This becomes the value of INSTALLTOP in Makefile
  37 #               (Default: /usr/local)
  38 # --openssldir  OpenSSL data area, such as openssl.cnf, certificates and keys.
  39 #               If it's a relative directory, it will be added on the directory
  40 #               given with --prefix.
  41 #               This becomes the value of OPENSSLDIR in Makefile and in C.
  42 #               (Default: PREFIX/ssl)
  43 #
  44 # --cross-compile-prefix Add specified prefix to binutils components.
  45 #
  46 # --api         One of 0.9.8, 1.0.0, 1.0.1, 1.0.2, 1.1.0, 1.1.1, or 3.0.0 / 3.
  47 #               Do not compile support for interfaces deprecated as of the
  48 #               specified OpenSSL version.
  49 #
  50 # no-hw-xxx     do not compile support for specific crypto hardware.
  51 #               Generic OpenSSL-style methods relating to this support
  52 #               are always compiled but return NULL if the hardware
  53 #               support isn't compiled.
  54 # no-hw         do not compile support for any crypto hardware.
  55 # [no-]threads  [don't] try to create a library that is suitable for
  56 #               multithreaded applications (default is "threads" if we
  57 #               know how to do it)
  58 # [no-]shared   [don't] try to create shared libraries when supported.
  59 # [no-]pic      [don't] try to build position independent code when supported.
  60 #               If disabled, it also disables shared and dynamic-engine.
  61 # no-asm        do not use assembler
  62 # no-egd        do not compile support for the entropy-gathering daemon APIs
  63 # [no-]zlib     [don't] compile support for zlib compression.
  64 # zlib-dynamic  Like "zlib", but the zlib library is expected to be a shared
  65 #               library and will be loaded in run-time by the OpenSSL library.
  66 # sctp          include SCTP support
  67 # enable-weak-ssl-ciphers
  68 #               Enable weak ciphers that are disabled by default.
  69 # 386           generate 80386 code in assembly modules
  70 # no-sse2       disables IA-32 SSE2 code in assembly modules, the above
  71 #               mentioned '386' option implies this one
  72 # no-<cipher>   build without specified algorithm (rsa, idea, rc5, ...)
  73 # -<xxx> +<xxx> compiler options are passed through
  74 # -static       while -static is also a pass-through compiler option (and
  75 #               as such is limited to environments where it's actually
  76 #               meaningful), it triggers a number configuration options,
  77 #               namely no-pic, no-shared and no-threads. It is
  78 #               argued that the only reason to produce statically linked
  79 #               binaries (and in context it means executables linked with
  80 #               -static flag, and not just executables linked with static
  81 #               libcrypto.a) is to eliminate dependency on specific run-time,
  82 #               a.k.a. libc version. The mentioned config options are meant
  83 #               to achieve just that. Unfortunately on Linux it's impossible
  84 #               to eliminate the dependency completely for openssl executable
  85 #               because of getaddrinfo and gethostbyname calls, which can
  86 #               invoke dynamically loadable library facility anyway to meet
  87 #               the lookup requests. For this reason on Linux statically
  88 #               linked openssl executable has rather debugging value than
  89 #               production quality.
  90 #
  91 # DEBUG_SAFESTACK use type-safe stacks to enforce type-safety on stack items
  92 #               provided to stack calls. Generates unique stack functions for
  93 #               each possible stack type.
  94 # BN_LLONG      use the type 'long long' in crypto/bn/bn.h
  95 # RC4_CHAR      use 'char' instead of 'int' for RC4_INT in crypto/rc4/rc4.h
  96 # Following are set automatically by this script
  97 #
  98 # MD5_ASM       use some extra md5 assembler,
  99 # SHA1_ASM      use some extra sha1 assembler, must define L_ENDIAN for x86
 100 # RMD160_ASM    use some extra ripemd160 assembler,
 101 # SHA256_ASM    sha256_block is implemented in assembler
 102 # SHA512_ASM    sha512_block is implemented in assembler
 103 # AES_ASM       AES_[en|de]crypt is implemented in assembler
 104
 105 # Minimum warning options... any contributions to OpenSSL should at least
 106 # get past these.  Note that we only use these with C compilers, not with
 107 # C++ compilers.
 108
 109 # DEBUG_UNUSED enables __owur (warn unused result) checks.
 110 # -DPEDANTIC complements -pedantic and is meant to mask code that
 111 # is not strictly standard-compliant and/or implementation-specific,
 112 # e.g. inline assembly, disregards to alignment requirements, such
 113 # that -pedantic would complain about. Incidentally -DPEDANTIC has
 114 # to be used even in sanitized builds, because sanitizer too is
 115 # supposed to and does take notice of non-standard behaviour. Then
 116 # -pedantic with pre-C9x compiler would also complain about 'long
 117 # long' not being supported. As 64-bit algorithms are common now,
 118 # it grew impossible to resolve this without sizeable additional
 119 # code, so we just tell compiler to be pedantic about everything
 120 # but 'long long' type.
 121
 122 my @gcc_devteam_warn = qw(
 123     -DDEBUG_UNUSED
 124     -DPEDANTIC -pedantic -Wno-long-long
 125     -Wall
 126     -Wextra
 127     -Wno-unused-parameter
 128     -Wno-missing-field-initializers
 129     -Wswitch
 130     -Wsign-compare
 131     -Wshadow
 132     -Wformat
 133     -Wtype-limits
 134     -Wundef
 135     -Werror
 136     -Wmissing-prototypes
 137     -Wstrict-prototypes
 138 );
 139
 140 # These are used in addition to $gcc_devteam_warn when the compiler is clang.
 141 # TODO(openssl-team): fix problems and investigate if (at least) the
 142 # following warnings can also be enabled:
 143 #       -Wcast-align
 144 #       -Wunreachable-code -- no, too ugly/compiler-specific
 145 #       -Wlanguage-extension-token -- no, we use asm()
 146 #       -Wunused-macros -- no, too tricky for BN and _XOPEN_SOURCE etc
 147 #       -Wextended-offsetof -- no, needed in CMS ASN1 code
 148 my @clang_devteam_warn = qw(
 149     -Wswitch-default
 150     -Wno-parentheses-equality
 151     -Wno-language-extension-token
 152     -Wno-extended-offsetof
 153     -Wconditional-uninitialized
 154     -Wincompatible-pointer-types-discards-qualifiers
 155     -Wno-unknown-warning-option
 156     -Wmissing-variable-declarations
 157 );
 158
 159 # This adds backtrace information to the memory leak info.  Is only used
 160 # when crypto-mdebug-backtrace is enabled.
 161 my $memleak_devteam_backtrace = "-rdynamic";
 162
 163 my $strict_warnings = 0;
 164
 165 # As for $BSDthreads. Idea is to maintain "collective" set of flags,
 166 # which would cover all BSD flavors. -pthread applies to them all,
 167 # but is treated differently. OpenBSD expands is as -D_POSIX_THREAD
 168 # -lc_r, which is sufficient. FreeBSD 4.x expands it as -lc_r,
 169 # which has to be accompanied by explicit -D_THREAD_SAFE and
 170 # sometimes -D_REENTRANT. FreeBSD 5.x expands it as -lc_r, which
 171 # seems to be sufficient?
 172 our $BSDthreads="-pthread -D_THREAD_SAFE -D_REENTRANT";
 173
 174 #
 175 # API compatibility name to version number mapping.
 176 #
 177 my $maxapi = "3.0.0";           # API for "no-deprecated" builds
 178 my $apitable = {
 179     "3.0.0" => 3,
 180     "1.1.1" => 2,
 181     "1.1.0" => 2,
 182     "1.0.2" => 1,
 183     "1.0.1" => 1,
 184     "1.0.0" => 1,
 185     "0.9.8" => 0,
 186 };
 187
 188 our %table = ();
 189 our %config = ();
 190 our %withargs = ();
 191 our $now_printing;      # set to current entry's name in print_table_entry
 192                         # (todo: right thing would be to encapsulate name
 193                         # into %target [class] and make print_table_entry
 194                         # a method)
 195
 196 # Forward declarations ###############################################
 197
 198 # read_config(filename)
 199 #
 200 # Reads a configuration file and populates %table with the contents
 201 # (which the configuration file places in %targets).
 202 sub read_config;
 203
 204 # resolve_config(target)
 205 #
 206 # Resolves all the late evaluations, inheritances and so on for the
 207 # chosen target and any target it inherits from.
 208 sub resolve_config;
 209
 210
 211 # Information collection #############################################
 212
 213 # Unified build supports separate build dir
 214 my $srcdir = catdir(absolutedir(dirname($0))); # catdir ensures local syntax
 215 my $blddir = catdir(absolutedir("."));         # catdir ensures local syntax
 216 my $dofile = abs2rel(catfile($srcdir, "util/dofile.pl"));
 217
 218 my $local_config_envname = 'OPENSSL_LOCAL_CONFIG_DIR';
 219
 220 $config{sourcedir} = abs2rel($srcdir);
 221 $config{builddir} = abs2rel($blddir);
 222
 223 # Collect reconfiguration information if needed
 224 my @argvcopy=@ARGV;
 225
 226 if (grep /^reconf(igure)?$/, @argvcopy) {
 227     die "reconfiguring with other arguments present isn't supported"
 228         if scalar @argvcopy > 1;
 229     if (-f "./configdata.pm") {
 230         my $file = "./configdata.pm";
 231         unless (my $return = do $file) {
 232             die "couldn't parse $file: $@" if $@;
 233             die "couldn't do $file: $!"    unless defined $return;
 234             die "couldn't run $file"       unless $return;
 235         }
 236
 237         @argvcopy = defined($configdata::config{perlargv}) ?
 238             @{$configdata::config{perlargv}} : ();
 239         die "Incorrect data to reconfigure, please do a normal configuration\n"
 240             if (grep(/^reconf/,@argvcopy));
 241         $config{perlenv} = $configdata::config{perlenv} // {};
 242     } else {
 243         die "Insufficient data to reconfigure, please do a normal configuration\n";
 244     }
 245 }
 246
 247 $config{perlargv} = [ @argvcopy ];
 248
 249 # Collect version numbers
 250 $config{major} = "unknown";
 251 $config{minor} = "unknown";
 252 $config{patch} = "unknown";
 253 $config{prerelease} = "";
 254 $config{build_metadata} = "";
 255 $config{shlib_version} = "unknown";
 256
 257 collect_information(
 258     collect_from_file(catfile($srcdir,'include/openssl/opensslv.h')),
 259     qr/#\s+define\s+OPENSSL_VERSION_MAJOR\s+(\d+)/ =>
 260         sub { $config{major} = $1; },
 261     qr/#\s+define\s+OPENSSL_VERSION_MINOR\s+(\d+)/ =>
 262         sub { $config{minor} = $1; },
 263     qr/#\s+define\s+OPENSSL_VERSION_PATCH\s+(\d+)/ =>
 264         sub { $config{patch} = $1; },
 265     qr/#\s+define\s+OPENSSL_VERSION_PRE_RELEASE\s+"((?:\\.|[^"])*)"/ =>
 266         sub { $config{prerelease} = $1; },
 267     qr/#\s+define\s+OPENSSL_VERSION_BUILD_METADATA\s+"((?:\\.|[^"])*)"/ =>
 268         sub { $config{build_metadata} = $1; },
 269     qr/#\s+define\s+OPENSSL_SHLIB_VERSION\s+([\d\.]+)/ =>
 270         sub { $config{shlib_version} = $1; },
 271     );
 272 die "erroneous version information in opensslv.h: ",
 273     "$config{major}.$config{minor}.$config{patch}, $config{shlib_version}\n"
 274     if ($config{major} eq "unknown"
 275             || $config{minor} eq "unknown"
 276             || $config{patch} eq "unknown"
 277             || $config{shlib_version} eq "unknown");
 278
 279 $config{version} = "$config{major}.$config{minor}.$config{patch}";
 280 $config{full_version} = "$config{version}$config{prerelease}$config{build_metadata}";
 281
 282 # Collect target configurations
 283
 284 my $pattern = catfile(dirname($0), "Configurations", "*.conf");
 285 foreach (sort glob($pattern)) {
 286     &read_config($_);
 287 }
 288
 289 if (defined env($local_config_envname)) {
 290     if ($^O eq 'VMS') {
 291         # VMS environment variables are logical names,
 292         # which can be used as is
 293         $pattern = $local_config_envname . ':' . '*.conf';
 294     } else {
 295         $pattern = catfile(env($local_config_envname), '*.conf');
 296     }
 297
 298     foreach (sort glob($pattern)) {
 299         &read_config($_);
 300     }
 301 }
 302
 303 # Save away perl command information
 304 $config{perl_cmd} = $^X;
 305 $config{perl_version} = $Config{version};
 306 $config{perl_archname} = $Config{archname};
 307
 308 $config{prefix}="";
 309 $config{openssldir}="";
 310 $config{processor}="";
 311 $config{libdir}="";
 312 my $auto_threads=1;    # enable threads automatically? true by default
 313 my $default_ranlib;
 314
 315 # Known TLS and DTLS protocols
 316 my @tls = qw(ssl3 tls1 tls1_1 tls1_2 tls1_3);
 317 my @dtls = qw(dtls1 dtls1_2);
 318
 319 # Explicitly known options that are possible to disable.  They can
 320 # be regexps, and will be used like this: /^no-${option}$/
 321 # For developers: keep it sorted alphabetically
 322
 323 my @disablables = (
 324     "ktls",
 325     "afalgeng",
 326     "aria",
 327     "asan",
 328     "asm",
 329     "async",
 330     "autoalginit",
 331     "autoerrinit",
 332     "autoload-config",
 333     "bf",
 334     "blake2",
 335     "buildtest-c++",
 336     "camellia",
 337     "capieng",
 338     "cast",
 339     "chacha",
 340     "cmac",
 341     "cmp",
 342     "cms",
 343     "comp",
 344     "crypto-mdebug",
 345     "crypto-mdebug-backtrace",
 346     "ct",
 347     "deprecated",
 348     "des",
 349     "devcryptoeng",
 350     "dgram",
 351     "dh",
 352     "dsa",
 353     "dtls",
 354     "dynamic-engine",
 355     "ec",
 356     "ec2m",
 357     "ecdh",
 358     "ecdsa",
 359     "ec_nistp_64_gcc_128",
 360     "egd",
 361     "engine",
 362     "err",
 363     "external-tests",
 364     "filenames",
 365     "fips",
 366     "fuzz-libfuzzer",
 367     "fuzz-afl",
 368     "gost",
 369     "idea",
 370     "legacy",
 371     "makedepend",
 372     "md2",
 373     "md4",
 374     "mdc2",
 375     "module",
 376     "msan",
 377     "multiblock",
 378     "nextprotoneg",
 379     "pinshared",
 380     "ocb",
 381     "ocsp",
 382     "padlockeng",
 383     "pic",
 384     "poly1305",
 385     "posix-io",
 386     "psk",
 387     "rc2",
 388     "rc4",
 389     "rc5",
 390     "rdrand",
 391     "rfc3779",
 392     "rmd160",
 393     "scrypt",
 394     "sctp",
 395     "seed",
 396     "shared",
 397     "siphash",
 398     "siv",
 399     "sm2",
 400     "sm3",
 401     "sm4",
 402     "sock",
 403     "srp",
 404     "srtp",
 405     "sse2",
 406     "ssl",
 407     "ssl-trace",
 408     "static-engine",
 409     "stdio",
 410     "tests",
 411     "threads",
 412     "tls",
 413     "trace",
 414     "ts",
 415     "ubsan",
 416     "ui-console",
 417     "unit-test",
 418     "whirlpool",
 419     "weak-ssl-ciphers",
 420     "zlib",
 421     "zlib-dynamic",
 422     );
 423 foreach my $proto ((@tls, @dtls))
 424         {
 425         push(@disablables, $proto);
 426         push(@disablables, "$proto-method") unless $proto eq "tls1_3";
 427         }
 428
 429 # Internal disablables, for aliasing purposes.  They serve no special
 430 # purpose here, but allow scripts to get to know them through configdata.pm,
 431 # where these are merged with @disablables.
 432 # The actual aliasing mechanism is done via %disable_cascades
 433 my @disablables_int = qw(
 434     crmf
 435     );
 436
 437 my %deprecated_disablables = (
 438     "ssl2" => undef,
 439     "buf-freelists" => undef,
 440     "hw" => "hw",               # causes cascade, but no macro
 441     "hw-padlock" => "padlockeng",
 442     "ripemd" => "rmd160",
 443     "ui" => "ui-console",
 444     "dso" => undef,
 445     "heartbeats" => undef,
 446     );
 447
 448 # All of the following are disabled by default:
 449
 450 our %disabled = ( # "what"         => "comment"
 451                   "asan"                => "default",
 452                   "buildtest-c++"       => "default",
 453                   "crypto-mdebug"       => "default",
 454                   "crypto-mdebug-backtrace" => "default",
 455                   "devcryptoeng"        => "default",
 456                   "ec_nistp_64_gcc_128" => "default",
 457                   "egd"                 => "default",
 458                   "external-tests"      => "default",
 459                   "fuzz-libfuzzer"      => "default",
 460                   "fuzz-afl"            => "default",
 461                   "md2"                 => "default",
 462                   "msan"                => "default",
 463                   "rc5"                 => "default",
 464                   "sctp"                => "default",
 465                   "ssl-trace"           => "default",
 466                   "ssl3"                => "default",
 467                   "ssl3-method"         => "default",
 468                   "trace"               => "default",
 469                   "ubsan"               => "default",
 470                   "unit-test"           => "default",
 471                   "weak-ssl-ciphers"    => "default",
 472                   "zlib"                => "default",
 473                   "zlib-dynamic"        => "default",
 474                   "ktls"                => "default",
 475                 );
 476
 477 # Note: => pair form used for aesthetics, not to truly make a hash table
 478 my @disable_cascades = (
 479     # "what"            => [ "cascade", ... ]
 480     sub { $config{processor} eq "386" }
 481                         => [ "sse2" ],
 482     "ssl"               => [ "ssl3" ],
 483     "ssl3-method"       => [ "ssl3" ],
 484     "zlib"              => [ "zlib-dynamic" ],
 485     "des"               => [ "mdc2" ],
 486     "ec"                => [ "ecdsa", "ecdh" ],
 487
 488     "dgram"             => [ "dtls", "sctp" ],
 489     "sock"              => [ "dgram" ],
 490     "dtls"              => [ @dtls ],
 491     sub { 0 == scalar grep { !$disabled{$_} } @dtls }
 492                         => [ "dtls" ],
 493
 494     "tls"               => [ @tls ],
 495     sub { 0 == scalar grep { !$disabled{$_} } @tls }
 496                         => [ "tls" ],
 497
 498     "crypto-mdebug"     => [ "crypto-mdebug-backtrace" ],
 499
 500     # If no modules, then no dynamic engines either
 501     "module"            => [ "dynamic-engine" ],
 502
 503     # Without shared libraries, dynamic engines aren't possible.
 504     # This is due to them having to link with libcrypto and register features
 505     # using the ENGINE functionality, and since that relies on global tables,
 506     # those *have* to be exacty the same as the ones accessed from the app,
 507     # which cannot be guaranteed if shared libraries aren't present.
 508     # (note that even with shared libraries, both the app and dynamic engines
 509     # must be linked with the same library)
 510     "shared"            => [ "dynamic-engine" ],
 511     # Other modules don't necessarily have to link with libcrypto, so shared
 512     # libraries do not have to be a condition to produce those.
 513
 514     # Without position independent code, there can be no shared libraries
 515     # or modules.
 516     "pic"               => [ "shared", "module" ],
 517
 518     "module"            => [ "fips", "legacy" ],
 519
 520     "engine"            => [ grep /eng$/, @disablables ],
 521     "hw"                => [ "padlockeng" ],
 522
 523     # no-autoalginit is only useful when building non-shared
 524     "autoalginit"       => [ "shared", "apps" ],
 525
 526     "stdio"             => [ "apps", "capieng", "egd" ],
 527     "apps"              => [ "tests" ],
 528     "tests"             => [ "external-tests" ],
 529     "comp"              => [ "zlib" ],
 530     "ec"                => [ "tls1_3", "sm2" ],
 531     "sm3"               => [ "sm2" ],
 532     sub { !$disabled{"unit-test"} } => [ "heartbeats" ],
 533
 534     sub { !$disabled{"msan"} } => [ "asm" ],
 535
 536     sub { $disabled{cmac}; } => [ "siv" ],
 537     "legacy"                 => [ "md2" ],
 538
 539     "cmp"               => [ "crmf" ],
 540     );
 541
 542 # Avoid protocol support holes.  Also disable all versions below N, if version
 543 # N is disabled while N+1 is enabled.
 544 #
 545 my @list = (reverse @tls);
 546 while ((my $first, my $second) = (shift @list, shift @list)) {
 547     last unless @list;
 548     push @disable_cascades, ( sub { !$disabled{$first} && $disabled{$second} }
 549                               => [ @list ] );
 550     unshift @list, $second;
 551 }
 552 my @list = (reverse @dtls);
 553 while ((my $first, my $second) = (shift @list, shift @list)) {
 554     last unless @list;
 555     push @disable_cascades, ( sub { !$disabled{$first} && $disabled{$second} }
 556                               => [ @list ] );
 557     unshift @list, $second;
 558 }
 559
 560 # Explicit "no-..." options will be collected in %disabled along with the defaults.
 561 # To remove something from %disabled, use "enable-foo".
 562 # For symmetry, "disable-foo" is a synonym for "no-foo".
 563
 564 &usage if ($#ARGV < 0);
 565
 566 # For the "make variables" CINCLUDES and CDEFINES, we support lists with
 567 # platform specific list separators.  Users from those platforms should
 568 # recognise those separators from how you set up the PATH to find executables.
 569 # The default is the Unix like separator, :, but as an exception, we also
 570 # support the space as separator.
 571 my $list_separator_re =
 572     { VMS           => qr/(?<!\^),/,
 573       MSWin32       => qr/(?<!\\);/ } -> {$^O} // qr/(?<!\\)[:\s]/;
 574 # All the "make variables" we support
 575 # Some get pre-populated for the sake of backward compatibility
 576 # (we supported those before the change to "make variable" support.
 577 my %user = (
 578     AR          => env('AR'),
 579     ARFLAGS     => [],
 580     AS          => undef,
 581     ASFLAGS     => [],
 582     CC          => env('CC'),
 583     CFLAGS      => [ env('CFLAGS') || () ],
 584     CXX         => env('CXX'),
 585     CXXFLAGS    => [ env('CXXFLAGS') || () ],
 586     CPP         => undef,
 587     CPPFLAGS    => [ env('CPPFLAGS') || () ],  # -D, -I, -Wp,
 588     CPPDEFINES  => [],  # Alternative for -D
 589     CPPINCLUDES => [],  # Alternative for -I
 590     CROSS_COMPILE => env('CROSS_COMPILE'),
 591     HASHBANGPERL=> env('HASHBANGPERL') || env('PERL'),
 592     LD          => undef,
 593     LDFLAGS     => [ env('LDFLAGS') || () ],  # -L, -Wl,
 594     LDLIBS      => [ env('LDLIBS') || () ],  # -l
 595     MT          => undef,
 596     MTFLAGS     => [],
 597     PERL        => env('PERL') || ($^O ne "VMS" ? $^X : "perl"),
 598     RANLIB      => env('RANLIB'),
 599     RC          => env('RC') || env('WINDRES'),
 600     RCFLAGS     => [ env('RCFLAGS') || () ],
 601     RM          => undef,
 602    );
 603 # Info about what "make variables" may be prefixed with the cross compiler
 604 # prefix.  This should NEVER mention any such variable with a list for value.
 605 my @user_crossable = qw ( AR AS CC CXX CPP LD MT RANLIB RC );
 606 # The same but for flags given as Configure options.  These are *additional*
 607 # input, as opposed to the VAR=string option that override the corresponding
 608 # config target attributes
 609 my %useradd = (
 610     CPPDEFINES  => [],
 611     CPPINCLUDES => [],
 612     CPPFLAGS    => [],
 613     CFLAGS      => [],
 614     CXXFLAGS    => [],
 615     LDFLAGS     => [],
 616     LDLIBS      => [],
 617     RCFLAGS     => [],
 618    );
 619
 620 my %user_synonyms = (
 621     HASHBANGPERL=> 'PERL',
 622     RC          => 'WINDRES',
 623    );
 624
 625 # Some target attributes have been renamed, this is the translation table
 626 my %target_attr_translate =(
 627     ar          => 'AR',
 628     as          => 'AS',
 629     cc          => 'CC',
 630     cxx         => 'CXX',
 631     cpp         => 'CPP',
 632     hashbangperl => 'HASHBANGPERL',
 633     ld          => 'LD',
 634     mt          => 'MT',
 635     ranlib      => 'RANLIB',
 636     rc          => 'RC',
 637     rm          => 'RM',
 638    );
 639
 640 # Initialisers coming from 'config' scripts
 641 $config{defines} = [ split(/$list_separator_re/, env('__CNF_CPPDEFINES')) ];
 642 $config{includes} = [ split(/$list_separator_re/, env('__CNF_CPPINCLUDES')) ];
 643 $config{cppflags} = [ env('__CNF_CPPFLAGS') || () ];
 644 $config{cflags} = [ env('__CNF_CFLAGS') || () ];
 645 $config{cxxflags} = [ env('__CNF_CXXFLAGS') || () ];
 646 $config{lflags} = [ env('__CNF_LDFLAGS') || () ];
 647 $config{ex_libs} = [ env('__CNF_LDLIBS') || () ];
 648
 649 $config{openssl_api_defines}=[];
 650 $config{openssl_sys_defines}=[];
 651 $config{openssl_feature_defines}=[];
 652 $config{options}="";
 653 $config{build_type} = "release";
 654 my $target="";
 655
 656 my %cmdvars = ();               # Stores FOO='blah' type arguments
 657 my %unsupported_options = ();
 658 my %deprecated_options = ();
 659 # If you change this, update apps/version.c
 660 my @known_seed_sources = qw(getrandom devrandom os egd none rdcpu librandom);
 661 my @seed_sources = ();
 662 while (@argvcopy)
 663         {
 664         $_ = shift @argvcopy;
 665
 666         # Support env variable assignments among the options
 667         if (m|^(\w+)=(.+)?$|)
 668                 {
 669                 $cmdvars{$1} = $2;
 670                 # Every time a variable is given as a configuration argument,
 671                 # it acts as a reset if the variable.
 672                 if (exists $user{$1})
 673                         {
 674                         $user{$1} = ref $user{$1} eq "ARRAY" ? [] : undef;
 675                         }
 676                 #if (exists $useradd{$1})
 677                 #       {
 678                 #       $useradd{$1} = [];
 679                 #       }
 680                 next;
 681                 }
 682
 683         # VMS is a case insensitive environment, and depending on settings
 684         # out of our control, we may receive options uppercased.  Let's
 685         # downcase at least the part before any equal sign.
 686         if ($^O eq "VMS")
 687                 {
 688                 s/^([^=]*)/lc($1)/e;
 689                 }
 690
 691         # some people just can't read the instructions, clang people have to...
 692         s/^-no-(?!integrated-as)/no-/;
 693
 694         # rewrite some options in "enable-..." form
 695         s /^-?-?shared$/enable-shared/;
 696         s /^sctp$/enable-sctp/;
 697         s /^threads$/enable-threads/;
 698         s /^zlib$/enable-zlib/;
 699         s /^zlib-dynamic$/enable-zlib-dynamic/;
 700
 701         if (/^(no|disable|enable)-(.+)$/)
 702                 {
 703                 my $word = $2;
 704                 if ($word !~ m|hw(?:-.+)| # special treatment for hw regexp opt
 705                         && !exists $deprecated_disablables{$word}
 706                         && !grep { $word eq $_ } @disablables)
 707                         {
 708                         $unsupported_options{$_} = 1;
 709                         next;
 710                         }
 711                 }
 712         if (/^no-(.+)$/ || /^disable-(.+)$/)
 713                 {
 714                 foreach my $proto ((@tls, @dtls))
 715                         {
 716                         if ($1 eq "$proto-method")
 717                                 {
 718                                 $disabled{"$proto"} = "option($proto-method)";
 719                                 last;
 720                                 }
 721                         }
 722                 if ($1 eq "dtls")
 723                         {
 724                         foreach my $proto (@dtls)
 725                                 {
 726                                 $disabled{$proto} = "option(dtls)";
 727                                 }
 728                         $disabled{"dtls"} = "option(dtls)";
 729                         }
 730                 elsif ($1 eq "ssl")
 731                         {
 732                         # Last one of its kind
 733                         $disabled{"ssl3"} = "option(ssl)";
 734                         }
 735                 elsif ($1 eq "tls")
 736                         {
 737                         # XXX: Tests will fail if all SSL/TLS
 738                         # protocols are disabled.
 739                         foreach my $proto (@tls)
 740                                 {
 741                                 $disabled{$proto} = "option(tls)";
 742                                 }
 743                         }
 744                 elsif ($1 eq "static-engine")
 745                         {
 746                         delete $disabled{"dynamic-engine"};
 747                         }
 748                 elsif ($1 eq "dynamic-engine")
 749                         {
 750                         $disabled{"dynamic-engine"} = "option";
 751                         }
 752                 elsif (exists $deprecated_disablables{$1})
 753                         {
 754                         $deprecated_options{$_} = 1;
 755                         if (defined $deprecated_disablables{$1})
 756                                 {
 757                                 $disabled{$deprecated_disablables{$1}} = "option";
 758                                 }
 759                         }
 760                 elsif ($1 =~ m|hw(?:-.+)|) # deprecate hw options in regexp form
 761                         {
 762                         $deprecated_options{$_} = 1;
 763                         }
 764                 else
 765                         {
 766                         $disabled{$1} = "option";
 767                         }
 768                 # No longer an automatic choice
 769                 $auto_threads = 0 if ($1 eq "threads");
 770                 }
 771         elsif (/^enable-(.+)$/)
 772                 {
 773                 if ($1 eq "static-engine")
 774                         {
 775                         $disabled{"dynamic-engine"} = "option";
 776                         }
 777                 elsif ($1 eq "dynamic-engine")
 778                         {
 779                         delete $disabled{"dynamic-engine"};
 780                         }
 781                 elsif ($1 eq "zlib-dynamic")
 782                         {
 783                         delete $disabled{"zlib"};
 784                         }
 785                 my $algo = $1;
 786                 delete $disabled{$algo};
 787
 788                 # No longer an automatic choice
 789                 $auto_threads = 0 if ($1 eq "threads");
 790                 }
 791         elsif (/^--strict-warnings$/)
 792                 {
 793                 # Pretend that our strict flags is a C flag, and replace it
 794                 # with the proper flags later on
 795                 push @{$useradd{CFLAGS}}, '--ossl-strict-warnings';
 796                 $strict_warnings=1;
 797                 }
 798         elsif (/^--debug$/)
 799                 {
 800                 $config{build_type} = "debug";
 801                 }
 802         elsif (/^--release$/)
 803                 {
 804                 $config{build_type} = "release";
 805                 }
 806         elsif (/^386$/)
 807                 { $config{processor}=386; }
 808         elsif (/^fips$/)
 809                 {
 810                 die "FIPS mode not supported\n";
 811                 }
 812         elsif (/^rsaref$/)
 813                 {
 814                 # No RSAref support any more since it's not needed.
 815                 # The check for the option is there so scripts aren't
 816                 # broken
 817                 }
 818         elsif (/^nofipscanistercheck$/)
 819                 {
 820                 die "FIPS mode not supported\n";
 821                 }
 822         elsif (/^[-+]/)
 823                 {
 824                 if (/^--prefix=(.*)$/)
 825                         {
 826                         $config{prefix}=$1;
 827                         die "Directory given with --prefix MUST be absolute\n"
 828                                 unless file_name_is_absolute($config{prefix});
 829                         }
 830                 elsif (/^--api=(.*)$/)
 831                         {
 832                         $config{api}=$1;
 833                         }
 834                 elsif (/^--libdir=(.*)$/)
 835                         {
 836                         $config{libdir}=$1;
 837                         }
 838                 elsif (/^--openssldir=(.*)$/)
 839                         {
 840                         $config{openssldir}=$1;
 841                         }
 842                 elsif (/^--with-zlib-lib=(.*)$/)
 843                         {
 844                         $withargs{zlib_lib}=$1;
 845                         }
 846                 elsif (/^--with-zlib-include=(.*)$/)
 847                         {
 848                         $withargs{zlib_include}=$1;
 849                         }
 850                 elsif (/^--with-fuzzer-lib=(.*)$/)
 851                         {
 852                         $withargs{fuzzer_lib}=$1;
 853                         }
 854                 elsif (/^--with-fuzzer-include=(.*)$/)
 855                         {
 856                         $withargs{fuzzer_include}=$1;
 857                         }
 858                 elsif (/^--with-rand-seed=(.*)$/)
 859                         {
 860                         foreach my $x (split(m|,|, $1))
 861                             {
 862                             die "Unknown --with-rand-seed choice $x\n"
 863                                 if ! grep { $x eq $_ } @known_seed_sources;
 864                             push @seed_sources, $x;
 865                             }
 866                         }
 867                 elsif (/^--cross-compile-prefix=(.*)$/)
 868                         {
 869                         $user{CROSS_COMPILE}=$1;
 870                         }
 871                 elsif (/^--config=(.*)$/)
 872                         {
 873                         read_config $1;
 874                         }
 875                 elsif (/^-l(.*)$/)
 876                         {
 877                         push @{$useradd{LDLIBS}}, $_;
 878                         }
 879                 elsif (/^-framework$/)
 880                         {
 881                         push @{$useradd{LDLIBS}}, $_, shift(@argvcopy);
 882                         }
 883                 elsif (/^-L(.*)$/ or /^-Wl,/)
 884                         {
 885                         push @{$useradd{LDFLAGS}}, $_;
 886                         }
 887                 elsif (/^-rpath$/ or /^-R$/)
 888                         # -rpath is the OSF1 rpath flag
 889                         # -R is the old Solaris rpath flag
 890                         {
 891                         my $rpath = shift(@argvcopy) || "";
 892                         $rpath .= " " if $rpath ne "";
 893                         push @{$useradd{LDFLAGS}}, $_, $rpath;
 894                         }
 895                 elsif (/^-static$/)
 896                         {
 897                         push @{$useradd{LDFLAGS}}, $_;
 898                         }
 899                 elsif (/^-D(.*)$/)
 900                         {
 901                         push @{$useradd{CPPDEFINES}}, $1;
 902                         }
 903                 elsif (/^-I(.*)$/)
 904                         {
 905                         push @{$useradd{CPPINCLUDES}}, $1;
 906                         }
 907                 elsif (/^-Wp,$/)
 908                         {
 909                         push @{$useradd{CPPFLAGS}}, $1;
 910                         }
 911                 else    # common if (/^[-+]/), just pass down...
 912                         {
 913                         $_ =~ s/%([0-9a-f]{1,2})/chr(hex($1))/gei;
 914                         push @{$useradd{CFLAGS}}, $_;
 915                         push @{$useradd{CXXFLAGS}}, $_;
 916                         }
 917                 }
 918         else
 919                 {
 920                 die "target already defined - $target (offending arg: $_)\n" if ($target ne "");
 921                 $target=$_;
 922                 }
 923         unless ($_ eq $target || /^no-/ || /^disable-/)
 924                 {
 925                 # "no-..." follows later after implied deactivations
 926                 # have been derived.  (Don't take this too seriously,
 927                 # we really only write OPTIONS to the Makefile out of
 928                 # nostalgia.)
 929
 930                 if ($config{options} eq "")
 931                         { $config{options} = $_; }
 932                 else
 933                         { $config{options} .= " ".$_; }
 934                 }
 935         }
 936
 937 if (defined($config{api}) && !exists $apitable->{$config{api}}) {
 938         die "***** Unsupported api compatibility level: $config{api}\n",
 939 }
 940
 941 if (keys %deprecated_options)
 942         {
 943         warn "***** Deprecated options: ",
 944                 join(", ", keys %deprecated_options), "\n";
 945         }
 946 if (keys %unsupported_options)
 947         {
 948         die "***** Unsupported options: ",
 949                 join(", ", keys %unsupported_options), "\n";
 950         }
 951
 952 # If any %useradd entry has been set, we must check that the "make
 953 # variables" haven't been set.  We start by checking of any %useradd entry
 954 # is set.
 955 if (grep { scalar @$_ > 0 } values %useradd) {
 956     # Hash of env / make variables names.  The possible values are:
 957     # 1 - "make vars"
 958     # 2 - %useradd entry set
 959     # 3 - both set
 960     my %detected_vars =
 961         map { my $v = 0;
 962               $v += 1 if $cmdvars{$_};
 963               $v += 2 if @{$useradd{$_}};
 964               $_ => $v }
 965         keys %useradd;
 966
 967     # If any of the corresponding "make variables" is set, we error
 968     if (grep { $_ & 1 } values %detected_vars) {
 969         my $names = join(', ', grep { $detected_vars{$_} > 0 }
 970                                sort keys %detected_vars);
 971         die <<"_____";
 972 ***** Mixing make variables and additional compiler/linker flags as
 973 ***** configure command line option is not permitted.
 974 ***** Affected make variables: $names
 975 _____
 976     }
 977 }
 978
 979 # Check through all supported command line variables to see if any of them
 980 # were set, and canonicalise the values we got.  If no compiler or linker
 981 # flag or anything else that affects %useradd was set, we also check the
 982 # environment for values.
 983 my $anyuseradd =
 984     grep { defined $_ && (ref $_ ne 'ARRAY' || @$_) } values %useradd;
 985 foreach (keys %user) {
 986     my $value = $cmdvars{$_};
 987     $value //= env($_) unless $anyuseradd;
 988     $value //=
 989         defined $user_synonyms{$_} ? $cmdvars{$user_synonyms{$_}} : undef;
 990     $value //= defined $user_synonyms{$_} ? env($user_synonyms{$_}) : undef
 991         unless $anyuseradd;
 992
 993     if (defined $value) {
 994         if (ref $user{$_} eq 'ARRAY') {
 995             $user{$_} = [ split /$list_separator_re/, $value ];
 996         } elsif (!defined $user{$_}) {
 997             $user{$_} = $value;
 998         }
 999     }
1000 }
1001
1002 if (grep { /-rpath\b/ } ($user{LDFLAGS} ? @{$user{LDFLAGS}} : ())
1003     && !$disabled{shared}
1004     && !($disabled{asan} && $disabled{msan} && $disabled{ubsan})) {
1005     die "***** Cannot simultaneously use -rpath, shared libraries, and\n",
1006         "***** any of asan, msan or ubsan\n";
1007 }
1008
1009 sub disable {
1010     my $disable_type = shift;
1011
1012     for (@_) {
1013         $disabled{$_} = $disable_type;
1014     }
1015
1016     my @tocheckfor = (@_ ? @_ : keys %disabled);
1017     while (@tocheckfor) {
1018         my %new_tocheckfor = ();
1019         my @cascade_copy = (@disable_cascades);
1020         while (@cascade_copy) {
1021             my ($test, $descendents) =
1022                 (shift @cascade_copy, shift @cascade_copy);
1023             if (ref($test) eq "CODE" ? $test->() : defined($disabled{$test})) {
1024                 foreach (grep { !defined($disabled{$_}) } @$descendents) {
1025                     $new_tocheckfor{$_} = 1; $disabled{$_} = "cascade";
1026                 }
1027             }
1028         }
1029         @tocheckfor = (keys %new_tocheckfor);
1030     }
1031 }
1032 disable();                     # First cascade run
1033
1034 our $die = sub { die @_; };
1035 if ($target eq "TABLE") {
1036     local $die = sub { warn @_; };
1037     foreach (sort keys %table) {
1038         print_table_entry($_, "TABLE");
1039     }
1040     exit 0;
1041 }
1042
1043 if ($target eq "LIST") {
1044     foreach (sort keys %table) {
1045         print $_,"\n" unless $table{$_}->{template};
1046     }
1047     exit 0;
1048 }
1049
1050 if ($target eq "HASH") {
1051     local $die = sub { warn @_; };
1052     print "%table = (\n";
1053     foreach (sort keys %table) {
1054         print_table_entry($_, "HASH");
1055     }
1056     exit 0;
1057 }
1058
1059 print "Configuring OpenSSL version $config{full_version} ";
1060 print "for target $target\n";
1061
1062 if (scalar(@seed_sources) == 0) {
1063     print "Using os-specific seed configuration\n";
1064     push @seed_sources, 'os';
1065 }
1066 if (scalar(grep { $_ eq 'none' } @seed_sources) > 0) {
1067     die "Cannot seed with none and anything else" if scalar(@seed_sources) > 1;
1068     warn <<_____ if scalar(@seed_sources) == 1;
1069
1070 ============================== WARNING ===============================
1071 You have selected the --with-rand-seed=none option, which effectively
1072 disables automatic reseeding of the OpenSSL random generator.
1073 All operations depending on the random generator such as creating keys
1074 will not work unless the random generator is seeded manually by the
1075 application.
1076
1077 Please read the 'Note on random number generation' section in the
1078 INSTALL instructions and the RAND_DRBG(7) manual page for more details.
1079 ============================== WARNING ===============================
1080
1081 _____
1082 }
1083 push @{$config{openssl_feature_defines}},
1084      map { (my $x = $_) =~ tr|[\-a-z]|[_A-Z]|; "OPENSSL_RAND_SEED_$x" }
1085         @seed_sources;
1086
1087 # Backward compatibility?
1088 if ($target =~ m/^CygWin32(-.*)$/) {
1089     $target = "Cygwin".$1;
1090 }
1091
1092 # Support for legacy targets having a name starting with 'debug-'
1093 my ($d, $t) = $target =~ m/^(debug-)?(.*)$/;
1094 if ($d) {
1095     $config{build_type} = "debug";
1096
1097     # If we do not find debug-foo in the table, the target is set to foo.
1098     if (!$table{$target}) {
1099         $target = $t;
1100     }
1101 }
1102
1103 &usage if !$table{$target} || $table{$target}->{template};
1104
1105 $config{target} = $target;
1106 my %target = resolve_config($target);
1107
1108 foreach (keys %target_attr_translate) {
1109     $target{$target_attr_translate{$_}} = $target{$_}
1110         if $target{$_};
1111     delete $target{$_};
1112 }
1113
1114 %target = ( %{$table{DEFAULTS}}, %target );
1115
1116 my %conf_files = map { $_ => 1 } (@{$target{_conf_fname_int}});
1117 $config{conf_files} = [ sort keys %conf_files ];
1118
1119 # Using sub disable within these loops may prove fragile, so we run
1120 # a cascade afterwards
1121 foreach my $feature (@{$target{disable}}) {
1122     if (exists $deprecated_disablables{$feature}) {
1123         warn "***** config $target disables deprecated feature $feature\n";
1124     } elsif (!grep { $feature eq $_ } @disablables) {
1125         die "***** config $target disables unknown feature $feature\n";
1126     }
1127     $disabled{$feature} = 'config';
1128 }
1129 foreach my $feature (@{$target{enable}}) {
1130     if ("default" eq ($disabled{$feature} // "")) {
1131         if (exists $deprecated_disablables{$feature}) {
1132             warn "***** config $target enables deprecated feature $feature\n";
1133         } elsif (!grep { $feature eq $_ } @disablables) {
1134             die "***** config $target enables unknown feature $feature\n";
1135         }
1136         delete $disabled{$feature};
1137     }
1138 }
1139 disable();                      # Run a cascade now
1140
1141 $target{CXXFLAGS}//=$target{CFLAGS} if $target{CXX};
1142 $target{cxxflags}//=$target{cflags} if $target{CXX};
1143 $target{exe_extension}=".exe" if ($config{target} eq "DJGPP");
1144 $target{exe_extension}=".pm"  if ($config{target} =~ /vos/);
1145
1146 # Fill %config with values from %user, and in case those are undefined or
1147 # empty, use values from %target (acting as a default).
1148 foreach (keys %user) {
1149     my $ref_type = ref $user{$_};
1150
1151     # Temporary function.  Takes an intended ref type (empty string or "ARRAY")
1152     # and a value that's to be coerced into that type.
1153     my $mkvalue = sub {
1154         my $type = shift;
1155         my $value = shift;
1156         my $undef_p = shift;
1157
1158         die "Too many arguments for \$mkvalue" if @_;
1159
1160         while (ref $value eq 'CODE') {
1161             $value = $value->();
1162         }
1163
1164         if ($type eq 'ARRAY') {
1165             return undef unless defined $value;
1166             return undef if ref $value ne 'ARRAY' && !$value;
1167             return undef if ref $value eq 'ARRAY' && !@$value;
1168             return [ $value ] unless ref $value eq 'ARRAY';
1169         }
1170         return undef unless $value;
1171         return $value;
1172     };
1173
1174     $config{$_} =
1175         $mkvalue->($ref_type, $user{$_})
1176         || $mkvalue->($ref_type, $target{$_});
1177     delete $config{$_} unless defined $config{$_};
1178 }
1179
1180 # Finish up %config by appending things the user gave us on the command line
1181 # apart from "make variables"
1182 foreach (keys %useradd) {
1183     # The must all be lists, so we assert that here
1184     die "internal error: \$useradd{$_} isn't an ARRAY\n"
1185         unless ref $useradd{$_} eq 'ARRAY';
1186
1187     if (defined $config{$_}) {
1188         push @{$config{$_}}, @{$useradd{$_}};
1189     } else {
1190         $config{$_} = [ @{$useradd{$_}} ];
1191     }
1192 }
1193 # At this point, we can forget everything about %user and %useradd,
1194 # because it's now all been merged into the corresponding $config entry
1195
1196 # Allow overriding the build file name
1197 $config{build_file} = env('BUILDFILE') || $target{build_file} || "Makefile";
1198
1199 ######################################################################
1200 # Build up information for skipping certain directories depending on disabled
1201 # features, as well as setting up macros for disabled features.
1202
1203 # This is a tentative database of directories to skip.  Some entries may not
1204 # correspond to anything real, but that's ok, they will simply be ignored.
1205 # The actual processing of these entries is done in the build.info lookup
1206 # loop further down.
1207 #
1208 # The key is a Unix formated path in the source tree, the value is an index
1209 # into %disabled_info, so any existing path gets added to a corresponding
1210 # 'skipped' entry in there with the list of skipped directories.
1211 my %skipdir = ();
1212 my %disabled_info = ();         # For configdata.pm
1213 foreach my $what (sort keys %disabled) {
1214     # There are deprecated disablables that translate to themselves.
1215     # They cause disabling cascades, but should otherwise not regiter.
1216     next if $deprecated_disablables{$what};
1217
1218     $config{options} .= " no-$what";
1219
1220     if (!grep { $what eq $_ } ( 'buildtest-c++', 'fips', 'threads', 'shared',
1221                                 'module', 'pic', 'dynamic-engine', 'makedepend',
1222                                 'zlib-dynamic', 'zlib', 'sse2', 'legacy' )) {
1223         (my $WHAT = uc $what) =~ s|-|_|g;
1224         my $skipdir = $what;
1225
1226         # fix-up crypto/directory name(s)
1227         $skipdir = "ripemd" if $what eq "rmd160";
1228         $skipdir = "whrlpool" if $what eq "whirlpool";
1229
1230         my $macro = $disabled_info{$what}->{macro} = "OPENSSL_NO_$WHAT";
1231         push @{$config{openssl_feature_defines}}, $macro;
1232
1233         $skipdir{engines} = $what if $what eq 'engine';
1234         $skipdir{"crypto/$skipdir"} = $what
1235             unless $what eq 'async' || $what eq 'err';
1236     }
1237 }
1238
1239 # Make sure build_scheme is consistent.
1240 $target{build_scheme} = [ $target{build_scheme} ]
1241     if ref($target{build_scheme}) ne "ARRAY";
1242
1243 my ($builder, $builder_platform, @builder_opts) =
1244     @{$target{build_scheme}};
1245
1246 foreach my $checker (($builder_platform."-".$target{build_file}."-checker.pm",
1247                       $builder_platform."-checker.pm")) {
1248     my $checker_path = catfile($srcdir, "Configurations", $checker);
1249     if (-f $checker_path) {
1250         my $fn = $ENV{CONFIGURE_CHECKER_WARN}
1251             ? sub { warn $@; } : sub { die $@; };
1252         if (! do $checker_path) {
1253             if ($@) {
1254                 $fn->($@);
1255             } elsif ($!) {
1256                 $fn->($!);
1257             } else {
1258                 $fn->("The detected tools didn't match the platform\n");
1259             }
1260         }
1261         last;
1262     }
1263 }
1264
1265 push @{$config{defines}}, "NDEBUG"    if $config{build_type} eq "release";
1266
1267 if ($target =~ /^mingw/ && `$config{CC} --target-help 2>&1` =~ m/-mno-cygwin/m)
1268         {
1269         push @{$config{cflags}}, "-mno-cygwin";
1270         push @{$config{cxxflags}}, "-mno-cygwin" if $config{CXX};
1271         push @{$config{shared_ldflag}}, "-mno-cygwin";
1272         }
1273
1274 if ($target =~ /linux.*-mips/ && !$disabled{asm}
1275         && !grep { $_ !~ /-m(ips|arch=)/ } (@{$config{CFLAGS}})) {
1276         # minimally required architecture flags for assembly modules
1277         my $value;
1278         $value = '-mips2' if ($target =~ /mips32/);
1279         $value = '-mips3' if ($target =~ /mips64/);
1280         unshift @{$config{cflags}}, $value;
1281         unshift @{$config{cxxflags}}, $value if $config{CXX};
1282 }
1283
1284 # If threads aren't disabled, check how possible they are
1285 unless ($disabled{threads}) {
1286     if ($auto_threads) {
1287         # Enabled by default, disable it forcibly if unavailable
1288         if ($target{thread_scheme} eq "(unknown)") {
1289             disable("unavailable", 'threads');
1290         }
1291     } else {
1292         # The user chose to enable threads explicitly, let's see
1293         # if there's a chance that's possible
1294         if ($target{thread_scheme} eq "(unknown)") {
1295             # If the user asked for "threads" and we don't have internal
1296             # knowledge how to do it, [s]he is expected to provide any
1297             # system-dependent compiler options that are necessary.  We
1298             # can't truly check that the given options are correct, but
1299             # we expect the user to know what [s]He is doing.
1300             if (!@{$config{CFLAGS}} && !@{$config{CPPDEFINES}}) {
1301                 die "You asked for multi-threading support, but didn't\n"
1302                     ,"provide any system-specific compiler options\n";
1303             }
1304         }
1305     }
1306 }
1307
1308 # Find out if clang's sanitizers have been enabled with -fsanitize
1309 # flags and ensure that the corresponding %disabled elements area
1310 # removed to reflect that the sanitizers are indeed enabled.
1311 my %detected_sanitizers = ();
1312 foreach (grep /^-fsanitize=/, @{$config{CFLAGS} || []}) {
1313     (my $checks = $_) =~ s/^-fsanitize=//;
1314     foreach (split /,/, $checks) {
1315         my $d = { address       => 'asan',
1316                   undefined     => 'ubsan',
1317                   memory        => 'msan' } -> {$_};
1318         next unless defined $d;
1319
1320         $detected_sanitizers{$d} = 1;
1321         if (defined $disabled{$d}) {
1322             die "***** Conflict between disabling $d and enabling $_ sanitizer"
1323                 if $disabled{$d} ne "default";
1324             delete $disabled{$d};
1325         }
1326     }
1327 }
1328
1329 # If threads still aren't disabled, add a C macro to ensure the source
1330 # code knows about it.  Any other flag is taken care of by the configs.
1331 unless($disabled{threads}) {
1332     push @{$config{openssl_feature_defines}}, "OPENSSL_THREADS";
1333 }
1334
1335 # With "deprecated" disable all deprecated features.
1336 if (defined($disabled{"deprecated"})) {
1337         $config{api} = $maxapi;
1338 }
1339
1340 my $no_shared_warn=0;
1341 if ($target{shared_target} eq "")
1342         {
1343         $no_shared_warn = 1
1344             if (!$disabled{shared} || !$disabled{"dynamic-engine"});
1345         disable('no-shared-target', 'pic');
1346         }
1347
1348 if ($disabled{"dynamic-engine"}) {
1349         push @{$config{openssl_feature_defines}}, "OPENSSL_NO_DYNAMIC_ENGINE";
1350         $config{dynamic_engines} = 0;
1351 } else {
1352         push @{$config{openssl_feature_defines}}, "OPENSSL_NO_STATIC_ENGINE";
1353         $config{dynamic_engines} = 1;
1354 }
1355
1356 unless ($disabled{asan} || defined $detected_sanitizers{asan}) {
1357     push @{$config{cflags}}, "-fsanitize=address";
1358 }
1359
1360 unless ($disabled{ubsan} || defined $detected_sanitizers{ubsan}) {
1361     # -DPEDANTIC or -fnosanitize=alignment may also be required on some
1362     # platforms.
1363     push @{$config{cflags}}, "-fsanitize=undefined", "-fno-sanitize-recover=all";
1364 }
1365
1366 unless ($disabled{msan} || defined $detected_sanitizers{msan}) {
1367   push @{$config{cflags}}, "-fsanitize=memory";
1368 }
1369
1370 unless ($disabled{"fuzz-libfuzzer"} && $disabled{"fuzz-afl"}
1371         && $disabled{asan} && $disabled{ubsan} && $disabled{msan}) {
1372     push @{$config{cflags}}, "-fno-omit-frame-pointer", "-g";
1373     push @{$config{cxxflags}}, "-fno-omit-frame-pointer", "-g" if $config{CXX};
1374 }
1375 #
1376 # Platform fix-ups
1377 #
1378
1379 # This saves the build files from having to check
1380 if ($disabled{pic})
1381         {
1382         foreach (qw(shared_cflag shared_cxxflag shared_cppflag
1383                     shared_defines shared_includes shared_ldflag
1384                     module_cflags module_cxxflags module_cppflags
1385                     module_defines module_includes module_lflags))
1386                 {
1387                 delete $config{$_};
1388                 $target{$_} = "";
1389                 }
1390         }
1391 else
1392         {
1393         push @{$config{lib_defines}}, "OPENSSL_PIC";
1394         }
1395
1396 if ($target{sys_id} ne "")
1397         {
1398         push @{$config{openssl_sys_defines}}, "OPENSSL_SYS_$target{sys_id}";
1399         }
1400
1401 unless ($disabled{asm}) {
1402     $target{cpuid_asm_src}=$table{DEFAULTS}->{cpuid_asm_src} if ($config{processor} eq "386");
1403     push @{$config{lib_defines}}, "OPENSSL_CPUID_OBJ" if ($target{cpuid_asm_src} ne "mem_clr.c");
1404
1405     $target{bn_asm_src} =~ s/\w+-gf2m.c// if (defined($disabled{ec2m}));
1406
1407     # bn-586 is the only one implementing bn_*_part_words
1408     push @{$config{lib_defines}}, "OPENSSL_BN_ASM_PART_WORDS" if ($target{bn_asm_src} =~ /bn-586/);
1409     push @{$config{lib_defines}}, "OPENSSL_IA32_SSE2" if (!$disabled{sse2} && $target{bn_asm_src} =~ /86/);
1410
1411     push @{$config{lib_defines}}, "OPENSSL_BN_ASM_MONT" if ($target{bn_asm_src} =~ /-mont/);
1412     push @{$config{lib_defines}}, "OPENSSL_BN_ASM_MONT5" if ($target{bn_asm_src} =~ /-mont5/);
1413     push @{$config{lib_defines}}, "OPENSSL_BN_ASM_GF2m" if ($target{bn_asm_src} =~ /-gf2m/);
1414     push @{$config{lib_defines}}, "BN_DIV3W" if ($target{bn_asm_src} =~ /-div3w/);
1415
1416     if ($target{sha1_asm_src}) {
1417         push @{$config{lib_defines}}, "SHA1_ASM"   if ($target{sha1_asm_src} =~ /sx86/ || $target{sha1_asm_src} =~ /sha1/);
1418         push @{$config{lib_defines}}, "SHA256_ASM" if ($target{sha1_asm_src} =~ /sha256/);
1419         push @{$config{lib_defines}}, "SHA512_ASM" if ($target{sha1_asm_src} =~ /sha512/);
1420     }
1421     if ($target{keccak1600_asm_src} ne $table{DEFAULTS}->{keccak1600_asm_src}) {
1422         push @{$config{lib_defines}}, "KECCAK1600_ASM";
1423     }
1424     if ($target{rc4_asm_src} ne $table{DEFAULTS}->{rc4_asm_src}) {
1425         push @{$config{lib_defines}}, "RC4_ASM";
1426     }
1427     if ($target{md5_asm_src}) {
1428         push @{$config{lib_defines}}, "MD5_ASM";
1429     }
1430     $target{cast_asm_src}=$table{DEFAULTS}->{cast_asm_src} unless $disabled{pic}; # CAST assembler is not PIC
1431     if ($target{rmd160_asm_src}) {
1432         push @{$config{lib_defines}}, "RMD160_ASM";
1433     }
1434     if ($target{aes_asm_src}) {
1435         push @{$config{lib_defines}}, "AES_ASM" if ($target{aes_asm_src} =~ m/\baes-/);;
1436         # aes-ctr.fake is not a real file, only indication that assembler
1437         # module implements AES_ctr32_encrypt...
1438         push @{$config{lib_defines}}, "AES_CTR_ASM" if ($target{aes_asm_src} =~ s/\s*aes-ctr\.fake//);
1439         # aes-xts.fake indicates presence of AES_xts_[en|de]crypt...
1440         push @{$config{lib_defines}}, "AES_XTS_ASM" if ($target{aes_asm_src} =~ s/\s*aes-xts\.fake//);
1441         $target{aes_asm_src} =~ s/\s*(vpaes|aesni)-x86\.s//g if ($disabled{sse2});
1442         push @{$config{lib_defines}}, "VPAES_ASM" if ($target{aes_asm_src} =~ m/vpaes/);
1443         push @{$config{lib_defines}}, "BSAES_ASM" if ($target{aes_asm_src} =~ m/bsaes/);
1444     }
1445     if ($target{wp_asm_src} =~ /mmx/) {
1446         if ($config{processor} eq "386") {
1447             $target{wp_asm_src}=$table{DEFAULTS}->{wp_asm_src};
1448         } elsif (!$disabled{"whirlpool"}) {
1449             push @{$config{lib_defines}}, "WHIRLPOOL_ASM";
1450         }
1451     }
1452     if ($target{modes_asm_src} =~ /ghash-/) {
1453         push @{$config{lib_defines}}, "GHASH_ASM";
1454     }
1455     if ($target{ec_asm_src} =~ /ecp_nistz256/) {
1456         push @{$config{lib_defines}}, "ECP_NISTZ256_ASM";
1457     }
1458     if ($target{ec_asm_src} =~ /x25519/) {
1459         push @{$config{lib_defines}}, "X25519_ASM";
1460     }
1461     if ($target{padlock_asm_src} ne $table{DEFAULTS}->{padlock_asm_src}) {
1462         push @{$config{dso_defines}}, "PADLOCK_ASM";
1463     }
1464     if ($target{poly1305_asm_src} ne "") {
1465         push @{$config{lib_defines}}, "POLY1305_ASM";
1466     }
1467 }
1468
1469 my %predefined_C = compiler_predefined($config{CROSS_COMPILE}.$config{CC});
1470 my %predefined_CXX = $config{CXX}
1471     ? compiler_predefined($config{CROSS_COMPILE}.$config{CXX})
1472     : ();
1473
1474 # Check for makedepend capabilities.
1475 if (!$disabled{makedepend}) {
1476     if ($config{target} =~ /^(VC|vms)-/) {
1477         # For VC- and vms- targets, there's nothing more to do here.  The
1478         # functionality is hard coded in the corresponding build files for
1479         # cl (Windows) and CC/DECC (VMS).
1480     } elsif (($predefined_C{__GNUC__} // -1) >= 3
1481              && !($predefined_C{__APPLE_CC__} && !$predefined_C{__clang__})) {
1482         # We know that GNU C version 3 and up as well as all clang
1483         # versions support dependency generation, but Xcode did not
1484         # handle $cc -M before clang support (but claims __GNUC__ = 3)
1485         $config{makedepprog} = "\$(CROSS_COMPILE)$config{CC}";
1486     } else {
1487         # In all other cases, we look for 'makedepend', and disable the
1488         # capability if not found.
1489         $config{makedepprog} = which('makedepend');
1490         disable('unavailable', 'makedepend') unless $config{makedepprog};
1491     }
1492 }
1493
1494 if (!$disabled{asm} && !$predefined_C{__MACH__} && $^O ne 'VMS') {
1495     # probe for -Wa,--noexecstack option...
1496     if ($predefined_C{__clang__}) {
1497         # clang has builtin assembler, which doesn't recognize --help,
1498         # but it apparently recognizes the option in question on all
1499         # supported platforms even when it's meaningless. In other words
1500         # probe would fail, but probed option always accepted...
1501         push @{$config{cflags}}, "-Wa,--noexecstack", "-Qunused-arguments";
1502     } else {
1503         my $cc = $config{CROSS_COMPILE}.$config{CC};
1504         open(PIPE, "$cc -Wa,--help -c -o null.$$.o -x assembler /dev/null 2>&1 |");
1505         while(<PIPE>) {
1506             if (m/--noexecstack/) {
1507                 push @{$config{cflags}}, "-Wa,--noexecstack";
1508                 last;
1509             }
1510         }
1511         close(PIPE);
1512         unlink("null.$$.o");
1513     }
1514 }
1515
1516 # Deal with bn_ops ###################################################
1517
1518 $config{bn_ll}                  =0;
1519 $config{export_var_as_fn}       =0;
1520 my $def_int="unsigned int";
1521 $config{rc4_int}                =$def_int;
1522 ($config{b64l},$config{b64},$config{b32})=(0,0,1);
1523
1524 my $count = 0;
1525 foreach (sort split(/\s+/,$target{bn_ops})) {
1526     $count++ if /SIXTY_FOUR_BIT|SIXTY_FOUR_BIT_LONG|THIRTY_TWO_BIT/;
1527     $config{export_var_as_fn}=1                 if $_ eq 'EXPORT_VAR_AS_FN';
1528     $config{bn_ll}=1                            if $_ eq 'BN_LLONG';
1529     $config{rc4_int}="unsigned char"            if $_ eq 'RC4_CHAR';
1530     ($config{b64l},$config{b64},$config{b32})
1531         =(0,1,0)                                if $_ eq 'SIXTY_FOUR_BIT';
1532     ($config{b64l},$config{b64},$config{b32})
1533         =(1,0,0)                                if $_ eq 'SIXTY_FOUR_BIT_LONG';
1534     ($config{b64l},$config{b64},$config{b32})
1535         =(0,0,1)                                if $_ eq 'THIRTY_TWO_BIT';
1536 }
1537 die "Exactly one of SIXTY_FOUR_BIT|SIXTY_FOUR_BIT_LONG|THIRTY_TWO_BIT can be set in bn_ops\n"
1538     if $count > 1;
1539
1540
1541 # Hack cflags for better warnings (dev option) #######################
1542
1543 # "Stringify" the C and C++ flags string.  This permits it to be made part of
1544 # a string and works as well on command lines.
1545 $config{cflags} = [ map { (my $x = $_) =~ s/([\\\"])/\\$1/g; $x }
1546                         @{$config{cflags}} ];
1547 $config{cxxflags} = [ map { (my $x = $_) =~ s/([\\\"])/\\$1/g; $x }
1548                           @{$config{cxxflags}} ] if $config{CXX};
1549
1550 $config{openssl_api_defines} = [
1551     "OPENSSL_MIN_API=".($apitable->{$config{api} // ""} // -1)
1552 ];
1553
1554 my @strict_warnings_collection=();
1555 if ($strict_warnings)
1556         {
1557         my $wopt;
1558         my $gccver = $predefined_C{__GNUC__} // -1;
1559
1560         warn "WARNING --strict-warnings requires gcc[>=4] or gcc-alike"
1561             unless $gccver >= 4;
1562         push @strict_warnings_collection, @gcc_devteam_warn;
1563         push @strict_warnings_collection, @clang_devteam_warn
1564             if (defined($predefined_C{__clang__}));
1565         }
1566
1567 if (grep { $_ eq '-static' } @{$config{LDFLAGS}}) {
1568     disable('static', 'pic', 'threads');
1569 }
1570
1571 $config{CFLAGS} = [ map { $_ eq '--ossl-strict-warnings'
1572                               ? @strict_warnings_collection
1573                               : ( $_ ) }
1574                     @{$config{CFLAGS}} ];
1575
1576 unless ($disabled{"crypto-mdebug-backtrace"})
1577         {
1578         foreach my $wopt (split /\s+/, $memleak_devteam_backtrace)
1579                 {
1580                 push @{$config{cflags}}, $wopt
1581                         unless grep { $_ eq $wopt } @{$config{cflags}};
1582                 }
1583         if ($target =~ /^BSD-/)
1584                 {
1585                 push @{$config{ex_libs}}, "-lexecinfo";
1586                 }
1587         }
1588
1589 unless ($disabled{afalgeng}) {
1590     $config{afalgeng}="";
1591     if (grep { $_ eq 'afalgeng' } @{$target{enable}}) {
1592         my $minver = 4*10000 + 1*100 + 0;
1593         if ($config{CROSS_COMPILE} eq "") {
1594             my $verstr = `uname -r`;
1595             my ($ma, $mi1, $mi2) = split("\\.", $verstr);
1596             ($mi2) = $mi2 =~ /(\d+)/;
1597             my $ver = $ma*10000 + $mi1*100 + $mi2;
1598             if ($ver < $minver) {
1599                 disable('too-old-kernel', 'afalgeng');
1600             } else {
1601                 push @{$config{engdirs}}, "afalg";
1602             }
1603         } else {
1604             disable('cross-compiling', 'afalgeng');
1605         }
1606     } else {
1607         disable('not-linux', 'afalgeng');
1608     }
1609 }
1610
1611 push @{$config{openssl_feature_defines}}, "OPENSSL_NO_AFALGENG" if ($disabled{afalgeng});
1612
1613 unless ($disabled{ktls}) {
1614     $config{ktls}="";
1615     if ($target =~ m/^linux/) {
1616         my $usr = "/usr/$config{cross_compile_prefix}";
1617         chop($usr);
1618         if ($config{cross_compile_prefix} eq "") {
1619             $usr = "/usr";
1620         }
1621         my $minver = (4 << 16) + (13 << 8) + 0;
1622         my @verstr = split(" ",`cat $usr/include/linux/version.h | grep LINUX_VERSION_CODE`);
1623
1624         if ($verstr[2] < $minver) {
1625             disable('too-old-kernel', 'ktls');
1626         }
1627     } else {
1628         disable('not-linux', 'ktls');
1629     }
1630 }
1631
1632 push @{$config{openssl_other_defines}}, "OPENSSL_NO_KTLS" if ($disabled{ktls});
1633
1634 # Get the extra flags used when building shared libraries and modules.  We
1635 # do this late because some of them depend on %disabled.
1636
1637 # Make the flags to build DSOs the same as for shared libraries unless they
1638 # are already defined
1639 $target{module_cflags} = $target{shared_cflag} unless defined $target{module_cflags};
1640 $target{module_cxxflags} = $target{shared_cxxflag} unless defined $target{module_cxxflags};
1641 $target{module_ldflags} = $target{shared_ldflag} unless defined $target{module_ldflags};
1642 {
1643     my $shared_info_pl =
1644         catfile(dirname($0), "Configurations", "shared-info.pl");
1645     my %shared_info = read_eval_file($shared_info_pl);
1646     push @{$target{_conf_fname_int}}, $shared_info_pl;
1647     my $si = $target{shared_target};
1648     while (ref $si ne "HASH") {
1649         last if ! defined $si;
1650         if (ref $si eq "CODE") {
1651             $si = $si->();
1652         } else {
1653             $si = $shared_info{$si};
1654         }
1655     }
1656
1657     # Some of the 'shared_target' values don't have any entries in
1658     # %shared_info.  That's perfectly fine, AS LONG AS the build file
1659     # template knows how to handle this.  That is currently the case for
1660     # Windows and VMS.
1661     if (defined $si) {
1662         # Just as above, copy certain shared_* attributes to the corresponding
1663         # module_ attribute unless the latter is already defined
1664         $si->{module_cflags} = $si->{shared_cflag} unless defined $si->{module_cflags};
1665         $si->{module_cxxflags} = $si->{shared_cxxflag} unless defined $si->{module_cxxflags};
1666         $si->{module_ldflags} = $si->{shared_ldflag} unless defined $si->{module_ldflags};
1667         foreach (sort keys %$si) {
1668             $target{$_} = defined $target{$_}
1669                 ? add($si->{$_})->($target{$_})
1670                 : $si->{$_};
1671         }
1672     }
1673 }
1674
1675 # ALL MODIFICATIONS TO %disabled, %config and %target MUST BE DONE FROM HERE ON
1676
1677 # If we use the unified build, collect information from build.info files
1678 my %unified_info = ();
1679
1680 my $buildinfo_debug = defined($ENV{CONFIGURE_DEBUG_BUILDINFO});
1681 if ($builder eq "unified") {
1682     use with_fallback qw(Text::Template);
1683
1684     sub cleandir {
1685         my $base = shift;
1686         my $dir = shift;
1687         my $relativeto = shift || ".";
1688
1689         $dir = catdir($base,$dir) unless isabsolute($dir);
1690
1691         # Make sure the directories we're building in exists
1692         mkpath($dir);
1693
1694         my $res = abs2rel(absolutedir($dir), rel2abs($relativeto));
1695         #print STDERR "DEBUG[cleandir]: $dir , $base => $res\n";
1696         return $res;
1697     }
1698
1699     sub cleanfile {
1700         my $base = shift;
1701         my $file = shift;
1702         my $relativeto = shift || ".";
1703
1704         $file = catfile($base,$file) unless isabsolute($file);
1705
1706         my $d = dirname($file);
1707         my $f = basename($file);
1708
1709         # Make sure the directories we're building in exists
1710         mkpath($d);
1711
1712         my $res = abs2rel(catfile(absolutedir($d), $f), rel2abs($relativeto));
1713         #print STDERR "DEBUG[cleanfile]: $d , $f => $res\n";
1714         return $res;
1715     }
1716
1717     # Store the name of the template file we will build the build file from
1718     # in %config.  This may be useful for the build file itself.
1719     my @build_file_template_names =
1720         ( $builder_platform."-".$target{build_file}.".tmpl",
1721           $target{build_file}.".tmpl" );
1722     my @build_file_templates = ();
1723
1724     # First, look in the user provided directory, if given
1725     if (defined env($local_config_envname)) {
1726         @build_file_templates =
1727             map {
1728                 if ($^O eq 'VMS') {
1729                     # VMS environment variables are logical names,
1730                     # which can be used as is
1731                     $local_config_envname . ':' . $_;
1732                 } else {
1733                     catfile(env($local_config_envname), $_);
1734                 }
1735             }
1736             @build_file_template_names;
1737     }
1738     # Then, look in our standard directory
1739     push @build_file_templates,
1740         ( map { cleanfile($srcdir, catfile("Configurations", $_), $blddir) }
1741           @build_file_template_names );
1742
1743     my $build_file_template;
1744     for $_ (@build_file_templates) {
1745         $build_file_template = $_;
1746         last if -f $build_file_template;
1747
1748         $build_file_template = undef;
1749     }
1750     if (!defined $build_file_template) {
1751         die "*** Couldn't find any of:\n", join("\n", @build_file_templates), "\n";
1752     }
1753     $config{build_file_templates}
1754       = [ cleanfile($srcdir, catfile("Configurations", "common0.tmpl"),
1755                     $blddir),
1756           $build_file_template,
1757           cleanfile($srcdir, catfile("Configurations", "common.tmpl"),
1758                     $blddir) ];
1759
1760     my @build_dirs = ( [ ] );   # current directory
1761
1762     $config{build_infos} = [ ];
1763
1764     my %ordinals = ();
1765     while (@build_dirs) {
1766         my @curd = @{shift @build_dirs};
1767         my $sourced = catdir($srcdir, @curd);
1768         my $buildd = catdir($blddir, @curd);
1769
1770         my $unixdir = join('/', @curd);
1771         if (exists $skipdir{$unixdir}) {
1772             my $what = $skipdir{$unixdir};
1773             push @{$disabled_info{$what}->{skipped}}, catdir(@curd);
1774             next;
1775         }
1776
1777         mkpath($buildd);
1778
1779         my $f = 'build.info';
1780         # The basic things we're trying to build
1781         my @programs = ();
1782         my @libraries = ();
1783         my @modules = ();
1784         my @scripts = ();
1785
1786         my %attributes = ();
1787         my %sources = ();
1788         my %shared_sources = ();
1789         my %includes = ();
1790         my %defines = ();
1791         my %depends = ();
1792         my %generate = ();
1793
1794         # We want to detect configdata.pm in the source tree, so we
1795         # don't use it if the build tree is different.
1796         my $src_configdata = cleanfile($srcdir, "configdata.pm", $blddir);
1797
1798         push @{$config{build_infos}}, catfile(abs2rel($sourced, $blddir), $f);
1799         my $template =
1800             Text::Template->new(TYPE => 'FILE',
1801                                 SOURCE => catfile($sourced, $f),
1802                                 PREPEND => qq{use lib "$FindBin::Bin/util/perl";});
1803         die "Something went wrong with $sourced/$f: $!\n" unless $template;
1804         my @text =
1805             split /^/m,
1806             $template->fill_in(HASH => { config => \%config,
1807                                          target => \%target,
1808                                          disabled => \%disabled,
1809                                          withargs => \%withargs,
1810                                          builddir => abs2rel($buildd, $blddir),
1811                                          sourcedir => abs2rel($sourced, $blddir),
1812                                          buildtop => abs2rel($blddir, $blddir),
1813                                          sourcetop => abs2rel($srcdir, $blddir) },
1814                                DELIMITERS => [ "{-", "-}" ]);
1815
1816         # The top item of this stack has the following values
1817         # -2 positive already run and we found ELSE (following ELSIF should fail)
1818         # -1 positive already run (skip until ENDIF)
1819         # 0 negatives so far (if we're at a condition, check it)
1820         # 1 last was positive (don't skip lines until next ELSE, ELSIF or ENDIF)
1821         # 2 positive ELSE (following ELSIF should fail)
1822         my @skip = ();
1823         collect_information(
1824             collect_from_array([ @text ],
1825                                qr/\\$/ => sub { my $l1 = shift; my $l2 = shift;
1826                                                 $l1 =~ s/\\$//; $l1.$l2 }),
1827             # Info we're looking for
1828             qr/^\s*IF\[((?:\\.|[^\\\]])*)\]\s*$/
1829             => sub {
1830                 if (! @skip || $skip[$#skip] > 0) {
1831                     push @skip, !! $1;
1832                 } else {
1833                     push @skip, -1;
1834                 }
1835             },
1836             qr/^\s*ELSIF\[((?:\\.|[^\\\]])*)\]\s*$/
1837             => sub { die "ELSIF out of scope" if ! @skip;
1838                      die "ELSIF following ELSE" if abs($skip[$#skip]) == 2;
1839                      $skip[$#skip] = -1 if $skip[$#skip] != 0;
1840                      $skip[$#skip] = !! $1
1841                          if $skip[$#skip] == 0; },
1842             qr/^\s*ELSE\s*$/
1843             => sub { die "ELSE out of scope" if ! @skip;
1844                      $skip[$#skip] = -2 if $skip[$#skip] != 0;
1845                      $skip[$#skip] = 2 if $skip[$#skip] == 0; },
1846             qr/^\s*ENDIF\s*$/
1847             => sub { die "ENDIF out of scope" if ! @skip;
1848                      pop @skip; },
1849             qr/^\s*SUBDIRS\s*=\s*(.*)\s*$/
1850             => sub {
1851                 if (!@skip || $skip[$#skip] > 0) {
1852                     foreach (tokenize($1)) {
1853                         push @build_dirs, [ @curd, splitdir($_, 1) ];
1854                     }
1855                 }
1856             },
1857             qr/^\s*PROGRAMS(?:{([\w=]+(?:\s*,\s*[\w=]+)*)})?\s*=\s*(.*)\s*$/
1858             => sub {
1859                 if (!@skip || $skip[$#skip] > 0) {
1860                     my @a = tokenize($1, qr|\s*,\s*|);
1861                     my @p = tokenize($2);
1862                     push @programs, @p;
1863                     foreach my $a (@a) {
1864                         my $ak = $a;
1865                         my $av = 1;
1866                         if ($a =~ m|^(.*?)\s*=\s*(.*?)$|) {
1867                             $ak = $1;
1868                             $av = $2;
1869                         }
1870                         foreach my $p (@p) {
1871                             $attributes{$p}->{$ak} = $av;
1872                         }
1873                     }
1874                 }
1875             },
1876             qr/^\s*LIBS(?:{([\w=]+(?:\s*,\s*[\w=]+)*)})?\s*=\s*(.*)\s*$/
1877             => sub {
1878                 if (!@skip || $skip[$#skip] > 0) {
1879                     my @a = tokenize($1, qr|\s*,\s*|);
1880                     my @l = tokenize($2);
1881                     push @libraries, @l;
1882                     foreach my $a (@a) {
1883                         my $ak = $a;
1884                         my $av = 1;
1885                         if ($a =~ m|^(.*?)\s*=\s*(.*?)$|) {
1886                             $ak = $1;
1887                             $av = $2;
1888                         }
1889                         foreach my $l (@l) {
1890                             $attributes{$l}->{$ak} = $av;
1891                         }
1892                     }
1893                 }
1894             },
1895             qr/^\s*MODULES(?:{([\w=]+(?:\s*,\s*[\w=]+)*)})?\s*=\s*(.*)\s*$/
1896             => sub {
1897                 if (!@skip || $skip[$#skip] > 0) {
1898                     my @a = tokenize($1, qr|\s*,\s*|);
1899                     my @m = tokenize($2);
1900                     push @modules, @m;
1901                     foreach my $a (@a) {
1902                         my $ak = $a;
1903                         my $av = 1;
1904                         if ($a =~ m|^(.*?)\s*=\s*(.*?)$|) {
1905                             $ak = $1;
1906                             $av = $2;
1907                         }
1908                         foreach my $m (@m) {
1909                             $attributes{$m}->{$ak} = $av;
1910                         }
1911                     }
1912                 }
1913             },
1914             qr/^\s*SCRIPTS(?:{([\w=]+(?:\s*,\s*[\w=]+)*)})?\s*=\s*(.*)\s*$/
1915             => sub {
1916                 if (!@skip || $skip[$#skip] > 0) {
1917                     my @a = tokenize($1, qr|\s*,\s*|);
1918                     my @s = tokenize($2);
1919                     push @scripts, @s;
1920                     foreach my $a (@a) {
1921                         my $ak = $a;
1922                         my $av = 1;
1923                         if ($a =~ m|^(.*?)\s*=\s*(.*?)$|) {
1924                             $ak = $1;
1925                             $av = $2;
1926                         }
1927                         foreach my $s (@s) {
1928                             $attributes{$s}->{$ak} = $av;
1929                         }
1930                     }
1931                 }
1932             },
1933
1934             qr/^\s*ORDINALS\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/,
1935             => sub { push @{$ordinals{$1}}, tokenize($2)
1936                          if !@skip || $skip[$#skip] > 0 },
1937             qr/^\s*SOURCE\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
1938             => sub { push @{$sources{$1}}, tokenize($2)
1939                          if !@skip || $skip[$#skip] > 0 },
1940             qr/^\s*SHARED_SOURCE\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
1941             => sub { push @{$shared_sources{$1}}, tokenize($2)
1942                          if !@skip || $skip[$#skip] > 0 },
1943             qr/^\s*INCLUDE\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
1944             => sub { push @{$includes{$1}}, tokenize($2)
1945                          if !@skip || $skip[$#skip] > 0 },
1946             qr/^\s*DEFINE\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
1947             => sub { push @{$defines{$1}}, tokenize($2)
1948                          if !@skip || $skip[$#skip] > 0 },
1949             qr/^\s*DEPEND\[((?:\\.|[^\\\]])*)\]\s*=\s*(.*)\s*$/
1950             => sub { push @{$depends{$1}}, tokenize($2)
1951                          if !@skip || $skip[$#skip] > 0 },
1952             qr/^\s*GENERATE\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
1953             => sub { push @{$generate{$1}}, $2
1954                          if !@skip || $skip[$#skip] > 0 },
1955             qr/^\s*(?:#.*)?$/ => sub { },
1956             "OTHERWISE" => sub { die "Something wrong with this line:\n$_\nat $sourced/$f" },
1957             "BEFORE" => sub {
1958                 if ($buildinfo_debug) {
1959                     print STDERR "DEBUG: Parsing ",join(" ", @_),"\n";
1960                     print STDERR "DEBUG: ... before parsing, skip stack is ",join(" ", map { int($_) } @skip),"\n";
1961                 }
1962             },
1963             "AFTER" => sub {
1964                 if ($buildinfo_debug) {
1965                     print STDERR "DEBUG: .... after parsing, skip stack is ",join(" ", map { int($_) } @skip),"\n";
1966                 }
1967             },
1968             );
1969         die "runaway IF?" if (@skip);
1970
1971         if (grep { defined $attributes{$_}->{engine} } keys %attributes
1972                 and !$config{dynamic_engines}) {
1973             die <<"EOF"
1974 ENGINES can only be used if configured with 'dynamic-engine'.
1975 This is usually a fault in a build.info file.
1976 EOF
1977         }
1978
1979         foreach (keys %attributes) {
1980             my $dest = $_;
1981             my $ddest = cleanfile($buildd, $_, $blddir);
1982             foreach (keys %{$attributes{$dest} // {}}) {
1983                 $unified_info{attributes}->{$ddest}->{$_} =
1984                     $attributes{$dest}->{$_};
1985             }
1986         }
1987
1988         {
1989             my %infos = ( programs  => [ @programs  ],
1990                           libraries => [ @libraries ],
1991                           modules   => [ @modules   ],
1992                           scripts   => [ @scripts   ] );
1993             foreach my $k (keys %infos) {
1994                 foreach (@{$infos{$k}}) {
1995                     my $item = cleanfile($buildd, $_, $blddir);
1996                     $unified_info{$k}->{$item} = 1;
1997                 }
1998             }
1999         }
2000
2001         # Check that we haven't defined any library as both shared and
2002         # explicitly static.  That is forbidden.
2003         my @doubles = ();
2004         foreach (grep /\.a$/, keys %{$unified_info{libraries}}) {
2005             (my $l = $_) =~ s/\.a$//;
2006             push @doubles, $l if defined $unified_info{libraries}->{$l};
2007         }
2008         die "these libraries are both explicitly static and shared:\n  ",
2009             join(" ", @doubles), "\n"
2010             if @doubles;
2011
2012         foreach (keys %sources) {
2013             my $dest = $_;
2014             my $ddest = cleanfile($buildd, $_, $blddir);
2015             foreach (@{$sources{$dest}}) {
2016                 my $s = cleanfile($sourced, $_, $blddir);
2017
2018                 # If it isn't in the source tree, we assume it's generated
2019                 # in the build tree
2020                 if ($s eq $src_configdata || ! -f $s || $generate{$_}) {
2021                     $s = cleanfile($buildd, $_, $blddir);
2022                 }
2023                 # We recognise C++, C and asm files
2024                 if ($s =~ /\.(cc|cpp|c|s|S)$/) {
2025                     my $o = $_;
2026                     $o =~ s/\.[csS]$/.o/; # C and assembler
2027                     $o =~ s/\.(cc|cpp)$/_cc.o/; # C++
2028                     $o = cleanfile($buildd, $o, $blddir);
2029                     $unified_info{sources}->{$ddest}->{$o} = -1;
2030                     $unified_info{sources}->{$o}->{$s} = -1;
2031                 } elsif ($s =~ /\.rc$/) {
2032                     # We also recognise resource files
2033                     my $o = $_;
2034                     $o =~ s/\.rc$/.res/; # Resource configuration
2035                     my $o = cleanfile($buildd, $o, $blddir);
2036                     $unified_info{sources}->{$ddest}->{$o} = -1;
2037                     $unified_info{sources}->{$o}->{$s} = -1;
2038                 } else {
2039                     $unified_info{sources}->{$ddest}->{$s} = 1;
2040                 }
2041             }
2042         }
2043
2044         foreach (keys %shared_sources) {
2045             my $dest = $_;
2046             my $ddest = cleanfile($buildd, $_, $blddir);
2047             foreach (@{$shared_sources{$dest}}) {
2048                 my $s = cleanfile($sourced, $_, $blddir);
2049
2050                 # If it isn't in the source tree, we assume it's generated
2051                 # in the build tree
2052                 if ($s eq $src_configdata || ! -f $s || $generate{$_}) {
2053                     $s = cleanfile($buildd, $_, $blddir);
2054                 }
2055
2056                 if ($s =~ /\.(cc|cpp|c|s|S)$/) {
2057                     # We recognise C++, C and asm files
2058                     my $o = $_;
2059                     $o =~ s/\.[csS]$/.o/; # C and assembler
2060                     $o =~ s/\.(cc|cpp)$/_cc.o/; # C++
2061                     $o = cleanfile($buildd, $o, $blddir);
2062                     $unified_info{shared_sources}->{$ddest}->{$o} = -1;
2063                     $unified_info{sources}->{$o}->{$s} = -1;
2064                 } elsif ($s =~ /\.rc$/) {
2065                     # We also recognise resource files
2066                     my $o = $_;
2067                     $o =~ s/\.rc$/.res/; # Resource configuration
2068                     my $o = cleanfile($buildd, $o, $blddir);
2069                     $unified_info{shared_sources}->{$ddest}->{$o} = -1;
2070                     $unified_info{sources}->{$o}->{$s} = -1;
2071                 } elsif ($s =~ /\.ld$/) {
2072                     # We also recognise linker scripts (or corresponding)
2073                     # We know they are generated files
2074                     my $ld = cleanfile($buildd, $_, $blddir);
2075                     $unified_info{shared_sources}->{$ddest}->{$ld} = 1;
2076                 } else {
2077                     die "unrecognised source file type for shared library: $s\n";
2078                 }
2079             }
2080         }
2081
2082         foreach (keys %generate) {
2083             my $dest = $_;
2084             my $ddest = cleanfile($buildd, $_, $blddir);
2085             die "more than one generator for $dest: "
2086                     ,join(" ", @{$generate{$_}}),"\n"
2087                     if scalar @{$generate{$_}} > 1;
2088             my @generator = split /\s+/, $generate{$dest}->[0];
2089             $generator[0] = cleanfile($sourced, $generator[0], $blddir),
2090             $unified_info{generate}->{$ddest} = [ @generator ];
2091         }
2092
2093         foreach (keys %depends) {
2094             my $dest = $_;
2095             my $ddest = $dest eq "" ? "" : cleanfile($sourced, $_, $blddir);
2096
2097             # If the destination doesn't exist in source, it can only be
2098             # a generated file in the build tree.
2099             if ($ddest ne "" && ($ddest eq $src_configdata || ! -f $ddest)) {
2100                 $ddest = cleanfile($buildd, $_, $blddir);
2101             }
2102             foreach (@{$depends{$dest}}) {
2103                 my $d = cleanfile($sourced, $_, $blddir);
2104
2105                 # If we know it's generated, or assume it is because we can't
2106                 # find it in the source tree, we set file we depend on to be
2107                 # in the build tree rather than the source tree, and assume
2108                 # and that there are lines to build it in a BEGINRAW..ENDRAW
2109                 # section or in the Makefile template.
2110                 if ($d eq $src_configdata
2111                     || ! -f $d
2112                     || (grep { $d eq $_ }
2113                         map { cleanfile($srcdir, $_, $blddir) }
2114                         grep { /\.h$/ } keys %{$unified_info{generate}})) {
2115                     $d = cleanfile($buildd, $_, $blddir);
2116                 }
2117                 # Take note if the file to depend on is being renamed
2118                 # Take extra care with files ending with .a, they should
2119                 # be treated without that extension, and the extension
2120                 # should be added back after treatment.
2121                 $d =~ /(\.a)?$/;
2122                 my $e = $1 // "";
2123                 $d = $`.$e;
2124                 $unified_info{depends}->{$ddest}->{$d} = 1;
2125             }
2126         }
2127
2128         foreach (keys %includes) {
2129             my $dest = $_;
2130             my $ddest = cleanfile($sourced, $_, $blddir);
2131
2132             # If the destination doesn't exist in source, it can only be
2133             # a generated file in the build tree.
2134             if ($ddest eq $src_configdata || ! -f $ddest) {
2135                 $ddest = cleanfile($buildd, $_, $blddir);
2136             }
2137             foreach (@{$includes{$dest}}) {
2138                 my $is = cleandir($sourced, $_, $blddir);
2139                 my $ib = cleandir($buildd, $_, $blddir);
2140                 push @{$unified_info{includes}->{$ddest}->{source}}, $is
2141                     unless grep { $_ eq $is } @{$unified_info{includes}->{$ddest}->{source}};
2142                 push @{$unified_info{includes}->{$ddest}->{build}}, $ib
2143                     unless grep { $_ eq $ib } @{$unified_info{includes}->{$ddest}->{build}};
2144             }
2145         }
2146
2147         foreach (keys %defines) {
2148             my $dest = $_;
2149             my $ddest = cleanfile($sourced, $_, $blddir);
2150
2151             # If the destination doesn't exist in source, it can only be
2152             # a generated file in the build tree.
2153             if (! -f $ddest) {
2154                 $ddest = cleanfile($buildd, $_, $blddir);
2155                 if ($unified_info{rename}->{$ddest}) {
2156                     $ddest = $unified_info{rename}->{$ddest};
2157                 }
2158             }
2159             foreach (@{$defines{$dest}}) {
2160                 m|^([^=]*)(=.*)?$|;
2161                 die "0 length macro name not permitted\n" if $1 eq "";
2162                 die "$1 defined more than once\n"
2163                     if defined $unified_info{defines}->{$ddest}->{$1};
2164                 $unified_info{defines}->{$ddest}->{$1} = $2;
2165             }
2166         }
2167     }
2168
2169     my $ordinals_text = join(', ', sort keys %ordinals);
2170     warn <<"EOF" if $ordinals_text;
2171
2172 WARNING: ORDINALS were specified for $ordinals_text
2173 They are ignored and should be replaced with a combination of GENERATE,
2174 DEPEND and SHARED_SOURCE.
2175 EOF
2176
2177     # Massage the result
2178
2179     # If we depend on a header file or a perl module, add an inclusion of
2180     # its directory to allow smoothe inclusion
2181     foreach my $dest (keys %{$unified_info{depends}}) {
2182         next if $dest eq "";
2183         foreach my $d (keys %{$unified_info{depends}->{$dest}}) {
2184             next unless $d =~ /\.(h|pm)$/;
2185             my $i = dirname($d);
2186             my $spot =
2187                 $d eq "configdata.pm" || defined($unified_info{generate}->{$d})
2188                 ? 'build' : 'source';
2189             push @{$unified_info{includes}->{$dest}->{$spot}}, $i
2190                 unless grep { $_ eq $i } @{$unified_info{includes}->{$dest}->{$spot}};
2191         }
2192     }
2193
2194     # Go through all intermediary files and change their names to something that
2195     # reflects what they will be built for.  Note that for some source files,
2196     # this leads to duplicate object files because they are used multiple times.
2197     # the goal is to rename all object files according to this scheme:
2198     #    {productname}-{midfix}-{origobjname}.[o|res]
2199     # the {midfix} is a keyword indicating the type of product, which is mostly
2200     # valuable for libraries since they come in two forms.
2201     #
2202     # This also reorganises the {sources} and {shared_sources} so that the
2203     # former only contains ALL object files that are supposed to end up in
2204     # static libraries and programs, while the latter contains ALL object files
2205     # that are supposed to end up in shared libraries and DSOs.
2206     # The main reason for having two different source structures is to allow
2207     # the same name to be used for the static and the shared variants of a
2208     # library.
2209     {
2210         # Take copies so we don't get interference from added stuff
2211         my %unified_copy = ();
2212         foreach (('sources', 'shared_sources')) {
2213             $unified_copy{$_} = { %{$unified_info{$_}} }
2214                 if defined($unified_info{$_});
2215             delete $unified_info{$_};
2216         }
2217         foreach my $prodtype (('programs', 'libraries', 'modules', 'scripts')) {
2218             # $intent serves multi purposes:
2219             # - give a prefix for the new object files names
2220             # - in the case of libraries, rearrange the object files so static
2221             #   libraries use the 'sources' structure exclusively, while shared
2222             #   libraries use the 'shared_sources' structure exclusively.
2223             my $intent = {
2224                 programs  => { bin    => { src => [ 'sources' ],
2225                                            dst => 'sources' } },
2226                 libraries => { lib    => { src => [ 'sources' ],
2227                                            dst => 'sources' },
2228                                shlib  => { prodselect =>
2229                                                sub { grep !/\.a$/, @_ },
2230                                            src => [ 'sources',
2231                                                     'shared_sources' ],
2232                                            dst => 'shared_sources' } },
2233                 modules   => { dso    => { src => [ 'sources' ],
2234                                            dst => 'sources' } },
2235                 scripts   => { script => { src => [ 'sources' ],
2236                                            dst => 'sources' } }
2237                } -> {$prodtype};
2238             foreach my $kind (keys %$intent) {
2239                 next if ($intent->{$kind}->{dst} eq 'shared_sources'
2240                              && $disabled{shared});
2241
2242                 my @src = @{$intent->{$kind}->{src}};
2243                 my $dst = $intent->{$kind}->{dst};
2244                 my $prodselect = $intent->{$kind}->{prodselect} // sub { @_ };
2245                 foreach my $prod ($prodselect->(keys %{$unified_info{$prodtype}})) {
2246                     # %prod_sources has all applicable objects as keys, and
2247                     # their corresponding sources as values
2248                     my %prod_sources =
2249                         map { $_ => [ keys %{$unified_copy{sources}->{$_}} ] }
2250                         map { keys %{$unified_copy{$_}->{$prod}} }
2251                         @src;
2252                     foreach (keys %prod_sources) {
2253                         # Only affect object files and resource files,
2254                         # the others simply get a new value
2255                         # (+1 instead of -1)
2256                         if ($_ =~ /\.(o|res)$/) {
2257                             (my $prodname = $prod) =~ s|\.a$||;
2258                             my $newobj =
2259                                 catfile(dirname($_),
2260                                         basename($prodname)
2261                                             . '-' . $kind
2262                                             . '-' . basename($_));
2263                             $unified_info{$dst}->{$prod}->{$newobj} = 1;
2264                             foreach my $src (@{$prod_sources{$_}}) {
2265                                 $unified_info{sources}->{$newobj}->{$src} = 1;
2266                             }
2267                             # Adjust dependencies
2268                             foreach my $deps (keys %{$unified_info{depends}->{$_}}) {
2269                                 $unified_info{depends}->{$_}->{$deps} = -1;
2270                                 $unified_info{depends}->{$newobj}->{$deps} = 1;
2271                             }
2272                             # Adjust includes
2273                             foreach my $k (('source', 'build')) {
2274                                 next unless
2275                                     defined($unified_info{includes}->{$_}->{$k});
2276                                 my @incs = @{$unified_info{includes}->{$_}->{$k}};
2277                                 $unified_info{includes}->{$newobj}->{$k} = [ @incs ];
2278                             }
2279                         } else {
2280                             $unified_info{$dst}->{$prod}->{$_} = 1;
2281                         }
2282                     }
2283                 }
2284             }
2285         }
2286     }
2287     # At this point, we have a number of sources with the value -1.  They
2288     # aren't part of the local build and are probably meant for a different
2289     # platform, and can therefore be cleaned away.  That happens when making
2290     # %unified_info more efficient below.
2291
2292     ### Make unified_info a bit more efficient
2293     # One level structures
2294     foreach (("programs", "libraries", "modules", "scripts")) {
2295         $unified_info{$_} = [ sort keys %{$unified_info{$_}} ];
2296     }
2297     # Two level structures
2298     foreach my $l1 (("sources", "shared_sources", "ldadd", "depends")) {
2299         foreach my $l2 (sort keys %{$unified_info{$l1}}) {
2300             my @items =
2301                 sort
2302                 grep { $unified_info{$l1}->{$l2}->{$_} > 0 }
2303                 keys %{$unified_info{$l1}->{$l2}};
2304             if (@items) {
2305                 $unified_info{$l1}->{$l2} = [ @items ];
2306             } else {
2307                 delete $unified_info{$l1}->{$l2};
2308             }
2309         }
2310     }
2311     # Defines
2312     foreach my $dest (sort keys %{$unified_info{defines}}) {
2313         $unified_info{defines}->{$dest}
2314             = [ map { $_.$unified_info{defines}->{$dest}->{$_} }
2315                 sort keys %{$unified_info{defines}->{$dest}} ];
2316     }
2317     # Includes
2318     foreach my $dest (sort keys %{$unified_info{includes}}) {
2319         if (defined($unified_info{includes}->{$dest}->{build})) {
2320             my @source_includes = ();
2321             @source_includes = ( @{$unified_info{includes}->{$dest}->{source}} )
2322                 if defined($unified_info{includes}->{$dest}->{source});
2323             $unified_info{includes}->{$dest} =
2324                 [ @{$unified_info{includes}->{$dest}->{build}} ];
2325             foreach my $inc (@source_includes) {
2326                 push @{$unified_info{includes}->{$dest}}, $inc
2327                     unless grep { $_ eq $inc } @{$unified_info{includes}->{$dest}};
2328             }
2329         } elsif (defined($unified_info{includes}->{$dest}->{source})) {
2330             $unified_info{includes}->{$dest} =
2331                 [ @{$unified_info{includes}->{$dest}->{source}} ];
2332         } else {
2333             delete $unified_info{includes}->{$dest};
2334         }
2335     }
2336
2337     # For convenience collect information regarding directories where
2338     # files are generated, those generated files and the end product
2339     # they end up in where applicable.  Then, add build rules for those
2340     # directories
2341     my %loopinfo = ( "lib" => [ @{$unified_info{libraries}} ],
2342                      "dso" => [ @{$unified_info{modules}} ],
2343                      "bin" => [ @{$unified_info{programs}} ],
2344                      "script" => [ @{$unified_info{scripts}} ] );
2345     foreach my $type (keys %loopinfo) {
2346         foreach my $product (@{$loopinfo{$type}}) {
2347             my %dirs = ();
2348             my $pd = dirname($product);
2349
2350             foreach (@{$unified_info{sources}->{$product} // []},
2351                      @{$unified_info{shared_sources}->{$product} // []}) {
2352                 my $d = dirname($_);
2353
2354                 # We don't want to create targets for source directories
2355                 # when building out of source
2356                 next if ($config{sourcedir} ne $config{builddir}
2357                              && $d =~ m|^\Q$config{sourcedir}\E|);
2358                 # We already have a "test" target, and the current directory
2359                 # is just silly to make a target for
2360                 next if $d eq "test" || $d eq ".";
2361
2362                 $dirs{$d} = 1;
2363                 push @{$unified_info{dirinfo}->{$d}->{deps}}, $_
2364                     if $d ne $pd;
2365             }
2366             foreach (keys %dirs) {
2367                 push @{$unified_info{dirinfo}->{$_}->{products}->{$type}},
2368                     $product;
2369             }
2370         }
2371     }
2372 }
2373
2374 # For the schemes that need it, we provide the old *_obj configs
2375 # from the *_asm_obj ones
2376 foreach (grep /_(asm|aux)_src$/, keys %target) {
2377     my $src = $_;
2378     (my $obj = $_) =~ s/_(asm|aux)_src$/_obj/;
2379     $target{$obj} = $target{$src};
2380     $target{$obj} =~ s/\.[csS]\b/.o/g; # C and assembler
2381     $target{$obj} =~ s/\.(cc|cpp)\b/_cc.o/g; # C++
2382 }
2383
2384 # Write down our configuration where it fits #########################
2385
2386 print "Creating configdata.pm\n";
2387 open(OUT,">configdata.pm") || die "unable to create configdata.pm: $!\n";
2388 print OUT <<"EOF";
2389 #! $config{HASHBANGPERL}
2390
2391 package configdata;
2392
2393 use strict;
2394 use warnings;
2395
2396 use Exporter;
2397 #use vars qw(\@ISA \@EXPORT);
2398 our \@ISA = qw(Exporter);
2399 our \@EXPORT = qw(\%config \%target \%disabled \%withargs \%unified_info \@disablables \@disablables_int);
2400
2401 EOF
2402 print OUT "our %config = (\n";
2403 foreach (sort keys %config) {
2404     if (ref($config{$_}) eq "ARRAY") {
2405         print OUT "  ", $_, " => [ ", join(", ",
2406                                            map { quotify("perl", $_) }
2407                                            @{$config{$_}}), " ],\n";
2408     } elsif (ref($config{$_}) eq "HASH") {
2409         print OUT "  ", $_, " => {";
2410         if (scalar keys %{$config{$_}} > 0) {
2411             print OUT "\n";
2412             foreach my $key (sort keys %{$config{$_}}) {
2413                 print OUT "      ",
2414                     join(" => ",
2415                          quotify("perl", $key),
2416                          defined $config{$_}->{$key}
2417                              ? quotify("perl", $config{$_}->{$key})
2418                              : "undef");
2419                 print OUT ",\n";
2420             }
2421             print OUT "  ";
2422         }
2423         print OUT "},\n";
2424     } else {
2425         print OUT "  ", $_, " => ", quotify("perl", $config{$_}), ",\n"
2426     }
2427 }
2428 print OUT <<"EOF";
2429 );
2430
2431 EOF
2432 print OUT "our %target = (\n";
2433 foreach (sort keys %target) {
2434     if (ref($target{$_}) eq "ARRAY") {
2435         print OUT "  ", $_, " => [ ", join(", ",
2436                                            map { quotify("perl", $_) }
2437                                            @{$target{$_}}), " ],\n";
2438     } else {
2439         print OUT "  ", $_, " => ", quotify("perl", $target{$_}), ",\n"
2440     }
2441 }
2442 print OUT <<"EOF";
2443 );
2444
2445 EOF
2446 print OUT "our \%available_protocols = (\n";
2447 print OUT "  tls => [ ", join(", ", map { quotify("perl", $_) } @tls), " ],\n";
2448 print OUT "  dtls => [ ", join(", ", map { quotify("perl", $_) } @dtls), " ],\n";
2449 print OUT <<"EOF";
2450 );
2451
2452 EOF
2453 print OUT "our \@disablables = (\n";
2454 foreach (@disablables) {
2455     print OUT "  ", quotify("perl", $_), ",\n";
2456 }
2457 print OUT <<"EOF";
2458 );
2459
2460 EOF
2461 print OUT "# The following come from Configure's @disablables_int\n";
2462 print OUT "our \@disablables_int = (\n";
2463 foreach (@disablables_int) {
2464     print OUT "  ", quotify("perl", $_), ",\n";
2465 }
2466 print OUT <<"EOF";
2467 );
2468
2469 EOF
2470 print OUT "our \%disabled = (\n";
2471 foreach (sort keys %disabled) {
2472     print OUT "  ", quotify("perl", $_), " => ", quotify("perl", $disabled{$_}), ",\n";
2473 }
2474 print OUT <<"EOF";
2475 );
2476
2477 EOF
2478 print OUT "our %withargs = (\n";
2479 foreach (sort keys %withargs) {
2480     if (ref($withargs{$_}) eq "ARRAY") {
2481         print OUT "  ", $_, " => [ ", join(", ",
2482                                            map { quotify("perl", $_) }
2483                                            @{$withargs{$_}}), " ],\n";
2484     } else {
2485         print OUT "  ", $_, " => ", quotify("perl", $withargs{$_}), ",\n"
2486     }
2487 }
2488 print OUT <<"EOF";
2489 );
2490
2491 EOF
2492 if ($builder eq "unified") {
2493     my $recurse;
2494     $recurse = sub {
2495         my $indent = shift;
2496         foreach (@_) {
2497             if (ref $_ eq "ARRAY") {
2498                 print OUT " "x$indent, "[\n";
2499                 foreach (@$_) {
2500                     $recurse->($indent + 4, $_);
2501                 }
2502                 print OUT " "x$indent, "],\n";
2503             } elsif (ref $_ eq "HASH") {
2504                 my %h = %$_;
2505                 print OUT " "x$indent, "{\n";
2506                 foreach (sort keys %h) {
2507                     if (ref $h{$_} eq "") {
2508                         print OUT " "x($indent + 4), quotify("perl", $_), " => ", quotify("perl", $h{$_}), ",\n";
2509                     } else {
2510                         print OUT " "x($indent + 4), quotify("perl", $_), " =>\n";
2511                         $recurse->($indent + 8, $h{$_});
2512                     }
2513                 }
2514                 print OUT " "x$indent, "},\n";
2515             } else {
2516                 print OUT " "x$indent, quotify("perl", $_), ",\n";
2517             }
2518         }
2519     };
2520     print OUT "our %unified_info = (\n";
2521     foreach (sort keys %unified_info) {
2522         if (ref $unified_info{$_} eq "") {
2523             print OUT " "x4, quotify("perl", $_), " => ", quotify("perl", $unified_info{$_}), ",\n";
2524         } else {
2525             print OUT " "x4, quotify("perl", $_), " =>\n";
2526             $recurse->(8, $unified_info{$_});
2527         }
2528     }
2529     print OUT <<"EOF";
2530 );
2531
2532 EOF
2533 }
2534 print OUT
2535     "# The following data is only used when this files is use as a script\n";
2536 print OUT "my \@makevars = (\n";
2537 foreach (sort keys %user) {
2538     print OUT "    '",$_,"',\n";
2539 }
2540 print OUT ");\n";
2541 print OUT "my \%disabled_info = (\n";
2542 foreach my $what (sort keys %disabled_info) {
2543     print OUT "    '$what' => {\n";
2544     foreach my $info (sort keys %{$disabled_info{$what}}) {
2545         if (ref $disabled_info{$what}->{$info} eq 'ARRAY') {
2546             print OUT "        $info => [ ",
2547                 join(', ', map { "'$_'" } @{$disabled_info{$what}->{$info}}),
2548                 " ],\n";
2549         } else {
2550             print OUT "        $info => '", $disabled_info{$what}->{$info},
2551                 "',\n";
2552         }
2553     }
2554     print OUT "    },\n";
2555 }
2556 print OUT ");\n";
2557 print OUT 'my @user_crossable = qw( ', join (' ', @user_crossable), " );\n";
2558 print OUT << 'EOF';
2559 # If run directly, we can give some answers, and even reconfigure
2560 unless (caller) {
2561     use Getopt::Long;
2562     use File::Spec::Functions;
2563     use File::Basename;
2564     use Pod::Usage;
2565
2566     my $here = dirname($0);
2567
2568     my $dump = undef;
2569     my $cmdline = undef;
2570     my $options = undef;
2571     my $target = undef;
2572     my $envvars = undef;
2573     my $makevars = undef;
2574     my $buildparams = undef;
2575     my $reconf = undef;
2576     my $verbose = undef;
2577     my $help = undef;
2578     my $man = undef;
2579     GetOptions('dump|d'                 => \$dump,
2580                'command-line|c'         => \$cmdline,
2581                'options|o'              => \$options,
2582                'target|t'               => \$target,
2583                'environment|e'          => \$envvars,
2584                'make-variables|m'       => \$makevars,
2585                'build-parameters|b'     => \$buildparams,
2586                'reconfigure|reconf|r'   => \$reconf,
2587                'verbose|v'              => \$verbose,
2588                'help'                   => \$help,
2589                'man'                    => \$man)
2590         or die "Errors in command line arguments\n";
2591
2592     unless ($dump || $cmdline || $options || $target || $envvars || $makevars
2593             || $buildparams || $reconf || $verbose || $help || $man) {
2594         print STDERR <<"_____";
2595 You must give at least one option.
2596 For more information, do '$0 --help'
2597 _____
2598         exit(2);
2599     }
2600
2601     if ($help) {
2602         pod2usage(-exitval => 0,
2603                   -verbose => 1);
2604     }
2605     if ($man) {
2606         pod2usage(-exitval => 0,
2607                   -verbose => 2);
2608     }
2609     if ($dump || $cmdline) {
2610         print "\nCommand line (with current working directory = $here):\n\n";
2611         print '    ',join(' ',
2612                           $config{PERL},
2613                           catfile($config{sourcedir}, 'Configure'),
2614                           @{$config{perlargv}}), "\n";
2615         print "\nPerl information:\n\n";
2616         print '    ',$config{perl_cmd},"\n";
2617         print '    ',$config{perl_version},' for ',$config{perl_archname},"\n";
2618     }
2619     if ($dump || $options) {
2620         my $longest = 0;
2621         my $longest2 = 0;
2622         foreach my $what (@disablables) {
2623             $longest = length($what) if $longest < length($what);
2624             $longest2 = length($disabled{$what})
2625                 if $disabled{$what} && $longest2 < length($disabled{$what});
2626         }
2627         print "\nEnabled features:\n\n";
2628         foreach my $what (@disablables) {
2629             print "    $what\n" unless $disabled{$what};
2630         }
2631         print "\nDisabled features:\n\n";
2632         foreach my $what (@disablables) {
2633             if ($disabled{$what}) {
2634                 print "    $what", ' ' x ($longest - length($what) + 1),
2635                     "[$disabled{$what}]", ' ' x ($longest2 - length($disabled{$what}) + 1);
2636                 print $disabled_info{$what}->{macro}
2637                     if $disabled_info{$what}->{macro};
2638                 print ' (skip ',
2639                     join(', ', @{$disabled_info{$what}->{skipped}}),
2640                     ')'
2641                     if $disabled_info{$what}->{skipped};
2642                 print "\n";
2643             }
2644         }
2645     }
2646     if ($dump || $target) {
2647         print "\nConfig target attributes:\n\n";
2648         foreach (sort keys %target) {
2649             next if $_ =~ m|^_| || $_ eq 'template';
2650             my $quotify = sub {
2651                 map { (my $x = $_) =~ s|([\\\$\@"])|\\$1|g; "\"$x\""} @_;
2652             };
2653             print '    ', $_, ' => ';
2654             if (ref($target{$_}) eq "ARRAY") {
2655                 print '[ ', join(', ', $quotify->(@{$target{$_}})), " ],\n";
2656             } else {
2657                 print $quotify->($target{$_}), ",\n"
2658             }
2659         }
2660     }
2661     if ($dump || $envvars) {
2662         print "\nRecorded environment:\n\n";
2663         foreach (sort keys %{$config{perlenv}}) {
2664             print '    ',$_,' = ',($config{perlenv}->{$_} || ''),"\n";
2665         }
2666     }
2667     if ($dump || $makevars) {
2668         print "\nMakevars:\n\n";
2669         foreach my $var (@makevars) {
2670             my $prefix = '';
2671             $prefix = $config{CROSS_COMPILE}
2672                 if grep { $var eq $_ } @user_crossable;
2673             $prefix //= '';
2674             print '    ',$var,' ' x (16 - length $var),'= ',
2675                 (ref $config{$var} eq 'ARRAY'
2676                  ? join(' ', @{$config{$var}})
2677                  : $prefix.$config{$var}),
2678                 "\n"
2679                 if defined $config{$var};
2680         }
2681
2682         my @buildfile = ($config{builddir}, $config{build_file});
2683         unshift @buildfile, $here
2684             unless file_name_is_absolute($config{builddir});
2685         my $buildfile = canonpath(catdir(@buildfile));
2686         print <<"_____";
2687
2688 NOTE: These variables only represent the configuration view.  The build file
2689 template may have processed these variables further, please have a look at the
2690 build file for more exact data:
2691     $buildfile
2692 _____
2693     }
2694     if ($dump || $buildparams) {
2695         my @buildfile = ($config{builddir}, $config{build_file});
2696         unshift @buildfile, $here
2697             unless file_name_is_absolute($config{builddir});
2698         print "\nbuild file:\n\n";
2699         print "    ", canonpath(catfile(@buildfile)),"\n";
2700
2701         print "\nbuild file templates:\n\n";
2702         foreach (@{$config{build_file_templates}}) {
2703             my @tmpl = ($_);
2704             unshift @tmpl, $here
2705                 unless file_name_is_absolute($config{sourcedir});
2706             print '    ',canonpath(catfile(@tmpl)),"\n";
2707         }
2708     }
2709     if ($reconf) {
2710         if ($verbose) {
2711             print 'Reconfiguring with: ', join(' ',@{$config{perlargv}}), "\n";
2712             foreach (sort keys %{$config{perlenv}}) {
2713                 print '    ',$_,' = ',($config{perlenv}->{$_} || ""),"\n";
2714             }
2715         }
2716
2717         chdir $here;
2718         exec $^X,catfile($config{sourcedir}, 'Configure'),'reconf';
2719     }
2720 }
2721
2722 1;
2723
2724 __END__
2725
2726 =head1 NAME
2727
2728 configdata.pm - configuration data for OpenSSL builds
2729
2730 =head1 SYNOPSIS
2731
2732 Interactive:
2733
2734   perl configdata.pm [options]
2735
2736 As data bank module:
2737
2738   use configdata;
2739
2740 =head1 DESCRIPTION
2741
2742 This module can be used in two modes, interactively and as a module containing
2743 all the data recorded by OpenSSL's Configure script.
2744
2745 When used interactively, simply run it as any perl script, with at least one
2746 option, and you will get the information you ask for.  See L</OPTIONS> below.
2747
2748 When loaded as a module, you get a few databanks with useful information to
2749 perform build related tasks.  The databanks are:
2750
2751     %config             Configured things.
2752     %target             The OpenSSL config target with all inheritances
2753                         resolved.
2754     %disabled           The features that are disabled.
2755     @disablables        The list of features that can be disabled.
2756     %withargs           All data given through --with-THING options.
2757     %unified_info       All information that was computed from the build.info
2758                         files.
2759
2760 =head1 OPTIONS
2761
2762 =over 4
2763
2764 =item B<--help>
2765
2766 Print a brief help message and exit.
2767
2768 =item B<--man>
2769
2770 Print the manual page and exit.
2771
2772 =item B<--dump> | B<-d>
2773
2774 Print all relevant configuration data.  This is equivalent to B<--command-line>
2775 B<--options> B<--target> B<--environment> B<--make-variables>
2776 B<--build-parameters>.
2777
2778 =item B<--command-line> | B<-c>
2779
2780 Print the current configuration command line.
2781
2782 =item B<--options> | B<-o>
2783
2784 Print the features, both enabled and disabled, and display defined macro and
2785 skipped directories where applicable.
2786
2787 =item B<--target> | B<-t>
2788
2789 Print the config attributes for this config target.
2790
2791 =item B<--environment> | B<-e>
2792
2793 Print the environment variables and their values at the time of configuration.
2794
2795 =item B<--make-variables> | B<-m>
2796
2797 Print the main make variables generated in the current configuration
2798
2799 =item B<--build-parameters> | B<-b>
2800
2801 Print the build parameters, i.e. build file and build file templates.
2802
2803 =item B<--reconfigure> | B<--reconf> | B<-r>
2804
2805 Redo the configuration.
2806
2807 =item B<--verbose> | B<-v>
2808
2809 Verbose output.
2810
2811 =back
2812
2813 =cut
2814
2815 EOF
2816 close(OUT);
2817 if ($builder_platform eq 'unix') {
2818     my $mode = (0755 & ~umask);
2819     chmod $mode, 'configdata.pm'
2820         or warn sprintf("WARNING: Couldn't change mode for 'configdata.pm' to 0%03o: %s\n",$mode,$!);
2821 }
2822
2823 my %builders = (
2824     unified => sub {
2825         print 'Creating ',$target{build_file},"\n";
2826         run_dofile(catfile($blddir, $target{build_file}),
2827                    @{$config{build_file_templates}});
2828     },
2829     );
2830
2831 $builders{$builder}->($builder_platform, @builder_opts);
2832
2833 $SIG{__DIE__} = $orig_death_handler;
2834
2835 print <<"EOF" if ($disabled{threads} eq "unavailable");
2836
2837 The library could not be configured for supporting multi-threaded
2838 applications as the compiler options required on this system are not known.
2839 See file INSTALL for details if you need multi-threading.
2840 EOF
2841
2842 print <<"EOF" if ($no_shared_warn);
2843
2844 The options 'shared', 'pic' and 'dynamic-engine' aren't supported on this
2845 platform, so we will pretend you gave the option 'no-pic', which also disables
2846 'shared' and 'dynamic-engine'.  If you know how to implement shared libraries
2847 or position independent code, please let us know (but please first make sure
2848 you have tried with a current version of OpenSSL).
2849 EOF
2850
2851 print <<"EOF";
2852
2853 **********************************************************************
2854 ***                                                                ***
2855 ***   OpenSSL has been successfully configured                     ***
2856 ***                                                                ***
2857 ***   If you encounter a problem while building, please open an    ***
2858 ***   issue on GitHub <https://github.com/openssl/openssl/issues>  ***
2859 ***   and include the output from the following command:           ***
2860 ***                                                                ***
2861 ***       perl configdata.pm --dump                                ***
2862 ***                                                                ***
2863 ***   (If you are new to OpenSSL, you might want to consult the    ***
2864 ***   'Troubleshooting' section in the INSTALL file first)         ***
2865 ***                                                                ***
2866 **********************************************************************
2867 EOF
2868
2869 exit(0);
2870
2871 ######################################################################
2872 #
2873 # Helpers and utility functions
2874 #
2875
2876 # Death handler, to print a helpful message in case of failure #######
2877 #
2878 sub death_handler {
2879     die @_ if $^S;              # To prevent the added message in eval blocks
2880     my $build_file = $target{build_file} // "build file";
2881     my @message = ( <<"_____", @_ );
2882
2883 Failure!  $build_file wasn't produced.
2884 Please read INSTALL and associated NOTES files.  You may also have to look over
2885 your available compiler tool chain or change your configuration.
2886
2887 _____
2888
2889     # Dying is terminal, so it's ok to reset the signal handler here.
2890     $SIG{__DIE__} = $orig_death_handler;
2891     die @message;
2892 }
2893
2894 # Configuration file reading #########################################
2895
2896 # Note: All of the helper functions are for lazy evaluation.  They all
2897 # return a CODE ref, which will return the intended value when evaluated.
2898 # Thus, whenever there's mention of a returned value, it's about that
2899 # intended value.
2900
2901 # Helper function to implement conditional inheritance depending on the
2902 # value of $disabled{asm}.  Used in inherit_from values as follows:
2903 #
2904 #      inherit_from => [ "template", asm("asm_tmpl") ]
2905 #
2906 sub asm {
2907     my @x = @_;
2908     sub {
2909         $disabled{asm} ? () : @x;
2910     }
2911 }
2912
2913 # Helper function to implement conditional value variants, with a default
2914 # plus additional values based on the value of $config{build_type}.
2915 # Arguments are given in hash table form:
2916 #
2917 #       picker(default => "Basic string: ",
2918 #              debug   => "debug",
2919 #              release => "release")
2920 #
2921 # When configuring with --debug, the resulting string will be
2922 # "Basic string: debug", and when not, it will be "Basic string: release"
2923 #
2924 # This can be used to create variants of sets of flags according to the
2925 # build type:
2926 #
2927 #       cflags => picker(default => "-Wall",
2928 #                        debug   => "-g -O0",
2929 #                        release => "-O3")
2930 #
2931 sub picker {
2932     my %opts = @_;
2933     return sub { add($opts{default} || (),
2934                      $opts{$config{build_type}} || ())->(); }
2935 }
2936
2937 # Helper function to combine several values of different types into one.
2938 # This is useful if you want to combine a string with the result of a
2939 # lazy function, such as:
2940 #
2941 #       cflags => combine("-Wall", sub { $disabled{zlib} ? () : "-DZLIB" })
2942 #
2943 sub combine {
2944     my @stuff = @_;
2945     return sub { add(@stuff)->(); }
2946 }
2947
2948 # Helper function to implement conditional values depending on the value
2949 # of $disabled{threads}.  Can be used as follows:
2950 #
2951 #       cflags => combine("-Wall", threads("-pthread"))
2952 #
2953 sub threads {
2954     my @flags = @_;
2955     return sub { add($disabled{threads} ? () : @flags)->(); }
2956 }
2957
2958 sub shared {
2959     my @flags = @_;
2960     return sub { add($disabled{shared} ? () : @flags)->(); }
2961 }
2962
2963 our $add_called = 0;
2964 # Helper function to implement adding values to already existing configuration
2965 # values.  It handles elements that are ARRAYs, CODEs and scalars
2966 sub _add {
2967     my $separator = shift;
2968
2969     # If there's any ARRAY in the collection of values OR the separator
2970     # is undef, we will return an ARRAY of combined values, otherwise a
2971     # string of joined values with $separator as the separator.
2972     my $found_array = !defined($separator);
2973
2974     my @values =
2975         map {
2976             my $res = $_;
2977             while (ref($res) eq "CODE") {
2978                 $res = $res->();
2979             }
2980             if (defined($res)) {
2981                 if (ref($res) eq "ARRAY") {
2982                     $found_array = 1;
2983                     @$res;
2984                 } else {
2985                     $res;
2986                 }
2987             } else {
2988                 ();
2989             }
2990     } (@_);
2991
2992     $add_called = 1;
2993
2994     if ($found_array) {
2995         [ @values ];
2996     } else {
2997         join($separator, grep { defined($_) && $_ ne "" } @values);
2998     }
2999 }
3000 sub add_before {
3001     my $separator = " ";
3002     if (ref($_[$#_]) eq "HASH") {
3003         my $opts = pop;
3004         $separator = $opts->{separator};
3005     }
3006     my @x = @_;
3007     sub { _add($separator, @x, @_) };
3008 }
3009 sub add {
3010     my $separator = " ";
3011     if (ref($_[$#_]) eq "HASH") {
3012         my $opts = pop;
3013         $separator = $opts->{separator};
3014     }
3015     my @x = @_;
3016     sub { _add($separator, @_, @x) };
3017 }
3018
3019 sub read_eval_file {
3020     my $fname = shift;
3021     my $content;
3022     my @result;
3023
3024     open F, "< $fname" or die "Can't open '$fname': $!\n";
3025     {
3026         undef local $/;
3027         $content = <F>;
3028     }
3029     close F;
3030     {
3031         local $@;
3032
3033         @result = ( eval $content );
3034         warn $@ if $@;
3035     }
3036     return wantarray ? @result : $result[0];
3037 }
3038
3039 # configuration reader, evaluates the input file as a perl script and expects
3040 # it to fill %targets with target configurations.  Those are then added to
3041 # %table.
3042 sub read_config {
3043     my $fname = shift;
3044     my %targets;
3045
3046     {
3047         # Protect certain tables from tampering
3048         local %table = ();
3049
3050         %targets = read_eval_file($fname);
3051     }
3052     my %preexisting = ();
3053     foreach (sort keys %targets) {
3054         $preexisting{$_} = 1 if $table{$_};
3055     }
3056     die <<"EOF",
3057 The following config targets from $fname
3058 shadow pre-existing config targets with the same name:
3059 EOF
3060         map { "  $_\n" } sort keys %preexisting
3061         if %preexisting;
3062
3063
3064     # For each target, check that it's configured with a hash table.
3065     foreach (keys %targets) {
3066         if (ref($targets{$_}) ne "HASH") {
3067             if (ref($targets{$_}) eq "") {
3068                 warn "Deprecated target configuration for $_, ignoring...\n";
3069             } else {
3070                 warn "Misconfigured target configuration for $_ (should be a hash table), ignoring...\n";
3071             }
3072             delete $targets{$_};
3073         } else {
3074             $targets{$_}->{_conf_fname_int} = add([ $fname ]);
3075         }
3076     }
3077
3078     %table = (%table, %targets);
3079
3080 }
3081
3082 # configuration resolver.  Will only resolve all the lazy evaluation
3083 # codeblocks for the chosen target and all those it inherits from,
3084 # recursively
3085 sub resolve_config {
3086     my $target = shift;
3087     my @breadcrumbs = @_;
3088
3089 #    my $extra_checks = defined($ENV{CONFIGURE_EXTRA_CHECKS});
3090
3091     if (grep { $_ eq $target } @breadcrumbs) {
3092         die "inherit_from loop!  target backtrace:\n  "
3093             ,$target,"\n  ",join("\n  ", @breadcrumbs),"\n";
3094     }
3095
3096     if (!defined($table{$target})) {
3097         warn "Warning! target $target doesn't exist!\n";
3098         return ();
3099     }
3100     # Recurse through all inheritances.  They will be resolved on the
3101     # fly, so when this operation is done, they will all just be a
3102     # bunch of attributes with string values.
3103     # What we get here, though, are keys with references to lists of
3104     # the combined values of them all.  We will deal with lists after
3105     # this stage is done.
3106     my %combined_inheritance = ();
3107     if ($table{$target}->{inherit_from}) {
3108         my @inherit_from =
3109             map { ref($_) eq "CODE" ? $_->() : $_ } @{$table{$target}->{inherit_from}};
3110         foreach (@inherit_from) {
3111             my %inherited_config = resolve_config($_, $target, @breadcrumbs);
3112
3113             # 'template' is a marker that's considered private to
3114             # the config that had it.
3115             delete $inherited_config{template};
3116
3117             foreach (keys %inherited_config) {
3118                 if (!$combined_inheritance{$_}) {
3119                     $combined_inheritance{$_} = [];
3120                 }
3121                 push @{$combined_inheritance{$_}}, $inherited_config{$_};
3122             }
3123         }
3124     }
3125
3126     # We won't need inherit_from in this target any more, since we've
3127     # resolved all the inheritances that lead to this
3128     delete $table{$target}->{inherit_from};
3129
3130     # Now is the time to deal with those lists.  Here's the place to
3131     # decide what shall be done with those lists, all based on the
3132     # values of the target we're currently dealing with.
3133     # - If a value is a coderef, it will be executed with the list of
3134     #   inherited values as arguments.
3135     # - If the corresponding key doesn't have a value at all or is the
3136     #   empty string, the inherited value list will be run through the
3137     #   default combiner (below), and the result becomes this target's
3138     #   value.
3139     # - Otherwise, this target's value is assumed to be a string that
3140     #   will simply override the inherited list of values.
3141     my $default_combiner = add();
3142
3143     my %all_keys =
3144         map { $_ => 1 } (keys %combined_inheritance,
3145                          keys %{$table{$target}});
3146
3147     sub process_values {
3148         my $object    = shift;
3149         my $inherited = shift;  # Always a [ list ]
3150         my $target    = shift;
3151         my $entry     = shift;
3152
3153         $add_called = 0;
3154
3155         while(ref($object) eq "CODE") {
3156             $object = $object->(@$inherited);
3157         }
3158         if (!defined($object)) {
3159             return ();
3160         }
3161         elsif (ref($object) eq "ARRAY") {
3162             local $add_called;  # To make sure recursive calls don't affect it
3163             return [ map { process_values($_, $inherited, $target, $entry) }
3164                      @$object ];
3165         } elsif (ref($object) eq "") {
3166             return $object;
3167         } else {
3168             die "cannot handle reference type ",ref($object)
3169                 ," found in target ",$target," -> ",$entry,"\n";
3170         }
3171     }
3172
3173     foreach (sort keys %all_keys) {
3174         my $previous = $combined_inheritance{$_};
3175
3176         # Current target doesn't have a value for the current key?
3177         # Assign it the default combiner, the rest of this loop body
3178         # will handle it just like any other coderef.
3179         if (!exists $table{$target}->{$_}) {
3180             $table{$target}->{$_} = $default_combiner;
3181         }
3182
3183         $table{$target}->{$_} = process_values($table{$target}->{$_},
3184                                                $combined_inheritance{$_},
3185                                                $target, $_);
3186         unless(defined($table{$target}->{$_})) {
3187             delete $table{$target}->{$_};
3188         }
3189 #        if ($extra_checks &&
3190 #            $previous && !($add_called ||  $previous ~~ $table{$target}->{$_})) {
3191 #            warn "$_ got replaced in $target\n";
3192 #        }
3193     }
3194
3195     # Finally done, return the result.
3196     return %{$table{$target}};
3197 }
3198
3199 sub usage
3200         {
3201         print STDERR $usage;
3202         print STDERR "\npick os/compiler from:\n";
3203         my $j=0;
3204         my $i;
3205         my $k=0;
3206         foreach $i (sort keys %table)
3207                 {
3208                 next if $table{$i}->{template};
3209                 next if $i =~ /^debug/;
3210                 $k += length($i) + 1;
3211                 if ($k > 78)
3212                         {
3213                         print STDERR "\n";
3214                         $k=length($i);
3215                         }
3216                 print STDERR $i . " ";
3217                 }
3218         foreach $i (sort keys %table)
3219                 {
3220                 next if $table{$i}->{template};
3221                 next if $i !~ /^debug/;
3222                 $k += length($i) + 1;
3223                 if ($k > 78)
3224                         {
3225                         print STDERR "\n";
3226                         $k=length($i);
3227                         }
3228                 print STDERR $i . " ";
3229                 }
3230         print STDERR "\n\nNOTE: If in doubt, on Unix-ish systems use './config'.\n";
3231         exit(1);
3232         }
3233
3234 sub run_dofile
3235 {
3236     my $out = shift;
3237     my @templates = @_;
3238
3239     unlink $out || warn "Can't remove $out, $!"
3240         if -f $out;
3241     foreach (@templates) {
3242         die "Can't open $_, $!" unless -f $_;
3243     }
3244     my $perlcmd = (quotify("maybeshell", $config{PERL}))[0];
3245     my $cmd = "$perlcmd \"-I.\" \"-Mconfigdata\" \"$dofile\" -o\"Configure\" \"".join("\" \"",@templates)."\" > \"$out.new\"";
3246     #print STDERR "DEBUG[run_dofile]: \$cmd = $cmd\n";
3247     system($cmd);
3248     exit 1 if $? != 0;
3249     rename("$out.new", $out) || die "Can't rename $out.new, $!";
3250 }
3251
3252 sub compiler_predefined {
3253     state %predefined;
3254     my $cc = shift;
3255
3256     return () if $^O eq 'VMS';
3257
3258     die 'compiler_predefined called without a compiler command'
3259         unless $cc;
3260
3261     if (! $predefined{$cc}) {
3262
3263         $predefined{$cc} = {};
3264
3265         # collect compiler pre-defines from gcc or gcc-alike...
3266         open(PIPE, "$cc -dM -E -x c /dev/null 2>&1 |");
3267         while (my $l = <PIPE>) {
3268             $l =~ m/^#define\s+(\w+(?:\(\w+\))?)(?:\s+(.+))?/ or last;
3269             $predefined{$cc}->{$1} = $2 // '';
3270         }
3271         close(PIPE);
3272     }
3273
3274     return %{$predefined{$cc}};
3275 }
3276
3277 sub which
3278 {
3279     my ($name)=@_;
3280
3281     if (eval { require IPC::Cmd; 1; }) {
3282         IPC::Cmd->import();
3283         return scalar IPC::Cmd::can_run($name);
3284     } else {
3285         # if there is $directories component in splitpath,
3286         # then it's not something to test with $PATH...
3287         return $name if (File::Spec->splitpath($name))[1];
3288
3289         foreach (File::Spec->path()) {
3290             my $fullpath = catfile($_, "$name$target{exe_extension}");
3291             if (-f $fullpath and -x $fullpath) {
3292                 return $fullpath;
3293             }
3294         }
3295     }
3296 }
3297
3298 sub env
3299 {
3300     my $name = shift;
3301     my %opts = @_;
3302
3303     unless ($opts{cacheonly}) {
3304         # Note that if $ENV{$name} doesn't exist or is undefined,
3305         # $config{perlenv}->{$name} will be created with the value
3306         # undef.  This is intentional.
3307
3308         $config{perlenv}->{$name} = $ENV{$name}
3309             if ! exists $config{perlenv}->{$name};
3310     }
3311     return $config{perlenv}->{$name};
3312 }
3313
3314 # Configuration printer ##############################################
3315
3316 sub print_table_entry
3317 {
3318     local $now_printing = shift;
3319     my %target = resolve_config($now_printing);
3320     my $type = shift;
3321
3322     # Don't print the templates
3323     return if $target{template};
3324
3325     my @sequence = (
3326         "sys_id",
3327         "cpp",
3328         "cppflags",
3329         "defines",
3330         "includes",
3331         "cc",
3332         "cflags",
3333         "unistd",
3334         "ld",
3335         "lflags",
3336         "loutflag",
3337         "ex_libs",
3338         "bn_ops",
3339         "apps_aux_src",
3340         "cpuid_asm_src",
3341         "uplink_aux_src",
3342         "bn_asm_src",
3343         "ec_asm_src",
3344         "des_asm_src",
3345         "aes_asm_src",
3346         "bf_asm_src",
3347         "md5_asm_src",
3348         "cast_asm_src",
3349         "sha1_asm_src",
3350         "rc4_asm_src",
3351         "rmd160_asm_src",
3352         "rc5_asm_src",
3353         "wp_asm_src",
3354         "cmll_asm_src",
3355         "modes_asm_src",
3356         "padlock_asm_src",
3357         "chacha_asm_src",
3358         "poly1035_asm_src",
3359         "thread_scheme",
3360         "perlasm_scheme",
3361         "dso_scheme",
3362         "shared_target",
3363         "shared_cflag",
3364         "shared_defines",
3365         "shared_ldflag",
3366         "shared_rcflag",
3367         "shared_extension",
3368         "dso_extension",
3369         "obj_extension",
3370         "exe_extension",
3371         "ranlib",
3372         "ar",
3373         "arflags",
3374         "aroutflag",
3375         "rc",
3376         "rcflags",
3377         "rcoutflag",
3378         "mt",
3379         "mtflags",
3380         "mtinflag",
3381         "mtoutflag",
3382         "multilib",
3383         "build_scheme",
3384         );
3385
3386     if ($type eq "TABLE") {
3387         print "\n";
3388         print "*** $now_printing\n";
3389         foreach (@sequence) {
3390             if (ref($target{$_}) eq "ARRAY") {
3391                 printf "\$%-12s = %s\n", $_, join(" ", @{$target{$_}});
3392             } else {
3393                 printf "\$%-12s = %s\n", $_, $target{$_};
3394             }
3395         }
3396     } elsif ($type eq "HASH") {
3397         my $largest =
3398             length((sort { length($a) <=> length($b) } @sequence)[-1]);
3399         print "    '$now_printing' => {\n";
3400         foreach (@sequence) {
3401             if ($target{$_}) {
3402                 if (ref($target{$_}) eq "ARRAY") {
3403                     print "      '",$_,"'"," " x ($largest - length($_))," => [ ",join(", ", map { "'$_'" } @{$target{$_}})," ],\n";
3404                 } else {
3405                     print "      '",$_,"'"," " x ($largest - length($_))," => '",$target{$_},"',\n";
3406                 }
3407             }
3408         }
3409         print "    },\n";
3410     }
3411 }
3412
3413 # Utility routines ###################################################
3414
3415 # On VMS, if the given file is a logical name, File::Spec::Functions
3416 # will consider it an absolute path.  There are cases when we want a
3417 # purely syntactic check without checking the environment.
3418 sub isabsolute {
3419     my $file = shift;
3420
3421     # On non-platforms, we just use file_name_is_absolute().
3422     return file_name_is_absolute($file) unless $^O eq "VMS";
3423
3424     # If the file spec includes a device or a directory spec,
3425     # file_name_is_absolute() is perfectly safe.
3426     return file_name_is_absolute($file) if $file =~ m|[:\[]|;
3427
3428     # Here, we know the given file spec isn't absolute
3429     return 0;
3430 }
3431
3432 # Makes a directory absolute and cleans out /../ in paths like foo/../bar
3433 # On some platforms, this uses rel2abs(), while on others, realpath() is used.
3434 # realpath() requires that at least all path components except the last is an
3435 # existing directory.  On VMS, the last component of the directory spec must
3436 # exist.
3437 sub absolutedir {
3438     my $dir = shift;
3439
3440     # realpath() is quite buggy on VMS.  It uses LIB$FID_TO_NAME, which
3441     # will return the volume name for the device, no matter what.  Also,
3442     # it will return an incorrect directory spec if the argument is a
3443     # directory that doesn't exist.
3444     if ($^O eq "VMS") {
3445         return rel2abs($dir);
3446     }
3447
3448     # We use realpath() on Unix, since no other will properly clean out
3449     # a directory spec.
3450     use Cwd qw/realpath/;
3451
3452     return realpath($dir);
3453 }
3454
3455 sub quotify {
3456     my %processors = (
3457         perl    => sub { my $x = shift;
3458                          $x =~ s/([\\\$\@"])/\\$1/g;
3459                          return '"'.$x.'"'; },
3460         maybeshell => sub { my $x = shift;
3461                             (my $y = $x) =~ s/([\\\"])/\\$1/g;
3462                             if ($x ne $y || $x =~ m|\s|) {
3463                                 return '"'.$y.'"';
3464                             } else {
3465                                 return $x;
3466                             }
3467                         },
3468         );
3469     my $for = shift;
3470     my $processor =
3471         defined($processors{$for}) ? $processors{$for} : sub { shift; };
3472
3473     return map { $processor->($_); } @_;
3474 }
3475
3476 # collect_from_file($filename, $line_concat_cond_re, $line_concat)
3477 # $filename is a file name to read from
3478 # $line_concat_cond_re is a regexp detecting a line continuation ending
3479 # $line_concat is a CODEref that takes care of concatenating two lines
3480 sub collect_from_file {
3481     my $filename = shift;
3482     my $line_concat_cond_re = shift;
3483     my $line_concat = shift;
3484
3485     open my $fh, $filename || die "unable to read $filename: $!\n";
3486     return sub {
3487         my $saved_line = "";
3488         $_ = "";
3489         while (<$fh>) {
3490             s|\R$||;
3491             if (defined $line_concat) {
3492                 $_ = $line_concat->($saved_line, $_);
3493                 $saved_line = "";
3494             }
3495             if (defined $line_concat_cond_re && /$line_concat_cond_re/) {
3496                 $saved_line = $_;
3497                 next;
3498             }
3499             return $_;
3500         }
3501         die "$filename ending with continuation line\n" if $_;
3502         close $fh;
3503         return undef;
3504     }
3505 }
3506
3507 # collect_from_array($array, $line_concat_cond_re, $line_concat)
3508 # $array is an ARRAYref of lines
3509 # $line_concat_cond_re is a regexp detecting a line continuation ending
3510 # $line_concat is a CODEref that takes care of concatenating two lines
3511 sub collect_from_array {
3512     my $array = shift;
3513     my $line_concat_cond_re = shift;
3514     my $line_concat = shift;
3515     my @array = (@$array);
3516
3517     return sub {
3518         my $saved_line = "";
3519         $_ = "";
3520         while (defined($_ = shift @array)) {
3521             s|\R$||;
3522             if (defined $line_concat) {
3523                 $_ = $line_concat->($saved_line, $_);
3524                 $saved_line = "";
3525             }
3526             if (defined $line_concat_cond_re && /$line_concat_cond_re/) {
3527                 $saved_line = $_;
3528                 next;
3529             }
3530             return $_;
3531         }
3532         die "input text ending with continuation line\n" if $_;
3533         return undef;
3534     }
3535 }
3536
3537 # collect_information($lineiterator, $line_continue, $regexp => $CODEref, ...)
3538 # $lineiterator is a CODEref that delivers one line at a time.
3539 # All following arguments are regex/CODEref pairs, where the regexp detects a
3540 # line and the CODEref does something with the result of the regexp.
3541 sub collect_information {
3542     my $lineiterator = shift;
3543     my %collectors = @_;
3544
3545     while(defined($_ = $lineiterator->())) {
3546         s|\R$||;
3547         my $found = 0;
3548         if ($collectors{"BEFORE"}) {
3549             $collectors{"BEFORE"}->($_);
3550         }
3551         foreach my $re (keys %collectors) {
3552             if ($re !~ /^OTHERWISE|BEFORE|AFTER$/ && /$re/) {
3553                 $collectors{$re}->($lineiterator);
3554                 $found = 1;
3555             };
3556         }
3557         if ($collectors{"OTHERWISE"}) {
3558             $collectors{"OTHERWISE"}->($lineiterator, $_)
3559                 unless $found || !defined $collectors{"OTHERWISE"};
3560         }
3561         if ($collectors{"AFTER"}) {
3562             $collectors{"AFTER"}->($_);
3563         }
3564     }
3565 }
3566
3567 # tokenize($line)
3568 # tokenize($line,$separator)
3569 # $line is a line of text to split up into tokens
3570 # $separator [optional] is a regular expression that separates the tokens,
3571 # the default being spaces.  Do not use quotes of any kind as separators,
3572 # that will give undefined results.
3573 # Returns a list of tokens.
3574 #
3575 # Tokens are divided by separator (spaces by default).  If the tokens include
3576 # the separators, they have to be quoted with single or double quotes.
3577 # Double quotes inside a double quoted token must be escaped.  Escaping is done
3578 # with backslash.
3579 # Basically, the same quoting rules apply for " and ' as in any
3580 # Unix shell.
3581 sub tokenize {
3582     my $line = my $debug_line = shift;
3583     my $separator = shift // qr|\s+|;
3584     my @result = ();
3585
3586     if ($ENV{CONFIGURE_DEBUG_TOKENIZE}) {
3587         print STDERR "DEBUG[tokenize]: \$separator = $separator\n";
3588     }
3589
3590     while ($line =~ s|^${separator}||, $line ne "") {
3591         my $token = "";
3592     again:
3593         $line =~ m/^(.*?)(${separator}|"|'|$)/;
3594         $token .= $1;
3595         $line = $2.$';
3596
3597         if ($line =~ m/^"((?:[^"\\]+|\\.)*)"/) {
3598             $token .= $1;
3599             $line = $';
3600             goto again;
3601         } elsif ($line =~ m/^'([^']*)'/) {
3602             $token .= $1;
3603             $line = $';
3604             goto again;
3605         }
3606         push @result, $token;
3607     }
3608
3609     if ($ENV{CONFIGURE_DEBUG_TOKENIZE}) {
3610         print STDERR "DEBUG[tokenize]: Parsed '$debug_line' into:\n";
3611         print STDERR "DEBUG[tokenize]: ('", join("', '", @result), "')\n";
3612     }
3613     return @result;
3614 }