Configure

   1 #! /usr/bin/env perl
   2 # -*- mode: perl; -*-
   3 # Copyright 2016-2018 The OpenSSL Project Authors. All Rights Reserved.
   4 #
   5 # Licensed under the Apache License 2.0 (the "License").  You may not use
   6 # this file except in compliance with the License.  You can obtain a copy
   7 # in the file LICENSE in the source distribution or at
   8 # https://www.openssl.org/source/license.html
   9
  10 ##  Configure -- OpenSSL source tree configuration script
  11
  12 use 5.10.0;
  13 use strict;
  14 use Config;
  15 use FindBin;
  16 use lib "$FindBin::Bin/util/perl";
  17 use File::Basename;
  18 use File::Spec::Functions qw/:DEFAULT abs2rel rel2abs splitdir/;
  19 use File::Path qw/mkpath/;
  20 use OpenSSL::fallback "$FindBin::Bin/external/perl/MODULES.txt";
  21 use OpenSSL::Glob;
  22
  23 # see INSTALL for instructions.
  24
  25 my $orig_death_handler = $SIG{__DIE__};
  26 $SIG{__DIE__} = \&death_handler;
  27
  28 my $usage="Usage: Configure [no-<cipher> ...] [enable-<cipher> ...] [-Dxxx] [-lxxx] [-Lxxx] [-fxxx] [-Kxxx] [no-hw-xxx|no-hw] [[no-]threads] [[no-]shared] [[no-]zlib|zlib-dynamic] [no-asm] [no-egd] [sctp] [386] [--prefix=DIR] [--openssldir=OPENSSLDIR] [--with-xxx[=vvv]] [--config=FILE] os/compiler[:flags]\n";
  29
  30 # Options:
  31 #
  32 # --config      add the given configuration file, which will be read after
  33 #               any "Configurations*" files that are found in the same
  34 #               directory as this script.
  35 # --prefix      prefix for the OpenSSL installation, which includes the
  36 #               directories bin, lib, include, share/man, share/doc/openssl
  37 #               This becomes the value of INSTALLTOP in Makefile
  38 #               (Default: /usr/local)
  39 # --openssldir  OpenSSL data area, such as openssl.cnf, certificates and keys.
  40 #               If it's a relative directory, it will be added on the directory
  41 #               given with --prefix.
  42 #               This becomes the value of OPENSSLDIR in Makefile and in C.
  43 #               (Default: PREFIX/ssl)
  44 #
  45 # --cross-compile-prefix Add specified prefix to binutils components.
  46 #
  47 # --api         One of 0.9.8, 1.0.0, 1.0.1, 1.0.2, 1.1.0, 1.1.1, or 3.0.0 / 3.
  48 #               Do not compile support for interfaces deprecated as of the
  49 #               specified OpenSSL version.
  50 #
  51 # no-hw-xxx     do not compile support for specific crypto hardware.
  52 #               Generic OpenSSL-style methods relating to this support
  53 #               are always compiled but return NULL if the hardware
  54 #               support isn't compiled.
  55 # no-hw         do not compile support for any crypto hardware.
  56 # [no-]threads  [don't] try to create a library that is suitable for
  57 #               multithreaded applications (default is "threads" if we
  58 #               know how to do it)
  59 # [no-]shared   [don't] try to create shared libraries when supported.
  60 # [no-]pic      [don't] try to build position independent code when supported.
  61 #               If disabled, it also disables shared and dynamic-engine.
  62 # no-asm        do not use assembler
  63 # no-egd        do not compile support for the entropy-gathering daemon APIs
  64 # [no-]zlib     [don't] compile support for zlib compression.
  65 # zlib-dynamic  Like "zlib", but the zlib library is expected to be a shared
  66 #               library and will be loaded in run-time by the OpenSSL library.
  67 # sctp          include SCTP support
  68 # no-uplink     Don't build support for UPLINK interface.
  69 # enable-weak-ssl-ciphers
  70 #               Enable weak ciphers that are disabled by default.
  71 # 386           generate 80386 code in assembly modules
  72 # no-sse2       disables IA-32 SSE2 code in assembly modules, the above
  73 #               mentioned '386' option implies this one
  74 # no-<cipher>   build without specified algorithm (rsa, idea, rc5, ...)
  75 # -<xxx> +<xxx> compiler options are passed through
  76 # -static       while -static is also a pass-through compiler option (and
  77 #               as such is limited to environments where it's actually
  78 #               meaningful), it triggers a number configuration options,
  79 #               namely no-pic, no-shared and no-threads. It is
  80 #               argued that the only reason to produce statically linked
  81 #               binaries (and in context it means executables linked with
  82 #               -static flag, and not just executables linked with static
  83 #               libcrypto.a) is to eliminate dependency on specific run-time,
  84 #               a.k.a. libc version. The mentioned config options are meant
  85 #               to achieve just that. Unfortunately on Linux it's impossible
  86 #               to eliminate the dependency completely for openssl executable
  87 #               because of getaddrinfo and gethostbyname calls, which can
  88 #               invoke dynamically loadable library facility anyway to meet
  89 #               the lookup requests. For this reason on Linux statically
  90 #               linked openssl executable has rather debugging value than
  91 #               production quality.
  92 #
  93 # BN_LLONG      use the type 'long long' in crypto/bn/bn.h
  94 # RC4_CHAR      use 'char' instead of 'int' for RC4_INT in crypto/rc4/rc4.h
  95 # Following are set automatically by this script
  96 #
  97 # MD5_ASM       use some extra md5 assembler,
  98 # SHA1_ASM      use some extra sha1 assembler, must define L_ENDIAN for x86
  99 # RMD160_ASM    use some extra ripemd160 assembler,
 100 # SHA256_ASM    sha256_block is implemented in assembler
 101 # SHA512_ASM    sha512_block is implemented in assembler
 102 # AES_ASM       AES_[en|de]crypt is implemented in assembler
 103
 104 # Minimum warning options... any contributions to OpenSSL should at least
 105 # get past these.  Note that we only use these with C compilers, not with
 106 # C++ compilers.
 107
 108 # DEBUG_UNUSED enables __owur (warn unused result) checks.
 109 # -DPEDANTIC complements -pedantic and is meant to mask code that
 110 # is not strictly standard-compliant and/or implementation-specific,
 111 # e.g. inline assembly, disregards to alignment requirements, such
 112 # that -pedantic would complain about. Incidentally -DPEDANTIC has
 113 # to be used even in sanitized builds, because sanitizer too is
 114 # supposed to and does take notice of non-standard behaviour. Then
 115 # -pedantic with pre-C9x compiler would also complain about 'long
 116 # long' not being supported. As 64-bit algorithms are common now,
 117 # it grew impossible to resolve this without sizeable additional
 118 # code, so we just tell compiler to be pedantic about everything
 119 # but 'long long' type.
 120
 121 my @gcc_devteam_warn = qw(
 122     -DDEBUG_UNUSED
 123     -DPEDANTIC -pedantic -Wno-long-long
 124     -Wall
 125     -Wextra
 126     -Wno-unused-parameter
 127     -Wno-missing-field-initializers
 128     -Wswitch
 129     -Wsign-compare
 130     -Wshadow
 131     -Wformat
 132     -Wtype-limits
 133     -Wundef
 134     -Werror
 135     -Wmissing-prototypes
 136     -Wstrict-prototypes
 137 );
 138
 139 # These are used in addition to $gcc_devteam_warn when the compiler is clang.
 140 # TODO(openssl-team): fix problems and investigate if (at least) the
 141 # following warnings can also be enabled:
 142 #       -Wcast-align
 143 #       -Wunreachable-code -- no, too ugly/compiler-specific
 144 #       -Wlanguage-extension-token -- no, we use asm()
 145 #       -Wunused-macros -- no, too tricky for BN and _XOPEN_SOURCE etc
 146 #       -Wextended-offsetof -- no, needed in CMS ASN1 code
 147 my @clang_devteam_warn = qw(
 148     -Wno-unknown-warning-option
 149     -Wswitch-default
 150     -Wno-parentheses-equality
 151     -Wno-language-extension-token
 152     -Wno-extended-offsetof
 153     -Wconditional-uninitialized
 154     -Wincompatible-pointer-types-discards-qualifiers
 155     -Wmissing-variable-declarations
 156 );
 157
 158 # This adds backtrace information to the memory leak info.  Is only used
 159 # when crypto-mdebug-backtrace is enabled.
 160 my $memleak_devteam_backtrace = "-rdynamic";
 161
 162 my $strict_warnings = 0;
 163
 164 # As for $BSDthreads. Idea is to maintain "collective" set of flags,
 165 # which would cover all BSD flavors. -pthread applies to them all,
 166 # but is treated differently. OpenBSD expands is as -D_POSIX_THREAD
 167 # -lc_r, which is sufficient. FreeBSD 4.x expands it as -lc_r,
 168 # which has to be accompanied by explicit -D_THREAD_SAFE and
 169 # sometimes -D_REENTRANT. FreeBSD 5.x expands it as -lc_r, which
 170 # seems to be sufficient?
 171 our $BSDthreads="-pthread -D_THREAD_SAFE -D_REENTRANT";
 172
 173 #
 174 # API compatibility name to version number mapping.
 175 #
 176 my $maxapi = "3.0.0";           # API for "no-deprecated" builds
 177 my $apitable = {
 178     "3.0.0" => 3,
 179     "1.1.1" => 2,
 180     "1.1.0" => 2,
 181     "1.0.2" => 1,
 182     "1.0.1" => 1,
 183     "1.0.0" => 1,
 184     "0.9.8" => 0,
 185 };
 186
 187 our %table = ();
 188 our %config = ();
 189 our %withargs = ();
 190 our $now_printing;      # set to current entry's name in print_table_entry
 191                         # (todo: right thing would be to encapsulate name
 192                         # into %target [class] and make print_table_entry
 193                         # a method)
 194
 195 # Forward declarations ###############################################
 196
 197 # read_config(filename)
 198 #
 199 # Reads a configuration file and populates %table with the contents
 200 # (which the configuration file places in %targets).
 201 sub read_config;
 202
 203 # resolve_config(target)
 204 #
 205 # Resolves all the late evaluations, inheritances and so on for the
 206 # chosen target and any target it inherits from.
 207 sub resolve_config;
 208
 209
 210 # Information collection #############################################
 211
 212 # Unified build supports separate build dir
 213 my $srcdir = catdir(absolutedir(dirname($0))); # catdir ensures local syntax
 214 my $blddir = catdir(absolutedir("."));         # catdir ensures local syntax
 215 my $dofile = abs2rel(catfile($srcdir, "util/dofile.pl"));
 216
 217 my $local_config_envname = 'OPENSSL_LOCAL_CONFIG_DIR';
 218
 219 $config{sourcedir} = abs2rel($srcdir);
 220 $config{builddir} = abs2rel($blddir);
 221
 222 # Collect reconfiguration information if needed
 223 my @argvcopy=@ARGV;
 224
 225 if (grep /^reconf(igure)?$/, @argvcopy) {
 226     die "reconfiguring with other arguments present isn't supported"
 227         if scalar @argvcopy > 1;
 228     if (-f "./configdata.pm") {
 229         my $file = "./configdata.pm";
 230         unless (my $return = do $file) {
 231             die "couldn't parse $file: $@" if $@;
 232             die "couldn't do $file: $!"    unless defined $return;
 233             die "couldn't run $file"       unless $return;
 234         }
 235
 236         @argvcopy = defined($configdata::config{perlargv}) ?
 237             @{$configdata::config{perlargv}} : ();
 238         die "Incorrect data to reconfigure, please do a normal configuration\n"
 239             if (grep(/^reconf/,@argvcopy));
 240         $config{perlenv} = $configdata::config{perlenv} // {};
 241     } else {
 242         die "Insufficient data to reconfigure, please do a normal configuration\n";
 243     }
 244 }
 245
 246 $config{perlargv} = [ @argvcopy ];
 247
 248 # Collect version numbers
 249 $config{major} = "unknown";
 250 $config{minor} = "unknown";
 251 $config{patch} = "unknown";
 252 $config{prerelease} = "";
 253 $config{build_metadata} = "";
 254 $config{shlib_version} = "unknown";
 255
 256 collect_information(
 257     collect_from_file(catfile($srcdir,'include/openssl/opensslv.h')),
 258     qr/#\s+define\s+OPENSSL_VERSION_MAJOR\s+(\d+)/ =>
 259         sub { $config{major} = $1; },
 260     qr/#\s+define\s+OPENSSL_VERSION_MINOR\s+(\d+)/ =>
 261         sub { $config{minor} = $1; },
 262     qr/#\s+define\s+OPENSSL_VERSION_PATCH\s+(\d+)/ =>
 263         sub { $config{patch} = $1; },
 264     qr/#\s+define\s+OPENSSL_VERSION_PRE_RELEASE\s+"((?:\\.|[^"])*)"/ =>
 265         sub { $config{prerelease} = $1; },
 266     qr/#\s+define\s+OPENSSL_VERSION_BUILD_METADATA\s+"((?:\\.|[^"])*)"/ =>
 267         sub { $config{build_metadata} = $1; },
 268     qr/#\s+define\s+OPENSSL_SHLIB_VERSION\s+([\d\.]+)/ =>
 269         sub { $config{shlib_version} = $1; },
 270     );
 271 die "erroneous version information in opensslv.h: ",
 272     "$config{major}.$config{minor}.$config{patch}, $config{shlib_version}\n"
 273     if ($config{major} eq "unknown"
 274             || $config{minor} eq "unknown"
 275             || $config{patch} eq "unknown"
 276             || $config{shlib_version} eq "unknown");
 277
 278 $config{version} = "$config{major}.$config{minor}.$config{patch}";
 279 $config{full_version} = "$config{version}$config{prerelease}$config{build_metadata}";
 280
 281 # Collect target configurations
 282
 283 my $pattern = catfile(dirname($0), "Configurations", "*.conf");
 284 foreach (sort glob($pattern)) {
 285     &read_config($_);
 286 }
 287
 288 if (defined env($local_config_envname)) {
 289     if ($^O eq 'VMS') {
 290         # VMS environment variables are logical names,
 291         # which can be used as is
 292         $pattern = $local_config_envname . ':' . '*.conf';
 293     } else {
 294         $pattern = catfile(env($local_config_envname), '*.conf');
 295     }
 296
 297     foreach (sort glob($pattern)) {
 298         &read_config($_);
 299     }
 300 }
 301
 302 # Save away perl command information
 303 $config{perl_cmd} = $^X;
 304 $config{perl_version} = $Config{version};
 305 $config{perl_archname} = $Config{archname};
 306
 307 $config{prefix}="";
 308 $config{openssldir}="";
 309 $config{processor}="";
 310 $config{libdir}="";
 311 my $auto_threads=1;    # enable threads automatically? true by default
 312 my $default_ranlib;
 313
 314 # Known TLS and DTLS protocols
 315 my @tls = qw(ssl3 tls1 tls1_1 tls1_2 tls1_3);
 316 my @dtls = qw(dtls1 dtls1_2);
 317
 318 # Explicitly known options that are possible to disable.  They can
 319 # be regexps, and will be used like this: /^no-${option}$/
 320 # For developers: keep it sorted alphabetically
 321
 322 my @disablables = (
 323     "ktls",
 324     "afalgeng",
 325     "aria",
 326     "asan",
 327     "asm",
 328     "async",
 329     "autoalginit",
 330     "autoerrinit",
 331     "autoload-config",
 332     "bf",
 333     "blake2",
 334     "buildtest-c++",
 335     "camellia",
 336     "capieng",
 337     "cast",
 338     "chacha",
 339     "cmac",
 340     "cmp",
 341     "cms",
 342     "comp",
 343     "crypto-mdebug",
 344     "crypto-mdebug-backtrace",
 345     "ct",
 346     "deprecated",
 347     "des",
 348     "devcryptoeng",
 349     "dgram",
 350     "dh",
 351     "dsa",
 352     "dtls",
 353     "dynamic-engine",
 354     "ec",
 355     "ec2m",
 356     "ecdh",
 357     "ecdsa",
 358     "ec_nistp_64_gcc_128",
 359     "egd",
 360     "engine",
 361     "err",
 362     "external-tests",
 363     "filenames",
 364     "fips",
 365     "fuzz-libfuzzer",
 366     "fuzz-afl",
 367     "gost",
 368     "idea",
 369     "legacy",
 370     "makedepend",
 371     "md2",
 372     "md4",
 373     "mdc2",
 374     "module",
 375     "msan",
 376     "multiblock",
 377     "nextprotoneg",
 378     "pinshared",
 379     "ocb",
 380     "ocsp",
 381     "padlockeng",
 382     "pic",
 383     "poly1305",
 384     "posix-io",
 385     "psk",
 386     "rc2",
 387     "rc4",
 388     "rc5",
 389     "rdrand",
 390     "rfc3779",
 391     "rmd160",
 392     "scrypt",
 393     "sctp",
 394     "seed",
 395     "shared",
 396     "siphash",
 397     "siv",
 398     "sm2",
 399     "sm3",
 400     "sm4",
 401     "sock",
 402     "srp",
 403     "srtp",
 404     "sse2",
 405     "ssl",
 406     "ssl-trace",
 407     "static-engine",
 408     "stdio",
 409     "tests",
 410     "threads",
 411     "tls",
 412     "trace",
 413     "ts",
 414     "ubsan",
 415     "ui-console",
 416     "unit-test",
 417     "uplink",
 418     "whirlpool",
 419     "weak-ssl-ciphers",
 420     "zlib",
 421     "zlib-dynamic",
 422     );
 423 foreach my $proto ((@tls, @dtls))
 424         {
 425         push(@disablables, $proto);
 426         push(@disablables, "$proto-method") unless $proto eq "tls1_3";
 427         }
 428
 429 # Internal disablables, for aliasing purposes.  They serve no special
 430 # purpose here, but allow scripts to get to know them through configdata.pm,
 431 # where these are merged with @disablables.
 432 # The actual aliasing mechanism is done via %disable_cascades
 433 my @disablables_int = qw(
 434     crmf
 435     );
 436
 437 my %deprecated_disablables = (
 438     "ssl2" => undef,
 439     "buf-freelists" => undef,
 440     "hw" => "hw",               # causes cascade, but no macro
 441     "hw-padlock" => "padlockeng",
 442     "ripemd" => "rmd160",
 443     "ui" => "ui-console",
 444     "dso" => undef,
 445     "heartbeats" => undef,
 446     );
 447
 448 # All of the following are disabled by default:
 449
 450 our %disabled = ( # "what"         => "comment"
 451                   "asan"                => "default",
 452                   "buildtest-c++"       => "default",
 453                   "crypto-mdebug"       => "default",
 454                   "crypto-mdebug-backtrace" => "default",
 455                   "devcryptoeng"        => "default",
 456                   "ec_nistp_64_gcc_128" => "default",
 457                   "egd"                 => "default",
 458                   "external-tests"      => "default",
 459                   "fuzz-libfuzzer"      => "default",
 460                   "fuzz-afl"            => "default",
 461                   "md2"                 => "default",
 462                   "msan"                => "default",
 463                   "rc5"                 => "default",
 464                   "sctp"                => "default",
 465                   "ssl-trace"           => "default",
 466                   "ssl3"                => "default",
 467                   "ssl3-method"         => "default",
 468                   "trace"               => "default",
 469                   "ubsan"               => "default",
 470                   "unit-test"           => "default",
 471                   "weak-ssl-ciphers"    => "default",
 472                   "zlib"                => "default",
 473                   "zlib-dynamic"        => "default",
 474                   "ktls"                => "default",
 475                 );
 476
 477 # Note: => pair form used for aesthetics, not to truly make a hash table
 478 my @disable_cascades = (
 479     # "what"            => [ "cascade", ... ]
 480     sub { $config{processor} eq "386" }
 481                         => [ "sse2" ],
 482     "ssl"               => [ "ssl3" ],
 483     "ssl3-method"       => [ "ssl3" ],
 484     "zlib"              => [ "zlib-dynamic" ],
 485     "des"               => [ "mdc2" ],
 486     "ec"                => [ "ecdsa", "ecdh", "sm2" ],
 487     sub { $disabled{"ec"} && $disabled{"dh"} }
 488                         => [ "tls1_3" ],
 489     "dgram"             => [ "dtls", "sctp" ],
 490     "sock"              => [ "dgram" ],
 491     "dtls"              => [ @dtls ],
 492     sub { 0 == scalar grep { !$disabled{$_} } @dtls }
 493                         => [ "dtls" ],
 494
 495     "tls"               => [ @tls ],
 496     sub { 0 == scalar grep { !$disabled{$_} } @tls }
 497                         => [ "tls" ],
 498
 499     "crypto-mdebug"     => [ "crypto-mdebug-backtrace" ],
 500
 501     # If no modules, then no dynamic engines either
 502     "module"            => [ "dynamic-engine" ],
 503
 504     # Without shared libraries, dynamic engines aren't possible.
 505     # This is due to them having to link with libcrypto and register features
 506     # using the ENGINE functionality, and since that relies on global tables,
 507     # those *have* to be exacty the same as the ones accessed from the app,
 508     # which cannot be guaranteed if shared libraries aren't present.
 509     # (note that even with shared libraries, both the app and dynamic engines
 510     # must be linked with the same library)
 511     "shared"            => [ "dynamic-engine", "uplink" ],
 512     # Other modules don't necessarily have to link with libcrypto, so shared
 513     # libraries do not have to be a condition to produce those.
 514
 515     # Without position independent code, there can be no shared libraries
 516     # or modules.
 517     "pic"               => [ "shared", "module" ],
 518
 519     "module"            => [ "fips", "legacy" ],
 520
 521     "engine"            => [ grep /eng$/, @disablables ],
 522     "hw"                => [ "padlockeng" ],
 523
 524     # no-autoalginit is only useful when building non-shared
 525     "autoalginit"       => [ "shared", "apps" ],
 526
 527     "stdio"             => [ "apps", "capieng", "egd" ],
 528     "apps"              => [ "tests" ],
 529     "tests"             => [ "external-tests" ],
 530     "comp"              => [ "zlib" ],
 531     "sm3"               => [ "sm2" ],
 532     sub { !$disabled{"unit-test"} } => [ "heartbeats" ],
 533
 534     sub { !$disabled{"msan"} } => [ "asm" ],
 535
 536     sub { $disabled{cmac}; } => [ "siv" ],
 537     "legacy"                 => [ "md2" ],
 538
 539     "cmp"               => [ "crmf" ],
 540     );
 541
 542 # Avoid protocol support holes.  Also disable all versions below N, if version
 543 # N is disabled while N+1 is enabled.
 544 #
 545 my @list = (reverse @tls);
 546 while ((my $first, my $second) = (shift @list, shift @list)) {
 547     last unless @list;
 548     push @disable_cascades, ( sub { !$disabled{$first} && $disabled{$second} }
 549                               => [ @list ] );
 550     unshift @list, $second;
 551 }
 552 my @list = (reverse @dtls);
 553 while ((my $first, my $second) = (shift @list, shift @list)) {
 554     last unless @list;
 555     push @disable_cascades, ( sub { !$disabled{$first} && $disabled{$second} }
 556                               => [ @list ] );
 557     unshift @list, $second;
 558 }
 559
 560 # Explicit "no-..." options will be collected in %disabled along with the defaults.
 561 # To remove something from %disabled, use "enable-foo".
 562 # For symmetry, "disable-foo" is a synonym for "no-foo".
 563
 564 &usage if ($#ARGV < 0);
 565
 566 # For the "make variables" CINCLUDES and CDEFINES, we support lists with
 567 # platform specific list separators.  Users from those platforms should
 568 # recognise those separators from how you set up the PATH to find executables.
 569 # The default is the Unix like separator, :, but as an exception, we also
 570 # support the space as separator.
 571 my $list_separator_re =
 572     { VMS           => qr/(?<!\^),/,
 573       MSWin32       => qr/(?<!\\);/ } -> {$^O} // qr/(?<!\\)[:\s]/;
 574 # All the "make variables" we support
 575 # Some get pre-populated for the sake of backward compatibility
 576 # (we supported those before the change to "make variable" support.
 577 my %user = (
 578     AR          => env('AR'),
 579     ARFLAGS     => [],
 580     AS          => undef,
 581     ASFLAGS     => [],
 582     CC          => env('CC'),
 583     CFLAGS      => [ env('CFLAGS') || () ],
 584     CXX         => env('CXX'),
 585     CXXFLAGS    => [ env('CXXFLAGS') || () ],
 586     CPP         => undef,
 587     CPPFLAGS    => [ env('CPPFLAGS') || () ],  # -D, -I, -Wp,
 588     CPPDEFINES  => [],  # Alternative for -D
 589     CPPINCLUDES => [],  # Alternative for -I
 590     CROSS_COMPILE => env('CROSS_COMPILE'),
 591     HASHBANGPERL=> env('HASHBANGPERL') || env('PERL'),
 592     LD          => undef,
 593     LDFLAGS     => [ env('LDFLAGS') || () ],  # -L, -Wl,
 594     LDLIBS      => [ env('LDLIBS') || () ],  # -l
 595     MT          => undef,
 596     MTFLAGS     => [],
 597     PERL        => env('PERL') || ($^O ne "VMS" ? $^X : "perl"),
 598     RANLIB      => env('RANLIB'),
 599     RC          => env('RC') || env('WINDRES'),
 600     RCFLAGS     => [ env('RCFLAGS') || () ],
 601     RM          => undef,
 602    );
 603 # Info about what "make variables" may be prefixed with the cross compiler
 604 # prefix.  This should NEVER mention any such variable with a list for value.
 605 my @user_crossable = qw ( AR AS CC CXX CPP LD MT RANLIB RC );
 606 # The same but for flags given as Configure options.  These are *additional*
 607 # input, as opposed to the VAR=string option that override the corresponding
 608 # config target attributes
 609 my %useradd = (
 610     CPPDEFINES  => [],
 611     CPPINCLUDES => [],
 612     CPPFLAGS    => [],
 613     CFLAGS      => [],
 614     CXXFLAGS    => [],
 615     LDFLAGS     => [],
 616     LDLIBS      => [],
 617     RCFLAGS     => [],
 618    );
 619
 620 my %user_synonyms = (
 621     HASHBANGPERL=> 'PERL',
 622     RC          => 'WINDRES',
 623    );
 624
 625 # Some target attributes have been renamed, this is the translation table
 626 my %target_attr_translate =(
 627     ar          => 'AR',
 628     as          => 'AS',
 629     cc          => 'CC',
 630     cxx         => 'CXX',
 631     cpp         => 'CPP',
 632     hashbangperl => 'HASHBANGPERL',
 633     ld          => 'LD',
 634     mt          => 'MT',
 635     ranlib      => 'RANLIB',
 636     rc          => 'RC',
 637     rm          => 'RM',
 638    );
 639
 640 # Initialisers coming from 'config' scripts
 641 $config{defines} = [ split(/$list_separator_re/, env('__CNF_CPPDEFINES')) ];
 642 $config{includes} = [ split(/$list_separator_re/, env('__CNF_CPPINCLUDES')) ];
 643 $config{cppflags} = [ env('__CNF_CPPFLAGS') || () ];
 644 $config{cflags} = [ env('__CNF_CFLAGS') || () ];
 645 $config{cxxflags} = [ env('__CNF_CXXFLAGS') || () ];
 646 $config{lflags} = [ env('__CNF_LDFLAGS') || () ];
 647 $config{ex_libs} = [ env('__CNF_LDLIBS') || () ];
 648
 649 $config{openssl_api_defines}=[];
 650 $config{openssl_sys_defines}=[];
 651 $config{openssl_feature_defines}=[];
 652 $config{options}="";
 653 $config{build_type} = "release";
 654 my $target="";
 655
 656 my %cmdvars = ();               # Stores FOO='blah' type arguments
 657 my %unsupported_options = ();
 658 my %deprecated_options = ();
 659 # If you change this, update apps/version.c
 660 my @known_seed_sources = qw(getrandom devrandom os egd none rdcpu librandom);
 661 my @seed_sources = ();
 662 while (@argvcopy)
 663         {
 664         $_ = shift @argvcopy;
 665
 666         # Support env variable assignments among the options
 667         if (m|^(\w+)=(.+)?$|)
 668                 {
 669                 $cmdvars{$1} = $2;
 670                 # Every time a variable is given as a configuration argument,
 671                 # it acts as a reset if the variable.
 672                 if (exists $user{$1})
 673                         {
 674                         $user{$1} = ref $user{$1} eq "ARRAY" ? [] : undef;
 675                         }
 676                 #if (exists $useradd{$1})
 677                 #       {
 678                 #       $useradd{$1} = [];
 679                 #       }
 680                 next;
 681                 }
 682
 683         # VMS is a case insensitive environment, and depending on settings
 684         # out of our control, we may receive options uppercased.  Let's
 685         # downcase at least the part before any equal sign.
 686         if ($^O eq "VMS")
 687                 {
 688                 s/^([^=]*)/lc($1)/e;
 689                 }
 690
 691         # some people just can't read the instructions, clang people have to...
 692         s/^-no-(?!integrated-as)/no-/;
 693
 694         # rewrite some options in "enable-..." form
 695         s /^-?-?shared$/enable-shared/;
 696         s /^sctp$/enable-sctp/;
 697         s /^threads$/enable-threads/;
 698         s /^zlib$/enable-zlib/;
 699         s /^zlib-dynamic$/enable-zlib-dynamic/;
 700
 701         if (/^(no|disable|enable)-(.+)$/)
 702                 {
 703                 my $word = $2;
 704                 if ($word !~ m|hw(?:-.+)| # special treatment for hw regexp opt
 705                         && !exists $deprecated_disablables{$word}
 706                         && !grep { $word eq $_ } @disablables)
 707                         {
 708                         $unsupported_options{$_} = 1;
 709                         next;
 710                         }
 711                 }
 712         if (/^no-(.+)$/ || /^disable-(.+)$/)
 713                 {
 714                 foreach my $proto ((@tls, @dtls))
 715                         {
 716                         if ($1 eq "$proto-method")
 717                                 {
 718                                 $disabled{"$proto"} = "option($proto-method)";
 719                                 last;
 720                                 }
 721                         }
 722                 if ($1 eq "dtls")
 723                         {
 724                         foreach my $proto (@dtls)
 725                                 {
 726                                 $disabled{$proto} = "option(dtls)";
 727                                 }
 728                         $disabled{"dtls"} = "option(dtls)";
 729                         }
 730                 elsif ($1 eq "ssl")
 731                         {
 732                         # Last one of its kind
 733                         $disabled{"ssl3"} = "option(ssl)";
 734                         }
 735                 elsif ($1 eq "tls")
 736                         {
 737                         # XXX: Tests will fail if all SSL/TLS
 738                         # protocols are disabled.
 739                         foreach my $proto (@tls)
 740                                 {
 741                                 $disabled{$proto} = "option(tls)";
 742                                 }
 743                         }
 744                 elsif ($1 eq "static-engine")
 745                         {
 746                         delete $disabled{"dynamic-engine"};
 747                         }
 748                 elsif ($1 eq "dynamic-engine")
 749                         {
 750                         $disabled{"dynamic-engine"} = "option";
 751                         }
 752                 elsif (exists $deprecated_disablables{$1})
 753                         {
 754                         $deprecated_options{$_} = 1;
 755                         if (defined $deprecated_disablables{$1})
 756                                 {
 757                                 $disabled{$deprecated_disablables{$1}} = "option";
 758                                 }
 759                         }
 760                 elsif ($1 =~ m|hw(?:-.+)|) # deprecate hw options in regexp form
 761                         {
 762                         $deprecated_options{$_} = 1;
 763                         }
 764                 else
 765                         {
 766                         $disabled{$1} = "option";
 767                         }
 768                 # No longer an automatic choice
 769                 $auto_threads = 0 if ($1 eq "threads");
 770                 }
 771         elsif (/^enable-(.+)$/)
 772                 {
 773                 if ($1 eq "static-engine")
 774                         {
 775                         $disabled{"dynamic-engine"} = "option";
 776                         }
 777                 elsif ($1 eq "dynamic-engine")
 778                         {
 779                         delete $disabled{"dynamic-engine"};
 780                         }
 781                 elsif ($1 eq "zlib-dynamic")
 782                         {
 783                         delete $disabled{"zlib"};
 784                         }
 785                 my $algo = $1;
 786                 delete $disabled{$algo};
 787
 788                 # No longer an automatic choice
 789                 $auto_threads = 0 if ($1 eq "threads");
 790                 }
 791         elsif (/^--strict-warnings$/)
 792                 {
 793                 # Pretend that our strict flags is a C flag, and replace it
 794                 # with the proper flags later on
 795                 push @{$useradd{CFLAGS}}, '--ossl-strict-warnings';
 796                 $strict_warnings=1;
 797                 }
 798         elsif (/^--debug$/)
 799                 {
 800                 $config{build_type} = "debug";
 801                 }
 802         elsif (/^--release$/)
 803                 {
 804                 $config{build_type} = "release";
 805                 }
 806         elsif (/^386$/)
 807                 { $config{processor}=386; }
 808         elsif (/^fips$/)
 809                 {
 810                 die "FIPS mode not supported\n";
 811                 }
 812         elsif (/^rsaref$/)
 813                 {
 814                 # No RSAref support any more since it's not needed.
 815                 # The check for the option is there so scripts aren't
 816                 # broken
 817                 }
 818         elsif (/^nofipscanistercheck$/)
 819                 {
 820                 die "FIPS mode not supported\n";
 821                 }
 822         elsif (/^[-+]/)
 823                 {
 824                 if (/^--prefix=(.*)$/)
 825                         {
 826                         $config{prefix}=$1;
 827                         die "Directory given with --prefix MUST be absolute\n"
 828                                 unless file_name_is_absolute($config{prefix});
 829                         }
 830                 elsif (/^--api=(.*)$/)
 831                         {
 832                         $config{api}=$1;
 833                         }
 834                 elsif (/^--libdir=(.*)$/)
 835                         {
 836                         $config{libdir}=$1;
 837                         }
 838                 elsif (/^--openssldir=(.*)$/)
 839                         {
 840                         $config{openssldir}=$1;
 841                         }
 842                 elsif (/^--with-zlib-lib=(.*)$/)
 843                         {
 844                         $withargs{zlib_lib}=$1;
 845                         }
 846                 elsif (/^--with-zlib-include=(.*)$/)
 847                         {
 848                         $withargs{zlib_include}=$1;
 849                         }
 850                 elsif (/^--with-fuzzer-lib=(.*)$/)
 851                         {
 852                         $withargs{fuzzer_lib}=$1;
 853                         }
 854                 elsif (/^--with-fuzzer-include=(.*)$/)
 855                         {
 856                         $withargs{fuzzer_include}=$1;
 857                         }
 858                 elsif (/^--with-rand-seed=(.*)$/)
 859                         {
 860                         foreach my $x (split(m|,|, $1))
 861                             {
 862                             die "Unknown --with-rand-seed choice $x\n"
 863                                 if ! grep { $x eq $_ } @known_seed_sources;
 864                             push @seed_sources, $x;
 865                             }
 866                         }
 867                 elsif (/^--cross-compile-prefix=(.*)$/)
 868                         {
 869                         $user{CROSS_COMPILE}=$1;
 870                         }
 871                 elsif (/^--config=(.*)$/)
 872                         {
 873                         read_config $1;
 874                         }
 875                 elsif (/^-l(.*)$/)
 876                         {
 877                         push @{$useradd{LDLIBS}}, $_;
 878                         }
 879                 elsif (/^-framework$/)
 880                         {
 881                         push @{$useradd{LDLIBS}}, $_, shift(@argvcopy);
 882                         }
 883                 elsif (/^-L(.*)$/ or /^-Wl,/)
 884                         {
 885                         push @{$useradd{LDFLAGS}}, $_;
 886                         }
 887                 elsif (/^-rpath$/ or /^-R$/)
 888                         # -rpath is the OSF1 rpath flag
 889                         # -R is the old Solaris rpath flag
 890                         {
 891                         my $rpath = shift(@argvcopy) || "";
 892                         $rpath .= " " if $rpath ne "";
 893                         push @{$useradd{LDFLAGS}}, $_, $rpath;
 894                         }
 895                 elsif (/^-static$/)
 896                         {
 897                         push @{$useradd{LDFLAGS}}, $_;
 898                         }
 899                 elsif (/^-D(.*)$/)
 900                         {
 901                         push @{$useradd{CPPDEFINES}}, $1;
 902                         }
 903                 elsif (/^-I(.*)$/)
 904                         {
 905                         push @{$useradd{CPPINCLUDES}}, $1;
 906                         }
 907                 elsif (/^-Wp,$/)
 908                         {
 909                         push @{$useradd{CPPFLAGS}}, $1;
 910                         }
 911                 else    # common if (/^[-+]/), just pass down...
 912                         {
 913                         $_ =~ s/%([0-9a-f]{1,2})/chr(hex($1))/gei;
 914                         push @{$useradd{CFLAGS}}, $_;
 915                         push @{$useradd{CXXFLAGS}}, $_;
 916                         }
 917                 }
 918         else
 919                 {
 920                 die "target already defined - $target (offending arg: $_)\n" if ($target ne "");
 921                 $target=$_;
 922                 }
 923         unless ($_ eq $target || /^no-/ || /^disable-/)
 924                 {
 925                 # "no-..." follows later after implied deactivations
 926                 # have been derived.  (Don't take this too seriously,
 927                 # we really only write OPTIONS to the Makefile out of
 928                 # nostalgia.)
 929
 930                 if ($config{options} eq "")
 931                         { $config{options} = $_; }
 932                 else
 933                         { $config{options} .= " ".$_; }
 934                 }
 935         }
 936
 937 if (defined($config{api}) && !exists $apitable->{$config{api}}) {
 938         die "***** Unsupported api compatibility level: $config{api}\n",
 939 }
 940
 941 if (keys %deprecated_options)
 942         {
 943         warn "***** Deprecated options: ",
 944                 join(", ", keys %deprecated_options), "\n";
 945         }
 946 if (keys %unsupported_options)
 947         {
 948         die "***** Unsupported options: ",
 949                 join(", ", keys %unsupported_options), "\n";
 950         }
 951
 952 # If any %useradd entry has been set, we must check that the "make
 953 # variables" haven't been set.  We start by checking of any %useradd entry
 954 # is set.
 955 if (grep { scalar @$_ > 0 } values %useradd) {
 956     # Hash of env / make variables names.  The possible values are:
 957     # 1 - "make vars"
 958     # 2 - %useradd entry set
 959     # 3 - both set
 960     my %detected_vars =
 961         map { my $v = 0;
 962               $v += 1 if $cmdvars{$_};
 963               $v += 2 if @{$useradd{$_}};
 964               $_ => $v }
 965         keys %useradd;
 966
 967     # If any of the corresponding "make variables" is set, we error
 968     if (grep { $_ & 1 } values %detected_vars) {
 969         my $names = join(', ', grep { $detected_vars{$_} > 0 }
 970                                sort keys %detected_vars);
 971         die <<"_____";
 972 ***** Mixing make variables and additional compiler/linker flags as
 973 ***** configure command line option is not permitted.
 974 ***** Affected make variables: $names
 975 _____
 976     }
 977 }
 978
 979 # Check through all supported command line variables to see if any of them
 980 # were set, and canonicalise the values we got.  If no compiler or linker
 981 # flag or anything else that affects %useradd was set, we also check the
 982 # environment for values.
 983 my $anyuseradd =
 984     grep { defined $_ && (ref $_ ne 'ARRAY' || @$_) } values %useradd;
 985 foreach (keys %user) {
 986     my $value = $cmdvars{$_};
 987     $value //= env($_) unless $anyuseradd;
 988     $value //=
 989         defined $user_synonyms{$_} ? $cmdvars{$user_synonyms{$_}} : undef;
 990     $value //= defined $user_synonyms{$_} ? env($user_synonyms{$_}) : undef
 991         unless $anyuseradd;
 992
 993     if (defined $value) {
 994         if (ref $user{$_} eq 'ARRAY') {
 995             $user{$_} = [ split /$list_separator_re/, $value ];
 996         } elsif (!defined $user{$_}) {
 997             $user{$_} = $value;
 998         }
 999     }
1000 }
1001
1002 if (grep { /-rpath\b/ } ($user{LDFLAGS} ? @{$user{LDFLAGS}} : ())
1003     && !$disabled{shared}
1004     && !($disabled{asan} && $disabled{msan} && $disabled{ubsan})) {
1005     die "***** Cannot simultaneously use -rpath, shared libraries, and\n",
1006         "***** any of asan, msan or ubsan\n";
1007 }
1008
1009 sub disable {
1010     my $disable_type = shift;
1011
1012     for (@_) {
1013         $disabled{$_} = $disable_type;
1014     }
1015
1016     my @tocheckfor = (@_ ? @_ : keys %disabled);
1017     while (@tocheckfor) {
1018         my %new_tocheckfor = ();
1019         my @cascade_copy = (@disable_cascades);
1020         while (@cascade_copy) {
1021             my ($test, $descendents) =
1022                 (shift @cascade_copy, shift @cascade_copy);
1023             if (ref($test) eq "CODE" ? $test->() : defined($disabled{$test})) {
1024                 foreach (grep { !defined($disabled{$_}) } @$descendents) {
1025                     $new_tocheckfor{$_} = 1; $disabled{$_} = "cascade";
1026                 }
1027             }
1028         }
1029         @tocheckfor = (keys %new_tocheckfor);
1030     }
1031 }
1032 disable();                     # First cascade run
1033
1034 our $die = sub { die @_; };
1035 if ($target eq "TABLE") {
1036     local $die = sub { warn @_; };
1037     foreach (sort keys %table) {
1038         print_table_entry($_, "TABLE");
1039     }
1040     exit 0;
1041 }
1042
1043 if ($target eq "LIST") {
1044     foreach (sort keys %table) {
1045         print $_,"\n" unless $table{$_}->{template};
1046     }
1047     exit 0;
1048 }
1049
1050 if ($target eq "HASH") {
1051     local $die = sub { warn @_; };
1052     print "%table = (\n";
1053     foreach (sort keys %table) {
1054         print_table_entry($_, "HASH");
1055     }
1056     exit 0;
1057 }
1058
1059 print "Configuring OpenSSL version $config{full_version} ";
1060 print "for target $target\n";
1061
1062 if (scalar(@seed_sources) == 0) {
1063     print "Using os-specific seed configuration\n";
1064     push @seed_sources, 'os';
1065 }
1066 if (scalar(grep { $_ eq 'none' } @seed_sources) > 0) {
1067     die "Cannot seed with none and anything else" if scalar(@seed_sources) > 1;
1068     warn <<_____ if scalar(@seed_sources) == 1;
1069
1070 ============================== WARNING ===============================
1071 You have selected the --with-rand-seed=none option, which effectively
1072 disables automatic reseeding of the OpenSSL random generator.
1073 All operations depending on the random generator such as creating keys
1074 will not work unless the random generator is seeded manually by the
1075 application.
1076
1077 Please read the 'Note on random number generation' section in the
1078 INSTALL instructions and the RAND_DRBG(7) manual page for more details.
1079 ============================== WARNING ===============================
1080
1081 _____
1082 }
1083 push @{$config{openssl_feature_defines}},
1084      map { (my $x = $_) =~ tr|[\-a-z]|[_A-Z]|; "OPENSSL_RAND_SEED_$x" }
1085         @seed_sources;
1086
1087 # Backward compatibility?
1088 if ($target =~ m/^CygWin32(-.*)$/) {
1089     $target = "Cygwin".$1;
1090 }
1091
1092 # Support for legacy targets having a name starting with 'debug-'
1093 my ($d, $t) = $target =~ m/^(debug-)?(.*)$/;
1094 if ($d) {
1095     $config{build_type} = "debug";
1096
1097     # If we do not find debug-foo in the table, the target is set to foo.
1098     if (!$table{$target}) {
1099         $target = $t;
1100     }
1101 }
1102
1103 &usage if !$table{$target} || $table{$target}->{template};
1104
1105 $config{target} = $target;
1106 my %target = resolve_config($target);
1107
1108 foreach (keys %target_attr_translate) {
1109     $target{$target_attr_translate{$_}} = $target{$_}
1110         if $target{$_};
1111     delete $target{$_};
1112 }
1113
1114 %target = ( %{$table{DEFAULTS}}, %target );
1115
1116 my %conf_files = map { $_ => 1 } (@{$target{_conf_fname_int}});
1117 $config{conf_files} = [ sort keys %conf_files ];
1118
1119 # Using sub disable within these loops may prove fragile, so we run
1120 # a cascade afterwards
1121 foreach my $feature (@{$target{disable}}) {
1122     if (exists $deprecated_disablables{$feature}) {
1123         warn "***** config $target disables deprecated feature $feature\n";
1124     } elsif (!grep { $feature eq $_ } @disablables) {
1125         die "***** config $target disables unknown feature $feature\n";
1126     }
1127     $disabled{$feature} = 'config';
1128 }
1129 foreach my $feature (@{$target{enable}}) {
1130     if ("default" eq ($disabled{$feature} // "")) {
1131         if (exists $deprecated_disablables{$feature}) {
1132             warn "***** config $target enables deprecated feature $feature\n";
1133         } elsif (!grep { $feature eq $_ } @disablables) {
1134             die "***** config $target enables unknown feature $feature\n";
1135         }
1136         delete $disabled{$feature};
1137     }
1138 }
1139
1140 # If uplink_arch isn't defined, disable uplink
1141 $disabled{uplink} = 'no uplink_arch' unless (defined $target{uplink_arch});
1142 # If asm_arch isn't defined, disable asm
1143 $disabled{asm} = 'no asm_arch' unless (defined $target{asm_arch});
1144
1145 disable();                      # Run a cascade now
1146
1147 $target{CXXFLAGS}//=$target{CFLAGS} if $target{CXX};
1148 $target{cxxflags}//=$target{cflags} if $target{CXX};
1149 $target{exe_extension}=".exe" if ($config{target} eq "DJGPP");
1150 $target{exe_extension}=".pm"  if ($config{target} =~ /vos/);
1151
1152 # Fill %config with values from %user, and in case those are undefined or
1153 # empty, use values from %target (acting as a default).
1154 foreach (keys %user) {
1155     my $ref_type = ref $user{$_};
1156
1157     # Temporary function.  Takes an intended ref type (empty string or "ARRAY")
1158     # and a value that's to be coerced into that type.
1159     my $mkvalue = sub {
1160         my $type = shift;
1161         my $value = shift;
1162         my $undef_p = shift;
1163
1164         die "Too many arguments for \$mkvalue" if @_;
1165
1166         while (ref $value eq 'CODE') {
1167             $value = $value->();
1168         }
1169
1170         if ($type eq 'ARRAY') {
1171             return undef unless defined $value;
1172             return undef if ref $value ne 'ARRAY' && !$value;
1173             return undef if ref $value eq 'ARRAY' && !@$value;
1174             return [ $value ] unless ref $value eq 'ARRAY';
1175         }
1176         return undef unless $value;
1177         return $value;
1178     };
1179
1180     $config{$_} =
1181         $mkvalue->($ref_type, $user{$_})
1182         || $mkvalue->($ref_type, $target{$_});
1183     delete $config{$_} unless defined $config{$_};
1184 }
1185
1186 # Finish up %config by appending things the user gave us on the command line
1187 # apart from "make variables"
1188 foreach (keys %useradd) {
1189     # The must all be lists, so we assert that here
1190     die "internal error: \$useradd{$_} isn't an ARRAY\n"
1191         unless ref $useradd{$_} eq 'ARRAY';
1192
1193     if (defined $config{$_}) {
1194         push @{$config{$_}}, @{$useradd{$_}};
1195     } else {
1196         $config{$_} = [ @{$useradd{$_}} ];
1197     }
1198 }
1199 # At this point, we can forget everything about %user and %useradd,
1200 # because it's now all been merged into the corresponding $config entry
1201
1202 # Allow overriding the build file name
1203 $config{build_file} = env('BUILDFILE') || $target{build_file} || "Makefile";
1204
1205 ######################################################################
1206 # Build up information for skipping certain directories depending on disabled
1207 # features, as well as setting up macros for disabled features.
1208
1209 # This is a tentative database of directories to skip.  Some entries may not
1210 # correspond to anything real, but that's ok, they will simply be ignored.
1211 # The actual processing of these entries is done in the build.info lookup
1212 # loop further down.
1213 #
1214 # The key is a Unix formated path in the source tree, the value is an index
1215 # into %disabled_info, so any existing path gets added to a corresponding
1216 # 'skipped' entry in there with the list of skipped directories.
1217 my %skipdir = ();
1218 my %disabled_info = ();         # For configdata.pm
1219 foreach my $what (sort keys %disabled) {
1220     # There are deprecated disablables that translate to themselves.
1221     # They cause disabling cascades, but should otherwise not regiter.
1222     next if $deprecated_disablables{$what};
1223
1224     $config{options} .= " no-$what";
1225
1226     if (!grep { $what eq $_ } ( 'buildtest-c++', 'fips', 'threads', 'shared',
1227                                 'module', 'pic', 'dynamic-engine', 'makedepend',
1228                                 'zlib-dynamic', 'zlib', 'sse2', 'legacy' )) {
1229         (my $WHAT = uc $what) =~ s|-|_|g;
1230         my $skipdir = $what;
1231
1232         # fix-up crypto/directory name(s)
1233         $skipdir = "ripemd" if $what eq "rmd160";
1234         $skipdir = "whrlpool" if $what eq "whirlpool";
1235
1236         my $macro = $disabled_info{$what}->{macro} = "OPENSSL_NO_$WHAT";
1237         push @{$config{openssl_feature_defines}}, $macro;
1238
1239         $skipdir{engines} = $what if $what eq 'engine';
1240         $skipdir{"crypto/$skipdir"} = $what
1241             unless $what eq 'async' || $what eq 'err';
1242     }
1243 }
1244
1245 # Make sure build_scheme is consistent.
1246 $target{build_scheme} = [ $target{build_scheme} ]
1247     if ref($target{build_scheme}) ne "ARRAY";
1248
1249 my ($builder, $builder_platform, @builder_opts) =
1250     @{$target{build_scheme}};
1251
1252 foreach my $checker (($builder_platform."-".$target{build_file}."-checker.pm",
1253                       $builder_platform."-checker.pm")) {
1254     my $checker_path = catfile($srcdir, "Configurations", $checker);
1255     if (-f $checker_path) {
1256         my $fn = $ENV{CONFIGURE_CHECKER_WARN}
1257             ? sub { warn $@; } : sub { die $@; };
1258         if (! do $checker_path) {
1259             if ($@) {
1260                 $fn->($@);
1261             } elsif ($!) {
1262                 $fn->($!);
1263             } else {
1264                 $fn->("The detected tools didn't match the platform\n");
1265             }
1266         }
1267         last;
1268     }
1269 }
1270
1271 push @{$config{defines}}, "NDEBUG"    if $config{build_type} eq "release";
1272
1273 if ($target =~ /^mingw/ && `$config{CC} --target-help 2>&1` =~ m/-mno-cygwin/m)
1274         {
1275         push @{$config{cflags}}, "-mno-cygwin";
1276         push @{$config{cxxflags}}, "-mno-cygwin" if $config{CXX};
1277         push @{$config{shared_ldflag}}, "-mno-cygwin";
1278         }
1279
1280 if ($target =~ /linux.*-mips/ && !$disabled{asm}
1281         && !grep { $_ !~ /-m(ips|arch=)/ } (@{$config{CFLAGS}})) {
1282         # minimally required architecture flags for assembly modules
1283         my $value;
1284         $value = '-mips2' if ($target =~ /mips32/);
1285         $value = '-mips3' if ($target =~ /mips64/);
1286         unshift @{$config{cflags}}, $value;
1287         unshift @{$config{cxxflags}}, $value if $config{CXX};
1288 }
1289
1290 # If threads aren't disabled, check how possible they are
1291 unless ($disabled{threads}) {
1292     if ($auto_threads) {
1293         # Enabled by default, disable it forcibly if unavailable
1294         if ($target{thread_scheme} eq "(unknown)") {
1295             disable("unavailable", 'threads');
1296         }
1297     } else {
1298         # The user chose to enable threads explicitly, let's see
1299         # if there's a chance that's possible
1300         if ($target{thread_scheme} eq "(unknown)") {
1301             # If the user asked for "threads" and we don't have internal
1302             # knowledge how to do it, [s]he is expected to provide any
1303             # system-dependent compiler options that are necessary.  We
1304             # can't truly check that the given options are correct, but
1305             # we expect the user to know what [s]He is doing.
1306             if (!@{$config{CFLAGS}} && !@{$config{CPPDEFINES}}) {
1307                 die "You asked for multi-threading support, but didn't\n"
1308                     ,"provide any system-specific compiler options\n";
1309             }
1310         }
1311     }
1312 }
1313
1314 # Find out if clang's sanitizers have been enabled with -fsanitize
1315 # flags and ensure that the corresponding %disabled elements area
1316 # removed to reflect that the sanitizers are indeed enabled.
1317 my %detected_sanitizers = ();
1318 foreach (grep /^-fsanitize=/, @{$config{CFLAGS} || []}) {
1319     (my $checks = $_) =~ s/^-fsanitize=//;
1320     foreach (split /,/, $checks) {
1321         my $d = { address       => 'asan',
1322                   undefined     => 'ubsan',
1323                   memory        => 'msan' } -> {$_};
1324         next unless defined $d;
1325
1326         $detected_sanitizers{$d} = 1;
1327         if (defined $disabled{$d}) {
1328             die "***** Conflict between disabling $d and enabling $_ sanitizer"
1329                 if $disabled{$d} ne "default";
1330             delete $disabled{$d};
1331         }
1332     }
1333 }
1334
1335 # If threads still aren't disabled, add a C macro to ensure the source
1336 # code knows about it.  Any other flag is taken care of by the configs.
1337 unless($disabled{threads}) {
1338     push @{$config{openssl_feature_defines}}, "OPENSSL_THREADS";
1339 }
1340
1341 # With "deprecated" disable all deprecated features.
1342 if (defined($disabled{"deprecated"})) {
1343         $config{api} = $maxapi;
1344 }
1345
1346 my $no_shared_warn=0;
1347 if ($target{shared_target} eq "")
1348         {
1349         $no_shared_warn = 1
1350             if (!$disabled{shared} || !$disabled{"dynamic-engine"});
1351         disable('no-shared-target', 'pic');
1352         }
1353
1354 if ($disabled{"dynamic-engine"}) {
1355         push @{$config{openssl_feature_defines}}, "OPENSSL_NO_DYNAMIC_ENGINE";
1356         $config{dynamic_engines} = 0;
1357 } else {
1358         push @{$config{openssl_feature_defines}}, "OPENSSL_NO_STATIC_ENGINE";
1359         $config{dynamic_engines} = 1;
1360 }
1361
1362 unless ($disabled{asan} || defined $detected_sanitizers{asan}) {
1363     push @{$config{cflags}}, "-fsanitize=address";
1364 }
1365
1366 unless ($disabled{ubsan} || defined $detected_sanitizers{ubsan}) {
1367     # -DPEDANTIC or -fnosanitize=alignment may also be required on some
1368     # platforms.
1369     push @{$config{cflags}}, "-fsanitize=undefined", "-fno-sanitize-recover=all";
1370 }
1371
1372 unless ($disabled{msan} || defined $detected_sanitizers{msan}) {
1373   push @{$config{cflags}}, "-fsanitize=memory";
1374 }
1375
1376 unless ($disabled{"fuzz-libfuzzer"} && $disabled{"fuzz-afl"}
1377         && $disabled{asan} && $disabled{ubsan} && $disabled{msan}) {
1378     push @{$config{cflags}}, "-fno-omit-frame-pointer", "-g";
1379     push @{$config{cxxflags}}, "-fno-omit-frame-pointer", "-g" if $config{CXX};
1380 }
1381 #
1382 # Platform fix-ups
1383 #
1384
1385 # This saves the build files from having to check
1386 if ($disabled{pic})
1387         {
1388         foreach (qw(shared_cflag shared_cxxflag shared_cppflag
1389                     shared_defines shared_includes shared_ldflag
1390                     module_cflags module_cxxflags module_cppflags
1391                     module_defines module_includes module_lflags))
1392                 {
1393                 delete $config{$_};
1394                 $target{$_} = "";
1395                 }
1396         }
1397 else
1398         {
1399         push @{$config{lib_defines}}, "OPENSSL_PIC";
1400         }
1401
1402 if ($target{sys_id} ne "")
1403         {
1404         push @{$config{openssl_sys_defines}}, "OPENSSL_SYS_$target{sys_id}";
1405         }
1406
1407 unless ($disabled{asm}) {
1408 }
1409
1410 my %predefined_C = compiler_predefined($config{CROSS_COMPILE}.$config{CC});
1411 my %predefined_CXX = $config{CXX}
1412     ? compiler_predefined($config{CROSS_COMPILE}.$config{CXX})
1413     : ();
1414
1415 # Check for makedepend capabilities.
1416 if (!$disabled{makedepend}) {
1417     if ($config{target} =~ /^(VC|vms)-/) {
1418         # For VC- and vms- targets, there's nothing more to do here.  The
1419         # functionality is hard coded in the corresponding build files for
1420         # cl (Windows) and CC/DECC (VMS).
1421     } elsif (($predefined_C{__GNUC__} // -1) >= 3
1422              && !($predefined_C{__APPLE_CC__} && !$predefined_C{__clang__})) {
1423         # We know that GNU C version 3 and up as well as all clang
1424         # versions support dependency generation, but Xcode did not
1425         # handle $cc -M before clang support (but claims __GNUC__ = 3)
1426         $config{makedepprog} = "\$(CROSS_COMPILE)$config{CC}";
1427     } else {
1428         # In all other cases, we look for 'makedepend', and disable the
1429         # capability if not found.
1430         $config{makedepprog} = which('makedepend');
1431         disable('unavailable', 'makedepend') unless $config{makedepprog};
1432     }
1433 }
1434
1435 if (!$disabled{asm} && !$predefined_C{__MACH__} && $^O ne 'VMS') {
1436     # probe for -Wa,--noexecstack option...
1437     if ($predefined_C{__clang__}) {
1438         # clang has builtin assembler, which doesn't recognize --help,
1439         # but it apparently recognizes the option in question on all
1440         # supported platforms even when it's meaningless. In other words
1441         # probe would fail, but probed option always accepted...
1442         push @{$config{cflags}}, "-Wa,--noexecstack", "-Qunused-arguments";
1443     } else {
1444         my $cc = $config{CROSS_COMPILE}.$config{CC};
1445         open(PIPE, "$cc -Wa,--help -c -o null.$$.o -x assembler /dev/null 2>&1 |");
1446         while(<PIPE>) {
1447             if (m/--noexecstack/) {
1448                 push @{$config{cflags}}, "-Wa,--noexecstack";
1449                 last;
1450             }
1451         }
1452         close(PIPE);
1453         unlink("null.$$.o");
1454     }
1455 }
1456
1457 # Deal with bn_ops ###################################################
1458
1459 $config{bn_ll}                  =0;
1460 my $def_int="unsigned int";
1461 $config{rc4_int}                =$def_int;
1462 ($config{b64l},$config{b64},$config{b32})=(0,0,1);
1463
1464 my $count = 0;
1465 foreach (sort split(/\s+/,$target{bn_ops})) {
1466     $count++ if /SIXTY_FOUR_BIT|SIXTY_FOUR_BIT_LONG|THIRTY_TWO_BIT/;
1467     $config{bn_ll}=1                            if $_ eq 'BN_LLONG';
1468     $config{rc4_int}="unsigned char"            if $_ eq 'RC4_CHAR';
1469     ($config{b64l},$config{b64},$config{b32})
1470         =(0,1,0)                                if $_ eq 'SIXTY_FOUR_BIT';
1471     ($config{b64l},$config{b64},$config{b32})
1472         =(1,0,0)                                if $_ eq 'SIXTY_FOUR_BIT_LONG';
1473     ($config{b64l},$config{b64},$config{b32})
1474         =(0,0,1)                                if $_ eq 'THIRTY_TWO_BIT';
1475 }
1476 die "Exactly one of SIXTY_FOUR_BIT|SIXTY_FOUR_BIT_LONG|THIRTY_TWO_BIT can be set in bn_ops\n"
1477     if $count > 1;
1478
1479
1480 # Hack cflags for better warnings (dev option) #######################
1481
1482 # "Stringify" the C and C++ flags string.  This permits it to be made part of
1483 # a string and works as well on command lines.
1484 $config{cflags} = [ map { (my $x = $_) =~ s/([\\\"])/\\$1/g; $x }
1485                         @{$config{cflags}} ];
1486 $config{cxxflags} = [ map { (my $x = $_) =~ s/([\\\"])/\\$1/g; $x }
1487                           @{$config{cxxflags}} ] if $config{CXX};
1488
1489 $config{openssl_api_defines} = [
1490     "OPENSSL_MIN_API=".($apitable->{$config{api} // ""} // -1)
1491 ];
1492
1493 my @strict_warnings_collection=();
1494 if ($strict_warnings)
1495         {
1496         my $wopt;
1497         my $gccver = $predefined_C{__GNUC__} // -1;
1498
1499         warn "WARNING --strict-warnings requires gcc[>=4] or gcc-alike"
1500             unless $gccver >= 4;
1501         push @strict_warnings_collection, @gcc_devteam_warn;
1502         push @strict_warnings_collection, @clang_devteam_warn
1503             if (defined($predefined_C{__clang__}));
1504         }
1505
1506 if (grep { $_ eq '-static' } @{$config{LDFLAGS}}) {
1507     disable('static', 'pic', 'threads');
1508 }
1509
1510 $config{CFLAGS} = [ map { $_ eq '--ossl-strict-warnings'
1511                               ? @strict_warnings_collection
1512                               : ( $_ ) }
1513                     @{$config{CFLAGS}} ];
1514
1515 unless ($disabled{"crypto-mdebug-backtrace"})
1516         {
1517         foreach my $wopt (split /\s+/, $memleak_devteam_backtrace)
1518                 {
1519                 push @{$config{cflags}}, $wopt
1520                         unless grep { $_ eq $wopt } @{$config{cflags}};
1521                 }
1522         if ($target =~ /^BSD-/)
1523                 {
1524                 push @{$config{ex_libs}}, "-lexecinfo";
1525                 }
1526         }
1527
1528 unless ($disabled{afalgeng}) {
1529     $config{afalgeng}="";
1530     if (grep { $_ eq 'afalgeng' } @{$target{enable}}) {
1531         my $minver = 4*10000 + 1*100 + 0;
1532         if ($config{CROSS_COMPILE} eq "") {
1533             my $verstr = `uname -r`;
1534             my ($ma, $mi1, $mi2) = split("\\.", $verstr);
1535             ($mi2) = $mi2 =~ /(\d+)/;
1536             my $ver = $ma*10000 + $mi1*100 + $mi2;
1537             if ($ver < $minver) {
1538                 disable('too-old-kernel', 'afalgeng');
1539             } else {
1540                 push @{$config{engdirs}}, "afalg";
1541             }
1542         } else {
1543             disable('cross-compiling', 'afalgeng');
1544         }
1545     } else {
1546         disable('not-linux', 'afalgeng');
1547     }
1548 }
1549
1550 push @{$config{openssl_feature_defines}}, "OPENSSL_NO_AFALGENG" if ($disabled{afalgeng});
1551
1552 unless ($disabled{ktls}) {
1553     $config{ktls}="";
1554     if ($target =~ m/^linux/) {
1555         my $usr = "/usr/$config{cross_compile_prefix}";
1556         chop($usr);
1557         if ($config{cross_compile_prefix} eq "") {
1558             $usr = "/usr";
1559         }
1560         my $minver = (4 << 16) + (13 << 8) + 0;
1561         my @verstr = split(" ",`cat $usr/include/linux/version.h | grep LINUX_VERSION_CODE`);
1562
1563         if ($verstr[2] < $minver) {
1564             disable('too-old-kernel', 'ktls');
1565         }
1566     } else {
1567         disable('not-linux', 'ktls');
1568     }
1569 }
1570
1571 push @{$config{openssl_other_defines}}, "OPENSSL_NO_KTLS" if ($disabled{ktls});
1572
1573 # Get the extra flags used when building shared libraries and modules.  We
1574 # do this late because some of them depend on %disabled.
1575
1576 # Make the flags to build DSOs the same as for shared libraries unless they
1577 # are already defined
1578 $target{module_cflags} = $target{shared_cflag} unless defined $target{module_cflags};
1579 $target{module_cxxflags} = $target{shared_cxxflag} unless defined $target{module_cxxflags};
1580 $target{module_ldflags} = $target{shared_ldflag} unless defined $target{module_ldflags};
1581 {
1582     my $shared_info_pl =
1583         catfile(dirname($0), "Configurations", "shared-info.pl");
1584     my %shared_info = read_eval_file($shared_info_pl);
1585     push @{$target{_conf_fname_int}}, $shared_info_pl;
1586     my $si = $target{shared_target};
1587     while (ref $si ne "HASH") {
1588         last if ! defined $si;
1589         if (ref $si eq "CODE") {
1590             $si = $si->();
1591         } else {
1592             $si = $shared_info{$si};
1593         }
1594     }
1595
1596     # Some of the 'shared_target' values don't have any entries in
1597     # %shared_info.  That's perfectly fine, AS LONG AS the build file
1598     # template knows how to handle this.  That is currently the case for
1599     # Windows and VMS.
1600     if (defined $si) {
1601         # Just as above, copy certain shared_* attributes to the corresponding
1602         # module_ attribute unless the latter is already defined
1603         $si->{module_cflags} = $si->{shared_cflag} unless defined $si->{module_cflags};
1604         $si->{module_cxxflags} = $si->{shared_cxxflag} unless defined $si->{module_cxxflags};
1605         $si->{module_ldflags} = $si->{shared_ldflag} unless defined $si->{module_ldflags};
1606         foreach (sort keys %$si) {
1607             $target{$_} = defined $target{$_}
1608                 ? add($si->{$_})->($target{$_})
1609                 : $si->{$_};
1610         }
1611     }
1612 }
1613
1614 # ALL MODIFICATIONS TO %disabled, %config and %target MUST BE DONE FROM HERE ON
1615
1616 # If we use the unified build, collect information from build.info files
1617 my %unified_info = ();
1618
1619 my $buildinfo_debug = defined($ENV{CONFIGURE_DEBUG_BUILDINFO});
1620 if ($builder eq "unified") {
1621     use Text::Template 1.46;
1622
1623     sub cleandir {
1624         my $base = shift;
1625         my $dir = shift;
1626         my $relativeto = shift || ".";
1627
1628         $dir = catdir($base,$dir) unless isabsolute($dir);
1629
1630         # Make sure the directories we're building in exists
1631         mkpath($dir);
1632
1633         my $res = abs2rel(absolutedir($dir), rel2abs($relativeto));
1634         #print STDERR "DEBUG[cleandir]: $dir , $base => $res\n";
1635         return $res;
1636     }
1637
1638     sub cleanfile {
1639         my $base = shift;
1640         my $file = shift;
1641         my $relativeto = shift || ".";
1642
1643         $file = catfile($base,$file) unless isabsolute($file);
1644
1645         my $d = dirname($file);
1646         my $f = basename($file);
1647
1648         # Make sure the directories we're building in exists
1649         mkpath($d);
1650
1651         my $res = abs2rel(catfile(absolutedir($d), $f), rel2abs($relativeto));
1652         #print STDERR "DEBUG[cleanfile]: $d , $f => $res\n";
1653         return $res;
1654     }
1655
1656     # Store the name of the template file we will build the build file from
1657     # in %config.  This may be useful for the build file itself.
1658     my @build_file_template_names =
1659         ( $builder_platform."-".$target{build_file}.".tmpl",
1660           $target{build_file}.".tmpl" );
1661     my @build_file_templates = ();
1662
1663     # First, look in the user provided directory, if given
1664     if (defined env($local_config_envname)) {
1665         @build_file_templates =
1666             map {
1667                 if ($^O eq 'VMS') {
1668                     # VMS environment variables are logical names,
1669                     # which can be used as is
1670                     $local_config_envname . ':' . $_;
1671                 } else {
1672                     catfile(env($local_config_envname), $_);
1673                 }
1674             }
1675             @build_file_template_names;
1676     }
1677     # Then, look in our standard directory
1678     push @build_file_templates,
1679         ( map { cleanfile($srcdir, catfile("Configurations", $_), $blddir) }
1680           @build_file_template_names );
1681
1682     my $build_file_template;
1683     for $_ (@build_file_templates) {
1684         $build_file_template = $_;
1685         last if -f $build_file_template;
1686
1687         $build_file_template = undef;
1688     }
1689     if (!defined $build_file_template) {
1690         die "*** Couldn't find any of:\n", join("\n", @build_file_templates), "\n";
1691     }
1692     $config{build_file_templates}
1693       = [ cleanfile($srcdir, catfile("Configurations", "common0.tmpl"),
1694                     $blddir),
1695           $build_file_template,
1696           cleanfile($srcdir, catfile("Configurations", "common.tmpl"),
1697                     $blddir) ];
1698
1699     my @build_dirs = ( [ ] );   # current directory
1700
1701     $config{build_infos} = [ ];
1702
1703     my %ordinals = ();
1704     while (@build_dirs) {
1705         my @curd = @{shift @build_dirs};
1706         my $sourced = catdir($srcdir, @curd);
1707         my $buildd = catdir($blddir, @curd);
1708
1709         my $unixdir = join('/', @curd);
1710         if (exists $skipdir{$unixdir}) {
1711             my $what = $skipdir{$unixdir};
1712             push @{$disabled_info{$what}->{skipped}}, catdir(@curd);
1713             next;
1714         }
1715
1716         mkpath($buildd);
1717
1718         my $f = 'build.info';
1719         # The basic things we're trying to build
1720         my @programs = ();
1721         my @libraries = ();
1722         my @modules = ();
1723         my @scripts = ();
1724
1725         my %attributes = ();
1726         my %sources = ();
1727         my %shared_sources = ();
1728         my %includes = ();
1729         my %defines = ();
1730         my %depends = ();
1731         my %generate = ();
1732
1733         # Support for $variablename in build.info files.
1734         # Embedded perl code is the ultimate master, still.  If its output
1735         # contains a dollar sign, it had better be escaped, or it will be
1736         # taken for a variable name prefix.
1737         my %variables = ();
1738         my $variable_re = qr/\$([[:alpha:]][[:alnum:]_]*)/;
1739         my $expand_variables = sub {
1740             my $value = '';
1741             my $value_rest = shift;
1742
1743             while ($value_rest =~ /(?<!\\)${variable_re}/) {
1744                 $value .= $`;
1745                 $value .= $variables{$1};
1746                 $value_rest = $';
1747             }
1748             return $value . $value_rest;
1749         };
1750
1751         # We want to detect configdata.pm in the source tree, so we
1752         # don't use it if the build tree is different.
1753         my $src_configdata = cleanfile($srcdir, "configdata.pm", $blddir);
1754
1755         push @{$config{build_infos}}, catfile(abs2rel($sourced, $blddir), $f);
1756         my $template =
1757             Text::Template->new(TYPE => 'FILE',
1758                                 SOURCE => catfile($sourced, $f),
1759                                 PREPEND => qq{use lib "$FindBin::Bin/util/perl";});
1760         die "Something went wrong with $sourced/$f: $!\n" unless $template;
1761         my @text =
1762             split /^/m,
1763             $template->fill_in(HASH => { config => \%config,
1764                                          target => \%target,
1765                                          disabled => \%disabled,
1766                                          withargs => \%withargs,
1767                                          builddir => abs2rel($buildd, $blddir),
1768                                          sourcedir => abs2rel($sourced, $blddir),
1769                                          buildtop => abs2rel($blddir, $blddir),
1770                                          sourcetop => abs2rel($srcdir, $blddir) },
1771                                DELIMITERS => [ "{-", "-}" ]);
1772
1773         # The top item of this stack has the following values
1774         # -2 positive already run and we found ELSE (following ELSIF should fail)
1775         # -1 positive already run (skip until ENDIF)
1776         # 0 negatives so far (if we're at a condition, check it)
1777         # 1 last was positive (don't skip lines until next ELSE, ELSIF or ENDIF)
1778         # 2 positive ELSE (following ELSIF should fail)
1779         my @skip = ();
1780         collect_information(
1781             collect_from_array([ @text ],
1782                                qr/\\$/ => sub { my $l1 = shift; my $l2 = shift;
1783                                                 $l1 =~ s/\\$//; $l1.$l2 }),
1784             # Info we're looking for
1785             qr/^\s*IF\[((?:\\.|[^\\\]])*)\]\s*$/
1786             => sub {
1787                 if (! @skip || $skip[$#skip] > 0) {
1788                     push @skip, !! $expand_variables->($1);
1789                 } else {
1790                     push @skip, -1;
1791                 }
1792             },
1793             qr/^\s*ELSIF\[((?:\\.|[^\\\]])*)\]\s*$/
1794             => sub { die "ELSIF out of scope" if ! @skip;
1795                      die "ELSIF following ELSE" if abs($skip[$#skip]) == 2;
1796                      $skip[$#skip] = -1 if $skip[$#skip] != 0;
1797                      $skip[$#skip] = !! $expand_variables->($1)
1798                          if $skip[$#skip] == 0; },
1799             qr/^\s*ELSE\s*$/
1800             => sub { die "ELSE out of scope" if ! @skip;
1801                      $skip[$#skip] = -2 if $skip[$#skip] != 0;
1802                      $skip[$#skip] = 2 if $skip[$#skip] == 0; },
1803             qr/^\s*ENDIF\s*$/
1804             => sub { die "ENDIF out of scope" if ! @skip;
1805                      pop @skip; },
1806             qr/^\s*${variable_re}\s*=\s*(.*?)\s*$/
1807             => sub {
1808                 if (!@skip || $skip[$#skip] > 0) {
1809                     my $n = $1;
1810                     my $v = $2;
1811                     $variables{$n} = $expand_variables->($v);
1812                 }
1813             },
1814             qr/^\s*SUBDIRS\s*=\s*(.*)\s*$/
1815             => sub {
1816                 if (!@skip || $skip[$#skip] > 0) {
1817                     foreach (tokenize($expand_variables->($1))) {
1818                         push @build_dirs, [ @curd, splitdir($_, 1) ];
1819                     }
1820                 }
1821             },
1822             qr/^\s*PROGRAMS(?:{([\w=]+(?:\s*,\s*[\w=]+)*)})?\s*=\s*(.*)\s*$/
1823             => sub {
1824                 if (!@skip || $skip[$#skip] > 0) {
1825                     my @a = tokenize($1, qr|\s*,\s*|);
1826                     my @p = tokenize($expand_variables->($2));
1827                     push @programs, @p;
1828                     foreach my $a (@a) {
1829                         my $ak = $a;
1830                         my $av = 1;
1831                         if ($a =~ m|^(.*?)\s*=\s*(.*?)$|) {
1832                             $ak = $1;
1833                             $av = $2;
1834                         }
1835                         foreach my $p (@p) {
1836                             $attributes{$p}->{$ak} = $av;
1837                         }
1838                     }
1839                 }
1840             },
1841             qr/^\s*LIBS(?:{([\w=]+(?:\s*,\s*[\w=]+)*)})?\s*=\s*(.*)\s*$/
1842             => sub {
1843                 if (!@skip || $skip[$#skip] > 0) {
1844                     my @a = tokenize($1, qr|\s*,\s*|);
1845                     my @l = tokenize($expand_variables->($2));
1846                     push @libraries, @l;
1847                     foreach my $a (@a) {
1848                         my $ak = $a;
1849                         my $av = 1;
1850                         if ($a =~ m|^(.*?)\s*=\s*(.*?)$|) {
1851                             $ak = $1;
1852                             $av = $2;
1853                         }
1854                         foreach my $l (@l) {
1855                             $attributes{$l}->{$ak} = $av;
1856                         }
1857                     }
1858                 }
1859             },
1860             qr/^\s*MODULES(?:{([\w=]+(?:\s*,\s*[\w=]+)*)})?\s*=\s*(.*)\s*$/
1861             => sub {
1862                 if (!@skip || $skip[$#skip] > 0) {
1863                     my @a = tokenize($1, qr|\s*,\s*|);
1864                     my @m = tokenize($expand_variables->($2));
1865                     push @modules, @m;
1866                     foreach my $a (@a) {
1867                         my $ak = $a;
1868                         my $av = 1;
1869                         if ($a =~ m|^(.*?)\s*=\s*(.*?)$|) {
1870                             $ak = $1;
1871                             $av = $2;
1872                         }
1873                         foreach my $m (@m) {
1874                             $attributes{$m}->{$ak} = $av;
1875                         }
1876                     }
1877                 }
1878             },
1879             qr/^\s*SCRIPTS(?:{([\w=]+(?:\s*,\s*[\w=]+)*)})?\s*=\s*(.*)\s*$/
1880             => sub {
1881                 if (!@skip || $skip[$#skip] > 0) {
1882                     my @a = tokenize($1, qr|\s*,\s*|);
1883                     my @s = tokenize($expand_variables->($2));
1884                     push @scripts, @s;
1885                     foreach my $a (@a) {
1886                         my $ak = $a;
1887                         my $av = 1;
1888                         if ($a =~ m|^(.*?)\s*=\s*(.*?)$|) {
1889                             $ak = $1;
1890                             $av = $2;
1891                         }
1892                         foreach my $s (@s) {
1893                             $attributes{$s}->{$ak} = $av;
1894                         }
1895                     }
1896                 }
1897             },
1898
1899             qr/^\s*ORDINALS\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/,
1900             => sub { push @{$ordinals{$1}}, tokenize($expand_variables->($2))
1901                          if !@skip || $skip[$#skip] > 0 },
1902             qr/^\s*SOURCE\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
1903             => sub { push @{$sources{$1}}, tokenize($expand_variables->($2))
1904                          if !@skip || $skip[$#skip] > 0 },
1905             qr/^\s*SHARED_SOURCE\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
1906             => sub { push @{$shared_sources{$1}},
1907                          tokenize($expand_variables->($2))
1908                          if !@skip || $skip[$#skip] > 0 },
1909             qr/^\s*INCLUDE\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
1910             => sub { push @{$includes{$1}}, tokenize($expand_variables->($2))
1911                          if !@skip || $skip[$#skip] > 0 },
1912             qr/^\s*DEFINE\[((?:\\.|[^\\\]])*)\]\s*=\s*(.*)\s*$/
1913             => sub { push @{$defines{$1}}, tokenize($expand_variables->($2))
1914                          if !@skip || $skip[$#skip] > 0 },
1915             qr/^\s*DEPEND\[((?:\\.|[^\\\]])*)\]\s*=\s*(.*)\s*$/
1916             => sub { push @{$depends{$1}}, tokenize($expand_variables->($2))
1917                          if !@skip || $skip[$#skip] > 0 },
1918             qr/^\s*GENERATE\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
1919             => sub { push @{$generate{$1}}, $2
1920                          if !@skip || $skip[$#skip] > 0 },
1921             qr/^\s*(?:#.*)?$/ => sub { },
1922             "OTHERWISE" => sub { die "Something wrong with this line:\n$_\nat $sourced/$f" },
1923             "BEFORE" => sub {
1924                 if ($buildinfo_debug) {
1925                     print STDERR "DEBUG: Parsing ",join(" ", @_),"\n";
1926                     print STDERR "DEBUG: ... before parsing, skip stack is ",join(" ", map { int($_) } @skip),"\n";
1927                 }
1928             },
1929             "AFTER" => sub {
1930                 if ($buildinfo_debug) {
1931                     print STDERR "DEBUG: .... after parsing, skip stack is ",join(" ", map { int($_) } @skip),"\n";
1932                 }
1933             },
1934             );
1935         die "runaway IF?" if (@skip);
1936
1937         if (grep { defined $attributes{$_}->{engine} } keys %attributes
1938                 and !$config{dynamic_engines}) {
1939             die <<"EOF"
1940 ENGINES can only be used if configured with 'dynamic-engine'.
1941 This is usually a fault in a build.info file.
1942 EOF
1943         }
1944
1945         foreach (keys %attributes) {
1946             my $dest = $_;
1947             my $ddest = cleanfile($buildd, $_, $blddir);
1948             foreach (keys %{$attributes{$dest} // {}}) {
1949                 $unified_info{attributes}->{$ddest}->{$_} =
1950                     $attributes{$dest}->{$_};
1951             }
1952         }
1953
1954         {
1955             my %infos = ( programs  => [ @programs  ],
1956                           libraries => [ @libraries ],
1957                           modules   => [ @modules   ],
1958                           scripts   => [ @scripts   ] );
1959             foreach my $k (keys %infos) {
1960                 foreach (@{$infos{$k}}) {
1961                     my $item = cleanfile($buildd, $_, $blddir);
1962                     $unified_info{$k}->{$item} = 1;
1963                 }
1964             }
1965         }
1966
1967         # Check that we haven't defined any library as both shared and
1968         # explicitly static.  That is forbidden.
1969         my @doubles = ();
1970         foreach (grep /\.a$/, keys %{$unified_info{libraries}}) {
1971             (my $l = $_) =~ s/\.a$//;
1972             push @doubles, $l if defined $unified_info{libraries}->{$l};
1973         }
1974         die "these libraries are both explicitly static and shared:\n  ",
1975             join(" ", @doubles), "\n"
1976             if @doubles;
1977
1978         foreach (keys %sources) {
1979             my $dest = $_;
1980             my $ddest = cleanfile($buildd, $_, $blddir);
1981             foreach (@{$sources{$dest}}) {
1982                 my $s = cleanfile($sourced, $_, $blddir);
1983
1984                 # If it isn't in the source tree, we assume it's generated
1985                 # in the build tree
1986                 if ($s eq $src_configdata || ! -f $s || $generate{$_}) {
1987                     $s = cleanfile($buildd, $_, $blddir);
1988                 }
1989                 # We recognise C++, C and asm files
1990                 if ($s =~ /\.(cc|cpp|c|s|S)$/) {
1991                     my $o = $_;
1992                     $o =~ s/\.[csS]$/.o/; # C and assembler
1993                     $o =~ s/\.(cc|cpp)$/_cc.o/; # C++
1994                     $o = cleanfile($buildd, $o, $blddir);
1995                     $unified_info{sources}->{$ddest}->{$o} = -1;
1996                     $unified_info{sources}->{$o}->{$s} = -1;
1997                 } elsif ($s =~ /\.rc$/) {
1998                     # We also recognise resource files
1999                     my $o = $_;
2000                     $o =~ s/\.rc$/.res/; # Resource configuration
2001                     my $o = cleanfile($buildd, $o, $blddir);
2002                     $unified_info{sources}->{$ddest}->{$o} = -1;
2003                     $unified_info{sources}->{$o}->{$s} = -1;
2004                 } else {
2005                     $unified_info{sources}->{$ddest}->{$s} = 1;
2006                 }
2007             }
2008         }
2009
2010         foreach (keys %shared_sources) {
2011             my $dest = $_;
2012             my $ddest = cleanfile($buildd, $_, $blddir);
2013             foreach (@{$shared_sources{$dest}}) {
2014                 my $s = cleanfile($sourced, $_, $blddir);
2015
2016                 # If it isn't in the source tree, we assume it's generated
2017                 # in the build tree
2018                 if ($s eq $src_configdata || ! -f $s || $generate{$_}) {
2019                     $s = cleanfile($buildd, $_, $blddir);
2020                 }
2021
2022                 if ($s =~ /\.(cc|cpp|c|s|S)$/) {
2023                     # We recognise C++, C and asm files
2024                     my $o = $_;
2025                     $o =~ s/\.[csS]$/.o/; # C and assembler
2026                     $o =~ s/\.(cc|cpp)$/_cc.o/; # C++
2027                     $o = cleanfile($buildd, $o, $blddir);
2028                     $unified_info{shared_sources}->{$ddest}->{$o} = -1;
2029                     $unified_info{sources}->{$o}->{$s} = -1;
2030                 } elsif ($s =~ /\.rc$/) {
2031                     # We also recognise resource files
2032                     my $o = $_;
2033                     $o =~ s/\.rc$/.res/; # Resource configuration
2034                     my $o = cleanfile($buildd, $o, $blddir);
2035                     $unified_info{shared_sources}->{$ddest}->{$o} = -1;
2036                     $unified_info{sources}->{$o}->{$s} = -1;
2037                 } elsif ($s =~ /\.ld$/) {
2038                     # We also recognise linker scripts (or corresponding)
2039                     # We know they are generated files
2040                     my $ld = cleanfile($buildd, $_, $blddir);
2041                     $unified_info{shared_sources}->{$ddest}->{$ld} = 1;
2042                 } else {
2043                     die "unrecognised source file type for shared library: $s\n";
2044                 }
2045             }
2046         }
2047
2048         foreach (keys %generate) {
2049             my $dest = $_;
2050             my $ddest = cleanfile($buildd, $_, $blddir);
2051             die "more than one generator for $dest: "
2052                     ,join(" ", @{$generate{$_}}),"\n"
2053                     if scalar @{$generate{$_}} > 1;
2054             my @generator = split /\s+/, $generate{$dest}->[0];
2055             $generator[0] = cleanfile($sourced, $generator[0], $blddir),
2056             $unified_info{generate}->{$ddest} = [ @generator ];
2057         }
2058
2059         foreach (keys %depends) {
2060             my $dest = $_;
2061             my $ddest = $dest eq "" ? "" : cleanfile($sourced, $_, $blddir);
2062
2063             # If the destination doesn't exist in source, it can only be
2064             # a generated file in the build tree.
2065             if ($ddest ne "" && ($ddest eq $src_configdata || ! -f $ddest)) {
2066                 $ddest = cleanfile($buildd, $_, $blddir);
2067             }
2068             foreach (@{$depends{$dest}}) {
2069                 my $d = cleanfile($sourced, $_, $blddir);
2070
2071                 # If we know it's generated, or assume it is because we can't
2072                 # find it in the source tree, we set file we depend on to be
2073                 # in the build tree rather than the source tree, and assume
2074                 # and that there are lines to build it in a BEGINRAW..ENDRAW
2075                 # section or in the Makefile template.
2076                 if ($d eq $src_configdata
2077                     || ! -f $d
2078                     || (grep { $d eq $_ }
2079                         map { cleanfile($srcdir, $_, $blddir) }
2080                         grep { /\.h$/ } keys %{$unified_info{generate}})) {
2081                     $d = cleanfile($buildd, $_, $blddir);
2082                 }
2083                 # Take note if the file to depend on is being renamed
2084                 # Take extra care with files ending with .a, they should
2085                 # be treated without that extension, and the extension
2086                 # should be added back after treatment.
2087                 $d =~ /(\.a)?$/;
2088                 my $e = $1 // "";
2089                 $d = $`.$e;
2090                 $unified_info{depends}->{$ddest}->{$d} = 1;
2091             }
2092         }
2093
2094         foreach (keys %includes) {
2095             my $dest = $_;
2096             my $ddest = cleanfile($sourced, $_, $blddir);
2097
2098             # If the destination doesn't exist in source, it can only be
2099             # a generated file in the build tree.
2100             if ($ddest eq $src_configdata || ! -f $ddest) {
2101                 $ddest = cleanfile($buildd, $_, $blddir);
2102             }
2103             foreach (@{$includes{$dest}}) {
2104                 my $is = cleandir($sourced, $_, $blddir);
2105                 my $ib = cleandir($buildd, $_, $blddir);
2106                 push @{$unified_info{includes}->{$ddest}->{source}}, $is
2107                     unless grep { $_ eq $is } @{$unified_info{includes}->{$ddest}->{source}};
2108                 push @{$unified_info{includes}->{$ddest}->{build}}, $ib
2109                     unless grep { $_ eq $ib } @{$unified_info{includes}->{$ddest}->{build}};
2110             }
2111         }
2112
2113         foreach my $dest (keys %defines) {
2114             my $ddest;
2115
2116             if ($dest ne "") {
2117                 $ddest = cleanfile($sourced, $dest, $blddir);
2118
2119                 # If the destination doesn't exist in source, it can only
2120                 # be a generated file in the build tree.
2121                 if (! -f $ddest) {
2122                     $ddest = cleanfile($buildd, $dest, $blddir);
2123                     if ($unified_info{rename}->{$ddest}) {
2124                         $ddest = $unified_info{rename}->{$ddest};
2125                     }
2126                 }
2127             }
2128             foreach my $v (@{$defines{$dest}}) {
2129                 $v =~ m|^([^=]*)(=.*)?$|;
2130                 die "0 length macro name not permitted\n" if $1 eq "";
2131                 if ($dest ne "") {
2132                     die "$1 defined more than once\n"
2133                         if defined $unified_info{defines}->{$ddest}->{$1};
2134                     $unified_info{defines}->{$ddest}->{$1} = $2;
2135                 } else {
2136                     die "$1 defined more than once\n"
2137                         if grep { $v eq $_ } @{$config{defines}};
2138                     push @{$config{defines}}, $v;
2139                 }
2140             }
2141         }
2142     }
2143
2144     my $ordinals_text = join(', ', sort keys %ordinals);
2145     warn <<"EOF" if $ordinals_text;
2146
2147 WARNING: ORDINALS were specified for $ordinals_text
2148 They are ignored and should be replaced with a combination of GENERATE,
2149 DEPEND and SHARED_SOURCE.
2150 EOF
2151
2152
2153     # Go through the sources of all libraries and check that the same basename
2154     # doesn't appear more than once.  Some static library archivers depend on
2155     # them being unique.
2156     {
2157         my $err = 0;
2158         foreach my $prod (keys %{$unified_info{libraries}}) {
2159             my @prod_sources =
2160                 map { keys %{$unified_info{sources}->{$_}} }
2161                 keys %{$unified_info{sources}->{$prod}};
2162             my %srccnt = ();
2163
2164             # Count how many times a given each source basename
2165             # appears for each product.
2166             foreach my $src (@prod_sources) {
2167                 $srccnt{basename $src}++;
2168             }
2169
2170             foreach my $src (keys %srccnt) {
2171                 if ((my $cnt = $srccnt{$src}) > 1) {
2172                     print STDERR "$src appears $cnt times for the product $prod\n";
2173                     $err++
2174                 }
2175             }
2176         }
2177         die if $err > 0;
2178     }
2179
2180     # Massage the result
2181
2182     # If we depend on a header file or a perl module, add an inclusion of
2183     # its directory to allow smoothe inclusion
2184     foreach my $dest (keys %{$unified_info{depends}}) {
2185         next if $dest eq "";
2186         foreach my $d (keys %{$unified_info{depends}->{$dest}}) {
2187             next unless $d =~ /\.(h|pm)$/;
2188             my $i = dirname($d);
2189             my $spot =
2190                 $d eq "configdata.pm" || defined($unified_info{generate}->{$d})
2191                 ? 'build' : 'source';
2192             push @{$unified_info{includes}->{$dest}->{$spot}}, $i
2193                 unless grep { $_ eq $i } @{$unified_info{includes}->{$dest}->{$spot}};
2194         }
2195     }
2196
2197     # Go through all intermediary files and change their names to something that
2198     # reflects what they will be built for.  Note that for some source files,
2199     # this leads to duplicate object files because they are used multiple times.
2200     # the goal is to rename all object files according to this scheme:
2201     #    {productname}-{midfix}-{origobjname}.[o|res]
2202     # the {midfix} is a keyword indicating the type of product, which is mostly
2203     # valuable for libraries since they come in two forms.
2204     #
2205     # This also reorganises the {sources} and {shared_sources} so that the
2206     # former only contains ALL object files that are supposed to end up in
2207     # static libraries and programs, while the latter contains ALL object files
2208     # that are supposed to end up in shared libraries and DSOs.
2209     # The main reason for having two different source structures is to allow
2210     # the same name to be used for the static and the shared variants of a
2211     # library.
2212     {
2213         # Take copies so we don't get interference from added stuff
2214         my %unified_copy = ();
2215         foreach (('sources', 'shared_sources')) {
2216             $unified_copy{$_} = { %{$unified_info{$_}} }
2217                 if defined($unified_info{$_});
2218             delete $unified_info{$_};
2219         }
2220         foreach my $prodtype (('programs', 'libraries', 'modules', 'scripts')) {
2221             # $intent serves multi purposes:
2222             # - give a prefix for the new object files names
2223             # - in the case of libraries, rearrange the object files so static
2224             #   libraries use the 'sources' structure exclusively, while shared
2225             #   libraries use the 'shared_sources' structure exclusively.
2226             my $intent = {
2227                 programs  => { bin    => { src => [ 'sources' ],
2228                                            dst => 'sources' } },
2229                 libraries => { lib    => { src => [ 'sources' ],
2230                                            dst => 'sources' },
2231                                shlib  => { prodselect =>
2232                                                sub { grep !/\.a$/, @_ },
2233                                            src => [ 'sources',
2234                                                     'shared_sources' ],
2235                                            dst => 'shared_sources' } },
2236                 modules   => { dso    => { src => [ 'sources' ],
2237                                            dst => 'sources' } },
2238                 scripts   => { script => { src => [ 'sources' ],
2239                                            dst => 'sources' } }
2240                } -> {$prodtype};
2241             foreach my $kind (keys %$intent) {
2242                 next if ($intent->{$kind}->{dst} eq 'shared_sources'
2243                              && $disabled{shared});
2244
2245                 my @src = @{$intent->{$kind}->{src}};
2246                 my $dst = $intent->{$kind}->{dst};
2247                 my $prodselect = $intent->{$kind}->{prodselect} // sub { @_ };
2248                 foreach my $prod ($prodselect->(keys %{$unified_info{$prodtype}})) {
2249                     # %prod_sources has all applicable objects as keys, and
2250                     # their corresponding sources as values
2251                     my %prod_sources =
2252                         map { $_ => [ keys %{$unified_copy{sources}->{$_}} ] }
2253                         map { keys %{$unified_copy{$_}->{$prod}} }
2254                         @src;
2255                     foreach (keys %prod_sources) {
2256                         # Only affect object files and resource files,
2257                         # the others simply get a new value
2258                         # (+1 instead of -1)
2259                         if ($_ =~ /\.(o|res)$/) {
2260                             (my $prodname = $prod) =~ s|\.a$||;
2261                             my $newobj =
2262                                 catfile(dirname($_),
2263                                         basename($prodname)
2264                                             . '-' . $kind
2265                                             . '-' . basename($_));
2266                             $unified_info{$dst}->{$prod}->{$newobj} = 1;
2267                             foreach my $src (@{$prod_sources{$_}}) {
2268                                 $unified_info{sources}->{$newobj}->{$src} = 1;
2269                             }
2270                             # Adjust dependencies
2271                             foreach my $deps (keys %{$unified_info{depends}->{$_}}) {
2272                                 $unified_info{depends}->{$_}->{$deps} = -1;
2273                                 $unified_info{depends}->{$newobj}->{$deps} = 1;
2274                             }
2275                             # Adjust includes
2276                             foreach my $k (('source', 'build')) {
2277                                 next unless
2278                                     defined($unified_info{includes}->{$_}->{$k});
2279                                 my @incs = @{$unified_info{includes}->{$_}->{$k}};
2280                                 $unified_info{includes}->{$newobj}->{$k} = [ @incs ];
2281                             }
2282                         } else {
2283                             $unified_info{$dst}->{$prod}->{$_} = 1;
2284                         }
2285                     }
2286                 }
2287             }
2288         }
2289     }
2290
2291     # At this point, we have a number of sources with the value -1.  They
2292     # aren't part of the local build and are probably meant for a different
2293     # platform, and can therefore be cleaned away.  That happens when making
2294     # %unified_info more efficient below.
2295
2296     ### Make unified_info a bit more efficient
2297     # One level structures
2298     foreach (("programs", "libraries", "modules", "scripts")) {
2299         $unified_info{$_} = [ sort keys %{$unified_info{$_}} ];
2300     }
2301     # Two level structures
2302     foreach my $l1 (("sources", "shared_sources", "ldadd", "depends")) {
2303         foreach my $l2 (sort keys %{$unified_info{$l1}}) {
2304             my @items =
2305                 sort
2306                 grep { $unified_info{$l1}->{$l2}->{$_} > 0 }
2307                 keys %{$unified_info{$l1}->{$l2}};
2308             if (@items) {
2309                 $unified_info{$l1}->{$l2} = [ @items ];
2310             } else {
2311                 delete $unified_info{$l1}->{$l2};
2312             }
2313         }
2314     }
2315     # Defines
2316     foreach my $dest (sort keys %{$unified_info{defines}}) {
2317         $unified_info{defines}->{$dest}
2318             = [ map { $_.$unified_info{defines}->{$dest}->{$_} }
2319                 sort keys %{$unified_info{defines}->{$dest}} ];
2320     }
2321     # Includes
2322     foreach my $dest (sort keys %{$unified_info{includes}}) {
2323         if (defined($unified_info{includes}->{$dest}->{build})) {
2324             my @source_includes = ();
2325             @source_includes = ( @{$unified_info{includes}->{$dest}->{source}} )
2326                 if defined($unified_info{includes}->{$dest}->{source});
2327             $unified_info{includes}->{$dest} =
2328                 [ @{$unified_info{includes}->{$dest}->{build}} ];
2329             foreach my $inc (@source_includes) {
2330                 push @{$unified_info{includes}->{$dest}}, $inc
2331                     unless grep { $_ eq $inc } @{$unified_info{includes}->{$dest}};
2332             }
2333         } elsif (defined($unified_info{includes}->{$dest}->{source})) {
2334             $unified_info{includes}->{$dest} =
2335                 [ @{$unified_info{includes}->{$dest}->{source}} ];
2336         } else {
2337             delete $unified_info{includes}->{$dest};
2338         }
2339     }
2340
2341     # For convenience collect information regarding directories where
2342     # files are generated, those generated files and the end product
2343     # they end up in where applicable.  Then, add build rules for those
2344     # directories
2345     my %loopinfo = ( "lib" => [ @{$unified_info{libraries}} ],
2346                      "dso" => [ @{$unified_info{modules}} ],
2347                      "bin" => [ @{$unified_info{programs}} ],
2348                      "script" => [ @{$unified_info{scripts}} ] );
2349     foreach my $type (keys %loopinfo) {
2350         foreach my $product (@{$loopinfo{$type}}) {
2351             my %dirs = ();
2352             my $pd = dirname($product);
2353
2354             foreach (@{$unified_info{sources}->{$product} // []},
2355                      @{$unified_info{shared_sources}->{$product} // []}) {
2356                 my $d = dirname($_);
2357
2358                 # We don't want to create targets for source directories
2359                 # when building out of source
2360                 next if ($config{sourcedir} ne $config{builddir}
2361                              && $d =~ m|^\Q$config{sourcedir}\E|);
2362                 # We already have a "test" target, and the current directory
2363                 # is just silly to make a target for
2364                 next if $d eq "test" || $d eq ".";
2365
2366                 $dirs{$d} = 1;
2367                 push @{$unified_info{dirinfo}->{$d}->{deps}}, $_
2368                     if $d ne $pd;
2369             }
2370             foreach (keys %dirs) {
2371                 push @{$unified_info{dirinfo}->{$_}->{products}->{$type}},
2372                     $product;
2373             }
2374         }
2375     }
2376 }
2377
2378 # For the schemes that need it, we provide the old *_obj configs
2379 # from the *_asm_obj ones
2380 foreach (grep /_(asm|aux)_src$/, keys %target) {
2381     my $src = $_;
2382     (my $obj = $_) =~ s/_(asm|aux)_src$/_obj/;
2383     $target{$obj} = $target{$src};
2384     $target{$obj} =~ s/\.[csS]\b/.o/g; # C and assembler
2385     $target{$obj} =~ s/\.(cc|cpp)\b/_cc.o/g; # C++
2386 }
2387
2388 # Write down our configuration where it fits #########################
2389
2390 print "Creating configdata.pm\n";
2391 open(OUT,">configdata.pm") || die "unable to create configdata.pm: $!\n";
2392 print OUT <<"EOF";
2393 #! $config{HASHBANGPERL}
2394
2395 package configdata;
2396
2397 use strict;
2398 use warnings;
2399
2400 use Exporter;
2401 #use vars qw(\@ISA \@EXPORT);
2402 our \@ISA = qw(Exporter);
2403 our \@EXPORT = qw(\%config \%target \%disabled \%withargs \%unified_info \@disablables \@disablables_int);
2404
2405 EOF
2406 print OUT "our %config = (\n";
2407 foreach (sort keys %config) {
2408     if (ref($config{$_}) eq "ARRAY") {
2409         print OUT "  ", $_, " => [ ", join(", ",
2410                                            map { quotify("perl", $_) }
2411                                            @{$config{$_}}), " ],\n";
2412     } elsif (ref($config{$_}) eq "HASH") {
2413         print OUT "  ", $_, " => {";
2414         if (scalar keys %{$config{$_}} > 0) {
2415             print OUT "\n";
2416             foreach my $key (sort keys %{$config{$_}}) {
2417                 print OUT "      ",
2418                     join(" => ",
2419                          quotify("perl", $key),
2420                          defined $config{$_}->{$key}
2421                              ? quotify("perl", $config{$_}->{$key})
2422                              : "undef");
2423                 print OUT ",\n";
2424             }
2425             print OUT "  ";
2426         }
2427         print OUT "},\n";
2428     } else {
2429         print OUT "  ", $_, " => ", quotify("perl", $config{$_}), ",\n"
2430     }
2431 }
2432 print OUT <<"EOF";
2433 );
2434
2435 EOF
2436 print OUT "our %target = (\n";
2437 foreach (sort keys %target) {
2438     if (ref($target{$_}) eq "ARRAY") {
2439         print OUT "  ", $_, " => [ ", join(", ",
2440                                            map { quotify("perl", $_) }
2441                                            @{$target{$_}}), " ],\n";
2442     } else {
2443         print OUT "  ", $_, " => ", quotify("perl", $target{$_}), ",\n"
2444     }
2445 }
2446 print OUT <<"EOF";
2447 );
2448
2449 EOF
2450 print OUT "our \%available_protocols = (\n";
2451 print OUT "  tls => [ ", join(", ", map { quotify("perl", $_) } @tls), " ],\n";
2452 print OUT "  dtls => [ ", join(", ", map { quotify("perl", $_) } @dtls), " ],\n";
2453 print OUT <<"EOF";
2454 );
2455
2456 EOF
2457 print OUT "our \@disablables = (\n";
2458 foreach (@disablables) {
2459     print OUT "  ", quotify("perl", $_), ",\n";
2460 }
2461 print OUT <<"EOF";
2462 );
2463
2464 EOF
2465 print OUT "# The following come from Configure's @disablables_int\n";
2466 print OUT "our \@disablables_int = (\n";
2467 foreach (@disablables_int) {
2468     print OUT "  ", quotify("perl", $_), ",\n";
2469 }
2470 print OUT <<"EOF";
2471 );
2472
2473 EOF
2474 print OUT "our \%disabled = (\n";
2475 foreach (sort keys %disabled) {
2476     print OUT "  ", quotify("perl", $_), " => ", quotify("perl", $disabled{$_}), ",\n";
2477 }
2478 print OUT <<"EOF";
2479 );
2480
2481 EOF
2482 print OUT "our %withargs = (\n";
2483 foreach (sort keys %withargs) {
2484     if (ref($withargs{$_}) eq "ARRAY") {
2485         print OUT "  ", $_, " => [ ", join(", ",
2486                                            map { quotify("perl", $_) }
2487                                            @{$withargs{$_}}), " ],\n";
2488     } else {
2489         print OUT "  ", $_, " => ", quotify("perl", $withargs{$_}), ",\n"
2490     }
2491 }
2492 print OUT <<"EOF";
2493 );
2494
2495 EOF
2496 if ($builder eq "unified") {
2497     my $recurse;
2498     $recurse = sub {
2499         my $indent = shift;
2500         foreach (@_) {
2501             if (ref $_ eq "ARRAY") {
2502                 print OUT " "x$indent, "[\n";
2503                 foreach (@$_) {
2504                     $recurse->($indent + 4, $_);
2505                 }
2506                 print OUT " "x$indent, "],\n";
2507             } elsif (ref $_ eq "HASH") {
2508                 my %h = %$_;
2509                 print OUT " "x$indent, "{\n";
2510                 foreach (sort keys %h) {
2511                     if (ref $h{$_} eq "") {
2512                         print OUT " "x($indent + 4), quotify("perl", $_), " => ", quotify("perl", $h{$_}), ",\n";
2513                     } else {
2514                         print OUT " "x($indent + 4), quotify("perl", $_), " =>\n";
2515                         $recurse->($indent + 8, $h{$_});
2516                     }
2517                 }
2518                 print OUT " "x$indent, "},\n";
2519             } else {
2520                 print OUT " "x$indent, quotify("perl", $_), ",\n";
2521             }
2522         }
2523     };
2524     print OUT "our %unified_info = (\n";
2525     foreach (sort keys %unified_info) {
2526         if (ref $unified_info{$_} eq "") {
2527             print OUT " "x4, quotify("perl", $_), " => ", quotify("perl", $unified_info{$_}), ",\n";
2528         } else {
2529             print OUT " "x4, quotify("perl", $_), " =>\n";
2530             $recurse->(8, $unified_info{$_});
2531         }
2532     }
2533     print OUT <<"EOF";
2534 );
2535
2536 EOF
2537 }
2538 print OUT
2539     "# The following data is only used when this files is use as a script\n";
2540 print OUT "my \@makevars = (\n";
2541 foreach (sort keys %user) {
2542     print OUT "    '",$_,"',\n";
2543 }
2544 print OUT ");\n";
2545 print OUT "my \%disabled_info = (\n";
2546 foreach my $what (sort keys %disabled_info) {
2547     print OUT "    '$what' => {\n";
2548     foreach my $info (sort keys %{$disabled_info{$what}}) {
2549         if (ref $disabled_info{$what}->{$info} eq 'ARRAY') {
2550             print OUT "        $info => [ ",
2551                 join(', ', map { "'$_'" } @{$disabled_info{$what}->{$info}}),
2552                 " ],\n";
2553         } else {
2554             print OUT "        $info => '", $disabled_info{$what}->{$info},
2555                 "',\n";
2556         }
2557     }
2558     print OUT "    },\n";
2559 }
2560 print OUT ");\n";
2561 print OUT 'my @user_crossable = qw( ', join (' ', @user_crossable), " );\n";
2562 print OUT << 'EOF';
2563 # If run directly, we can give some answers, and even reconfigure
2564 unless (caller) {
2565     use Getopt::Long;
2566     use File::Spec::Functions;
2567     use File::Basename;
2568     use Pod::Usage;
2569
2570     my $here = dirname($0);
2571
2572     my $dump = undef;
2573     my $cmdline = undef;
2574     my $options = undef;
2575     my $target = undef;
2576     my $envvars = undef;
2577     my $makevars = undef;
2578     my $buildparams = undef;
2579     my $reconf = undef;
2580     my $verbose = undef;
2581     my $help = undef;
2582     my $man = undef;
2583     GetOptions('dump|d'                 => \$dump,
2584                'command-line|c'         => \$cmdline,
2585                'options|o'              => \$options,
2586                'target|t'               => \$target,
2587                'environment|e'          => \$envvars,
2588                'make-variables|m'       => \$makevars,
2589                'build-parameters|b'     => \$buildparams,
2590                'reconfigure|reconf|r'   => \$reconf,
2591                'verbose|v'              => \$verbose,
2592                'help'                   => \$help,
2593                'man'                    => \$man)
2594         or die "Errors in command line arguments\n";
2595
2596     unless ($dump || $cmdline || $options || $target || $envvars || $makevars
2597             || $buildparams || $reconf || $verbose || $help || $man) {
2598         print STDERR <<"_____";
2599 You must give at least one option.
2600 For more information, do '$0 --help'
2601 _____
2602         exit(2);
2603     }
2604
2605     if ($help) {
2606         pod2usage(-exitval => 0,
2607                   -verbose => 1);
2608     }
2609     if ($man) {
2610         pod2usage(-exitval => 0,
2611                   -verbose => 2);
2612     }
2613     if ($dump || $cmdline) {
2614         print "\nCommand line (with current working directory = $here):\n\n";
2615         print '    ',join(' ',
2616                           $config{PERL},
2617                           catfile($config{sourcedir}, 'Configure'),
2618                           @{$config{perlargv}}), "\n";
2619         print "\nPerl information:\n\n";
2620         print '    ',$config{perl_cmd},"\n";
2621         print '    ',$config{perl_version},' for ',$config{perl_archname},"\n";
2622     }
2623     if ($dump || $options) {
2624         my $longest = 0;
2625         my $longest2 = 0;
2626         foreach my $what (@disablables) {
2627             $longest = length($what) if $longest < length($what);
2628             $longest2 = length($disabled{$what})
2629                 if $disabled{$what} && $longest2 < length($disabled{$what});
2630         }
2631         print "\nEnabled features:\n\n";
2632         foreach my $what (@disablables) {
2633             print "    $what\n" unless $disabled{$what};
2634         }
2635         print "\nDisabled features:\n\n";
2636         foreach my $what (@disablables) {
2637             if ($disabled{$what}) {
2638                 print "    $what", ' ' x ($longest - length($what) + 1),
2639                     "[$disabled{$what}]", ' ' x ($longest2 - length($disabled{$what}) + 1);
2640                 print $disabled_info{$what}->{macro}
2641                     if $disabled_info{$what}->{macro};
2642                 print ' (skip ',
2643                     join(', ', @{$disabled_info{$what}->{skipped}}),
2644                     ')'
2645                     if $disabled_info{$what}->{skipped};
2646                 print "\n";
2647             }
2648         }
2649     }
2650     if ($dump || $target) {
2651         print "\nConfig target attributes:\n\n";
2652         foreach (sort keys %target) {
2653             next if $_ =~ m|^_| || $_ eq 'template';
2654             my $quotify = sub {
2655                 map { (my $x = $_) =~ s|([\\\$\@"])|\\$1|g; "\"$x\""} @_;
2656             };
2657             print '    ', $_, ' => ';
2658             if (ref($target{$_}) eq "ARRAY") {
2659                 print '[ ', join(', ', $quotify->(@{$target{$_}})), " ],\n";
2660             } else {
2661                 print $quotify->($target{$_}), ",\n"
2662             }
2663         }
2664     }
2665     if ($dump || $envvars) {
2666         print "\nRecorded environment:\n\n";
2667         foreach (sort keys %{$config{perlenv}}) {
2668             print '    ',$_,' = ',($config{perlenv}->{$_} || ''),"\n";
2669         }
2670     }
2671     if ($dump || $makevars) {
2672         print "\nMakevars:\n\n";
2673         foreach my $var (@makevars) {
2674             my $prefix = '';
2675             $prefix = $config{CROSS_COMPILE}
2676                 if grep { $var eq $_ } @user_crossable;
2677             $prefix //= '';
2678             print '    ',$var,' ' x (16 - length $var),'= ',
2679                 (ref $config{$var} eq 'ARRAY'
2680                  ? join(' ', @{$config{$var}})
2681                  : $prefix.$config{$var}),
2682                 "\n"
2683                 if defined $config{$var};
2684         }
2685
2686         my @buildfile = ($config{builddir}, $config{build_file});
2687         unshift @buildfile, $here
2688             unless file_name_is_absolute($config{builddir});
2689         my $buildfile = canonpath(catdir(@buildfile));
2690         print <<"_____";
2691
2692 NOTE: These variables only represent the configuration view.  The build file
2693 template may have processed these variables further, please have a look at the
2694 build file for more exact data:
2695     $buildfile
2696 _____
2697     }
2698     if ($dump || $buildparams) {
2699         my @buildfile = ($config{builddir}, $config{build_file});
2700         unshift @buildfile, $here
2701             unless file_name_is_absolute($config{builddir});
2702         print "\nbuild file:\n\n";
2703         print "    ", canonpath(catfile(@buildfile)),"\n";
2704
2705         print "\nbuild file templates:\n\n";
2706         foreach (@{$config{build_file_templates}}) {
2707             my @tmpl = ($_);
2708             unshift @tmpl, $here
2709                 unless file_name_is_absolute($config{sourcedir});
2710             print '    ',canonpath(catfile(@tmpl)),"\n";
2711         }
2712     }
2713     if ($reconf) {
2714         if ($verbose) {
2715             print 'Reconfiguring with: ', join(' ',@{$config{perlargv}}), "\n";
2716             foreach (sort keys %{$config{perlenv}}) {
2717                 print '    ',$_,' = ',($config{perlenv}->{$_} || ""),"\n";
2718             }
2719         }
2720
2721         chdir $here;
2722         exec $^X,catfile($config{sourcedir}, 'Configure'),'reconf';
2723     }
2724 }
2725
2726 1;
2727
2728 __END__
2729
2730 =head1 NAME
2731
2732 configdata.pm - configuration data for OpenSSL builds
2733
2734 =head1 SYNOPSIS
2735
2736 Interactive:
2737
2738   perl configdata.pm [options]
2739
2740 As data bank module:
2741
2742   use configdata;
2743
2744 =head1 DESCRIPTION
2745
2746 This module can be used in two modes, interactively and as a module containing
2747 all the data recorded by OpenSSL's Configure script.
2748
2749 When used interactively, simply run it as any perl script, with at least one
2750 option, and you will get the information you ask for.  See L</OPTIONS> below.
2751
2752 When loaded as a module, you get a few databanks with useful information to
2753 perform build related tasks.  The databanks are:
2754
2755     %config             Configured things.
2756     %target             The OpenSSL config target with all inheritances
2757                         resolved.
2758     %disabled           The features that are disabled.
2759     @disablables        The list of features that can be disabled.
2760     %withargs           All data given through --with-THING options.
2761     %unified_info       All information that was computed from the build.info
2762                         files.
2763
2764 =head1 OPTIONS
2765
2766 =over 4
2767
2768 =item B<--help>
2769
2770 Print a brief help message and exit.
2771
2772 =item B<--man>
2773
2774 Print the manual page and exit.
2775
2776 =item B<--dump> | B<-d>
2777
2778 Print all relevant configuration data.  This is equivalent to B<--command-line>
2779 B<--options> B<--target> B<--environment> B<--make-variables>
2780 B<--build-parameters>.
2781
2782 =item B<--command-line> | B<-c>
2783
2784 Print the current configuration command line.
2785
2786 =item B<--options> | B<-o>
2787
2788 Print the features, both enabled and disabled, and display defined macro and
2789 skipped directories where applicable.
2790
2791 =item B<--target> | B<-t>
2792
2793 Print the config attributes for this config target.
2794
2795 =item B<--environment> | B<-e>
2796
2797 Print the environment variables and their values at the time of configuration.
2798
2799 =item B<--make-variables> | B<-m>
2800
2801 Print the main make variables generated in the current configuration
2802
2803 =item B<--build-parameters> | B<-b>
2804
2805 Print the build parameters, i.e. build file and build file templates.
2806
2807 =item B<--reconfigure> | B<--reconf> | B<-r>
2808
2809 Redo the configuration.
2810
2811 =item B<--verbose> | B<-v>
2812
2813 Verbose output.
2814
2815 =back
2816
2817 =cut
2818
2819 EOF
2820 close(OUT);
2821 if ($builder_platform eq 'unix') {
2822     my $mode = (0755 & ~umask);
2823     chmod $mode, 'configdata.pm'
2824         or warn sprintf("WARNING: Couldn't change mode for 'configdata.pm' to 0%03o: %s\n",$mode,$!);
2825 }
2826
2827 my %builders = (
2828     unified => sub {
2829         print 'Creating ',$target{build_file},"\n";
2830         run_dofile(catfile($blddir, $target{build_file}),
2831                    @{$config{build_file_templates}});
2832     },
2833     );
2834
2835 $builders{$builder}->($builder_platform, @builder_opts);
2836
2837 $SIG{__DIE__} = $orig_death_handler;
2838
2839 print <<"EOF" if ($disabled{threads} eq "unavailable");
2840
2841 The library could not be configured for supporting multi-threaded
2842 applications as the compiler options required on this system are not known.
2843 See file INSTALL for details if you need multi-threading.
2844 EOF
2845
2846 print <<"EOF" if ($no_shared_warn);
2847
2848 The options 'shared', 'pic' and 'dynamic-engine' aren't supported on this
2849 platform, so we will pretend you gave the option 'no-pic', which also disables
2850 'shared' and 'dynamic-engine'.  If you know how to implement shared libraries
2851 or position independent code, please let us know (but please first make sure
2852 you have tried with a current version of OpenSSL).
2853 EOF
2854
2855 print <<"EOF";
2856
2857 **********************************************************************
2858 ***                                                                ***
2859 ***   OpenSSL has been successfully configured                     ***
2860 ***                                                                ***
2861 ***   If you encounter a problem while building, please open an    ***
2862 ***   issue on GitHub <https://github.com/openssl/openssl/issues>  ***
2863 ***   and include the output from the following command:           ***
2864 ***                                                                ***
2865 ***       perl configdata.pm --dump                                ***
2866 ***                                                                ***
2867 ***   (If you are new to OpenSSL, you might want to consult the    ***
2868 ***   'Troubleshooting' section in the INSTALL file first)         ***
2869 ***                                                                ***
2870 **********************************************************************
2871 EOF
2872
2873 exit(0);
2874
2875 ######################################################################
2876 #
2877 # Helpers and utility functions
2878 #
2879
2880 # Death handler, to print a helpful message in case of failure #######
2881 #
2882 sub death_handler {
2883     die @_ if $^S;              # To prevent the added message in eval blocks
2884     my $build_file = $target{build_file} // "build file";
2885     my @message = ( <<"_____", @_ );
2886
2887 Failure!  $build_file wasn't produced.
2888 Please read INSTALL and associated NOTES files.  You may also have to look over
2889 your available compiler tool chain or change your configuration.
2890
2891 _____
2892
2893     # Dying is terminal, so it's ok to reset the signal handler here.
2894     $SIG{__DIE__} = $orig_death_handler;
2895     die @message;
2896 }
2897
2898 # Configuration file reading #########################################
2899
2900 # Note: All of the helper functions are for lazy evaluation.  They all
2901 # return a CODE ref, which will return the intended value when evaluated.
2902 # Thus, whenever there's mention of a returned value, it's about that
2903 # intended value.
2904
2905 # Helper function to implement conditional value variants, with a default
2906 # plus additional values based on the value of $config{build_type}.
2907 # Arguments are given in hash table form:
2908 #
2909 #       picker(default => "Basic string: ",
2910 #              debug   => "debug",
2911 #              release => "release")
2912 #
2913 # When configuring with --debug, the resulting string will be
2914 # "Basic string: debug", and when not, it will be "Basic string: release"
2915 #
2916 # This can be used to create variants of sets of flags according to the
2917 # build type:
2918 #
2919 #       cflags => picker(default => "-Wall",
2920 #                        debug   => "-g -O0",
2921 #                        release => "-O3")
2922 #
2923 sub picker {
2924     my %opts = @_;
2925     return sub { add($opts{default} || (),
2926                      $opts{$config{build_type}} || ())->(); }
2927 }
2928
2929 # Helper function to combine several values of different types into one.
2930 # This is useful if you want to combine a string with the result of a
2931 # lazy function, such as:
2932 #
2933 #       cflags => combine("-Wall", sub { $disabled{zlib} ? () : "-DZLIB" })
2934 #
2935 sub combine {
2936     my @stuff = @_;
2937     return sub { add(@stuff)->(); }
2938 }
2939
2940 # Helper function to implement conditional values depending on the value
2941 # of $disabled{threads}.  Can be used as follows:
2942 #
2943 #       cflags => combine("-Wall", threads("-pthread"))
2944 #
2945 sub threads {
2946     my @flags = @_;
2947     return sub { add($disabled{threads} ? () : @flags)->(); }
2948 }
2949
2950 sub shared {
2951     my @flags = @_;
2952     return sub { add($disabled{shared} ? () : @flags)->(); }
2953 }
2954
2955 our $add_called = 0;
2956 # Helper function to implement adding values to already existing configuration
2957 # values.  It handles elements that are ARRAYs, CODEs and scalars
2958 sub _add {
2959     my $separator = shift;
2960
2961     # If there's any ARRAY in the collection of values OR the separator
2962     # is undef, we will return an ARRAY of combined values, otherwise a
2963     # string of joined values with $separator as the separator.
2964     my $found_array = !defined($separator);
2965
2966     my @values =
2967         map {
2968             my $res = $_;
2969             while (ref($res) eq "CODE") {
2970                 $res = $res->();
2971             }
2972             if (defined($res)) {
2973                 if (ref($res) eq "ARRAY") {
2974                     $found_array = 1;
2975                     @$res;
2976                 } else {
2977                     $res;
2978                 }
2979             } else {
2980                 ();
2981             }
2982     } (@_);
2983
2984     $add_called = 1;
2985
2986     if ($found_array) {
2987         [ @values ];
2988     } else {
2989         join($separator, grep { defined($_) && $_ ne "" } @values);
2990     }
2991 }
2992 sub add_before {
2993     my $separator = " ";
2994     if (ref($_[$#_]) eq "HASH") {
2995         my $opts = pop;
2996         $separator = $opts->{separator};
2997     }
2998     my @x = @_;
2999     sub { _add($separator, @x, @_) };
3000 }
3001 sub add {
3002     my $separator = " ";
3003     if (ref($_[$#_]) eq "HASH") {
3004         my $opts = pop;
3005         $separator = $opts->{separator};
3006     }
3007     my @x = @_;
3008     sub { _add($separator, @_, @x) };
3009 }
3010
3011 sub read_eval_file {
3012     my $fname = shift;
3013     my $content;
3014     my @result;
3015
3016     open F, "< $fname" or die "Can't open '$fname': $!\n";
3017     {
3018         undef local $/;
3019         $content = <F>;
3020     }
3021     close F;
3022     {
3023         local $@;
3024
3025         @result = ( eval $content );
3026         warn $@ if $@;
3027     }
3028     return wantarray ? @result : $result[0];
3029 }
3030
3031 # configuration reader, evaluates the input file as a perl script and expects
3032 # it to fill %targets with target configurations.  Those are then added to
3033 # %table.
3034 sub read_config {
3035     my $fname = shift;
3036     my %targets;
3037
3038     {
3039         # Protect certain tables from tampering
3040         local %table = ();
3041
3042         %targets = read_eval_file($fname);
3043     }
3044     my %preexisting = ();
3045     foreach (sort keys %targets) {
3046         $preexisting{$_} = 1 if $table{$_};
3047     }
3048     die <<"EOF",
3049 The following config targets from $fname
3050 shadow pre-existing config targets with the same name:
3051 EOF
3052         map { "  $_\n" } sort keys %preexisting
3053         if %preexisting;
3054
3055
3056     # For each target, check that it's configured with a hash table.
3057     foreach (keys %targets) {
3058         if (ref($targets{$_}) ne "HASH") {
3059             if (ref($targets{$_}) eq "") {
3060                 warn "Deprecated target configuration for $_, ignoring...\n";
3061             } else {
3062                 warn "Misconfigured target configuration for $_ (should be a hash table), ignoring...\n";
3063             }
3064             delete $targets{$_};
3065         } else {
3066             $targets{$_}->{_conf_fname_int} = add([ $fname ]);
3067         }
3068     }
3069
3070     %table = (%table, %targets);
3071
3072 }
3073
3074 # configuration resolver.  Will only resolve all the lazy evaluation
3075 # codeblocks for the chosen target and all those it inherits from,
3076 # recursively
3077 sub resolve_config {
3078     my $target = shift;
3079     my @breadcrumbs = @_;
3080
3081 #    my $extra_checks = defined($ENV{CONFIGURE_EXTRA_CHECKS});
3082
3083     if (grep { $_ eq $target } @breadcrumbs) {
3084         die "inherit_from loop!  target backtrace:\n  "
3085             ,$target,"\n  ",join("\n  ", @breadcrumbs),"\n";
3086     }
3087
3088     if (!defined($table{$target})) {
3089         warn "Warning! target $target doesn't exist!\n";
3090         return ();
3091     }
3092     # Recurse through all inheritances.  They will be resolved on the
3093     # fly, so when this operation is done, they will all just be a
3094     # bunch of attributes with string values.
3095     # What we get here, though, are keys with references to lists of
3096     # the combined values of them all.  We will deal with lists after
3097     # this stage is done.
3098     my %combined_inheritance = ();
3099     if ($table{$target}->{inherit_from}) {
3100         my @inherit_from =
3101             map { ref($_) eq "CODE" ? $_->() : $_ } @{$table{$target}->{inherit_from}};
3102         foreach (@inherit_from) {
3103             my %inherited_config = resolve_config($_, $target, @breadcrumbs);
3104
3105             # 'template' is a marker that's considered private to
3106             # the config that had it.
3107             delete $inherited_config{template};
3108
3109             foreach (keys %inherited_config) {
3110                 if (!$combined_inheritance{$_}) {
3111                     $combined_inheritance{$_} = [];
3112                 }
3113                 push @{$combined_inheritance{$_}}, $inherited_config{$_};
3114             }
3115         }
3116     }
3117
3118     # We won't need inherit_from in this target any more, since we've
3119     # resolved all the inheritances that lead to this
3120     delete $table{$target}->{inherit_from};
3121
3122     # Now is the time to deal with those lists.  Here's the place to
3123     # decide what shall be done with those lists, all based on the
3124     # values of the target we're currently dealing with.
3125     # - If a value is a coderef, it will be executed with the list of
3126     #   inherited values as arguments.
3127     # - If the corresponding key doesn't have a value at all or is the
3128     #   empty string, the inherited value list will be run through the
3129     #   default combiner (below), and the result becomes this target's
3130     #   value.
3131     # - Otherwise, this target's value is assumed to be a string that
3132     #   will simply override the inherited list of values.
3133     my $default_combiner = add();
3134
3135     my %all_keys =
3136         map { $_ => 1 } (keys %combined_inheritance,
3137                          keys %{$table{$target}});
3138
3139     sub process_values {
3140         my $object    = shift;
3141         my $inherited = shift;  # Always a [ list ]
3142         my $target    = shift;
3143         my $entry     = shift;
3144
3145         $add_called = 0;
3146
3147         while(ref($object) eq "CODE") {
3148             $object = $object->(@$inherited);
3149         }
3150         if (!defined($object)) {
3151             return ();
3152         }
3153         elsif (ref($object) eq "ARRAY") {
3154             local $add_called;  # To make sure recursive calls don't affect it
3155             return [ map { process_values($_, $inherited, $target, $entry) }
3156                      @$object ];
3157         } elsif (ref($object) eq "") {
3158             return $object;
3159         } else {
3160             die "cannot handle reference type ",ref($object)
3161                 ," found in target ",$target," -> ",$entry,"\n";
3162         }
3163     }
3164
3165     foreach (sort keys %all_keys) {
3166         my $previous = $combined_inheritance{$_};
3167
3168         # Current target doesn't have a value for the current key?
3169         # Assign it the default combiner, the rest of this loop body
3170         # will handle it just like any other coderef.
3171         if (!exists $table{$target}->{$_}) {
3172             $table{$target}->{$_} = $default_combiner;
3173         }
3174
3175         $table{$target}->{$_} = process_values($table{$target}->{$_},
3176                                                $combined_inheritance{$_},
3177                                                $target, $_);
3178         unless(defined($table{$target}->{$_})) {
3179             delete $table{$target}->{$_};
3180         }
3181 #        if ($extra_checks &&
3182 #            $previous && !($add_called ||  $previous ~~ $table{$target}->{$_})) {
3183 #            warn "$_ got replaced in $target\n";
3184 #        }
3185     }
3186
3187     # Finally done, return the result.
3188     return %{$table{$target}};
3189 }
3190
3191 sub usage
3192         {
3193         print STDERR $usage;
3194         print STDERR "\npick os/compiler from:\n";
3195         my $j=0;
3196         my $i;
3197         my $k=0;
3198         foreach $i (sort keys %table)
3199                 {
3200                 next if $table{$i}->{template};
3201                 next if $i =~ /^debug/;
3202                 $k += length($i) + 1;
3203                 if ($k > 78)
3204                         {
3205                         print STDERR "\n";
3206                         $k=length($i);
3207                         }
3208                 print STDERR $i . " ";
3209                 }
3210         foreach $i (sort keys %table)
3211                 {
3212                 next if $table{$i}->{template};
3213                 next if $i !~ /^debug/;
3214                 $k += length($i) + 1;
3215                 if ($k > 78)
3216                         {
3217                         print STDERR "\n";
3218                         $k=length($i);
3219                         }
3220                 print STDERR $i . " ";
3221                 }
3222         print STDERR "\n\nNOTE: If in doubt, on Unix-ish systems use './config'.\n";
3223         exit(1);
3224         }
3225
3226 sub run_dofile
3227 {
3228     my $out = shift;
3229     my @templates = @_;
3230
3231     unlink $out || warn "Can't remove $out, $!"
3232         if -f $out;
3233     foreach (@templates) {
3234         die "Can't open $_, $!" unless -f $_;
3235     }
3236     my $perlcmd = (quotify("maybeshell", $config{PERL}))[0];
3237     my $cmd = "$perlcmd \"-I.\" \"-Mconfigdata\" \"$dofile\" -o\"Configure\" \"".join("\" \"",@templates)."\" > \"$out.new\"";
3238     #print STDERR "DEBUG[run_dofile]: \$cmd = $cmd\n";
3239     system($cmd);
3240     exit 1 if $? != 0;
3241     rename("$out.new", $out) || die "Can't rename $out.new, $!";
3242 }
3243
3244 sub compiler_predefined {
3245     state %predefined;
3246     my $cc = shift;
3247
3248     return () if $^O eq 'VMS';
3249
3250     die 'compiler_predefined called without a compiler command'
3251         unless $cc;
3252
3253     if (! $predefined{$cc}) {
3254
3255         $predefined{$cc} = {};
3256
3257         # collect compiler pre-defines from gcc or gcc-alike...
3258         open(PIPE, "$cc -dM -E -x c /dev/null 2>&1 |");
3259         while (my $l = <PIPE>) {
3260             $l =~ m/^#define\s+(\w+(?:\(\w+\))?)(?:\s+(.+))?/ or last;
3261             $predefined{$cc}->{$1} = $2 // '';
3262         }
3263         close(PIPE);
3264     }
3265
3266     return %{$predefined{$cc}};
3267 }
3268
3269 sub which
3270 {
3271     my ($name)=@_;
3272
3273     if (eval { require IPC::Cmd; 1; }) {
3274         IPC::Cmd->import();
3275         return scalar IPC::Cmd::can_run($name);
3276     } else {
3277         # if there is $directories component in splitpath,
3278         # then it's not something to test with $PATH...
3279         return $name if (File::Spec->splitpath($name))[1];
3280
3281         foreach (File::Spec->path()) {
3282             my $fullpath = catfile($_, "$name$target{exe_extension}");
3283             if (-f $fullpath and -x $fullpath) {
3284                 return $fullpath;
3285             }
3286         }
3287     }
3288 }
3289
3290 sub env
3291 {
3292     my $name = shift;
3293     my %opts = @_;
3294
3295     unless ($opts{cacheonly}) {
3296         # Note that if $ENV{$name} doesn't exist or is undefined,
3297         # $config{perlenv}->{$name} will be created with the value
3298         # undef.  This is intentional.
3299
3300         $config{perlenv}->{$name} = $ENV{$name}
3301             if ! exists $config{perlenv}->{$name};
3302     }
3303     return $config{perlenv}->{$name};
3304 }
3305
3306 # Configuration printer ##############################################
3307
3308 sub print_table_entry
3309 {
3310     local $now_printing = shift;
3311     my %target = resolve_config($now_printing);
3312     my $type = shift;
3313
3314     # Don't print the templates
3315     return if $target{template};
3316
3317     my @sequence = (
3318         "sys_id",
3319         "cpp",
3320         "cppflags",
3321         "defines",
3322         "includes",
3323         "cc",
3324         "cflags",
3325         "ld",
3326         "lflags",
3327         "loutflag",
3328         "ex_libs",
3329         "bn_ops",
3330         "poly1035_asm_src",
3331         "thread_scheme",
3332         "perlasm_scheme",
3333         "dso_scheme",
3334         "shared_target",
3335         "shared_cflag",
3336         "shared_defines",
3337         "shared_ldflag",
3338         "shared_rcflag",
3339         "shared_extension",
3340         "dso_extension",
3341         "obj_extension",
3342         "exe_extension",
3343         "ranlib",
3344         "ar",
3345         "arflags",
3346         "aroutflag",
3347         "rc",
3348         "rcflags",
3349         "rcoutflag",
3350         "mt",
3351         "mtflags",
3352         "mtinflag",
3353         "mtoutflag",
3354         "multilib",
3355         "build_scheme",
3356         );
3357
3358     if ($type eq "TABLE") {
3359         print "\n";
3360         print "*** $now_printing\n";
3361         foreach (@sequence) {
3362             if (ref($target{$_}) eq "ARRAY") {
3363                 printf "\$%-12s = %s\n", $_, join(" ", @{$target{$_}});
3364             } else {
3365                 printf "\$%-12s = %s\n", $_, $target{$_};
3366             }
3367         }
3368     } elsif ($type eq "HASH") {
3369         my $largest =
3370             length((sort { length($a) <=> length($b) } @sequence)[-1]);
3371         print "    '$now_printing' => {\n";
3372         foreach (@sequence) {
3373             if ($target{$_}) {
3374                 if (ref($target{$_}) eq "ARRAY") {
3375                     print "      '",$_,"'"," " x ($largest - length($_))," => [ ",join(", ", map { "'$_'" } @{$target{$_}})," ],\n";
3376                 } else {
3377                     print "      '",$_,"'"," " x ($largest - length($_))," => '",$target{$_},"',\n";
3378                 }
3379             }
3380         }
3381         print "    },\n";
3382     }
3383 }
3384
3385 # Utility routines ###################################################
3386
3387 # On VMS, if the given file is a logical name, File::Spec::Functions
3388 # will consider it an absolute path.  There are cases when we want a
3389 # purely syntactic check without checking the environment.
3390 sub isabsolute {
3391     my $file = shift;
3392
3393     # On non-platforms, we just use file_name_is_absolute().
3394     return file_name_is_absolute($file) unless $^O eq "VMS";
3395
3396     # If the file spec includes a device or a directory spec,
3397     # file_name_is_absolute() is perfectly safe.
3398     return file_name_is_absolute($file) if $file =~ m|[:\[]|;
3399
3400     # Here, we know the given file spec isn't absolute
3401     return 0;
3402 }
3403
3404 # Makes a directory absolute and cleans out /../ in paths like foo/../bar
3405 # On some platforms, this uses rel2abs(), while on others, realpath() is used.
3406 # realpath() requires that at least all path components except the last is an
3407 # existing directory.  On VMS, the last component of the directory spec must
3408 # exist.
3409 sub absolutedir {
3410     my $dir = shift;
3411
3412     # realpath() is quite buggy on VMS.  It uses LIB$FID_TO_NAME, which
3413     # will return the volume name for the device, no matter what.  Also,
3414     # it will return an incorrect directory spec if the argument is a
3415     # directory that doesn't exist.
3416     if ($^O eq "VMS") {
3417         return rel2abs($dir);
3418     }
3419
3420     # We use realpath() on Unix, since no other will properly clean out
3421     # a directory spec.
3422     use Cwd qw/realpath/;
3423
3424     return realpath($dir);
3425 }
3426
3427 sub quotify {
3428     my %processors = (
3429         perl    => sub { my $x = shift;
3430                          $x =~ s/([\\\$\@"])/\\$1/g;
3431                          return '"'.$x.'"'; },
3432         maybeshell => sub { my $x = shift;
3433                             (my $y = $x) =~ s/([\\\"])/\\$1/g;
3434                             if ($x ne $y || $x =~ m|\s|) {
3435                                 return '"'.$y.'"';
3436                             } else {
3437                                 return $x;
3438                             }
3439                         },
3440         );
3441     my $for = shift;
3442     my $processor =
3443         defined($processors{$for}) ? $processors{$for} : sub { shift; };
3444
3445     return map { $processor->($_); } @_;
3446 }
3447
3448 # collect_from_file($filename, $line_concat_cond_re, $line_concat)
3449 # $filename is a file name to read from
3450 # $line_concat_cond_re is a regexp detecting a line continuation ending
3451 # $line_concat is a CODEref that takes care of concatenating two lines
3452 sub collect_from_file {
3453     my $filename = shift;
3454     my $line_concat_cond_re = shift;
3455     my $line_concat = shift;
3456
3457     open my $fh, $filename || die "unable to read $filename: $!\n";
3458     return sub {
3459         my $saved_line = "";
3460         $_ = "";
3461         while (<$fh>) {
3462             s|\R$||;
3463             if (defined $line_concat) {
3464                 $_ = $line_concat->($saved_line, $_);
3465                 $saved_line = "";
3466             }
3467             if (defined $line_concat_cond_re && /$line_concat_cond_re/) {
3468                 $saved_line = $_;
3469                 next;
3470             }
3471             return $_;
3472         }
3473         die "$filename ending with continuation line\n" if $_;
3474         close $fh;
3475         return undef;
3476     }
3477 }
3478
3479 # collect_from_array($array, $line_concat_cond_re, $line_concat)
3480 # $array is an ARRAYref of lines
3481 # $line_concat_cond_re is a regexp detecting a line continuation ending
3482 # $line_concat is a CODEref that takes care of concatenating two lines
3483 sub collect_from_array {
3484     my $array = shift;
3485     my $line_concat_cond_re = shift;
3486     my $line_concat = shift;
3487     my @array = (@$array);
3488
3489     return sub {
3490         my $saved_line = "";
3491         $_ = "";
3492         while (defined($_ = shift @array)) {
3493             s|\R$||;
3494             if (defined $line_concat) {
3495                 $_ = $line_concat->($saved_line, $_);
3496                 $saved_line = "";
3497             }
3498             if (defined $line_concat_cond_re && /$line_concat_cond_re/) {
3499                 $saved_line = $_;
3500                 next;
3501             }
3502             return $_;
3503         }
3504         die "input text ending with continuation line\n" if $_;
3505         return undef;
3506     }
3507 }
3508
3509 # collect_information($lineiterator, $line_continue, $regexp => $CODEref, ...)
3510 # $lineiterator is a CODEref that delivers one line at a time.
3511 # All following arguments are regex/CODEref pairs, where the regexp detects a
3512 # line and the CODEref does something with the result of the regexp.
3513 sub collect_information {
3514     my $lineiterator = shift;
3515     my %collectors = @_;
3516
3517     while(defined($_ = $lineiterator->())) {
3518         s|\R$||;
3519         my $found = 0;
3520         if ($collectors{"BEFORE"}) {
3521             $collectors{"BEFORE"}->($_);
3522         }
3523         foreach my $re (keys %collectors) {
3524             if ($re !~ /^OTHERWISE|BEFORE|AFTER$/ && /$re/) {
3525                 $collectors{$re}->($lineiterator);
3526                 $found = 1;
3527             };
3528         }
3529         if ($collectors{"OTHERWISE"}) {
3530             $collectors{"OTHERWISE"}->($lineiterator, $_)
3531                 unless $found || !defined $collectors{"OTHERWISE"};
3532         }
3533         if ($collectors{"AFTER"}) {
3534             $collectors{"AFTER"}->($_);
3535         }
3536     }
3537 }
3538
3539 # tokenize($line)
3540 # tokenize($line,$separator)
3541 # $line is a line of text to split up into tokens
3542 # $separator [optional] is a regular expression that separates the tokens,
3543 # the default being spaces.  Do not use quotes of any kind as separators,
3544 # that will give undefined results.
3545 # Returns a list of tokens.
3546 #
3547 # Tokens are divided by separator (spaces by default).  If the tokens include
3548 # the separators, they have to be quoted with single or double quotes.
3549 # Double quotes inside a double quoted token must be escaped.  Escaping is done
3550 # with backslash.
3551 # Basically, the same quoting rules apply for " and ' as in any
3552 # Unix shell.
3553 sub tokenize {
3554     my $line = my $debug_line = shift;
3555     my $separator = shift // qr|\s+|;
3556     my @result = ();
3557
3558     if ($ENV{CONFIGURE_DEBUG_TOKENIZE}) {
3559         print STDERR "DEBUG[tokenize]: \$separator = $separator\n";
3560     }
3561
3562     while ($line =~ s|^${separator}||, $line ne "") {
3563         my $token = "";
3564     again:
3565         $line =~ m/^(.*?)(${separator}|"|'|$)/;
3566         $token .= $1;
3567         $line = $2.$';
3568
3569         if ($line =~ m/^"((?:[^"\\]+|\\.)*)"/) {
3570             $token .= $1;
3571             $line = $';
3572             goto again;
3573         } elsif ($line =~ m/^'([^']*)'/) {
3574             $token .= $1;
3575             $line = $';
3576             goto again;
3577         }
3578         push @result, $token;
3579     }
3580
3581     if ($ENV{CONFIGURE_DEBUG_TOKENIZE}) {
3582         print STDERR "DEBUG[tokenize]: Parsed '$debug_line' into:\n";
3583         print STDERR "DEBUG[tokenize]: ('", join("', '", @result), "')\n";
3584     }
3585     return @result;
3586 }