Enable QUIC by default
[openssl.git] / Configure
1 #! /usr/bin/env perl
2 # -*- mode: perl; -*-
3 # Copyright 2016-2022 The OpenSSL Project Authors. All Rights Reserved.
4 #
5 # Licensed under the Apache License 2.0 (the "License").  You may not use
6 # this file except in compliance with the License.  You can obtain a copy
7 # in the file LICENSE in the source distribution or at
8 # https://www.openssl.org/source/license.html
9
10 ##  Configure -- OpenSSL source tree configuration script
11
12 use 5.10.0;
13 use strict;
14 use Config;
15 use FindBin;
16 use lib "$FindBin::Bin/util/perl";
17 use File::Basename;
18 use File::Spec::Functions qw/:DEFAULT abs2rel rel2abs splitdir/;
19 use File::Path qw/mkpath/;
20 use OpenSSL::fallback "$FindBin::Bin/external/perl/MODULES.txt";
21 use OpenSSL::Glob;
22 use OpenSSL::Template;
23 use OpenSSL::config;
24
25 # see INSTALL.md for instructions.
26
27 my $orig_death_handler = $SIG{__DIE__};
28 $SIG{__DIE__} = \&death_handler;
29
30 my $usage="Usage: Configure [no-<feature> ...] [enable-<feature> ...] [-Dxxx] [-lxxx] [-Lxxx] [-fxxx] [-Kxxx] [no-hw-xxx|no-hw] [[no-]threads] [[no-]thread-pool] [[no-]default-thread-pool] [[no-]shared] [[no-]zlib|zlib-dynamic] [no-asm] [no-egd] [sctp] [386] [--prefix=DIR] [--openssldir=OPENSSLDIR] [--with-xxx[=vvv]] [--config=FILE] os/compiler[:flags]\n";
31
32 my $banner = <<"EOF";
33
34 **********************************************************************
35 ***                                                                ***
36 ***   OpenSSL has been successfully configured                     ***
37 ***                                                                ***
38 ***   If you encounter a problem while building, please open an    ***
39 ***   issue on GitHub <https://github.com/openssl/openssl/issues>  ***
40 ***   and include the output from the following command:           ***
41 ***                                                                ***
42 ***       perl configdata.pm --dump                                ***
43 ***                                                                ***
44 ***   (If you are new to OpenSSL, you might want to consult the    ***
45 ***   'Troubleshooting' section in the INSTALL.md file first)      ***
46 ***                                                                ***
47 **********************************************************************
48 EOF
49
50 # Options:
51 #
52 # --config      add the given configuration file, which will be read after
53 #               any "Configurations*" files that are found in the same
54 #               directory as this script.
55 # --prefix      prefix for the OpenSSL installation, which includes the
56 #               directories bin, lib, include, share/man, share/doc/openssl
57 #               This becomes the value of INSTALLTOP in Makefile
58 #               (Default: /usr/local)
59 # --openssldir  OpenSSL data area, such as openssl.cnf, certificates and keys.
60 #               If it's a relative directory, it will be added on the directory
61 #               given with --prefix.
62 #               This becomes the value of OPENSSLDIR in Makefile and in C.
63 #               (Default: PREFIX/ssl)
64 # --banner=".." Output specified text instead of default completion banner
65 #
66 # -w            Don't wait after showing a Configure warning
67 #
68 # --cross-compile-prefix Add specified prefix to binutils components.
69 #
70 # --api         One of 0.9.8, 1.0.0, 1.0.1, 1.0.2, 1.1.0, 1.1.1, or 3.0
71 #               Define the public APIs as they were for that version
72 #               including patch releases.  If 'no-deprecated' is also
73 #               given, do not compile support for interfaces deprecated
74 #               up to and including the specified OpenSSL version.
75 #
76 # no-hw-xxx     do not compile support for specific crypto hardware.
77 #               Generic OpenSSL-style methods relating to this support
78 #               are always compiled but return NULL if the hardware
79 #               support isn't compiled.
80 # no-hw         do not compile support for any crypto hardware.
81 # [no-]threads  [don't] try to create a library that is suitable for
82 #               multithreaded applications (default is "threads" if we
83 #               know how to do it)
84 # [no-]thread-pool
85 #               [don't] allow thread pool functionality
86 # [no-]default-thread-pool
87 #               [don't] allow default thread pool functionality
88 # [no-]shared   [don't] try to create shared libraries when supported.
89 # [no-]pic      [don't] try to build position independent code when supported.
90 #               If disabled, it also disables shared and dynamic-engine.
91 # no-asm        do not use assembler
92 # no-egd        do not compile support for the entropy-gathering daemon APIs
93 # [no-]zlib     [don't] compile support for zlib compression.
94 # zlib-dynamic  Like "zlib", but the zlib library is expected to be a shared
95 #               library and will be loaded at run-time by the OpenSSL library.
96 # sctp          include SCTP support
97 # no-quic       disable QUIC support
98 # no-uplink     Don't build support for UPLINK interface.
99 # enable-weak-ssl-ciphers
100 #               Enable weak ciphers that are disabled by default.
101 # 386           generate 80386 code in assembly modules
102 # no-sse2       disables IA-32 SSE2 code in assembly modules, the above
103 #               mentioned '386' option implies this one
104 # no-<cipher>   build without specified algorithm (dsa, idea, rc5, ...)
105 # -<xxx> +<xxx> All options which are unknown to the 'Configure' script are
106 # /<xxx>        passed through to the compiler. Unix-style options beginning
107 #               with a '-' or '+' are recognized, as well as Windows-style
108 #               options beginning with a '/'. If the option contains arguments
109 #               separated by spaces, then the URL-style notation %20 can be
110 #               used for the space character in order to avoid having to quote
111 #               the option. For example, -opt%20arg gets expanded to -opt arg.
112 #               In fact, any ASCII character can be encoded as %xx using its
113 #               hexadecimal encoding.
114 # -static       while -static is also a pass-through compiler option (and
115 #               as such is limited to environments where it's actually
116 #               meaningful), it triggers a number configuration options,
117 #               namely no-pic, no-shared and no-threads. It is
118 #               argued that the only reason to produce statically linked
119 #               binaries (and in context it means executables linked with
120 #               -static flag, and not just executables linked with static
121 #               libcrypto.a) is to eliminate dependency on specific run-time,
122 #               a.k.a. libc version. The mentioned config options are meant
123 #               to achieve just that. Unfortunately on Linux it's impossible
124 #               to eliminate the dependency completely for openssl executable
125 #               because of getaddrinfo and gethostbyname calls, which can
126 #               invoke dynamically loadable library facility anyway to meet
127 #               the lookup requests. For this reason on Linux statically
128 #               linked openssl executable has rather debugging value than
129 #               production quality.
130 #
131 # BN_LLONG      use the type 'long long' in crypto/bn/bn.h
132 # RC4_CHAR      use 'char' instead of 'int' for RC4_INT in crypto/rc4/rc4.h
133 # Following are set automatically by this script
134 #
135 # MD5_ASM       use some extra md5 assembler,
136 # SHA1_ASM      use some extra sha1 assembler, must define L_ENDIAN for x86
137 # RMD160_ASM    use some extra ripemd160 assembler,
138 # SHA256_ASM    sha256_block is implemented in assembler
139 # SHA512_ASM    sha512_block is implemented in assembler
140 # AES_ASM       AES_[en|de]crypt is implemented in assembler
141
142 # Minimum warning options... any contributions to OpenSSL should at least
143 # get past these.  Note that we only use these with C compilers, not with
144 # C++ compilers.
145
146 # -DPEDANTIC complements -pedantic and is meant to mask code that
147 # is not strictly standard-compliant and/or implementation-specific,
148 # e.g. inline assembly, disregards to alignment requirements, such
149 # that -pedantic would complain about. Incidentally -DPEDANTIC has
150 # to be used even in sanitized builds, because sanitizer too is
151 # supposed to and does take notice of non-standard behaviour. Then
152 # -pedantic with pre-C9x compiler would also complain about 'long
153 # long' not being supported. As 64-bit algorithms are common now,
154 # it grew impossible to resolve this without sizeable additional
155 # code, so we just tell compiler to be pedantic about everything
156 # but 'long long' type.
157
158 my @gcc_devteam_warn = qw(
159     -DPEDANTIC -pedantic -Wno-long-long -DUNUSEDRESULT_DEBUG
160     -Wall
161     -Wmissing-declarations
162     -Wextra
163     -Wno-unused-parameter
164     -Wno-missing-field-initializers
165     -Wswitch
166     -Wsign-compare
167     -Wshadow
168     -Wformat
169     -Wno-type-limits
170     -Wno-tautological-constant-out-of-range-compare
171     -Wundef
172     -Werror
173     -Wmissing-prototypes
174     -Wstrict-prototypes
175 );
176
177 # These are used in addition to $gcc_devteam_warn when the compiler is clang.
178 # TODO(openssl-team): fix problems and investigate if (at least) the
179 # following warnings can also be enabled:
180 #       -Wcast-align
181 #       -Wunreachable-code -- no, too ugly/compiler-specific
182 #       -Wlanguage-extension-token -- no, we use asm()
183 #       -Wunused-macros -- no, too tricky for BN and _XOPEN_SOURCE etc
184 #       -Wextended-offsetof -- no, needed in CMS ASN1 code
185 my @clang_devteam_warn = qw(
186     -Wno-unknown-warning-option
187     -Wswitch-default
188     -Wno-parentheses-equality
189     -Wno-language-extension-token
190     -Wno-extended-offsetof
191     -Wconditional-uninitialized
192     -Wincompatible-pointer-types-discards-qualifiers
193     -Wmissing-variable-declarations
194 );
195
196 my @cl_devteam_warn = qw(
197     /WX
198 );
199
200 my $strict_warnings = 0;
201
202 # As for $BSDthreads. Idea is to maintain "collective" set of flags,
203 # which would cover all BSD flavors. -pthread applies to them all,
204 # but is treated differently. OpenBSD expands is as -D_POSIX_THREAD
205 # -lc_r, which is sufficient. FreeBSD 4.x expands it as -lc_r,
206 # which has to be accompanied by explicit -D_THREAD_SAFE and
207 # sometimes -D_REENTRANT. FreeBSD 5.x expands it as -lc_r, which
208 # seems to be sufficient?
209 our $BSDthreads="-pthread -D_THREAD_SAFE -D_REENTRANT";
210
211 #
212 # API compatibility name to version number mapping.
213 #
214 my $apitable = {
215     # This table expresses when API additions or changes can occur.
216     # The numbering used changes from 3.0 and on because we updated
217     # (solidified) our version numbering scheme at that point.
218
219     # From 3.0 and on, we internalise the given version number in decimal
220     # as MAJOR * 10000 + MINOR * 100 + 0
221     "3.0.0" => 30000,
222     "3.0"   => 30000,
223
224     # Note that before 3.0, we didn't have the same version number scheme.
225     # Still, the numbering we use here covers what we need.
226     "1.1.1" => 10101,
227     "1.1.0" => 10100,
228     "1.0.2" => 10002,
229     "1.0.1" => 10001,
230     "1.0.0" => 10000,
231     "0.9.8" =>   908,
232 };
233
234 # For OpenSSL::config::get_platform
235 my %guess_opts = ();
236
237 my $dryrun = 0;
238
239 our %table = ();
240 our %config = ();
241 our %withargs = ();
242 our $now_printing;      # set to current entry's name in print_table_entry
243                         # (todo: right thing would be to encapsulate name
244                         # into %target [class] and make print_table_entry
245                         # a method)
246
247 # Forward declarations ###############################################
248
249 # read_config(filename)
250 #
251 # Reads a configuration file and populates %table with the contents
252 # (which the configuration file places in %targets).
253 sub read_config;
254
255 # resolve_config(target)
256 #
257 # Resolves all the late evaluations, inheritances and so on for the
258 # chosen target and any target it inherits from.
259 sub resolve_config;
260
261
262 # Information collection #############################################
263
264 # Unified build supports separate build dir
265 my $srcdir = catdir(absolutedir(dirname($0))); # catdir ensures local syntax
266 my $blddir = catdir(absolutedir("."));         # catdir ensures local syntax
267
268 # File::Spec::Unix doesn't detect case insensitivity, so we make sure to
269 # check if the source and build directory are really the same, and make
270 # them so.  This avoids all kinds of confusion later on.
271 # We must check @File::Spec::ISA rather than using File::Spec->isa() to
272 # know if File::Spec ended up loading File::Spec::Unix.
273 $srcdir = $blddir
274     if (grep(/::Unix$/, @File::Spec::ISA)
275         && samedir($srcdir, $blddir));
276
277 my $dofile = abs2rel(catfile($srcdir, "util/dofile.pl"));
278
279 my $local_config_envname = 'OPENSSL_LOCAL_CONFIG_DIR';
280
281 $config{sourcedir} = abs2rel($srcdir, $blddir);
282 $config{builddir} = abs2rel($blddir, $blddir);
283 # echo -n 'holy hand grenade of antioch' | openssl sha256
284 $config{FIPSKEY} =
285     'f4556650ac31d35461610bac4ed81b1a181b2d8a43ea2854cbae22ca74560813';
286
287 # Collect reconfiguration information if needed
288 my @argvcopy=@ARGV;
289
290 if (grep /^reconf(igure)?$/, @argvcopy) {
291     die "reconfiguring with other arguments present isn't supported"
292         if scalar @argvcopy > 1;
293     if (-f "./configdata.pm") {
294         my $file = "./configdata.pm";
295         unless (my $return = do $file) {
296             die "couldn't parse $file: $@" if $@;
297             die "couldn't do $file: $!"    unless defined $return;
298             die "couldn't run $file"       unless $return;
299         }
300
301         @argvcopy = defined($configdata::config{perlargv}) ?
302             @{$configdata::config{perlargv}} : ();
303         die "Incorrect data to reconfigure, please do a normal configuration\n"
304             if (grep(/^reconf/,@argvcopy));
305         $config{perlenv} = $configdata::config{perlenv} // {};
306     } else {
307         die "Insufficient data to reconfigure, please do a normal configuration\n";
308     }
309 }
310
311 $config{perlargv} = [ @argvcopy ];
312
313 # Historical: if known directories in crypto/ have been removed, it means
314 # that those sub-systems are disabled.
315 # (the other option would be to removed them from the SUBDIRS statement in
316 # crypto/build.info)
317 # We reverse the input list for cosmetic purely reasons, to compensate that
318 # 'unshift' adds at the front of the list (i.e. in reverse input order).
319 foreach ( reverse sort( 'aes', 'aria', 'bf', 'camellia', 'cast', 'des', 'dh',
320                         'dsa', 'ec', 'hmac', 'idea', 'md2', 'md5', 'mdc2',
321                         'rc2', 'rc4', 'rc5', 'ripemd', 'seed', 'sha',
322                         'sm2', 'sm3', 'sm4') ) {
323     unshift @argvcopy, "no-$_" if ! -d catdir($srcdir, 'crypto', $_);
324 }
325
326 # Collect version numbers
327 my %version = ();
328
329 collect_information(
330     collect_from_file(catfile($srcdir,'VERSION.dat')),
331     qr/\s*(\w+)\s*=\s*(.*?)\s*$/ =>
332         sub {
333             # Only define it if there is a value at all
334             if ($2 ne '') {
335                 my $k = $1;
336                 my $v = $2;
337                 # Some values are quoted.  Trim the quotes
338                 $v = $1 if $v =~ /^"(.*)"$/;
339                 $version{uc $k} = $v;
340             }
341         },
342     "OTHERWISE" =>
343         sub { die "Something wrong with this line:\n$_\nin $srcdir/VERSION.dat" },
344     );
345
346 $config{major} = $version{MAJOR} // 'unknown';
347 $config{minor} = $version{MINOR} // 'unknown';
348 $config{patch} = $version{PATCH} // 'unknown';
349 $config{prerelease} =
350     defined $version{PRE_RELEASE_TAG} ? "-$version{PRE_RELEASE_TAG}" : '';
351 $config{build_metadata} =
352     defined $version{BUILD_METADATA} ? "+$version{BUILD_METADATA}" : '';
353 $config{shlib_version} = $version{SHLIB_VERSION} // 'unknown';
354 $config{release_date} = $version{RELEASE_DATE} // 'xx XXX xxxx';
355
356 $config{version} = "$config{major}.$config{minor}.$config{patch}";
357 $config{full_version} = "$config{version}$config{prerelease}$config{build_metadata}";
358
359 die "erroneous version information in VERSION.dat: ",
360     "$config{version}, $config{shlib_version}\n"
361     unless (defined $version{MAJOR}
362             && defined $version{MINOR}
363             && defined $version{PATCH}
364             && defined $version{SHLIB_VERSION});
365
366 # Collect target configurations
367
368 my $pattern = catfile(dirname($0), "Configurations", "*.conf");
369 foreach (sort glob($pattern)) {
370     &read_config($_);
371 }
372
373 if (defined env($local_config_envname)) {
374     if ($^O eq 'VMS') {
375         # VMS environment variables are logical names,
376         # which can be used as is
377         $pattern = $local_config_envname . ':' . '*.conf';
378     } else {
379         $pattern = catfile(env($local_config_envname), '*.conf');
380     }
381
382     foreach (sort glob($pattern)) {
383         &read_config($_);
384     }
385 }
386
387 # Save away perl command information
388 $config{perl_cmd} = $^X;
389 $config{perl_version} = $Config{version};
390 $config{perl_archname} = $Config{archname};
391
392 $config{prefix}="";
393 $config{openssldir}="";
394 $config{processor}="";
395 $config{libdir}="";
396 my $auto_threads=1;    # enable threads automatically? true by default
397 my $default_ranlib;
398
399 # Known TLS and DTLS protocols
400 my @tls = qw(ssl3 tls1 tls1_1 tls1_2 tls1_3);
401 my @dtls = qw(dtls1 dtls1_2);
402
403 # Explicitly known options that are possible to disable.  They can
404 # be regexps, and will be used like this: /^no-${option}$/
405 # For developers: keep it sorted alphabetically
406
407 my @disablables = (
408     "acvp-tests",
409     "afalgeng",
410     "apps",
411     "argon2",
412     "aria",
413     "asan",
414     "asm",
415     "async",
416     "autoalginit",
417     "autoerrinit",
418     "autoload-config",
419     "bf",
420     "blake2",
421     "brotli",
422     "brotli-dynamic",
423     "buildtest-c++",
424     "bulk",
425     "cached-fetch",
426     "camellia",
427     "capieng",
428     "winstore",
429     "cast",
430     "chacha",
431     "cmac",
432     "cmp",
433     "cms",
434     "comp",
435     "crypto-mdebug",
436     "ct",
437     "default-thread-pool",
438     "deprecated",
439     "des",
440     "devcryptoeng",
441     "dgram",
442     "dh",
443     "docs",
444     "dsa",
445     "dso",
446     "dtls",
447     "dynamic-engine",
448     "ec",
449     "ec2m",
450     "ec_nistp_64_gcc_128",
451     "ecdh",
452     "ecdsa",
453     "ecx",
454     "egd",
455     "engine",
456     "err",
457     "external-tests",
458     "filenames",
459     "fips",
460     "fips-securitychecks",
461     "fuzz-afl",
462     "fuzz-libfuzzer",
463     "gost",
464     "http",
465     "idea",
466     "ktls",
467     "legacy",
468     "loadereng",
469     "makedepend",
470     "md2",
471     "md4",
472     "mdc2",
473     "module",
474     "msan",
475     "multiblock",
476     "nextprotoneg",
477     "ocb",
478     "ocsp",
479     "padlockeng",
480     "pic",
481     "pinshared",
482     "poly1305",
483     "posix-io",
484     "psk",
485     "quic",
486     "rc2",
487     "rc4",
488     "rc5",
489     "rdrand",
490     "rfc3779",
491     "rmd160",
492     "scrypt",
493     "sctp",
494     "secure-memory",
495     "seed",
496     "shared",
497     "siphash",
498     "siv",
499     "sm2",
500     "sm3",
501     "sm4",
502     "sock",
503     "srp",
504     "srtp",
505     "sse2",
506     "ssl",
507     "ssl-trace",
508     "static-engine",
509     "stdio",
510     "tests",
511     "tfo",
512     "thread-pool",
513     "threads",
514     "tls",
515     "trace",
516     "ts",
517     "ubsan",
518     "ui-console",
519     "unit-test",
520     "uplink",
521     "weak-ssl-ciphers",
522     "whirlpool",
523     "zlib",
524     "zlib-dynamic",
525     "zstd",
526     "zstd-dynamic",
527     );
528 foreach my $proto ((@tls, @dtls))
529         {
530         push(@disablables, $proto);
531         push(@disablables, "$proto-method") unless $proto eq "tls1_3";
532         }
533
534 # Internal disablables, for aliasing purposes.  They serve no special
535 # purpose here, but allow scripts to get to know them through configdata.pm,
536 # where these are merged with @disablables.
537 # The actual aliasing mechanism is done via %disable_cascades
538 my @disablables_int = qw(
539     crmf
540     );
541
542 my %deprecated_disablables = (
543     "ssl2" => undef,
544     "buf-freelists" => undef,
545     "crypto-mdebug-backtrace" => undef,
546     "hw" => "hw",               # causes cascade, but no macro
547     "hw-padlock" => "padlockeng",
548     "ripemd" => "rmd160",
549     "ui" => "ui-console",
550     "heartbeats" => undef,
551     );
552
553 # All of the following are disabled by default:
554
555 our %disabled = ( # "what"         => "comment"
556                   "fips"                => "default",
557                   "asan"                => "default",
558                   "brotli"              => "default",
559                   "brotli-dynamic"      => "default",
560                   "buildtest-c++"       => "default",
561                   "crypto-mdebug"       => "default",
562                   "crypto-mdebug-backtrace" => "default",
563                   "devcryptoeng"        => "default",
564                   "ec_nistp_64_gcc_128" => "default",
565                   "egd"                 => "default",
566                   "external-tests"      => "default",
567                   "fuzz-afl"            => "default",
568                   "fuzz-libfuzzer"      => "default",
569                   "ktls"                => "default",
570                   "md2"                 => "default",
571                   "msan"                => "default",
572                   "rc5"                 => "default",
573                   "sctp"                => "default",
574                   "ssl3"                => "default",
575                   "ssl3-method"         => "default",
576                   "tfo"                 => "default",
577                   "trace"               => "default",
578                   "ubsan"               => "default",
579                   "unit-test"           => "default",
580                   "weak-ssl-ciphers"    => "default",
581                   "zlib"                => "default",
582                   "zlib-dynamic"        => "default",
583                   "zstd"                => "default",
584                   "zstd-dynamic"        => "default",
585                 );
586
587 # Note: => pair form used for aesthetics, not to truly make a hash table
588 my @disable_cascades = (
589     # "what"            => [ "cascade", ... ]
590     "bulk"              => [ "shared", "dso",
591                              "aria", "async", "autoload-config",
592                              "blake2", "bf", "camellia", "cast", "chacha",
593                              "cmac", "cms", "cmp", "comp", "ct",
594                              "des", "dgram", "dh", "dsa",
595                              "ec", "engine",
596                              "filenames",
597                              "idea", "ktls",
598                              "md4", "multiblock", "nextprotoneg",
599                              "ocsp", "ocb", "poly1305", "psk",
600                              "rc2", "rc4", "rmd160",
601                              "seed", "siphash", "siv",
602                              "sm3", "sm4", "srp",
603                              "srtp", "ssl3-method", "ssl-trace",
604                              "tfo",
605                              "ts", "ui-console", "whirlpool",
606                              "fips-securitychecks" ],
607     sub { $config{processor} eq "386" }
608                         => [ "sse2" ],
609     "ssl"               => [ "ssl3" ],
610     "ssl3-method"       => [ "ssl3" ],
611     "zlib"              => [ "zlib-dynamic" ],
612     "brotli"            => [ "brotli-dynamic" ],
613     "zstd"              => [ "zstd-dynamic" ],
614     "des"               => [ "mdc2" ],
615     "ec"                => [ "ec2m", "ecdsa", "ecdh", "sm2", "gost", "ecx" ],
616     "dgram"             => [ "dtls", "quic", "sctp" ],
617     "sock"              => [ "dgram", "tfo" ],
618     "dtls"              => [ @dtls ],
619     sub { 0 == scalar grep { !$disabled{$_} } @dtls }
620                         => [ "dtls" ],
621
622     "tls"               => [ @tls ],
623     sub { 0 == scalar grep { !$disabled{$_} } @tls }
624                         => [ "tls" ],
625
626     "crypto-mdebug"     => [ "crypto-mdebug-backtrace" ],
627
628     # If no modules, then no dynamic engines either
629     "module"            => [ "dynamic-engine" ],
630
631     # Without shared libraries, dynamic engines aren't possible.
632     # This is due to them having to link with libcrypto and register features
633     # using the ENGINE functionality, and since that relies on global tables,
634     # those *have* to be exactly the same as the ones accessed from the app,
635     # which cannot be guaranteed if shared libraries aren't present.
636     # (note that even with shared libraries, both the app and dynamic engines
637     # must be linked with the same library)
638     "shared"            => [ "dynamic-engine", "uplink" ],
639     "dso"               => [ "dynamic-engine", "module" ],
640     # Other modules don't necessarily have to link with libcrypto, so shared
641     # libraries do not have to be a condition to produce those.
642
643     # Without position independent code, there can be no shared libraries
644     # or modules.
645     "pic"               => [ "shared", "module" ],
646
647     "module"            => [ "fips", "dso" ],
648
649     "engine"            => [ "dynamic-engine", grep(/eng$/, @disablables) ],
650     "dynamic-engine"    => [ "loadereng" ],
651     "hw"                => [ "padlockeng" ],
652
653     # no-autoalginit is only useful when building non-shared
654     "autoalginit"       => [ "shared", "apps", "fips" ],
655
656     "stdio"             => [ "apps", "capieng", "egd" ],
657     "apps"              => [ "tests" ],
658     "tests"             => [ "external-tests" ],
659     "comp"              => [ "zlib", "brotli", "zstd" ],
660     "sm3"               => [ "sm2" ],
661     sub { !$disabled{"unit-test"} } => [ "heartbeats" ],
662
663     sub { !$disabled{"msan"} } => [ "asm" ],
664
665     "cmac"              => [ "siv" ],
666     "legacy"            => [ "md2" ],
667
668     "cmp"               => [ "crmf" ],
669
670     "fips"              => [ "fips-securitychecks", "acvp-tests" ],
671
672     "threads"           => [ "thread-pool" ],
673     "thread-pool"       => [ "default-thread-pool" ],
674
675     "blake2"            => [ "argon2" ],
676
677     "deprecated-3.0"    => [ "engine", "srp" ],
678
679     "http"              => [ "ocsp" ]
680     );
681
682 # Avoid protocol support holes.  Also disable all versions below N, if version
683 # N is disabled while N+1 is enabled.
684 #
685 my @list = (reverse @tls);
686 while ((my $first, my $second) = (shift @list, shift @list)) {
687     last unless @list;
688     push @disable_cascades, ( sub { !$disabled{$first} && $disabled{$second} }
689                               => [ @list ] );
690     unshift @list, $second;
691 }
692 my @list = (reverse @dtls);
693 while ((my $first, my $second) = (shift @list, shift @list)) {
694     last unless @list;
695     push @disable_cascades, ( sub { !$disabled{$first} && $disabled{$second} }
696                               => [ @list ] );
697     unshift @list, $second;
698 }
699
700 # Explicit "no-..." options will be collected in %disabled along with the defaults.
701 # To remove something from %disabled, use "enable-foo".
702 # For symmetry, "disable-foo" is a synonym for "no-foo".
703
704 # For the "make variables" CPPINCLUDES and CPPDEFINES, we support lists with
705 # platform specific list separators.  Users from those platforms should
706 # recognise those separators from how you set up the PATH to find executables.
707 # The default is the Unix like separator, :, but as an exception, we also
708 # support the space as separator.
709 my $list_separator_re =
710     { VMS           => qr/(?<!\^),/,
711       MSWin32       => qr/(?<!\\);/ } -> {$^O} // qr/(?<!\\)[:\s]/;
712 # All the "make variables" we support
713 # Some get pre-populated for the sake of backward compatibility
714 # (we supported those before the change to "make variable" support.
715 my %user = (
716     AR          => env('AR'),
717     ARFLAGS     => [],
718     AS          => undef,
719     ASFLAGS     => [],
720     CC          => env('CC'),
721     CFLAGS      => [ env('CFLAGS') || () ],
722     CXX         => env('CXX'),
723     CXXFLAGS    => [ env('CXXFLAGS') || () ],
724     CPP         => undef,
725     CPPFLAGS    => [ env('CPPFLAGS') || () ],  # -D, -I, -Wp,
726     CPPDEFINES  => [],  # Alternative for -D
727     CPPINCLUDES => [],  # Alternative for -I
728     CROSS_COMPILE => env('CROSS_COMPILE'),
729     HASHBANGPERL=> env('HASHBANGPERL') || env('PERL'),
730     LD          => undef,
731     LDFLAGS     => [ env('LDFLAGS') || () ],  # -L, -Wl,
732     LDLIBS      => [ env('LDLIBS') || () ],  # -l
733     MT          => undef,
734     MTFLAGS     => [],
735     PERL        => env('PERL') || ($^O ne "VMS" ? $^X : "perl"),
736     RANLIB      => env('RANLIB'),
737     RC          => env('RC') || env('WINDRES'),
738     RCFLAGS     => [ env('RCFLAGS') || () ],
739     RM          => undef,
740    );
741 # Info about what "make variables" may be prefixed with the cross compiler
742 # prefix.  This should NEVER mention any such variable with a list for value.
743 my @user_crossable = qw ( AR AS CC CXX CPP LD MT RANLIB RC );
744 # The same but for flags given as Configure options.  These are *additional*
745 # input, as opposed to the VAR=string option that override the corresponding
746 # config target attributes
747 my %useradd = (
748     ASFLAGS     => [],
749     CPPDEFINES  => [],
750     CPPINCLUDES => [],
751     CPPFLAGS    => [],
752     CFLAGS      => [],
753     CXXFLAGS    => [],
754     LDFLAGS     => [],
755     LDLIBS      => [],
756     RCFLAGS     => [],
757    );
758
759 my %user_synonyms = (
760     HASHBANGPERL=> 'PERL',
761     RC          => 'WINDRES',
762    );
763
764 # Some target attributes have been renamed, this is the translation table
765 my %target_attr_translate =(
766     ar          => 'AR',
767     as          => 'AS',
768     cc          => 'CC',
769     cxx         => 'CXX',
770     cpp         => 'CPP',
771     hashbangperl => 'HASHBANGPERL',
772     ld          => 'LD',
773     mt          => 'MT',
774     ranlib      => 'RANLIB',
775     rc          => 'RC',
776     rm          => 'RM',
777    );
778
779 # Initialisers coming from 'config' scripts
780 $config{defines} = [ split(/$list_separator_re/, env('__CNF_CPPDEFINES')) ];
781 $config{includes} = [ split(/$list_separator_re/, env('__CNF_CPPINCLUDES')) ];
782 $config{cppflags} = [ env('__CNF_CPPFLAGS') || () ];
783 $config{cflags} = [ env('__CNF_CFLAGS') || () ];
784 $config{cxxflags} = [ env('__CNF_CXXFLAGS') || () ];
785 $config{lflags} = [ env('__CNF_LDFLAGS') || () ];
786 $config{ex_libs} = [ env('__CNF_LDLIBS') || () ];
787
788 $config{openssl_api_defines}=[];
789 $config{openssl_sys_defines}=[];
790 $config{openssl_feature_defines}=[];
791 $config{options}="";
792 $config{build_type} = "release";
793 my $target="";
794
795 my %cmdvars = ();               # Stores FOO='blah' type arguments
796 my %unsupported_options = ();
797 my %deprecated_options = ();
798 # If you change this, update apps/version.c
799 my @known_seed_sources = qw(getrandom devrandom os egd none rdcpu librandom);
800 my @seed_sources = ();
801 while (@argvcopy)
802         {
803         $_ = shift @argvcopy;
804
805         # Support env variable assignments among the options
806         if (m|^(\w+)=(.+)?$|)
807                 {
808                 $cmdvars{$1} = $2;
809                 # Every time a variable is given as a configuration argument,
810                 # it acts as a reset if the variable.
811                 if (exists $user{$1})
812                         {
813                         $user{$1} = ref $user{$1} eq "ARRAY" ? [] : undef;
814                         }
815                 #if (exists $useradd{$1})
816                 #       {
817                 #       $useradd{$1} = [];
818                 #       }
819                 next;
820                 }
821
822         # VMS is a case insensitive environment, and depending on settings
823         # out of our control, we may receive options uppercased.  Let's
824         # downcase at least the part before any equal sign.
825         if ($^O eq "VMS")
826                 {
827                 s/^([^=]*)/lc($1)/e;
828                 }
829
830         # some people just can't read the instructions, clang people have to...
831         s/^-no-(?!integrated-as)/no-/;
832
833         # rewrite some options in "enable-..." form
834         s /^-?-?shared$/enable-shared/;
835         s /^sctp$/enable-sctp/;
836         s /^threads$/enable-threads/;
837         s /^zlib$/enable-zlib/;
838         s /^zlib-dynamic$/enable-zlib-dynamic/;
839         s /^fips$/enable-fips/;
840
841         if (/^(no|disable|enable)-(.+)$/)
842                 {
843                 my $word = $2;
844                 if ($word !~ m|hw(?:-.+)| # special treatment for hw regexp opt
845                         && !exists $deprecated_disablables{$word}
846                         && !grep { $word eq $_ } @disablables)
847                         {
848                         $unsupported_options{$_} = 1;
849                         next;
850                         }
851                 }
852         if (/^no-(.+)$/ || /^disable-(.+)$/)
853                 {
854                 foreach my $proto ((@tls, @dtls))
855                         {
856                         if ($1 eq "$proto-method")
857                                 {
858                                 $disabled{"$proto"} = "option($proto-method)";
859                                 last;
860                                 }
861                         }
862                 if ($1 eq "dtls")
863                         {
864                         foreach my $proto (@dtls)
865                                 {
866                                 $disabled{$proto} = "option(dtls)";
867                                 }
868                         $disabled{"dtls"} = "option(dtls)";
869                         }
870                 elsif ($1 eq "ssl")
871                         {
872                         # Last one of its kind
873                         $disabled{"ssl3"} = "option(ssl)";
874                         }
875                 elsif ($1 eq "tls")
876                         {
877                         # XXX: Tests will fail if all SSL/TLS
878                         # protocols are disabled.
879                         foreach my $proto (@tls)
880                                 {
881                                 $disabled{$proto} = "option(tls)";
882                                 }
883                         }
884                 elsif ($1 eq "static-engine")
885                         {
886                         delete $disabled{"dynamic-engine"};
887                         }
888                 elsif ($1 eq "dynamic-engine")
889                         {
890                         $disabled{"dynamic-engine"} = "option";
891                         }
892                 elsif (exists $deprecated_disablables{$1})
893                         {
894                         $deprecated_options{$_} = 1;
895                         if (defined $deprecated_disablables{$1})
896                                 {
897                                 $disabled{$deprecated_disablables{$1}} = "option";
898                                 }
899                         }
900                 elsif ($1 =~ m|hw(?:-.+)|) # deprecate hw options in regexp form
901                         {
902                         $deprecated_options{$_} = 1;
903                         }
904                 else
905                         {
906                         $disabled{$1} = "option";
907                         }
908                 # No longer an automatic choice
909                 $auto_threads = 0 if ($1 eq "threads");
910                 }
911         elsif (/^enable-(.+)$/)
912                 {
913                 if ($1 eq "static-engine")
914                         {
915                         $disabled{"dynamic-engine"} = "option";
916                         }
917                 elsif ($1 eq "dynamic-engine")
918                         {
919                         delete $disabled{"dynamic-engine"};
920                         }
921                 elsif ($1 eq "zlib-dynamic")
922                         {
923                         delete $disabled{"zlib"};
924                         }
925                 elsif ($1 eq "brotli-dynamic")
926                         {
927                         delete $disabled{"brotli"};
928                         }
929                 elsif ($1 eq "zstd-dynamic")
930                         {
931                         delete $disabled{"zstd"};
932                         }
933                 my $algo = $1;
934                 delete $disabled{$algo};
935
936                 # No longer an automatic choice
937                 $auto_threads = 0 if ($1 eq "threads");
938                 }
939         elsif (/^-d$/)          # From older 'config'
940                 {
941                 $config{build_type} = "debug";
942                 }
943         elsif (/^-v$/)          # From older 'config'
944                 {
945                 $guess_opts{verbose} = 1;
946                 }
947         elsif (/^-w$/)
948                 {
949                 $guess_opts{nowait} = 1;
950                 }
951         elsif (/^-t$/)          # From older 'config'
952                 {
953                 $dryrun = 1;
954                 }
955         elsif (/^--strict-warnings$/)
956                 {
957                 # Pretend that our strict flags is a C flag, and replace it
958                 # with the proper flags later on
959                 push @{$useradd{CFLAGS}}, '--ossl-strict-warnings';
960                 $strict_warnings=1;
961                 }
962         elsif (/^--debug$/)
963                 {
964                 $config{build_type} = "debug";
965                 }
966         elsif (/^--release$/)
967                 {
968                 $config{build_type} = "release";
969                 }
970         elsif (/^386$/)
971                 { $config{processor}=386; }
972         elsif (/^rsaref$/)
973                 {
974                 # No RSAref support any more since it's not needed.
975                 # The check for the option is there so scripts aren't
976                 # broken
977                 }
978         elsif (m|^[-+/]|)
979                 {
980                 if (/^--prefix=(.*)$/)
981                         {
982                         $config{prefix}=$1;
983                         die "Directory given with --prefix MUST be absolute\n"
984                                 unless file_name_is_absolute($config{prefix});
985                         }
986                 elsif (/^--api=(.*)$/)
987                         {
988                         my $api = $1;
989                         die "Unknown API compatibility level $api"
990                                 unless defined $apitable->{$api};
991                         $config{api}=$apitable->{$api};
992                         }
993                 elsif (/^--libdir=(.*)$/)
994                         {
995                         $config{libdir}=$1;
996                         }
997                 elsif (/^--openssldir=(.*)$/)
998                         {
999                         $config{openssldir}=$1;
1000                         }
1001                 elsif (/^--with-zlib-lib=(.*)$/)
1002                         {
1003                         $withargs{zlib_lib}=$1;
1004                         }
1005                 elsif (/^--with-zlib-include=(.*)$/)
1006                         {
1007                         $withargs{zlib_include}=$1;
1008                         }
1009                 elsif (/^--with-brotli-lib=(.*)$/)
1010                         {
1011                         $withargs{brotli_lib}=$1;
1012                         }
1013                 elsif (/^--with-brotli-include=(.*)$/)
1014                         {
1015                         $withargs{brotli_include}=$1;
1016                         }
1017                 elsif (/^--with-zstd-lib=(.*)$/)
1018                         {
1019                         $withargs{zstd_lib}=$1;
1020                         }
1021                 elsif (/^--with-zstd-include=(.*)$/)
1022                         {
1023                         $withargs{zstd_include}=$1;
1024                         }
1025                 elsif (/^--with-fuzzer-lib=(.*)$/)
1026                         {
1027                         $withargs{fuzzer_lib}=$1;
1028                         }
1029                 elsif (/^--with-fuzzer-include=(.*)$/)
1030                         {
1031                         $withargs{fuzzer_include}=$1;
1032                         }
1033                 elsif (/^--with-rand-seed=(.*)$/)
1034                         {
1035                         foreach my $x (split(m|,|, $1))
1036                             {
1037                             die "Unknown --with-rand-seed choice $x\n"
1038                                 if ! grep { $x eq $_ } @known_seed_sources;
1039                             push @seed_sources, $x;
1040                             }
1041                         }
1042                 elsif (/^--fips-key=(.*)$/)
1043                         {
1044                         $user{FIPSKEY}=lc($1);
1045                         die "Non-hex character in FIPS key\n"
1046                            if $user{FIPSKEY} =~ /[^a-f0-9]/;
1047                         die "FIPS key must have even number of characters\n"
1048                            if length $1 & 1;
1049                         die "FIPS key too long (64 bytes max)\n"
1050                            if length $1 > 64;
1051                         }
1052                 elsif (/^--banner=(.*)$/)
1053                         {
1054                         $banner = $1 . "\n";
1055                         }
1056                 elsif (/^--cross-compile-prefix=(.*)$/)
1057                         {
1058                         $user{CROSS_COMPILE}=$1;
1059                         }
1060                 elsif (/^--config=(.*)$/)
1061                         {
1062                         read_config $1;
1063                         }
1064                 elsif (/^-l(.*)$/)
1065                         {
1066                         push @{$useradd{LDLIBS}}, $_;
1067                         }
1068                 elsif (/^-framework$/)
1069                         {
1070                         push @{$useradd{LDLIBS}}, $_, shift(@argvcopy);
1071                         }
1072                 elsif (/^-L(.*)$/ or /^-Wl,/)
1073                         {
1074                         push @{$useradd{LDFLAGS}}, $_;
1075                         }
1076                 elsif (/^-rpath$/ or /^-R$/)
1077                         # -rpath is the OSF1 rpath flag
1078                         # -R is the old Solaris rpath flag
1079                         {
1080                         my $rpath = shift(@argvcopy) || "";
1081                         $rpath .= " " if $rpath ne "";
1082                         push @{$useradd{LDFLAGS}}, $_, $rpath;
1083                         }
1084                 elsif (/^-static$/)
1085                         {
1086                         push @{$useradd{LDFLAGS}}, $_;
1087                         }
1088                 elsif (m|^[-/]D(.*)$|)
1089                         {
1090                         push @{$useradd{CPPDEFINES}}, $1;
1091                         }
1092                 elsif (m|^[-/]I(.*)$|)
1093                         {
1094                         push @{$useradd{CPPINCLUDES}}, $1;
1095                         }
1096                 elsif (/^-Wp,$/)
1097                         {
1098                         push @{$useradd{CPPFLAGS}}, $1;
1099                         }
1100                 else    # common if (/^[-+]/), just pass down...
1101                         {
1102                         # Treat %xx as an ASCII code (e.g. replace %20 by a space character).
1103                         # This provides a simple way to pass options with arguments separated
1104                         # by spaces without quoting (e.g. -opt%20arg translates to -opt arg).
1105                         $_ =~ s/%([0-9a-f]{1,2})/chr(hex($1))/gei;
1106                         push @{$useradd{CFLAGS}}, $_;
1107                         push @{$useradd{CXXFLAGS}}, $_;
1108                         }
1109                 }
1110         elsif (m|^/|)
1111                 {
1112                 # Treat %xx as an ASCII code (e.g. replace %20 by a space character).
1113                 # This provides a simple way to pass options with arguments separated
1114                 # by spaces without quoting (e.g. /opt%20arg translates to /opt arg).
1115                 $_ =~ s/%([0-9a-f]{1,2})/chr(hex($1))/gei;
1116                 push @{$useradd{CFLAGS}}, $_;
1117                 push @{$useradd{CXXFLAGS}}, $_;
1118                 }
1119         else
1120                 {
1121                 die "target already defined - $target (offending arg: $_)\n" if ($target ne "");
1122                 $target=$_;
1123                 }
1124         unless ($_ eq $target || /^no-/ || /^disable-/)
1125                 {
1126                 # "no-..." follows later after implied deactivations
1127                 # have been derived.  (Don't take this too seriously,
1128                 # we really only write OPTIONS to the Makefile out of
1129                 # nostalgia.)
1130
1131                 if ($config{options} eq "")
1132                         { $config{options} = $_; }
1133                 else
1134                         { $config{options} .= " ".$_; }
1135                 }
1136         }
1137
1138 if (keys %deprecated_options)
1139         {
1140         warn "***** Deprecated options: ",
1141                 join(", ", keys %deprecated_options), "\n";
1142         }
1143 if (keys %unsupported_options)
1144         {
1145         die "***** Unsupported options: ",
1146                 join(", ", keys %unsupported_options), "\n";
1147         }
1148
1149 # If any %useradd entry has been set, we must check that the "make
1150 # variables" haven't been set.  We start by checking of any %useradd entry
1151 # is set.
1152 if (grep { scalar @$_ > 0 } values %useradd) {
1153     # Hash of env / make variables names.  The possible values are:
1154     # 1 - "make vars"
1155     # 2 - %useradd entry set
1156     # 3 - both set
1157     my %detected_vars =
1158         map { my $v = 0;
1159               $v += 1 if $cmdvars{$_};
1160               $v += 2 if @{$useradd{$_}};
1161               $_ => $v }
1162         keys %useradd;
1163
1164     # If any of the corresponding "make variables" is set, we error
1165     if (grep { $_ & 1 } values %detected_vars) {
1166         my $names = join(', ', grep { $detected_vars{$_} > 0 }
1167                                sort keys %detected_vars);
1168         die <<"_____";
1169 ***** Mixing make variables and additional compiler/linker flags as
1170 ***** configure command line option is not permitted.
1171 ***** Affected make variables: $names
1172 _____
1173     }
1174 }
1175
1176 # Check through all supported command line variables to see if any of them
1177 # were set, and canonicalise the values we got.  If no compiler or linker
1178 # flag or anything else that affects %useradd was set, we also check the
1179 # environment for values.
1180 my $anyuseradd =
1181     grep { defined $_ && (ref $_ ne 'ARRAY' || @$_) } values %useradd;
1182 foreach (keys %user) {
1183     my $value = $cmdvars{$_};
1184     $value //= env($_) unless $anyuseradd;
1185     $value //=
1186         defined $user_synonyms{$_} ? $cmdvars{$user_synonyms{$_}} : undef;
1187     $value //= defined $user_synonyms{$_} ? env($user_synonyms{$_}) : undef
1188         unless $anyuseradd;
1189
1190     if (defined $value) {
1191         if (ref $user{$_} eq 'ARRAY') {
1192             if ($_ eq 'CPPDEFINES' || $_ eq 'CPPINCLUDES') {
1193                 $user{$_} = [ split /$list_separator_re/, $value ];
1194             } else {
1195                 $user{$_} = [ $value ];
1196             }
1197         } elsif (!defined $user{$_}) {
1198             $user{$_} = $value;
1199         }
1200     }
1201 }
1202
1203 if (grep { /-rpath\b/ } ($user{LDFLAGS} ? @{$user{LDFLAGS}} : ())
1204     && !$disabled{shared}
1205     && !($disabled{asan} && $disabled{msan} && $disabled{ubsan})) {
1206     die "***** Cannot simultaneously use -rpath, shared libraries, and\n",
1207         "***** any of asan, msan or ubsan\n";
1208 }
1209
1210 # If no target was given, try guessing.
1211 unless ($target) {
1212     my %system_config = OpenSSL::config::get_platform(%guess_opts, %user);
1213
1214     # The $system_config{disable} is used to populate %disabled with
1215     # entries that aren't already there.
1216     foreach ( @{$system_config{disable} // []} ) {
1217         $disabled{$_} = 'system' unless defined $disabled{$_};
1218     }
1219     delete $system_config{disable};
1220
1221     # Override config entries with stuff from the guesser.
1222     # It's assumed that this really is nothing new.
1223     %config = ( %config, %system_config );
1224     $target = $system_config{target};
1225 }
1226
1227 sub disable {
1228     my $disable_type = shift;
1229
1230     for (@_) {
1231         $disabled{$_} = $disable_type;
1232     }
1233
1234     my @tocheckfor = (@_ ? @_ : keys %disabled);
1235     while (@tocheckfor) {
1236         my %new_tocheckfor = ();
1237         my @cascade_copy = (@disable_cascades);
1238         while (@cascade_copy) {
1239             my ($test, $descendents) =
1240                 (shift @cascade_copy, shift @cascade_copy);
1241             if (ref($test) eq "CODE" ? $test->() : defined($disabled{$test})) {
1242                 foreach (grep { !defined($disabled{$_}) } @$descendents) {
1243                     $new_tocheckfor{$_} = 1; $disabled{$_} = "cascade";
1244                 }
1245             }
1246         }
1247         @tocheckfor = (keys %new_tocheckfor);
1248     }
1249 }
1250 disable();                     # First cascade run
1251
1252 our $die = sub { die @_; };
1253 if ($target eq "TABLE") {
1254     local $die = sub { warn @_; };
1255     foreach (sort keys %table) {
1256         print_table_entry($_, "TABLE");
1257     }
1258     exit 0;
1259 }
1260
1261 if ($target eq "LIST") {
1262     foreach (sort keys %table) {
1263         print $_,"\n" unless $table{$_}->{template};
1264     }
1265     exit 0;
1266 }
1267
1268 if ($target eq "HASH") {
1269     local $die = sub { warn @_; };
1270     print "%table = (\n";
1271     foreach (sort keys %table) {
1272         print_table_entry($_, "HASH");
1273     }
1274     exit 0;
1275 }
1276
1277 print "Configuring OpenSSL version $config{full_version} ";
1278 print "for target $target\n";
1279
1280 if (scalar(@seed_sources) == 0) {
1281     print "Using os-specific seed configuration\n";
1282     push @seed_sources, 'os';
1283 }
1284 if (scalar(grep { $_ eq 'egd' } @seed_sources) > 0) {
1285     delete $disabled{'egd'};
1286 }
1287 if (scalar(grep { $_ eq 'none' } @seed_sources) > 0) {
1288     die "Cannot seed with none and anything else" if scalar(@seed_sources) > 1;
1289     warn <<_____ if scalar(@seed_sources) == 1;
1290
1291 ============================== WARNING ===============================
1292 You have selected the --with-rand-seed=none option, which effectively
1293 disables automatic reseeding of the OpenSSL random generator.
1294 All operations depending on the random generator such as creating keys
1295 will not work unless the random generator is seeded manually by the
1296 application.
1297
1298 Please read the 'Note on random number generation' section in the
1299 INSTALL.md instructions and the RAND_DRBG(7) manual page for more
1300 details.
1301 ============================== WARNING ===============================
1302
1303 _____
1304 }
1305 push @{$config{openssl_feature_defines}},
1306      map { (my $x = $_) =~ tr|[\-a-z]|[_A-Z]|; "OPENSSL_RAND_SEED_$x" }
1307         @seed_sources;
1308
1309 # Backward compatibility?
1310 if ($target =~ m/^CygWin32(-.*)$/) {
1311     $target = "Cygwin".$1;
1312 }
1313
1314 # Support for legacy targets having a name starting with 'debug-'
1315 my ($d, $t) = $target =~ m/^(debug-)?(.*)$/;
1316 if ($d) {
1317     $config{build_type} = "debug";
1318
1319     # If we do not find debug-foo in the table, the target is set to foo.
1320     if (!$table{$target}) {
1321         $target = $t;
1322     }
1323 }
1324
1325 if ($target) {
1326     # It's possible that we have different config targets for specific
1327     # toolchains, so we try to detect them, and go for the plain config
1328     # target if not.
1329     my $found;
1330     foreach ( ( "$target-$user{CC}", "$target", undef ) ) {
1331         $found=$_ if $table{$_} && !$table{$_}->{template};
1332         last if $found;
1333     }
1334     $target = $found;
1335 } else {
1336     # If we don't have a config target now, we try the C compiler as we
1337     # fallback
1338     my $cc = $user{CC} // 'cc';
1339     $target = $cc if $table{$cc} && !$table{$cc}->{template};
1340 }
1341
1342 &usage unless $target;
1343
1344 exit 0 if $dryrun;              # From older 'config'
1345
1346 $config{target} = $target;
1347 my %target = resolve_config($target);
1348
1349 foreach (keys %target_attr_translate) {
1350     $target{$target_attr_translate{$_}} = $target{$_}
1351         if $target{$_};
1352     delete $target{$_};
1353 }
1354
1355 %target = ( %{$table{DEFAULTS}}, %target );
1356
1357 my %conf_files = map { $_ => 1 } (@{$target{_conf_fname_int}});
1358 $config{conf_files} = [ sort keys %conf_files ];
1359
1360 # Using sub disable within these loops may prove fragile, so we run
1361 # a cascade afterwards
1362 foreach my $feature (@{$target{disable}}) {
1363     if (exists $deprecated_disablables{$feature}) {
1364         warn "***** config $target disables deprecated feature $feature\n";
1365     } elsif (!grep { $feature eq $_ } @disablables) {
1366         die "***** config $target disables unknown feature $feature\n";
1367     }
1368     $disabled{$feature} = 'config';
1369 }
1370 foreach my $feature (@{$target{enable}}) {
1371     if ("default" eq ($disabled{$feature} // "")) {
1372         if (exists $deprecated_disablables{$feature}) {
1373             warn "***** config $target enables deprecated feature $feature\n";
1374         } elsif (!grep { $feature eq $_ } @disablables) {
1375             die "***** config $target enables unknown feature $feature\n";
1376         }
1377         delete $disabled{$feature};
1378     }
1379 }
1380
1381 # If uplink_arch isn't defined, disable uplink
1382 $disabled{uplink} = 'no uplink_arch' unless (defined $target{uplink_arch});
1383 # If asm_arch isn't defined, disable asm
1384 $disabled{asm} = 'no asm_arch' unless (defined $target{asm_arch});
1385
1386 disable();                      # Run a cascade now
1387
1388 $target{CXXFLAGS}//=$target{CFLAGS} if $target{CXX};
1389 $target{cxxflags}//=$target{cflags} if $target{CXX};
1390 $target{exe_extension}=".exe" if ($config{target} eq "DJGPP");
1391 $target{exe_extension}=".pm"  if ($config{target} =~ /vos/);
1392
1393 # Fill %config with values from %user, and in case those are undefined or
1394 # empty, use values from %target (acting as a default).
1395 foreach (keys %user) {
1396     my $ref_type = ref $user{$_};
1397
1398     # Temporary function.  Takes an intended ref type (empty string or "ARRAY")
1399     # and a value that's to be coerced into that type.
1400     my $mkvalue = sub {
1401         my $type = shift;
1402         my $value = shift;
1403         my $undef_p = shift;
1404
1405         die "Too many arguments for \$mkvalue" if @_;
1406
1407         while (ref $value eq 'CODE') {
1408             $value = $value->();
1409         }
1410
1411         if ($type eq 'ARRAY') {
1412             return undef unless defined $value;
1413             return undef if ref $value ne 'ARRAY' && !$value;
1414             return undef if ref $value eq 'ARRAY' && !@$value;
1415             return [ $value ] unless ref $value eq 'ARRAY';
1416         }
1417         return undef unless $value;
1418         return $value;
1419     };
1420
1421     $config{$_} =
1422         $mkvalue->($ref_type, $user{$_})
1423         || $mkvalue->($ref_type, $target{$_});
1424     delete $config{$_} unless defined $config{$_};
1425 }
1426
1427 # Finish up %config by appending things the user gave us on the command line
1428 # apart from "make variables"
1429 foreach (keys %useradd) {
1430     # The must all be lists, so we assert that here
1431     die "internal error: \$useradd{$_} isn't an ARRAY\n"
1432         unless ref $useradd{$_} eq 'ARRAY';
1433
1434     if (defined $config{$_}) {
1435         push @{$config{$_}}, @{$useradd{$_}};
1436     } else {
1437         $config{$_} = [ @{$useradd{$_}} ];
1438     }
1439 }
1440 # At this point, we can forget everything about %user and %useradd,
1441 # because it's now all been merged into the corresponding $config entry
1442
1443 if (grep { $_ =~ /(?:^|\s)-static(?:\s|$)/ } @{$config{LDFLAGS}}) {
1444     disable('static', 'pic', 'threads');
1445 }
1446
1447 # Allow overriding the build file name
1448 $config{build_file} = env('BUILDFILE') || $target{build_file} || "Makefile";
1449
1450 # Make sure build_scheme is consistent.
1451 $target{build_scheme} = [ $target{build_scheme} ]
1452     if ref($target{build_scheme}) ne "ARRAY";
1453
1454 my ($builder, $builder_platform, @builder_opts) =
1455     @{$target{build_scheme}};
1456
1457 foreach my $checker (($builder_platform."-".$config{build_file}."-checker.pm",
1458                       $builder_platform."-checker.pm")) {
1459     my $checker_path = catfile($srcdir, "Configurations", $checker);
1460     if (-f $checker_path) {
1461         my $fn = $ENV{CONFIGURE_CHECKER_WARN}
1462             ? sub { warn $@; } : sub { die $@; };
1463         if (! do $checker_path) {
1464             if ($@) {
1465                 $fn->($@);
1466             } elsif ($!) {
1467                 $fn->($!);
1468             } else {
1469                 $fn->("The detected tools didn't match the platform\n");
1470             }
1471         }
1472         last;
1473     }
1474 }
1475
1476 push @{$config{defines}}, "NDEBUG"    if $config{build_type} eq "release";
1477
1478 if ($target =~ /^mingw/ && `$config{CC} --target-help 2>&1` =~ m/-mno-cygwin/m)
1479         {
1480         push @{$config{cflags}}, "-mno-cygwin";
1481         push @{$config{cxxflags}}, "-mno-cygwin" if $config{CXX};
1482         push @{$config{shared_ldflag}}, "-mno-cygwin";
1483         }
1484
1485 if ($target =~ /linux.*-mips/ && !$disabled{asm}
1486         && !grep { $_ =~ /-m(ips|arch=)/ } (@{$config{CFLAGS}})) {
1487         # minimally required architecture flags for assembly modules
1488         my $value;
1489         $value = '-mips2' if ($target =~ /mips32/);
1490         $value = '-mips3' if ($target =~ /mips64/);
1491         unshift @{$config{cflags}}, $value;
1492         unshift @{$config{cxxflags}}, $value if $config{CXX};
1493 }
1494
1495 # If threads aren't disabled, check how possible they are
1496 unless ($disabled{threads}) {
1497     if ($auto_threads) {
1498         # Enabled by default, disable it forcibly if unavailable
1499         if ($target{thread_scheme} eq "(unknown)") {
1500             disable("unavailable", 'threads');
1501         }
1502     } else {
1503         # The user chose to enable threads explicitly, let's see
1504         # if there's a chance that's possible
1505         if ($target{thread_scheme} eq "(unknown)") {
1506             # If the user asked for "threads" and we don't have internal
1507             # knowledge how to do it, [s]he is expected to provide any
1508             # system-dependent compiler options that are necessary.  We
1509             # can't truly check that the given options are correct, but
1510             # we expect the user to know what [s]He is doing.
1511             if (!@{$config{CFLAGS}} && !@{$config{CPPDEFINES}}) {
1512                 die "You asked for multi-threading support, but didn't\n"
1513                     ,"provide any system-specific compiler options\n";
1514             }
1515         }
1516     }
1517 }
1518
1519 # Find out if clang's sanitizers have been enabled with -fsanitize
1520 # flags and ensure that the corresponding %disabled elements area
1521 # removed to reflect that the sanitizers are indeed enabled.
1522 my %detected_sanitizers = ();
1523 foreach (grep /^-fsanitize=/, @{$config{CFLAGS} || []}) {
1524     (my $checks = $_) =~ s/^-fsanitize=//;
1525     foreach (split /,/, $checks) {
1526         my $d = { address       => 'asan',
1527                   undefined     => 'ubsan',
1528                   memory        => 'msan' } -> {$_};
1529         next unless defined $d;
1530
1531         $detected_sanitizers{$d} = 1;
1532         if (defined $disabled{$d}) {
1533             die "***** Conflict between disabling $d and enabling $_ sanitizer"
1534                 if $disabled{$d} ne "default";
1535             delete $disabled{$d};
1536         }
1537     }
1538 }
1539
1540 # If threads still aren't disabled, add a C macro to ensure the source
1541 # code knows about it.  Any other flag is taken care of by the configs.
1542 unless($disabled{threads}) {
1543     push @{$config{openssl_feature_defines}}, "OPENSSL_THREADS";
1544 }
1545
1546 my $no_shared_warn=0;
1547 if (($target{shared_target} // '') eq "")
1548         {
1549         $no_shared_warn = 1
1550             if (!$disabled{shared} || !$disabled{"dynamic-engine"});
1551         disable('no-shared-target', 'pic');
1552         }
1553
1554 if ($disabled{"dynamic-engine"}) {
1555         $config{dynamic_engines} = 0;
1556 } else {
1557         $config{dynamic_engines} = 1;
1558 }
1559
1560 unless ($disabled{asan} || defined $detected_sanitizers{asan}) {
1561     push @{$config{cflags}}, "-fsanitize=address";
1562 }
1563
1564 unless ($disabled{ubsan} || defined $detected_sanitizers{ubsan}) {
1565     push @{$config{cflags}}, "-fsanitize=undefined", "-fno-sanitize-recover=all", "-DPEDANTIC";
1566 }
1567
1568 unless ($disabled{msan} || defined $detected_sanitizers{msan}) {
1569   push @{$config{cflags}}, "-fsanitize=memory";
1570 }
1571
1572 unless ($disabled{"fuzz-libfuzzer"} && $disabled{"fuzz-afl"}
1573         && $disabled{asan} && $disabled{ubsan} && $disabled{msan}) {
1574     push @{$config{cflags}}, "-fno-omit-frame-pointer", "-g";
1575     push @{$config{cxxflags}}, "-fno-omit-frame-pointer", "-g" if $config{CXX};
1576 }
1577 #
1578 # Platform fix-ups
1579 #
1580
1581 # This saves the build files from having to check
1582 if ($disabled{pic})
1583         {
1584         foreach (qw(shared_cflag shared_cxxflag shared_cppflag
1585                     shared_defines shared_includes shared_ldflag
1586                     module_cflags module_cxxflags module_cppflags
1587                     module_defines module_includes module_lflags))
1588                 {
1589                 delete $config{$_};
1590                 $target{$_} = "";
1591                 }
1592         }
1593 else
1594         {
1595         push @{$config{lib_defines}}, "OPENSSL_PIC";
1596         }
1597
1598 if ($target{sys_id} ne "")
1599         {
1600         push @{$config{openssl_sys_defines}}, "OPENSSL_SYS_$target{sys_id}";
1601         }
1602
1603 my %predefined_C = compiler_predefined($config{CROSS_COMPILE}.$config{CC});
1604 my %predefined_CXX = $config{CXX}
1605     ? compiler_predefined($config{CROSS_COMPILE}.$config{CXX})
1606     : ();
1607
1608 unless ($disabled{asm}) {
1609     # big endian systems can use ELFv2 ABI
1610     if ($target eq "linux-ppc64" || $target eq "BSD-ppc64") {
1611         $target{perlasm_scheme} = "linux64v2" if ($predefined_C{_CALL_ELF} == 2);
1612     }
1613 }
1614
1615 # Check for makedepend capabilities.
1616 if (!$disabled{makedepend}) {
1617     # If the attribute makedep_scheme is defined, then we assume that the
1618     # config target and its associated build file are programmed to deal
1619     # with it.
1620     # If makedep_scheme is undefined, we go looking for GCC compatible
1621     # dependency making, and if that's not available, we try to fall back
1622     # on 'makedepend'.
1623     if ($target{makedep_scheme}) {
1624         $config{makedep_scheme} = $target{makedep_scheme};
1625         # If the makedepcmd attribute is defined, copy it.  If not, the
1626         # build files will have to fend for themselves.
1627         $config{makedepcmd} = $target{makedepcmd} if $target{makedepcmd};
1628     } elsif (($predefined_C{__GNUC__} // -1) >= 3
1629              && !($predefined_C{__APPLE_CC__} && !$predefined_C{__clang__})) {
1630         # We know that GNU C version 3 and up as well as all clang
1631         # versions support dependency generation, but Xcode did not
1632         # handle $cc -M before clang support (but claims __GNUC__ = 3)
1633         $config{makedep_scheme} = 'gcc';
1634     } else {
1635         # In all other cases, we look for 'makedepend', and set the
1636         # makedep_scheme value if we found it.
1637         $config{makedepcmd} = which('makedepend');
1638         $config{makedep_scheme} = 'makedepend' if $config{makedepcmd};
1639     }
1640
1641     # If no depend scheme is set, we disable makedepend
1642     disable('unavailable', 'makedepend') unless $config{makedep_scheme};
1643 }
1644
1645 if (!$disabled{asm} && !$predefined_C{__MACH__} && $^O ne 'VMS') {
1646     # probe for -Wa,--noexecstack option...
1647     if ($predefined_C{__clang__}) {
1648         # clang has builtin assembler, which doesn't recognize --help,
1649         # but it apparently recognizes the option in question on all
1650         # supported platforms even when it's meaningless. In other words
1651         # probe would fail, but probed option always accepted...
1652         push @{$config{cflags}}, "-Wa,--noexecstack", "-Qunused-arguments";
1653     } else {
1654         my $cc = $config{CROSS_COMPILE}.$config{CC};
1655         open(PIPE, "$cc -Wa,--help -c -o null.$$.o -x assembler /dev/null 2>&1 |");
1656         while(<PIPE>) {
1657             if (m/--noexecstack/) {
1658                 push @{$config{cflags}}, "-Wa,--noexecstack";
1659                 last;
1660             }
1661         }
1662         close(PIPE);
1663         unlink("null.$$.o");
1664     }
1665 }
1666
1667 # Deal with bn_ops ###################################################
1668
1669 $config{bn_ll}                  =0;
1670 my $def_int="unsigned int";
1671 $config{rc4_int}                =$def_int;
1672 ($config{b64l},$config{b64},$config{b32})=(0,0,1);
1673
1674 my $count = 0;
1675 foreach (sort split(/\s+/,$target{bn_ops})) {
1676     $count++ if /SIXTY_FOUR_BIT|SIXTY_FOUR_BIT_LONG|THIRTY_TWO_BIT/;
1677     $config{bn_ll}=1                            if $_ eq 'BN_LLONG';
1678     $config{rc4_int}="unsigned char"            if $_ eq 'RC4_CHAR';
1679     ($config{b64l},$config{b64},$config{b32})
1680         =(0,1,0)                                if $_ eq 'SIXTY_FOUR_BIT';
1681     ($config{b64l},$config{b64},$config{b32})
1682         =(1,0,0)                                if $_ eq 'SIXTY_FOUR_BIT_LONG';
1683     ($config{b64l},$config{b64},$config{b32})
1684         =(0,0,1)                                if $_ eq 'THIRTY_TWO_BIT';
1685 }
1686 die "Exactly one of SIXTY_FOUR_BIT|SIXTY_FOUR_BIT_LONG|THIRTY_TWO_BIT can be set in bn_ops\n"
1687     if $count > 1;
1688
1689 $config{api} = $config{major} * 10000 + $config{minor} * 100
1690     unless $config{api};
1691 foreach (keys %$apitable) {
1692     $disabled{"deprecated-$_"} = "deprecation"
1693         if $disabled{deprecated} && $config{api} >= $apitable->{$_};
1694 }
1695
1696 disable();                      # Run a cascade now
1697
1698 # Hack cflags for better warnings (dev option) #######################
1699
1700 # "Stringify" the C and C++ flags string.  This permits it to be made part of
1701 # a string and works as well on command lines.
1702 $config{cflags} = [ map { (my $x = $_) =~ s/([\\\"])/\\$1/g; $x }
1703                         @{$config{cflags}} ];
1704 $config{cxxflags} = [ map { (my $x = $_) =~ s/([\\\"])/\\$1/g; $x }
1705                           @{$config{cxxflags}} ] if $config{CXX};
1706
1707 $config{openssl_api_defines} = [
1708     "OPENSSL_CONFIGURED_API=".$config{api},
1709 ];
1710
1711 my @strict_warnings_collection=();
1712 if ($strict_warnings)
1713         {
1714         my $wopt;
1715         my $gccver = $predefined_C{__GNUC__} // -1;
1716
1717         if ($gccver >= 4)
1718                 {
1719                 push @strict_warnings_collection, @gcc_devteam_warn;
1720                 push @strict_warnings_collection, @clang_devteam_warn
1721                     if (defined($predefined_C{__clang__}));
1722                 }
1723         elsif ($config{target} =~ /^VC-/)
1724                 {
1725                 push @strict_warnings_collection, @cl_devteam_warn;
1726                 }
1727         else
1728                 {
1729                 warn "WARNING --strict-warnings requires gcc[>=4] or gcc-alike, or MSVC"
1730                 }
1731         }
1732
1733 $config{CFLAGS} = [ map { $_ eq '--ossl-strict-warnings'
1734                               ? @strict_warnings_collection
1735                               : ( $_ ) }
1736                     @{$config{CFLAGS}} ];
1737
1738 unless ($disabled{afalgeng}) {
1739     $config{afalgeng}="";
1740     if (grep { $_ eq 'afalgeng' } @{$target{enable}}) {
1741         push @{$config{engdirs}}, "afalg";
1742     } else {
1743         disable('not-linux', 'afalgeng');
1744     }
1745 }
1746
1747 unless ($disabled{devcryptoeng}) {
1748     if ($target =~ m/^BSD/) {
1749         my $maxver = 5*100 + 7;
1750         my $sysstr = `uname -s`;
1751         my $verstr = `uname -r`;
1752         $sysstr =~ s|\R$||;
1753         $verstr =~ s|\R$||;
1754         my ($ma, $mi, @rest) = split m|\.|, $verstr;
1755         my $ver = $ma*100 + $mi;
1756         if ($sysstr eq 'OpenBSD' && $ver >= $maxver) {
1757             disable('too-new-kernel', 'devcryptoeng');
1758         }
1759     }
1760 }
1761
1762 unless ($disabled{ktls}) {
1763     $config{ktls}="";
1764     my $cc = $config{CROSS_COMPILE}.$config{CC};
1765     if ($target =~ m/^linux/) {
1766         system("printf '#include <sys/types.h>\n#include <linux/tls.h>' | $cc -E - >/dev/null 2>&1");
1767         if ($? != 0) {
1768             disable('too-old-kernel', 'ktls');
1769         }
1770     } elsif ($target =~ m/^BSD/) {
1771         system("printf '#include <sys/types.h>\n#include <sys/ktls.h>' | $cc -E - >/dev/null 2>&1");
1772         if ($? != 0) {
1773             disable('too-old-freebsd', 'ktls');
1774         }
1775     } else {
1776         disable('not-linux-or-freebsd', 'ktls');
1777     }
1778 }
1779
1780 unless ($disabled{winstore}) {
1781     unless ($target =~ /^(?:Cygwin|mingw|VC-|BC-)/) {
1782         disable('not-windows', 'winstore');
1783     }
1784 }
1785
1786 push @{$config{openssl_other_defines}}, "OPENSSL_NO_KTLS" if ($disabled{ktls});
1787
1788 # Get the extra flags used when building shared libraries and modules.  We
1789 # do this late because some of them depend on %disabled.
1790
1791 # Make the flags to build DSOs the same as for shared libraries unless they
1792 # are already defined
1793 $target{module_cflags} = $target{shared_cflag} unless defined $target{module_cflags};
1794 $target{module_cxxflags} = $target{shared_cxxflag} unless defined $target{module_cxxflags};
1795 $target{module_ldflags} = $target{shared_ldflag} unless defined $target{module_ldflags};
1796 {
1797     my $shared_info_pl =
1798         catfile(dirname($0), "Configurations", "shared-info.pl");
1799     my %shared_info = read_eval_file($shared_info_pl);
1800     push @{$target{_conf_fname_int}}, $shared_info_pl;
1801     my $si = $target{shared_target};
1802     while (ref $si ne "HASH") {
1803         last if ! defined $si;
1804         if (ref $si eq "CODE") {
1805             $si = $si->();
1806         } else {
1807             $si = $shared_info{$si};
1808         }
1809     }
1810
1811     # Some of the 'shared_target' values don't have any entries in
1812     # %shared_info.  That's perfectly fine, AS LONG AS the build file
1813     # template knows how to handle this.  That is currently the case for
1814     # Windows and VMS.
1815     if (defined $si) {
1816         # Just as above, copy certain shared_* attributes to the corresponding
1817         # module_ attribute unless the latter is already defined
1818         $si->{module_cflags} = $si->{shared_cflag} unless defined $si->{module_cflags};
1819         $si->{module_cxxflags} = $si->{shared_cxxflag} unless defined $si->{module_cxxflags};
1820         $si->{module_ldflags} = $si->{shared_ldflag} unless defined $si->{module_ldflags};
1821         foreach (sort keys %$si) {
1822             $target{$_} = defined $target{$_}
1823                 ? add($si->{$_})->($target{$_})
1824                 : $si->{$_};
1825         }
1826     }
1827 }
1828
1829 # ALL MODIFICATIONS TO %disabled, %config and %target MUST BE DONE FROM HERE ON
1830
1831 ######################################################################
1832 # Build up information for skipping certain directories depending on disabled
1833 # features, as well as setting up macros for disabled features.
1834
1835 # This is a tentative database of directories to skip.  Some entries may not
1836 # correspond to anything real, but that's ok, they will simply be ignored.
1837 # The actual processing of these entries is done in the build.info lookup
1838 # loop further down.
1839 #
1840 # The key is a Unix formatted path in the source tree, the value is an index
1841 # into %disabled_info, so any existing path gets added to a corresponding
1842 # 'skipped' entry in there with the list of skipped directories.
1843 my %skipdir = ();
1844 my %disabled_info = ();         # For configdata.pm
1845 foreach my $what (sort keys %disabled) {
1846     # There are deprecated disablables that translate to themselves.
1847     # They cause disabling cascades, but should otherwise not register.
1848     next if $deprecated_disablables{$what};
1849     # The generated $disabled{"deprecated-x.y"} entries are special
1850     # and treated properly elsewhere
1851     next if $what =~ m|^deprecated-|;
1852
1853     $config{options} .= " no-$what";
1854
1855     if (!grep { $what eq $_ } ( 'buildtest-c++', 'fips', 'threads', 'shared',
1856                                 'module', 'pic', 'dynamic-engine', 'makedepend',
1857                                 'sse2', 'legacy' )) {
1858         (my $WHAT = uc $what) =~ s|-|_|g;
1859         my $skipdir = $what;
1860
1861         # fix-up crypto/directory name(s)
1862         $skipdir = "ripemd" if $what eq "rmd160";
1863         $skipdir = "whrlpool" if $what eq "whirlpool";
1864
1865         my $macro = $disabled_info{$what}->{macro} = "OPENSSL_NO_$WHAT";
1866         push @{$config{openssl_feature_defines}}, $macro;
1867
1868         $skipdir{engines} = $what if $what eq 'engine';
1869         $skipdir{"crypto/$skipdir"} = $what
1870             unless $what eq 'async' || $what eq 'err' || $what eq 'dso';
1871     }
1872 }
1873
1874 if ($disabled{"dynamic-engine"}) {
1875     push @{$config{openssl_feature_defines}}, "OPENSSL_NO_DYNAMIC_ENGINE";
1876 } else {
1877     push @{$config{openssl_feature_defines}}, "OPENSSL_NO_STATIC_ENGINE";
1878 }
1879
1880 # If we use the unified build, collect information from build.info files
1881 my %unified_info = ();
1882
1883 my $buildinfo_debug = defined($ENV{CONFIGURE_DEBUG_BUILDINFO});
1884 if ($builder eq "unified") {
1885     use Text::Template 1.46;
1886
1887     sub cleandir {
1888         my $base = shift;
1889         my $dir = shift;
1890         my $relativeto = shift || ".";
1891
1892         $dir = catdir($base,$dir) unless isabsolute($dir);
1893
1894         # Make sure the directories we're building in exists
1895         mkpath($dir);
1896
1897         my $res = abs2rel(absolutedir($dir), rel2abs($relativeto));
1898         #print STDERR "DEBUG[cleandir]: $dir , $base => $res\n";
1899         return $res;
1900     }
1901
1902     sub cleanfile {
1903         my $base = shift;
1904         my $file = shift;
1905         my $relativeto = shift || ".";
1906
1907         $file = catfile($base,$file) unless isabsolute($file);
1908
1909         my $d = dirname($file);
1910         my $f = basename($file);
1911
1912         # Make sure the directories we're building in exists
1913         mkpath($d);
1914
1915         my $res = abs2rel(catfile(absolutedir($d), $f), rel2abs($relativeto));
1916         #print STDERR "DEBUG[cleanfile]: $d , $f => $res\n";
1917         return $res;
1918     }
1919
1920     # Store the name of the template file we will build the build file from
1921     # in %config.  This may be useful for the build file itself.
1922     my @build_file_template_names =
1923         ( $builder_platform."-".$config{build_file}.".tmpl",
1924           $config{build_file}.".tmpl" );
1925     my @build_file_templates = ();
1926
1927     # First, look in the user provided directory, if given
1928     if (defined env($local_config_envname)) {
1929         @build_file_templates =
1930             map {
1931                 if ($^O eq 'VMS') {
1932                     # VMS environment variables are logical names,
1933                     # which can be used as is
1934                     $local_config_envname . ':' . $_;
1935                 } else {
1936                     catfile(env($local_config_envname), $_);
1937                 }
1938             }
1939             @build_file_template_names;
1940     }
1941     # Then, look in our standard directory
1942     push @build_file_templates,
1943         ( map { cleanfile($srcdir, catfile("Configurations", $_), $blddir) }
1944           @build_file_template_names );
1945
1946     my $build_file_template;
1947     for $_ (@build_file_templates) {
1948         $build_file_template = $_;
1949         last if -f $build_file_template;
1950
1951         $build_file_template = undef;
1952     }
1953     if (!defined $build_file_template) {
1954         die "*** Couldn't find any of:\n", join("\n", @build_file_templates), "\n";
1955     }
1956     $config{build_file_templates}
1957       = [ cleanfile($srcdir, catfile("Configurations", "common0.tmpl"),
1958                     $blddir),
1959            $build_file_template ];
1960
1961     my @build_dirs = ( [ ] );   # current directory
1962
1963     $config{build_infos} = [ ];
1964
1965     # We want to detect configdata.pm in the source tree, so we
1966     # don't use it if the build tree is different.
1967     my $src_configdata = cleanfile($srcdir, "configdata.pm", $blddir);
1968
1969     # Any source file that we recognise is placed in this hash table, with
1970     # the list of its intended destinations as value.  When everything has
1971     # been collected, there's a routine that checks that these source files
1972     # exist, or if they are generated, that the generator exists.
1973     my %check_exist = ();
1974     my %check_generate = ();
1975
1976     my %ordinals = ();
1977     while (@build_dirs) {
1978         my @curd = @{shift @build_dirs};
1979         my $sourced = catdir($srcdir, @curd);
1980         my $buildd = catdir($blddir, @curd);
1981
1982         my $unixdir = join('/', @curd);
1983         if (exists $skipdir{$unixdir}) {
1984             my $what = $skipdir{$unixdir};
1985             push @{$disabled_info{$what}->{skipped}}, catdir(@curd);
1986             next;
1987         }
1988
1989         mkpath($buildd);
1990
1991         my $f = 'build.info';
1992         # The basic things we're trying to build
1993         my @programs = ();
1994         my @libraries = ();
1995         my @modules = ();
1996         my @scripts = ();
1997
1998         my %sources = ();
1999         my %shared_sources = ();
2000         my %includes = ();
2001         my %defines = ();
2002         my %depends = ();
2003         my %generate = ();
2004         my %imagedocs = ();
2005         my %htmldocs = ();
2006         my %mandocs = ();
2007
2008         # Support for $variablename in build.info files.
2009         # Embedded perl code is the ultimate master, still.  If its output
2010         # contains a dollar sign, it had better be escaped, or it will be
2011         # taken for a variable name prefix.
2012         my %variables = ();
2013         # Variable name syntax
2014         my $variable_name_re = qr/(?P<VARIABLE>[[:alpha:]][[:alnum:]_]*)/;
2015         # Value modifier syntaxes
2016         my $variable_subst_re = qr/\/(?P<RE>(?:\\\/|.)*?)\/(?P<SUBST>.*?)/;
2017         # Variable reference
2018         my $variable_simple_re = qr/(?<!\\)\$${variable_name_re}/;
2019         my $variable_w_mod_re =
2020             qr/(?<!\\)\$\{${variable_name_re}(?P<MOD>(?:\\\/|.)*?)\}/;
2021         # Tie it all together
2022         my $variable_re = qr/${variable_simple_re}|${variable_w_mod_re}/;
2023
2024         my $expand_variables = sub {
2025             my $value = '';
2026             my $value_rest = shift;
2027
2028             if ($ENV{CONFIGURE_DEBUG_VARIABLE_EXPAND}) {
2029                 print STDERR
2030                     "DEBUG[\$expand_variables] Parsed '$value_rest' ...\n"
2031             }
2032
2033             while ($value_rest =~ /${variable_re}/) {
2034                 # We must save important regexp values, because the next
2035                 # regexp clears them
2036                 my $mod = $+{MOD};
2037                 my $variable_value = $variables{$+{VARIABLE}};
2038
2039                 $value_rest = $';
2040                 $value .= $`;
2041
2042                 # Process modifier expressions, if present
2043                 if (defined $mod) {
2044                     if ($mod =~ /^${variable_subst_re}$/) {
2045                         my $re = $+{RE};
2046                         my $subst = $+{SUBST};
2047
2048                         $variable_value =~ s/\Q$re\E/$subst/g;
2049
2050                         if ($ENV{CONFIGURE_DEBUG_VARIABLE_EXPAND}) {
2051                             print STDERR
2052                                 "DEBUG[\$expand_variables] ... and substituted ",
2053                                 "'$re' with '$subst'\n";
2054                         }
2055                     }
2056                 }
2057
2058                 $value .= $variable_value;
2059             }
2060             if ($ENV{CONFIGURE_DEBUG_VARIABLE_EXPAND}) {
2061                 print STDERR
2062                     "DEBUG[\$expand_variables] ... into: '$value$value_rest'\n";
2063             }
2064             return $value . $value_rest;
2065         };
2066
2067         # Support for attributes in build.info files
2068         my %attributes = ();
2069         my $handle_attributes = sub {
2070             my $attr_str = shift;
2071             my $ref = shift;
2072             my @goals = @_;
2073
2074             return unless defined $attr_str;
2075
2076             my @a = tokenize($attr_str, qr|\s*,\s*|);
2077             foreach my $a (@a) {
2078                 my $ac = 1;
2079                 my $ak = $a;
2080                 my $av = 1;
2081                 if ($a =~ m|^(!)?(.*?)\s* = \s*(.*?)$|x) {
2082                     $ac = ! $1;
2083                     $ak = $2;
2084                     $av = $3;
2085                 }
2086                 foreach my $g (@goals) {
2087                     if ($ac) {
2088                         $$ref->{$g}->{$ak} = $av;
2089                     } else {
2090                         delete $$ref->{$g}->{$ak};
2091                     }
2092                 }
2093             }
2094         };
2095
2096         # Support for pushing values on multiple indexes of a given hash
2097         # array.
2098         my $push_to = sub {
2099             my $valueref = shift;
2100             my $index_str = shift; # May be undef or empty
2101             my $attrref = shift;   # May be undef
2102             my $attr_str = shift;
2103             my @values = @_;
2104
2105             if (defined $index_str) {
2106                 my @indexes = ( '' );
2107                 if ($index_str !~ m|^\s*$|) {
2108                     @indexes = tokenize($index_str);
2109                 }
2110                 foreach (@indexes) {
2111                     push @{$valueref->{$_}}, @values;
2112                     if (defined $attrref) {
2113                         $handle_attributes->($attr_str, \$$attrref->{$_},
2114                                              @values);
2115                     }
2116                 }
2117             } else {
2118                 push @$valueref, @values;
2119                 $handle_attributes->($attr_str, $attrref, @values)
2120                     if defined $attrref;
2121             }
2122         };
2123
2124         if ($buildinfo_debug) {
2125             print STDERR "DEBUG: Reading ",catfile($sourced, $f),"\n";
2126         }
2127         push @{$config{build_infos}}, catfile(abs2rel($sourced, $blddir), $f);
2128         my $template =
2129             Text::Template->new(TYPE => 'FILE',
2130                                 SOURCE => catfile($sourced, $f),
2131                                 PREPEND => qq{use lib "$FindBin::Bin/util/perl";});
2132         die "Something went wrong with $sourced/$f: $!\n" unless $template;
2133         my @text =
2134             split /^/m,
2135             $template->fill_in(HASH => { config => \%config,
2136                                          target => \%target,
2137                                          disabled => \%disabled,
2138                                          withargs => \%withargs,
2139                                          builddir => abs2rel($buildd, $blddir),
2140                                          sourcedir => abs2rel($sourced, $blddir),
2141                                          buildtop => abs2rel($blddir, $blddir),
2142                                          sourcetop => abs2rel($srcdir, $blddir) },
2143                                DELIMITERS => [ "{-", "-}" ]);
2144
2145         # The top item of this stack has the following values
2146         # -2 positive already run and we found ELSE (following ELSIF should fail)
2147         # -1 positive already run (skip until ENDIF)
2148         # 0 negatives so far (if we're at a condition, check it)
2149         # 1 last was positive (don't skip lines until next ELSE, ELSIF or ENDIF)
2150         # 2 positive ELSE (following ELSIF should fail)
2151         my @skip = ();
2152
2153         # A few useful generic regexps
2154         my $index_re = qr/\[\s*(?P<INDEX>(?:\\.|.)*?)\s*\]/;
2155         my $cond_re = qr/\[\s*(?P<COND>(?:\\.|.)*?)\s*\]/;
2156         my $attribs_re = qr/(?:\{\s*(?P<ATTRIBS>(?:\\.|.)*?)\s*\})?/;
2157         my $value_re = qr/(?P<VALUE>.*?)/;
2158         collect_information(
2159             collect_from_array([ @text ],
2160                                qr/\\$/ => sub { my $l1 = shift; my $l2 = shift;
2161                                                 $l1 =~ s/\\$//; $l1.$l2 }),
2162             # Info we're looking for
2163             qr/^\s* IF ${cond_re} \s*$/x
2164             => sub {
2165                 if (! @skip || $skip[$#skip] > 0) {
2166                     push @skip, !! $expand_variables->($+{COND});
2167                 } else {
2168                     push @skip, -1;
2169                 }
2170             },
2171             qr/^\s* ELSIF ${cond_re} \s*$/x
2172             => sub { die "ELSIF out of scope" if ! @skip;
2173                      die "ELSIF following ELSE" if abs($skip[$#skip]) == 2;
2174                      $skip[$#skip] = -1 if $skip[$#skip] != 0;
2175                      $skip[$#skip] = !! $expand_variables->($+{COND})
2176                          if $skip[$#skip] == 0; },
2177             qr/^\s* ELSE \s*$/x
2178             => sub { die "ELSE out of scope" if ! @skip;
2179                      $skip[$#skip] = -2 if $skip[$#skip] != 0;
2180                      $skip[$#skip] = 2 if $skip[$#skip] == 0; },
2181             qr/^\s* ENDIF \s*$/x
2182             => sub { die "ENDIF out of scope" if ! @skip;
2183                      pop @skip; },
2184             qr/^\s* ${variable_re} \s* = \s* ${value_re} \s* $/x
2185             => sub {
2186                 if (!@skip || $skip[$#skip] > 0) {
2187                     $variables{$+{VARIABLE}} = $expand_variables->($+{VALUE});
2188                 }
2189             },
2190             qr/^\s* SUBDIRS \s* = \s* ${value_re} \s* $/x
2191             => sub {
2192                 if (!@skip || $skip[$#skip] > 0) {
2193                     foreach (tokenize($expand_variables->($+{VALUE}))) {
2194                         push @build_dirs, [ @curd, splitdir($_, 1) ];
2195                     }
2196                 }
2197             },
2198             qr/^\s* PROGRAMS ${attribs_re} \s* =  \s* ${value_re} \s* $/x
2199             => sub { $push_to->(\@programs, undef,
2200                                 \$attributes{programs}, $+{ATTRIBS},
2201                                 tokenize($expand_variables->($+{VALUE})))
2202                          if !@skip || $skip[$#skip] > 0; },
2203             qr/^\s* LIBS ${attribs_re} \s* =  \s* ${value_re} \s* $/x
2204             => sub { $push_to->(\@libraries, undef,
2205                                 \$attributes{libraries}, $+{ATTRIBS},
2206                                 tokenize($expand_variables->($+{VALUE})))
2207                          if !@skip || $skip[$#skip] > 0; },
2208             qr/^\s* MODULES ${attribs_re} \s* =  \s* ${value_re} \s* $/x
2209             => sub { $push_to->(\@modules, undef,
2210                                 \$attributes{modules}, $+{ATTRIBS},
2211                                 tokenize($expand_variables->($+{VALUE})))
2212                          if !@skip || $skip[$#skip] > 0; },
2213             qr/^\s* SCRIPTS ${attribs_re} \s* = \s* ${value_re} \s* $/x
2214             => sub { $push_to->(\@scripts, undef,
2215                                 \$attributes{scripts}, $+{ATTRIBS},
2216                                 tokenize($expand_variables->($+{VALUE})))
2217                          if !@skip || $skip[$#skip] > 0; },
2218             qr/^\s* IMAGEDOCS ${index_re} \s* = \s* ${value_re} \s* $/x
2219             => sub { $push_to->(\%imagedocs, $expand_variables->($+{INDEX}),
2220                                 undef, undef,
2221                                 tokenize($expand_variables->($+{VALUE})))
2222                          if !@skip || $skip[$#skip] > 0; },
2223             qr/^\s* HTMLDOCS ${index_re} \s* = \s* ${value_re} \s* $/x
2224             => sub { $push_to->(\%htmldocs, $expand_variables->($+{INDEX}),
2225                                 undef, undef,
2226                                 tokenize($expand_variables->($+{VALUE})))
2227                          if !@skip || $skip[$#skip] > 0; },
2228             qr/^\s* MANDOCS ${index_re} \s* = \s* ${value_re} \s* $/x
2229             => sub { $push_to->(\%mandocs, $expand_variables->($+{INDEX}),
2230                                 undef, undef,
2231                                 tokenize($expand_variables->($+{VALUE})))
2232                          if !@skip || $skip[$#skip] > 0; },
2233             qr/^\s* SOURCE ${index_re} ${attribs_re} \s* = \s* ${value_re} \s* $/x
2234             => sub { $push_to->(\%sources, $expand_variables->($+{INDEX}),
2235                                 \$attributes{sources}, $+{ATTRIBS},
2236                                 tokenize($expand_variables->($+{VALUE})))
2237                          if !@skip || $skip[$#skip] > 0; },
2238             qr/^\s* SHARED_SOURCE ${index_re} ${attribs_re} \s* = \s* ${value_re} \s* $/x
2239             => sub { $push_to->(\%shared_sources, $expand_variables->($+{INDEX}),
2240                                 \$attributes{sources}, $+{ATTRIBS},
2241                                 tokenize($expand_variables->($+{VALUE})))
2242                          if !@skip || $skip[$#skip] > 0; },
2243             qr/^\s* INCLUDE ${index_re} \s* = \s* ${value_re} \s* $/x
2244             => sub { $push_to->(\%includes, $expand_variables->($+{INDEX}),
2245                                 undef, undef,
2246                                 tokenize($expand_variables->($+{VALUE})))
2247                          if !@skip || $skip[$#skip] > 0; },
2248             qr/^\s* DEFINE ${index_re} \s* = \s* ${value_re} \s* $/x
2249             => sub { $push_to->(\%defines, $expand_variables->($+{INDEX}),
2250                                 undef, undef,
2251                                 tokenize($expand_variables->($+{VALUE})))
2252                          if !@skip || $skip[$#skip] > 0; },
2253             qr/^\s* DEPEND ${index_re} ${attribs_re} \s* = \s* ${value_re} \s* $/x
2254             => sub { $push_to->(\%depends, $expand_variables->($+{INDEX}),
2255                                 \$attributes{depends}, $+{ATTRIBS},
2256                                 tokenize($expand_variables->($+{VALUE})))
2257                          if !@skip || $skip[$#skip] > 0; },
2258             qr/^\s* GENERATE ${index_re} ${attribs_re} \s* = \s* ${value_re} \s* $/x
2259             => sub { $push_to->(\%generate, $expand_variables->($+{INDEX}),
2260                                 \$attributes{generate}, $+{ATTRIBS},
2261                                 $expand_variables->($+{VALUE}))
2262                          if !@skip || $skip[$#skip] > 0; },
2263             qr/^\s* (?:\#.*)? $/x => sub { },
2264             "OTHERWISE" => sub { die "Something wrong with this line:\n$_\nat $sourced/$f" },
2265             "BEFORE" => sub {
2266                 if ($buildinfo_debug) {
2267                     print STDERR "DEBUG: Parsing ",join(" ", @_),"\n";
2268                     print STDERR "DEBUG: ... before parsing, skip stack is ",join(" ", map { int($_) } @skip),"\n";
2269                 }
2270             },
2271             "AFTER" => sub {
2272                 if ($buildinfo_debug) {
2273                     print STDERR "DEBUG: .... after parsing, skip stack is ",join(" ", map { int($_) } @skip),"\n";
2274                 }
2275             },
2276             );
2277         die "runaway IF?" if (@skip);
2278
2279         if (grep { defined $attributes{modules}->{$_}->{engine} } keys %attributes
2280                 and !$config{dynamic_engines}) {
2281             die <<"EOF"
2282 ENGINES can only be used if configured with 'dynamic-engine'.
2283 This is usually a fault in a build.info file.
2284 EOF
2285         }
2286
2287         {
2288             my %infos = ( programs  => [ @programs  ],
2289                           libraries => [ @libraries ],
2290                           modules   => [ @modules   ],
2291                           scripts   => [ @scripts   ] );
2292             foreach my $k (keys %infos) {
2293                 foreach (@{$infos{$k}}) {
2294                     my $item = cleanfile($buildd, $_, $blddir);
2295                     $unified_info{$k}->{$item} = 1;
2296
2297                     # Fix up associated attributes
2298                     $unified_info{attributes}->{$k}->{$item} =
2299                         $attributes{$k}->{$_}
2300                         if defined $attributes{$k}->{$_};
2301                 }
2302             }
2303         }
2304
2305         # Check that we haven't defined any library as both shared and
2306         # explicitly static.  That is forbidden.
2307         my @doubles = ();
2308         foreach (grep /\.a$/, keys %{$unified_info{libraries}}) {
2309             (my $l = $_) =~ s/\.a$//;
2310             push @doubles, $l if defined $unified_info{libraries}->{$l};
2311         }
2312         die "these libraries are both explicitly static and shared:\n  ",
2313             join(" ", @doubles), "\n"
2314             if @doubles;
2315
2316         foreach (keys %sources) {
2317             my $dest = $_;
2318             my $ddest = cleanfile($buildd, $_, $blddir);
2319             foreach (@{$sources{$dest}}) {
2320                 my $s = cleanfile($sourced, $_, $blddir);
2321
2322                 # If it's generated or we simply don't find it in the source
2323                 # tree, we assume it's in the build tree.
2324                 if ($s eq $src_configdata || $generate{$_} || ! -f $s) {
2325                     $s = cleanfile($buildd, $_, $blddir);
2326                 }
2327                 my $o = $_;
2328                 # We recognise C++, C and asm files
2329                 if ($s =~ /\.(cc|cpp|c|s|S)$/) {
2330                     push @{$check_exist{$s}}, $ddest;
2331                     $o =~ s/\.[csS]$/.o/; # C and assembler
2332                     $o =~ s/\.(cc|cpp)$/_cc.o/; # C++
2333                     $o = cleanfile($buildd, $o, $blddir);
2334                     $unified_info{sources}->{$ddest}->{$o} = -1;
2335                     $unified_info{sources}->{$o}->{$s} = -1;
2336                 } elsif ($s =~ /\.rc$/) {
2337                     # We also recognise resource files
2338                     push @{$check_exist{$s}}, $ddest;
2339                     $o =~ s/\.rc$/.res/; # Resource configuration
2340                     $o = cleanfile($buildd, $o, $blddir);
2341                     $unified_info{sources}->{$ddest}->{$o} = -1;
2342                     $unified_info{sources}->{$o}->{$s} = -1;
2343                 } else {
2344                     push @{$check_exist{$s}}, $ddest;
2345                     $unified_info{sources}->{$ddest}->{$s} = 1;
2346                 }
2347                 # Fix up associated attributes
2348                 if ($o ne $_) {
2349                     $unified_info{attributes}->{sources}->{$ddest}->{$o} =
2350                         $unified_info{attributes}->{sources}->{$o}->{$s} =
2351                         $attributes{sources}->{$dest}->{$_}
2352                         if defined $attributes{sources}->{$dest}->{$_};
2353                 } else {
2354                     $unified_info{attributes}->{sources}->{$ddest}->{$s} =
2355                         $attributes{sources}->{$dest}->{$_}
2356                         if defined $attributes{sources}->{$dest}->{$_};
2357                 }
2358             }
2359         }
2360
2361         foreach (keys %shared_sources) {
2362             my $dest = $_;
2363             my $ddest = cleanfile($buildd, $_, $blddir);
2364             foreach (@{$shared_sources{$dest}}) {
2365                 my $s = cleanfile($sourced, $_, $blddir);
2366
2367                 # If it's generated or we simply don't find it in the source
2368                 # tree, we assume it's in the build tree.
2369                 if ($s eq $src_configdata || $generate{$_} || ! -f $s) {
2370                     $s = cleanfile($buildd, $_, $blddir);
2371                 }
2372
2373                 my $o = $_;
2374                 if ($s =~ /\.(cc|cpp|c|s|S)$/) {
2375                     # We recognise C++, C and asm files
2376                     push @{$check_exist{$s}}, $ddest;
2377                     $o =~ s/\.[csS]$/.o/; # C and assembler
2378                     $o =~ s/\.(cc|cpp)$/_cc.o/; # C++
2379                     $o = cleanfile($buildd, $o, $blddir);
2380                     $unified_info{shared_sources}->{$ddest}->{$o} = -1;
2381                     $unified_info{sources}->{$o}->{$s} = -1;
2382                 } elsif ($s =~ /\.rc$/) {
2383                     # We also recognise resource files
2384                     push @{$check_exist{$s}}, $ddest;
2385                     $o =~ s/\.rc$/.res/; # Resource configuration
2386                     $o = cleanfile($buildd, $o, $blddir);
2387                     $unified_info{shared_sources}->{$ddest}->{$o} = -1;
2388                     $unified_info{sources}->{$o}->{$s} = -1;
2389                 } elsif ($s =~ /\.ld$/) {
2390                     # We also recognise linker scripts (or corresponding)
2391                     # We know they are generated files
2392                     push @{$check_exist{$s}}, $ddest;
2393                     $o = cleanfile($buildd, $_, $blddir);
2394                     $unified_info{shared_sources}->{$ddest}->{$o} = 1;
2395                 } else {
2396                     die "unrecognised source file type for shared library: $s\n";
2397                 }
2398                 # Fix up associated attributes
2399                 if ($o ne $_) {
2400                     $unified_info{attributes}->{shared_sources}->{$ddest}->{$o} =
2401                         $unified_info{attributes}->{sources}->{$o}->{$s} =
2402                         $attributes{sources}->{$dest}->{$_}
2403                         if defined $attributes{sources}->{$dest}->{$_};
2404                 } else {
2405                     $unified_info{attributes}->{shared_sources}->{$ddest}->{$o} =
2406                         $attributes{sources}->{$dest}->{$_}
2407                         if defined $attributes{sources}->{$dest}->{$_};
2408                 }
2409             }
2410         }
2411
2412         foreach (keys %generate) {
2413             my $dest = $_;
2414             my $ddest = cleanfile($buildd, $_, $blddir);
2415             die "more than one generator for $dest: "
2416                 ,join(" ", @{$generate{$_}}),"\n"
2417                 if scalar @{$generate{$_}} > 1;
2418             my @generator = split /\s+/, $generate{$dest}->[0];
2419             my $gen = $generator[0];
2420             $generator[0] = cleanfile($sourced, $gen, $blddir);
2421
2422             # If the generator is itself generated, it's in the build tree
2423             if ($generate{$gen} || ! -f $generator[0]) {
2424                 $generator[0] = cleanfile($buildd, $gen, $blddir);
2425             }
2426             $check_generate{$ddest}->{$generator[0]}++;
2427
2428             $unified_info{generate}->{$ddest} = [ @generator ];
2429             # Fix up associated attributes
2430             $unified_info{attributes}->{generate}->{$ddest} =
2431                 $attributes{generate}->{$dest}->{$gen}
2432                 if defined $attributes{generate}->{$dest}->{$gen};
2433         }
2434
2435         foreach (keys %depends) {
2436             my $dest = $_;
2437             my $ddest = $dest;
2438
2439             if ($dest =~ /^\|(.*)\|$/) {
2440                 # Collect the raw target
2441                 $unified_info{targets}->{$1} = 1;
2442                 $ddest = $1;
2443             } elsif ($dest eq '') {
2444                 $ddest = '';
2445             } else {
2446                 $ddest = cleanfile($sourced, $dest, $blddir);
2447
2448                 # If the destination doesn't exist in source, it can only be
2449                 # a generated file in the build tree.
2450                 if ($ddest eq $src_configdata || ! -f $ddest) {
2451                     $ddest = cleanfile($buildd, $dest, $blddir);
2452                 }
2453             }
2454             foreach my $f (@{$depends{$dest}}) {
2455                 # If the dependency destination is generated, dependencies
2456                 # may have an extra syntax to separate the intended inclusion
2457                 # directory from the module to be loaded: a | instead of a
2458                 # / as directory separator.
2459                 # Do note that this has to be handled in the build file
2460                 # template as well.
2461                 # $i = inclusion path in source directory
2462                 # $i2 = inclusion path in build directory
2463                 # $m = module path (within the inclusion path)
2464                 # $i = full module path in source directory
2465                 # $i2 = full module path in build directory
2466                 my $i; my $i2; my $m; my $d; my $d2;
2467                 if ($unified_info{generate}->{$ddest}
2468                     && $f =~ m/^(.*?)\|(.*)$/) {
2469                     $i = $1;
2470                     $m = $2;
2471                     $i = cleanfile($sourced, $i, $blddir);
2472                     $i2 = cleanfile($buildd, $i, $blddir);
2473                     $d = cleanfile($sourced, "$i/$m", $blddir);
2474                     $d2 = cleanfile($buildd, "$i/$m", $blddir);
2475                 } else {
2476                     $d = cleanfile($sourced, $f, $blddir);
2477                     $d2 = cleanfile($buildd, $f, $blddir);
2478                 }
2479
2480                 # If we know it's generated, or assume it is because we can't
2481                 # find it in the source tree, we set file we depend on to be
2482                 # in the build tree rather than the source tree.
2483                 if ($d eq $src_configdata
2484                     || (grep { $d2 eq $_ }
2485                         keys %{$unified_info{generate}})
2486                     || ! -f $d) {
2487                     $d = $d2;
2488                     $i = $i2;
2489                 }
2490                 if ($i) {
2491                     # Put together the computed inclusion dir with the
2492                     # original module name.  Do note that we conserve the
2493                     # Unixly path syntax for the module path.
2494                     $d = "$i|$m";
2495                 }
2496                 $unified_info{depends}->{$ddest}->{$d} = 1;
2497
2498                 # Fix up associated attributes
2499                 $unified_info{attributes}->{depends}->{$ddest}->{$d} =
2500                     $attributes{depends}->{$dest}->{$f}
2501                     if defined $attributes{depends}->{$dest}->{$f};
2502             }
2503         }
2504
2505         foreach (keys %includes) {
2506             my $dest = $_;
2507             my $ddest = cleanfile($sourced, $_, $blddir);
2508
2509             # If the destination doesn't exist in source, it can only be
2510             # a generated file in the build tree.
2511             if ($ddest eq $src_configdata || ! -f $ddest) {
2512                 $ddest = cleanfile($buildd, $_, $blddir);
2513             }
2514             foreach (@{$includes{$dest}}) {
2515                 my $is = cleandir($sourced, $_, $blddir);
2516                 my $ib = cleandir($buildd, $_, $blddir);
2517                 push @{$unified_info{includes}->{$ddest}->{source}}, $is
2518                     unless grep { $_ eq $is } @{$unified_info{includes}->{$ddest}->{source}};
2519                 push @{$unified_info{includes}->{$ddest}->{build}}, $ib
2520                     unless grep { $_ eq $ib } @{$unified_info{includes}->{$ddest}->{build}};
2521             }
2522         }
2523
2524         foreach my $dest (keys %defines) {
2525             my $ddest;
2526
2527             if ($dest ne "") {
2528                 $ddest = cleanfile($sourced, $dest, $blddir);
2529
2530                 # If the destination doesn't exist in source, it can only
2531                 # be a generated file in the build tree.
2532                 if (! -f $ddest) {
2533                     $ddest = cleanfile($buildd, $dest, $blddir);
2534                 }
2535             }
2536             foreach my $v (@{$defines{$dest}}) {
2537                 $v =~ m|^([^=]*)(=.*)?$|;
2538                 die "0 length macro name not permitted\n" if $1 eq "";
2539                 if ($dest ne "") {
2540                     die "$1 defined more than once\n"
2541                         if defined $unified_info{defines}->{$ddest}->{$1};
2542                     $unified_info{defines}->{$ddest}->{$1} = $2;
2543                 } else {
2544                     die "$1 defined more than once\n"
2545                         if grep { $v eq $_ } @{$config{defines}};
2546                     push @{$config{defines}}, $v;
2547                 }
2548             }
2549         }
2550
2551         foreach my $section (keys %imagedocs) {
2552             foreach (@{$imagedocs{$section}}) {
2553                 my $imagedocs = cleanfile($buildd, $_, $blddir);
2554                 $unified_info{imagedocs}->{$section}->{$imagedocs} = 1;
2555             }
2556         }
2557
2558         foreach my $section (keys %htmldocs) {
2559             foreach (@{$htmldocs{$section}}) {
2560                 my $htmldocs = cleanfile($buildd, $_, $blddir);
2561                 $unified_info{htmldocs}->{$section}->{$htmldocs} = 1;
2562             }
2563         }
2564
2565         foreach my $section (keys %mandocs) {
2566             foreach (@{$mandocs{$section}}) {
2567                 my $mandocs = cleanfile($buildd, $_, $blddir);
2568                 $unified_info{mandocs}->{$section}->{$mandocs} = 1;
2569             }
2570         }
2571     }
2572
2573     my $ordinals_text = join(', ', sort keys %ordinals);
2574     warn <<"EOF" if $ordinals_text;
2575
2576 WARNING: ORDINALS were specified for $ordinals_text
2577 They are ignored and should be replaced with a combination of GENERATE,
2578 DEPEND and SHARED_SOURCE.
2579 EOF
2580
2581     # Check that each generated file is only generated once
2582     my $ambiguous_generation = 0;
2583     foreach (sort keys %check_generate) {
2584         my @generators = sort keys %{$check_generate{$_}};
2585         my $generators_txt = join(', ', @generators);
2586         if (scalar @generators > 1) {
2587             warn "$_ is GENERATEd by more than one generator ($generators_txt)\n";
2588             $ambiguous_generation++;
2589         }
2590         if ($check_generate{$_}->{$generators[0]} > 1) {
2591             warn "INFO: $_ has more than one GENERATE declaration (same generator)\n"
2592         }
2593     }
2594     die "There are ambiguous source file generations\n"
2595         if $ambiguous_generation > 0;
2596
2597     # All given source files should exist, or if generated, their
2598     # generator should exist.  This loop ensures this is true.
2599     my $missing = 0;
2600     foreach my $orig (sort keys %check_exist) {
2601         foreach my $dest (@{$check_exist{$orig}}) {
2602             if ($orig ne $src_configdata) {
2603                 if ($orig =~ /\.a$/) {
2604                     # Static library names may be used as sources, so we
2605                     # need to detect those and give them special treatment.
2606                     unless (grep { $_ eq $orig }
2607                             keys %{$unified_info{libraries}}) {
2608                         warn "$orig is given as source for $dest, but no such library is built\n";
2609                         $missing++;
2610                     }
2611                 } else {
2612                     # A source may be generated, and its generator may be
2613                     # generated as well.  We therefore loop to dig out the
2614                     # first generator.
2615                     my $gen = $orig;
2616
2617                     while (my @next = keys %{$check_generate{$gen}}) {
2618                         $gen = $next[0];
2619                     }
2620
2621                     if (! -f $gen) {
2622                         if ($gen ne $orig) {
2623                             $missing++;
2624                             warn "$orig is given as source for $dest, but its generator (leading to $gen) is missing\n";
2625                         } else {
2626                             $missing++;
2627                             warn "$orig is given as source for $dest, but is missing\n";
2628                         }
2629                     }
2630                 }
2631             }
2632         }
2633     }
2634     die "There are files missing\n" if $missing > 0;
2635
2636     # Go through the sources of all libraries and check that the same basename
2637     # doesn't appear more than once.  Some static library archivers depend on
2638     # them being unique.
2639     {
2640         my $err = 0;
2641         foreach my $prod (keys %{$unified_info{libraries}}) {
2642             my @prod_sources =
2643                 map { keys %{$unified_info{sources}->{$_}} }
2644                 keys %{$unified_info{sources}->{$prod}};
2645             my %srccnt = ();
2646
2647             # Count how many times a given each source basename
2648             # appears for each product.
2649             foreach my $src (@prod_sources) {
2650                 $srccnt{basename $src}++;
2651             }
2652
2653             foreach my $src (keys %srccnt) {
2654                 if ((my $cnt = $srccnt{$src}) > 1) {
2655                     print STDERR "$src appears $cnt times for the product $prod\n";
2656                     $err++
2657                 }
2658             }
2659         }
2660         die if $err > 0;
2661     }
2662
2663     # Massage the result
2664
2665     # If we depend on a header file or a perl module, add an inclusion of
2666     # its directory to allow smoothe inclusion
2667     foreach my $dest (keys %{$unified_info{depends}}) {
2668         next if $dest eq "";
2669         foreach my $d (keys %{$unified_info{depends}->{$dest}}) {
2670             next unless $d =~ /\.(h|pm)$/;
2671             # Take into account when a dependency uses the inclusion|module
2672             # syntax
2673             my $i = $d =~ m/\|/ ? $` : dirname($d);
2674             my $spot =
2675                 $d eq "configdata.pm" || defined($unified_info{generate}->{$d})
2676                 ? 'build' : 'source';
2677             push @{$unified_info{includes}->{$dest}->{$spot}}, $i
2678                 unless grep { $_ eq $i } @{$unified_info{includes}->{$dest}->{$spot}};
2679         }
2680     }
2681
2682     # Go through all intermediary files and change their names to something that
2683     # reflects what they will be built for.  Note that for some source files,
2684     # this leads to duplicate object files because they are used multiple times.
2685     # the goal is to rename all object files according to this scheme:
2686     #    {productname}-{midfix}-{origobjname}.[o|res]
2687     # the {midfix} is a keyword indicating the type of product, which is mostly
2688     # valuable for libraries since they come in two forms.
2689     #
2690     # This also reorganises the {sources} and {shared_sources} so that the
2691     # former only contains ALL object files that are supposed to end up in
2692     # static libraries and programs, while the latter contains ALL object files
2693     # that are supposed to end up in shared libraries and DSOs.
2694     # The main reason for having two different source structures is to allow
2695     # the same name to be used for the static and the shared variants of a
2696     # library.
2697     {
2698         # Take copies so we don't get interference from added stuff
2699         my %unified_copy = ();
2700         foreach (('sources', 'shared_sources')) {
2701             $unified_copy{$_} = { %{$unified_info{$_}} }
2702                 if defined($unified_info{$_});
2703             delete $unified_info{$_};
2704         }
2705         foreach my $prodtype (('programs', 'libraries', 'modules', 'scripts')) {
2706             # $intent serves multi purposes:
2707             # - give a prefix for the new object files names
2708             # - in the case of libraries, rearrange the object files so static
2709             #   libraries use the 'sources' structure exclusively, while shared
2710             #   libraries use the 'shared_sources' structure exclusively.
2711             my $intent = {
2712                 programs  => { bin    => { src => [ 'sources' ],
2713                                            dst => 'sources' } },
2714                 libraries => { lib    => { src => [ 'sources' ],
2715                                            dst => 'sources' },
2716                                shlib  => { prodselect =>
2717                                                sub { grep !/\.a$/, @_ },
2718                                            src => [ 'sources',
2719                                                     'shared_sources' ],
2720                                            dst => 'shared_sources' } },
2721                 modules   => { dso    => { src => [ 'sources' ],
2722                                            dst => 'sources' } },
2723                 scripts   => { script => { src => [ 'sources' ],
2724                                            dst => 'sources' } }
2725                } -> {$prodtype};
2726             foreach my $kind (keys %$intent) {
2727                 next if ($intent->{$kind}->{dst} eq 'shared_sources'
2728                              && $disabled{shared});
2729
2730                 my @src = @{$intent->{$kind}->{src}};
2731                 my $dst = $intent->{$kind}->{dst};
2732                 my $prodselect = $intent->{$kind}->{prodselect} // sub { @_ };
2733                 foreach my $prod ($prodselect->(keys %{$unified_info{$prodtype}})) {
2734                     # %prod_sources has all applicable objects as keys, and
2735                     # their corresponding sources as values
2736                     my %prod_sources =
2737                         map { $_ => [ keys %{$unified_copy{sources}->{$_}} ] }
2738                         map { keys %{$unified_copy{$_}->{$prod}} }
2739                         @src;
2740                     foreach (keys %prod_sources) {
2741                         # Only affect object files and resource files,
2742                         # the others simply get a new value
2743                         # (+1 instead of -1)
2744                         if ($_ =~ /\.(o|res)$/) {
2745                             (my $prodname = $prod) =~ s|\.a$||;
2746                             my $newobj =
2747                                 catfile(dirname($_),
2748                                         basename($prodname)
2749                                             . '-' . $kind
2750                                             . '-' . basename($_));
2751                             $unified_info{$dst}->{$prod}->{$newobj} = 1;
2752                             foreach my $src (@{$prod_sources{$_}}) {
2753                                 $unified_info{sources}->{$newobj}->{$src} = 1;
2754                                 # Adjust source attributes
2755                                 my $attrs = $unified_info{attributes}->{sources};
2756                                 if (defined $attrs->{$prod}
2757                                     && defined $attrs->{$prod}->{$_}) {
2758                                     $attrs->{$prod}->{$newobj} =
2759                                         $attrs->{$prod}->{$_};
2760                                     delete $attrs->{$prod}->{$_};
2761                                 }
2762                                 foreach my $objsrc (keys %{$attrs->{$_} // {}}) {
2763                                     $attrs->{$newobj}->{$objsrc} =
2764                                         $attrs->{$_}->{$objsrc};
2765                                     delete $attrs->{$_}->{$objsrc};
2766                                 }
2767                             }
2768                             # Adjust dependencies
2769                             foreach my $deps (keys %{$unified_info{depends}->{$_}}) {
2770                                 $unified_info{depends}->{$_}->{$deps} = -1;
2771                                 $unified_info{depends}->{$newobj}->{$deps} = 1;
2772                             }
2773                             # Adjust includes
2774                             foreach my $k (('source', 'build')) {
2775                                 next unless
2776                                     defined($unified_info{includes}->{$_}->{$k});
2777                                 my @incs = @{$unified_info{includes}->{$_}->{$k}};
2778                                 $unified_info{includes}->{$newobj}->{$k} = [ @incs ];
2779                             }
2780                         } else {
2781                             $unified_info{$dst}->{$prod}->{$_} = 1;
2782                         }
2783                     }
2784                 }
2785             }
2786         }
2787     }
2788
2789     # At this point, we have a number of sources with the value -1.  They
2790     # aren't part of the local build and are probably meant for a different
2791     # platform, and can therefore be cleaned away.  That happens when making
2792     # %unified_info more efficient below.
2793
2794     ### Make unified_info a bit more efficient
2795     # One level structures
2796     foreach (("programs", "libraries", "modules", "scripts", "targets")) {
2797         $unified_info{$_} = [ sort keys %{$unified_info{$_}} ];
2798     }
2799     # Two level structures
2800     foreach my $l1 (("sources", "shared_sources", "ldadd", "depends",
2801                      "imagedocs", "htmldocs", "mandocs")) {
2802         foreach my $l2 (sort keys %{$unified_info{$l1}}) {
2803             my @items =
2804                 sort
2805                 grep { $unified_info{$l1}->{$l2}->{$_} > 0 }
2806                 keys %{$unified_info{$l1}->{$l2}};
2807             if (@items) {
2808                 $unified_info{$l1}->{$l2} = [ @items ];
2809             } else {
2810                 delete $unified_info{$l1}->{$l2};
2811             }
2812         }
2813     }
2814     # Defines
2815     foreach my $dest (sort keys %{$unified_info{defines}}) {
2816         $unified_info{defines}->{$dest}
2817             = [ map { $_.$unified_info{defines}->{$dest}->{$_} }
2818                 sort keys %{$unified_info{defines}->{$dest}} ];
2819     }
2820     # Includes
2821     foreach my $dest (sort keys %{$unified_info{includes}}) {
2822         if (defined($unified_info{includes}->{$dest}->{build})) {
2823             my @source_includes = ();
2824             @source_includes = ( @{$unified_info{includes}->{$dest}->{source}} )
2825                 if defined($unified_info{includes}->{$dest}->{source});
2826             $unified_info{includes}->{$dest} =
2827                 [ @{$unified_info{includes}->{$dest}->{build}} ];
2828             foreach my $inc (@source_includes) {
2829                 push @{$unified_info{includes}->{$dest}}, $inc
2830                     unless grep { $_ eq $inc } @{$unified_info{includes}->{$dest}};
2831             }
2832         } elsif (defined($unified_info{includes}->{$dest}->{source})) {
2833             $unified_info{includes}->{$dest} =
2834                 [ @{$unified_info{includes}->{$dest}->{source}} ];
2835         } else {
2836             delete $unified_info{includes}->{$dest};
2837         }
2838     }
2839
2840     # For convenience collect information regarding directories where
2841     # files are generated, those generated files and the end product
2842     # they end up in where applicable.  Then, add build rules for those
2843     # directories
2844     my %loopinfo = ( "lib" => [ @{$unified_info{libraries}} ],
2845                      "dso" => [ @{$unified_info{modules}} ],
2846                      "bin" => [ @{$unified_info{programs}} ],
2847                      "script" => [ @{$unified_info{scripts}} ],
2848                      "docs" => [ (map { @{$unified_info{imagedocs}->{$_} // []} }
2849                                   keys %{$unified_info{imagedocs} // {}}),
2850                                  (map { @{$unified_info{htmldocs}->{$_} // []} }
2851                                   keys %{$unified_info{htmldocs} // {}}),
2852                                  (map { @{$unified_info{mandocs}->{$_} // []} }
2853                                   keys %{$unified_info{mandocs} // {}}) ] );
2854     foreach my $type (sort keys %loopinfo) {
2855         foreach my $product (@{$loopinfo{$type}}) {
2856             my %dirs = ();
2857             my $pd = dirname($product);
2858
2859             foreach (@{$unified_info{sources}->{$product} // []},
2860                      @{$unified_info{shared_sources}->{$product} // []}) {
2861                 my $d = dirname($_);
2862
2863                 # We don't want to create targets for source directories
2864                 # when building out of source
2865                 next if ($config{sourcedir} ne $config{builddir}
2866                              && $d =~ m|^\Q$config{sourcedir}\E|);
2867                 # We already have a "test" target, and the current directory
2868                 # is just silly to make a target for
2869                 next if $d eq "test" || $d eq ".";
2870
2871                 $dirs{$d} = 1;
2872                 push @{$unified_info{dirinfo}->{$d}->{deps}}, $_
2873                     if $d ne $pd;
2874             }
2875             foreach (sort keys %dirs) {
2876                 push @{$unified_info{dirinfo}->{$_}->{products}->{$type}},
2877                     $product;
2878             }
2879         }
2880     }
2881 }
2882
2883 # For the schemes that need it, we provide the old *_obj configs
2884 # from the *_asm_obj ones
2885 foreach (grep /_(asm|aux)_src$/, keys %target) {
2886     my $src = $_;
2887     (my $obj = $_) =~ s/_(asm|aux)_src$/_obj/;
2888     $target{$obj} = $target{$src};
2889     $target{$obj} =~ s/\.[csS]\b/.o/g; # C and assembler
2890     $target{$obj} =~ s/\.(cc|cpp)\b/_cc.o/g; # C++
2891 }
2892
2893 # Write down our configuration where it fits #########################
2894
2895 my %template_vars = (
2896     config => \%config,
2897     target => \%target,
2898     disablables => \@disablables,
2899     disablables_int => \@disablables_int,
2900     disabled => \%disabled,
2901     withargs => \%withargs,
2902     unified_info => \%unified_info,
2903     tls => \@tls,
2904     dtls => \@dtls,
2905     makevars => [ sort keys %user ],
2906     disabled_info => \%disabled_info,
2907     user_crossable => \@user_crossable,
2908 );
2909 my $configdata_outname = 'configdata.pm';
2910 open CONFIGDATA, ">$configdata_outname.new"
2911     or die "Trying to create $configdata_outname.new: $!";
2912 my $configdata_tmplname = cleanfile($srcdir, "configdata.pm.in", $blddir);
2913 my $configdata_tmpl =
2914     OpenSSL::Template->new(TYPE => 'FILE', SOURCE => $configdata_tmplname);
2915 $configdata_tmpl->fill_in(
2916     FILENAME => $configdata_tmplname,
2917     OUTPUT => \*CONFIGDATA,
2918     HASH => { %template_vars,
2919               autowarntext => [
2920                   'WARNING: do not edit!',
2921                   "Generated by Configure from $configdata_tmplname",
2922               ] }
2923 ) or die $Text::Template::ERROR;
2924 close CONFIGDATA;
2925
2926 rename "$configdata_outname.new", $configdata_outname;
2927 if ($builder_platform eq 'unix') {
2928     my $mode = (0755 & ~umask);
2929     chmod $mode, 'configdata.pm'
2930         or warn sprintf("WARNING: Couldn't change mode for 'configdata.pm' to 0%03o: %s\n",$mode,$!);
2931 }
2932 print "Created $configdata_outname\n";
2933
2934 print "Running $configdata_outname\n";
2935 my $perlcmd = (quotify("maybeshell", $config{PERL}))[0];
2936 my $cmd = "$perlcmd $configdata_outname";
2937 #print STDERR "DEBUG[run_dofile]: \$cmd = $cmd\n";
2938 system($cmd);
2939 exit 1 if $? != 0;
2940
2941 $SIG{__DIE__} = $orig_death_handler;
2942
2943 print <<"EOF" if ($disabled{threads} eq "unavailable");
2944
2945 The library could not be configured for supporting multi-threaded
2946 applications as the compiler options required on this system are not known.
2947 See file INSTALL.md for details if you need multi-threading.
2948 EOF
2949
2950 print <<"EOF" if ($no_shared_warn);
2951
2952 The options 'shared', 'pic' and 'dynamic-engine' aren't supported on this
2953 platform, so we will pretend you gave the option 'no-pic', which also disables
2954 'shared' and 'dynamic-engine'.  If you know how to implement shared libraries
2955 or position independent code, please let us know (but please first make sure
2956 you have tried with a current version of OpenSSL).
2957 EOF
2958
2959 print $banner;
2960
2961 exit(0);
2962
2963 ######################################################################
2964 #
2965 # Helpers and utility functions
2966 #
2967
2968 # Death handler, to print a helpful message in case of failure #######
2969 #
2970 sub death_handler {
2971     die @_ if $^S;              # To prevent the added message in eval blocks
2972     my $build_file = $config{build_file} // "build file";
2973     my @message = ( <<"_____", @_ );
2974
2975 Failure!  $build_file wasn't produced.
2976 Please read INSTALL.md and associated NOTES-* files.  You may also have to
2977 look over your available compiler tool chain or change your configuration.
2978
2979 _____
2980
2981     # Dying is terminal, so it's ok to reset the signal handler here.
2982     $SIG{__DIE__} = $orig_death_handler;
2983     die @message;
2984 }
2985
2986 # Configuration file reading #########################################
2987
2988 # Note: All of the helper functions are for lazy evaluation.  They all
2989 # return a CODE ref, which will return the intended value when evaluated.
2990 # Thus, whenever there's mention of a returned value, it's about that
2991 # intended value.
2992
2993 # Helper function to implement conditional value variants, with a default
2994 # plus additional values based on the value of $config{build_type}.
2995 # Arguments are given in hash table form:
2996 #
2997 #       picker(default => "Basic string: ",
2998 #              debug   => "debug",
2999 #              release => "release")
3000 #
3001 # When configuring with --debug, the resulting string will be
3002 # "Basic string: debug", and when not, it will be "Basic string: release"
3003 #
3004 # This can be used to create variants of sets of flags according to the
3005 # build type:
3006 #
3007 #       cflags => picker(default => "-Wall",
3008 #                        debug   => "-g -O0",
3009 #                        release => "-O3")
3010 #
3011 sub picker {
3012     my %opts = @_;
3013     return sub { add($opts{default} || (),
3014                      $opts{$config{build_type}} || ())->(); }
3015 }
3016
3017 # Helper function to combine several values of different types into one.
3018 # This is useful if you want to combine a string with the result of a
3019 # lazy function, such as:
3020 #
3021 #       cflags => combine("-Wall", sub { $disabled{zlib} ? () : "-DZLIB" })
3022 #
3023 sub combine {
3024     my @stuff = @_;
3025     return sub { add(@stuff)->(); }
3026 }
3027
3028 # Helper function to implement conditional values depending on the value
3029 # of $disabled{threads}.  Can be used as follows:
3030 #
3031 #       cflags => combine("-Wall", threads("-pthread"))
3032 #
3033 sub threads {
3034     my @flags = @_;
3035     return sub { add($disabled{threads} ? () : @flags)->(); }
3036 }
3037
3038 sub shared {
3039     my @flags = @_;
3040     return sub { add($disabled{shared} ? () : @flags)->(); }
3041 }
3042
3043 our $add_called = 0;
3044 # Helper function to implement adding values to already existing configuration
3045 # values.  It handles elements that are ARRAYs, CODEs and scalars
3046 sub _add {
3047     my $separator = shift;
3048
3049     # If there's any ARRAY in the collection of values OR the separator
3050     # is undef, we will return an ARRAY of combined values, otherwise a
3051     # string of joined values with $separator as the separator.
3052     my $found_array = !defined($separator);
3053
3054     my @values =
3055         map {
3056             my $res = $_;
3057             while (ref($res) eq "CODE") {
3058                 $res = $res->();
3059             }
3060             if (defined($res)) {
3061                 if (ref($res) eq "ARRAY") {
3062                     $found_array = 1;
3063                     @$res;
3064                 } else {
3065                     $res;
3066                 }
3067             } else {
3068                 ();
3069             }
3070     } (@_);
3071
3072     $add_called = 1;
3073
3074     if ($found_array) {
3075         [ @values ];
3076     } else {
3077         join($separator, grep { defined($_) && $_ ne "" } @values);
3078     }
3079 }
3080 sub add_before {
3081     my $separator = " ";
3082     if (ref($_[$#_]) eq "HASH") {
3083         my $opts = pop;
3084         $separator = $opts->{separator};
3085     }
3086     my @x = @_;
3087     sub { _add($separator, @x, @_) };
3088 }
3089 sub add {
3090     my $separator = " ";
3091     if (ref($_[$#_]) eq "HASH") {
3092         my $opts = pop;
3093         $separator = $opts->{separator};
3094     }
3095     my @x = @_;
3096     sub { _add($separator, @_, @x) };
3097 }
3098
3099 sub read_eval_file {
3100     my $fname = shift;
3101     my $content;
3102     my @result;
3103
3104     open F, "< $fname" or die "Can't open '$fname': $!\n";
3105     {
3106         undef local $/;
3107         $content = <F>;
3108     }
3109     close F;
3110     {
3111         local $@;
3112
3113         @result = ( eval $content );
3114         warn $@ if $@;
3115     }
3116     return wantarray ? @result : $result[0];
3117 }
3118
3119 # configuration reader, evaluates the input file as a perl script and expects
3120 # it to fill %targets with target configurations.  Those are then added to
3121 # %table.
3122 sub read_config {
3123     my $fname = shift;
3124     my %targets;
3125
3126     {
3127         # Protect certain tables from tampering
3128         local %table = ();
3129
3130         %targets = read_eval_file($fname);
3131     }
3132     my %preexisting = ();
3133     foreach (sort keys %targets) {
3134         $preexisting{$_} = 1 if $table{$_};
3135     }
3136     die <<"EOF",
3137 The following config targets from $fname
3138 shadow pre-existing config targets with the same name:
3139 EOF
3140         map { "  $_\n" } sort keys %preexisting
3141         if %preexisting;
3142
3143
3144     # For each target, check that it's configured with a hash table.
3145     foreach (keys %targets) {
3146         if (ref($targets{$_}) ne "HASH") {
3147             if (ref($targets{$_}) eq "") {
3148                 warn "Deprecated target configuration for $_, ignoring...\n";
3149             } else {
3150                 warn "Misconfigured target configuration for $_ (should be a hash table), ignoring...\n";
3151             }
3152             delete $targets{$_};
3153         } else {
3154             $targets{$_}->{_conf_fname_int} = add([ $fname ]);
3155         }
3156     }
3157
3158     %table = (%table, %targets);
3159
3160 }
3161
3162 # configuration resolver.  Will only resolve all the lazy evaluation
3163 # codeblocks for the chosen target and all those it inherits from,
3164 # recursively
3165 sub resolve_config {
3166     my $target = shift;
3167     my @breadcrumbs = @_;
3168
3169 #    my $extra_checks = defined($ENV{CONFIGURE_EXTRA_CHECKS});
3170
3171     if (grep { $_ eq $target } @breadcrumbs) {
3172         die "inherit_from loop!  target backtrace:\n  "
3173             ,$target,"\n  ",join("\n  ", @breadcrumbs),"\n";
3174     }
3175
3176     if (!defined($table{$target})) {
3177         warn "Warning! target $target doesn't exist!\n";
3178         return ();
3179     }
3180     # Recurse through all inheritances.  They will be resolved on the
3181     # fly, so when this operation is done, they will all just be a
3182     # bunch of attributes with string values.
3183     # What we get here, though, are keys with references to lists of
3184     # the combined values of them all.  We will deal with lists after
3185     # this stage is done.
3186     my %combined_inheritance = ();
3187     if ($table{$target}->{inherit_from}) {
3188         my @inherit_from =
3189             map { ref($_) eq "CODE" ? $_->() : $_ } @{$table{$target}->{inherit_from}};
3190         foreach (@inherit_from) {
3191             my %inherited_config = resolve_config($_, $target, @breadcrumbs);
3192
3193             # 'template' is a marker that's considered private to
3194             # the config that had it.
3195             delete $inherited_config{template};
3196
3197             foreach (keys %inherited_config) {
3198                 if (!$combined_inheritance{$_}) {
3199                     $combined_inheritance{$_} = [];
3200                 }
3201                 push @{$combined_inheritance{$_}}, $inherited_config{$_};
3202             }
3203         }
3204     }
3205
3206     # We won't need inherit_from in this target any more, since we've
3207     # resolved all the inheritances that lead to this
3208     delete $table{$target}->{inherit_from};
3209
3210     # Now is the time to deal with those lists.  Here's the place to
3211     # decide what shall be done with those lists, all based on the
3212     # values of the target we're currently dealing with.
3213     # - If a value is a coderef, it will be executed with the list of
3214     #   inherited values as arguments.
3215     # - If the corresponding key doesn't have a value at all or is the
3216     #   empty string, the inherited value list will be run through the
3217     #   default combiner (below), and the result becomes this target's
3218     #   value.
3219     # - Otherwise, this target's value is assumed to be a string that
3220     #   will simply override the inherited list of values.
3221     my $default_combiner = add();
3222
3223     my %all_keys =
3224         map { $_ => 1 } (keys %combined_inheritance,
3225                          keys %{$table{$target}});
3226
3227     sub process_values {
3228         my $object    = shift;
3229         my $inherited = shift;  # Always a [ list ]
3230         my $target    = shift;
3231         my $entry     = shift;
3232
3233         $add_called = 0;
3234
3235         while(ref($object) eq "CODE") {
3236             $object = $object->(@$inherited);
3237         }
3238         if (!defined($object)) {
3239             return ();
3240         }
3241         elsif (ref($object) eq "ARRAY") {
3242             local $add_called;  # To make sure recursive calls don't affect it
3243             return [ map { process_values($_, $inherited, $target, $entry) }
3244                      @$object ];
3245         } elsif (ref($object) eq "") {
3246             return $object;
3247         } else {
3248             die "cannot handle reference type ",ref($object)
3249                 ," found in target ",$target," -> ",$entry,"\n";
3250         }
3251     }
3252
3253     foreach my $key (sort keys %all_keys) {
3254         my $previous = $combined_inheritance{$key};
3255
3256         # Current target doesn't have a value for the current key?
3257         # Assign it the default combiner, the rest of this loop body
3258         # will handle it just like any other coderef.
3259         if (!exists $table{$target}->{$key}) {
3260             $table{$target}->{$key} = $default_combiner;
3261         }
3262
3263         $table{$target}->{$key} = process_values($table{$target}->{$key},
3264                                                $combined_inheritance{$key},
3265                                                $target, $key);
3266         unless(defined($table{$target}->{$key})) {
3267             delete $table{$target}->{$key};
3268         }
3269 #        if ($extra_checks &&
3270 #            $previous && !($add_called ||  $previous ~~ $table{$target}->{$key})) {
3271 #            warn "$key got replaced in $target\n";
3272 #        }
3273     }
3274
3275     # Finally done, return the result.
3276     return %{$table{$target}};
3277 }
3278
3279 sub usage
3280         {
3281         print STDERR $usage;
3282         print STDERR "\npick os/compiler from:\n";
3283         my $j=0;
3284         my $i;
3285         my $k=0;
3286         foreach $i (sort keys %table)
3287                 {
3288                 next if $table{$i}->{template};
3289                 next if $i =~ /^debug/;
3290                 $k += length($i) + 1;
3291                 if ($k > 78)
3292                         {
3293                         print STDERR "\n";
3294                         $k=length($i);
3295                         }
3296                 print STDERR $i . " ";
3297                 }
3298         foreach $i (sort keys %table)
3299                 {
3300                 next if $table{$i}->{template};
3301                 next if $i !~ /^debug/;
3302                 $k += length($i) + 1;
3303                 if ($k > 78)
3304                         {
3305                         print STDERR "\n";
3306                         $k=length($i);
3307                         }
3308                 print STDERR $i . " ";
3309                 }
3310         exit(1);
3311         }
3312
3313 sub compiler_predefined {
3314     state %predefined;
3315     my $cc = shift;
3316
3317     return () if $^O eq 'VMS';
3318
3319     die 'compiler_predefined called without a compiler command'
3320         unless $cc;
3321
3322     if (! $predefined{$cc}) {
3323
3324         $predefined{$cc} = {};
3325
3326         # collect compiler pre-defines from gcc or gcc-alike...
3327         open(PIPE, "$cc -dM -E -x c /dev/null 2>&1 |");
3328         while (my $l = <PIPE>) {
3329             $l =~ m/^#define\s+(\w+(?:\(\w+\))?)(?:\s+(.+))?/ or last;
3330             $predefined{$cc}->{$1} = $2 // '';
3331         }
3332         close(PIPE);
3333     }
3334
3335     return %{$predefined{$cc}};
3336 }
3337
3338 sub which
3339 {
3340     my ($name)=@_;
3341
3342     if (eval { require IPC::Cmd; 1; }) {
3343         IPC::Cmd->import();
3344         return scalar IPC::Cmd::can_run($name);
3345     } else {
3346         # if there is $directories component in splitpath,
3347         # then it's not something to test with $PATH...
3348         return $name if (File::Spec->splitpath($name))[1];
3349
3350         foreach (File::Spec->path()) {
3351             my $fullpath = catfile($_, "$name$target{exe_extension}");
3352             if (-f $fullpath and -x $fullpath) {
3353                 return $fullpath;
3354             }
3355         }
3356     }
3357 }
3358
3359 sub env
3360 {
3361     my $name = shift;
3362     my %opts = @_;
3363
3364     unless ($opts{cacheonly}) {
3365         # Note that if $ENV{$name} doesn't exist or is undefined,
3366         # $config{perlenv}->{$name} will be created with the value
3367         # undef.  This is intentional.
3368
3369         $config{perlenv}->{$name} = $ENV{$name}
3370             if ! exists $config{perlenv}->{$name};
3371     }
3372     return $config{perlenv}->{$name};
3373 }
3374
3375 # Configuration printer ##############################################
3376
3377 sub print_table_entry
3378 {
3379     local $now_printing = shift;
3380     my %target = resolve_config($now_printing);
3381     my $type = shift;
3382
3383     # Don't print the templates
3384     return if $target{template};
3385
3386     my @sequence = (
3387         "sys_id",
3388         "cpp",
3389         "cppflags",
3390         "defines",
3391         "includes",
3392         "cc",
3393         "cflags",
3394         "ld",
3395         "lflags",
3396         "loutflag",
3397         "ex_libs",
3398         "bn_ops",
3399         "enable",
3400         "disable",
3401         "poly1035_asm_src",
3402         "thread_scheme",
3403         "perlasm_scheme",
3404         "dso_scheme",
3405         "shared_target",
3406         "shared_cflag",
3407         "shared_defines",
3408         "shared_ldflag",
3409         "shared_rcflag",
3410         "shared_extension",
3411         "dso_extension",
3412         "obj_extension",
3413         "exe_extension",
3414         "ranlib",
3415         "ar",
3416         "arflags",
3417         "aroutflag",
3418         "rc",
3419         "rcflags",
3420         "rcoutflag",
3421         "mt",
3422         "mtflags",
3423         "mtinflag",
3424         "mtoutflag",
3425         "multilib",
3426         "build_scheme",
3427         );
3428
3429     if ($type eq "TABLE") {
3430         print "\n";
3431         print "*** $now_printing\n";
3432         foreach (@sequence) {
3433             if (ref($target{$_}) eq "ARRAY") {
3434                 printf "\$%-12s = %s\n", $_, join(" ", @{$target{$_}});
3435             } else {
3436                 printf "\$%-12s = %s\n", $_, $target{$_};
3437             }
3438         }
3439     } elsif ($type eq "HASH") {
3440         my $largest =
3441             length((sort { length($a) <=> length($b) } @sequence)[-1]);
3442         print "    '$now_printing' => {\n";
3443         foreach (@sequence) {
3444             if ($target{$_}) {
3445                 if (ref($target{$_}) eq "ARRAY") {
3446                     print "      '",$_,"'"," " x ($largest - length($_))," => [ ",join(", ", map { "'$_'" } @{$target{$_}})," ],\n";
3447                 } else {
3448                     print "      '",$_,"'"," " x ($largest - length($_))," => '",$target{$_},"',\n";
3449                 }
3450             }
3451         }
3452         print "    },\n";
3453     }
3454 }
3455
3456 # Utility routines ###################################################
3457
3458 # On VMS, if the given file is a logical name, File::Spec::Functions
3459 # will consider it an absolute path.  There are cases when we want a
3460 # purely syntactic check without checking the environment.
3461 sub isabsolute {
3462     my $file = shift;
3463
3464     # On non-platforms, we just use file_name_is_absolute().
3465     return file_name_is_absolute($file) unless $^O eq "VMS";
3466
3467     # If the file spec includes a device or a directory spec,
3468     # file_name_is_absolute() is perfectly safe.
3469     return file_name_is_absolute($file) if $file =~ m|[:\[]|;
3470
3471     # Here, we know the given file spec isn't absolute
3472     return 0;
3473 }
3474
3475 # Makes a directory absolute and cleans out /../ in paths like foo/../bar
3476 # On some platforms, this uses rel2abs(), while on others, realpath() is used.
3477 # realpath() requires that at least all path components except the last is an
3478 # existing directory.  On VMS, the last component of the directory spec must
3479 # exist.
3480 sub absolutedir {
3481     my $dir = shift;
3482
3483     # realpath() is quite buggy on VMS.  It uses LIB$FID_TO_NAME, which
3484     # will return the volume name for the device, no matter what.  Also,
3485     # it will return an incorrect directory spec if the argument is a
3486     # directory that doesn't exist.
3487     if ($^O eq "VMS") {
3488         return rel2abs($dir);
3489     }
3490
3491     # We use realpath() on Unix, since no other will properly clean out
3492     # a directory spec.
3493     use Cwd qw/realpath/;
3494
3495     return realpath($dir);
3496 }
3497
3498 # Check if all paths are one and the same, using stat.  They must both exist
3499 # We need this for the cases when File::Spec doesn't detect case insensitivity
3500 # (File::Spec::Unix assumes case sensitivity)
3501 sub samedir {
3502     die "samedir expects two arguments\n" unless scalar @_ == 2;
3503
3504     my @stat0 = stat($_[0]);    # First argument
3505     my @stat1 = stat($_[1]);    # Second argument
3506
3507     die "Couldn't stat $_[0]" unless @stat0;
3508     die "Couldn't stat $_[1]" unless @stat1;
3509
3510     # Compare device number
3511     return 0 unless ($stat0[0] == $stat1[0]);
3512     # Compare "inode".  The perl manual recommends comparing as
3513     # string rather than as number.
3514     return 0 unless ($stat0[1] eq $stat1[1]);
3515
3516     return 1;                   # All the same
3517 }
3518
3519 sub quotify {
3520     my %processors = (
3521         perl    => sub { my $x = shift;
3522                          $x =~ s/([\\\$\@"])/\\$1/g;
3523                          return '"'.$x.'"'; },
3524         maybeshell => sub { my $x = shift;
3525                             (my $y = $x) =~ s/([\\\"])/\\$1/g;
3526                             if ($x ne $y || $x =~ m|\s|) {
3527                                 return '"'.$y.'"';
3528                             } else {
3529                                 return $x;
3530                             }
3531                         },
3532         );
3533     my $for = shift;
3534     my $processor =
3535         defined($processors{$for}) ? $processors{$for} : sub { shift; };
3536
3537     return map { $processor->($_); } @_;
3538 }
3539
3540 # collect_from_file($filename, $line_concat_cond_re, $line_concat)
3541 # $filename is a file name to read from
3542 # $line_concat_cond_re is a regexp detecting a line continuation ending
3543 # $line_concat is a CODEref that takes care of concatenating two lines
3544 sub collect_from_file {
3545     my $filename = shift;
3546     my $line_concat_cond_re = shift;
3547     my $line_concat = shift;
3548
3549     open my $fh, $filename || die "unable to read $filename: $!\n";
3550     return sub {
3551         my $saved_line = "";
3552         $_ = "";
3553         while (<$fh>) {
3554             s|\R$||;
3555             if (defined $line_concat) {
3556                 $_ = $line_concat->($saved_line, $_);
3557                 $saved_line = "";
3558             }
3559             if (defined $line_concat_cond_re && /$line_concat_cond_re/) {
3560                 $saved_line = $_;
3561                 next;
3562             }
3563             return $_;
3564         }
3565         die "$filename ending with continuation line\n" if $_;
3566         close $fh;
3567         return undef;
3568     }
3569 }
3570
3571 # collect_from_array($array, $line_concat_cond_re, $line_concat)
3572 # $array is an ARRAYref of lines
3573 # $line_concat_cond_re is a regexp detecting a line continuation ending
3574 # $line_concat is a CODEref that takes care of concatenating two lines
3575 sub collect_from_array {
3576     my $array = shift;
3577     my $line_concat_cond_re = shift;
3578     my $line_concat = shift;
3579     my @array = (@$array);
3580
3581     return sub {
3582         my $saved_line = "";
3583         $_ = "";
3584         while (defined($_ = shift @array)) {
3585             s|\R$||;
3586             if (defined $line_concat) {
3587                 $_ = $line_concat->($saved_line, $_);
3588                 $saved_line = "";
3589             }
3590             if (defined $line_concat_cond_re && /$line_concat_cond_re/) {
3591                 $saved_line = $_;
3592                 next;
3593             }
3594             return $_;
3595         }
3596         die "input text ending with continuation line\n" if $_;
3597         return undef;
3598     }
3599 }
3600
3601 # collect_information($lineiterator, $line_continue, $regexp => $CODEref, ...)
3602 # $lineiterator is a CODEref that delivers one line at a time.
3603 # All following arguments are regex/CODEref pairs, where the regexp detects a
3604 # line and the CODEref does something with the result of the regexp.
3605 sub collect_information {
3606     my $lineiterator = shift;
3607     my %collectors = @_;
3608
3609     while(defined($_ = $lineiterator->())) {
3610         s|\R$||;
3611         my $found = 0;
3612         if ($collectors{"BEFORE"}) {
3613             $collectors{"BEFORE"}->($_);
3614         }
3615         foreach my $re (keys %collectors) {
3616             if ($re !~ /^OTHERWISE|BEFORE|AFTER$/ && /$re/) {
3617                 $collectors{$re}->($lineiterator);
3618                 $found = 1;
3619             };
3620         }
3621         if ($collectors{"OTHERWISE"}) {
3622             $collectors{"OTHERWISE"}->($lineiterator, $_)
3623                 unless $found || !defined $collectors{"OTHERWISE"};
3624         }
3625         if ($collectors{"AFTER"}) {
3626             $collectors{"AFTER"}->($_);
3627         }
3628     }
3629 }
3630
3631 # tokenize($line)
3632 # tokenize($line,$separator)
3633 # $line is a line of text to split up into tokens
3634 # $separator [optional] is a regular expression that separates the tokens,
3635 # the default being spaces.  Do not use quotes of any kind as separators,
3636 # that will give undefined results.
3637 # Returns a list of tokens.
3638 #
3639 # Tokens are divided by separator (spaces by default).  If the tokens include
3640 # the separators, they have to be quoted with single or double quotes.
3641 # Double quotes inside a double quoted token must be escaped.  Escaping is done
3642 # with backslash.
3643 # Basically, the same quoting rules apply for " and ' as in any
3644 # Unix shell.
3645 sub tokenize {
3646     my $line = my $debug_line = shift;
3647     my $separator = shift // qr|\s+|;
3648     my @result = ();
3649
3650     if ($ENV{CONFIGURE_DEBUG_TOKENIZE}) {
3651         print STDERR "DEBUG[tokenize]: \$separator = $separator\n";
3652     }
3653
3654     while ($line =~ s|^${separator}||, $line ne "") {
3655         my $token = "";
3656     again:
3657         $line =~ m/^(.*?)(${separator}|"|'|$)/;
3658         $token .= $1;
3659         $line = $2.$';
3660
3661         if ($line =~ m/^"((?:[^"\\]+|\\.)*)"/) {
3662             $token .= $1;
3663             $line = $';
3664             goto again;
3665         } elsif ($line =~ m/^'([^']*)'/) {
3666             $token .= $1;
3667             $line = $';
3668             goto again;
3669         }
3670         push @result, $token;
3671     }
3672
3673     if ($ENV{CONFIGURE_DEBUG_TOKENIZE}) {
3674         print STDERR "DEBUG[tokenize]: Parsed '$debug_line' into:\n";
3675         print STDERR "DEBUG[tokenize]: ('", join("', '", @result), "')\n";
3676     }
3677     return @result;
3678 }