Configure: add mechanism to specify uplink target architecture
[openssl.git] / Configure
1 #! /usr/bin/env perl
2 # -*- mode: perl; -*-
3 # Copyright 2016-2018 The OpenSSL Project Authors. All Rights Reserved.
4 #
5 # Licensed under the Apache License 2.0 (the "License").  You may not use
6 # this file except in compliance with the License.  You can obtain a copy
7 # in the file LICENSE in the source distribution or at
8 # https://www.openssl.org/source/license.html
9
10 ##  Configure -- OpenSSL source tree configuration script
11
12 use 5.10.0;
13 use strict;
14 use Config;
15 use FindBin;
16 use lib "$FindBin::Bin/util/perl";
17 use File::Basename;
18 use File::Spec::Functions qw/:DEFAULT abs2rel rel2abs splitdir/;
19 use File::Path qw/mkpath/;
20 use OpenSSL::Glob;
21
22 # see INSTALL for instructions.
23
24 my $orig_death_handler = $SIG{__DIE__};
25 $SIG{__DIE__} = \&death_handler;
26
27 my $usage="Usage: Configure [no-<cipher> ...] [enable-<cipher> ...] [-Dxxx] [-lxxx] [-Lxxx] [-fxxx] [-Kxxx] [no-hw-xxx|no-hw] [[no-]threads] [[no-]shared] [[no-]zlib|zlib-dynamic] [no-asm] [no-egd] [sctp] [386] [--prefix=DIR] [--openssldir=OPENSSLDIR] [--with-xxx[=vvv]] [--config=FILE] os/compiler[:flags]\n";
28
29 # Options:
30 #
31 # --config      add the given configuration file, which will be read after
32 #               any "Configurations*" files that are found in the same
33 #               directory as this script.
34 # --prefix      prefix for the OpenSSL installation, which includes the
35 #               directories bin, lib, include, share/man, share/doc/openssl
36 #               This becomes the value of INSTALLTOP in Makefile
37 #               (Default: /usr/local)
38 # --openssldir  OpenSSL data area, such as openssl.cnf, certificates and keys.
39 #               If it's a relative directory, it will be added on the directory
40 #               given with --prefix.
41 #               This becomes the value of OPENSSLDIR in Makefile and in C.
42 #               (Default: PREFIX/ssl)
43 #
44 # --cross-compile-prefix Add specified prefix to binutils components.
45 #
46 # --api         One of 0.9.8, 1.0.0, 1.0.1, 1.0.2, 1.1.0, 1.1.1, or 3.0.0 / 3.
47 #               Do not compile support for interfaces deprecated as of the
48 #               specified OpenSSL version.
49 #
50 # no-hw-xxx     do not compile support for specific crypto hardware.
51 #               Generic OpenSSL-style methods relating to this support
52 #               are always compiled but return NULL if the hardware
53 #               support isn't compiled.
54 # no-hw         do not compile support for any crypto hardware.
55 # [no-]threads  [don't] try to create a library that is suitable for
56 #               multithreaded applications (default is "threads" if we
57 #               know how to do it)
58 # [no-]shared   [don't] try to create shared libraries when supported.
59 # [no-]pic      [don't] try to build position independent code when supported.
60 #               If disabled, it also disables shared and dynamic-engine.
61 # no-asm        do not use assembler
62 # no-egd        do not compile support for the entropy-gathering daemon APIs
63 # [no-]zlib     [don't] compile support for zlib compression.
64 # zlib-dynamic  Like "zlib", but the zlib library is expected to be a shared
65 #               library and will be loaded in run-time by the OpenSSL library.
66 # sctp          include SCTP support
67 # no-uplink     Don't build support for UPLINK interface.
68 # enable-weak-ssl-ciphers
69 #               Enable weak ciphers that are disabled by default.
70 # 386           generate 80386 code in assembly modules
71 # no-sse2       disables IA-32 SSE2 code in assembly modules, the above
72 #               mentioned '386' option implies this one
73 # no-<cipher>   build without specified algorithm (rsa, idea, rc5, ...)
74 # -<xxx> +<xxx> compiler options are passed through
75 # -static       while -static is also a pass-through compiler option (and
76 #               as such is limited to environments where it's actually
77 #               meaningful), it triggers a number configuration options,
78 #               namely no-pic, no-shared and no-threads. It is
79 #               argued that the only reason to produce statically linked
80 #               binaries (and in context it means executables linked with
81 #               -static flag, and not just executables linked with static
82 #               libcrypto.a) is to eliminate dependency on specific run-time,
83 #               a.k.a. libc version. The mentioned config options are meant
84 #               to achieve just that. Unfortunately on Linux it's impossible
85 #               to eliminate the dependency completely for openssl executable
86 #               because of getaddrinfo and gethostbyname calls, which can
87 #               invoke dynamically loadable library facility anyway to meet
88 #               the lookup requests. For this reason on Linux statically
89 #               linked openssl executable has rather debugging value than
90 #               production quality.
91 #
92 # BN_LLONG      use the type 'long long' in crypto/bn/bn.h
93 # RC4_CHAR      use 'char' instead of 'int' for RC4_INT in crypto/rc4/rc4.h
94 # Following are set automatically by this script
95 #
96 # MD5_ASM       use some extra md5 assembler,
97 # SHA1_ASM      use some extra sha1 assembler, must define L_ENDIAN for x86
98 # RMD160_ASM    use some extra ripemd160 assembler,
99 # SHA256_ASM    sha256_block is implemented in assembler
100 # SHA512_ASM    sha512_block is implemented in assembler
101 # AES_ASM       AES_[en|de]crypt is implemented in assembler
102
103 # Minimum warning options... any contributions to OpenSSL should at least
104 # get past these.  Note that we only use these with C compilers, not with
105 # C++ compilers.
106
107 # DEBUG_UNUSED enables __owur (warn unused result) checks.
108 # -DPEDANTIC complements -pedantic and is meant to mask code that
109 # is not strictly standard-compliant and/or implementation-specific,
110 # e.g. inline assembly, disregards to alignment requirements, such
111 # that -pedantic would complain about. Incidentally -DPEDANTIC has
112 # to be used even in sanitized builds, because sanitizer too is
113 # supposed to and does take notice of non-standard behaviour. Then
114 # -pedantic with pre-C9x compiler would also complain about 'long
115 # long' not being supported. As 64-bit algorithms are common now,
116 # it grew impossible to resolve this without sizeable additional
117 # code, so we just tell compiler to be pedantic about everything
118 # but 'long long' type.
119
120 my @gcc_devteam_warn = qw(
121     -DDEBUG_UNUSED
122     -DPEDANTIC -pedantic -Wno-long-long
123     -Wall
124     -Wextra
125     -Wno-unused-parameter
126     -Wno-missing-field-initializers
127     -Wswitch
128     -Wsign-compare
129     -Wshadow
130     -Wformat
131     -Wtype-limits
132     -Wundef
133     -Werror
134     -Wmissing-prototypes
135     -Wstrict-prototypes
136 );
137
138 # These are used in addition to $gcc_devteam_warn when the compiler is clang.
139 # TODO(openssl-team): fix problems and investigate if (at least) the
140 # following warnings can also be enabled:
141 #       -Wcast-align
142 #       -Wunreachable-code -- no, too ugly/compiler-specific
143 #       -Wlanguage-extension-token -- no, we use asm()
144 #       -Wunused-macros -- no, too tricky for BN and _XOPEN_SOURCE etc
145 #       -Wextended-offsetof -- no, needed in CMS ASN1 code
146 my @clang_devteam_warn = qw(
147     -Wswitch-default
148     -Wno-parentheses-equality
149     -Wno-language-extension-token
150     -Wno-extended-offsetof
151     -Wconditional-uninitialized
152     -Wincompatible-pointer-types-discards-qualifiers
153     -Wno-unknown-warning-option
154     -Wmissing-variable-declarations
155 );
156
157 # This adds backtrace information to the memory leak info.  Is only used
158 # when crypto-mdebug-backtrace is enabled.
159 my $memleak_devteam_backtrace = "-rdynamic";
160
161 my $strict_warnings = 0;
162
163 # As for $BSDthreads. Idea is to maintain "collective" set of flags,
164 # which would cover all BSD flavors. -pthread applies to them all,
165 # but is treated differently. OpenBSD expands is as -D_POSIX_THREAD
166 # -lc_r, which is sufficient. FreeBSD 4.x expands it as -lc_r,
167 # which has to be accompanied by explicit -D_THREAD_SAFE and
168 # sometimes -D_REENTRANT. FreeBSD 5.x expands it as -lc_r, which
169 # seems to be sufficient?
170 our $BSDthreads="-pthread -D_THREAD_SAFE -D_REENTRANT";
171
172 #
173 # API compatibility name to version number mapping.
174 #
175 my $maxapi = "3.0.0";           # API for "no-deprecated" builds
176 my $apitable = {
177     "3.0.0" => 3,
178     "1.1.1" => 2,
179     "1.1.0" => 2,
180     "1.0.2" => 1,
181     "1.0.1" => 1,
182     "1.0.0" => 1,
183     "0.9.8" => 0,
184 };
185
186 our %table = ();
187 our %config = ();
188 our %withargs = ();
189 our $now_printing;      # set to current entry's name in print_table_entry
190                         # (todo: right thing would be to encapsulate name
191                         # into %target [class] and make print_table_entry
192                         # a method)
193
194 # Forward declarations ###############################################
195
196 # read_config(filename)
197 #
198 # Reads a configuration file and populates %table with the contents
199 # (which the configuration file places in %targets).
200 sub read_config;
201
202 # resolve_config(target)
203 #
204 # Resolves all the late evaluations, inheritances and so on for the
205 # chosen target and any target it inherits from.
206 sub resolve_config;
207
208
209 # Information collection #############################################
210
211 # Unified build supports separate build dir
212 my $srcdir = catdir(absolutedir(dirname($0))); # catdir ensures local syntax
213 my $blddir = catdir(absolutedir("."));         # catdir ensures local syntax
214 my $dofile = abs2rel(catfile($srcdir, "util/dofile.pl"));
215
216 my $local_config_envname = 'OPENSSL_LOCAL_CONFIG_DIR';
217
218 $config{sourcedir} = abs2rel($srcdir);
219 $config{builddir} = abs2rel($blddir);
220
221 # Collect reconfiguration information if needed
222 my @argvcopy=@ARGV;
223
224 if (grep /^reconf(igure)?$/, @argvcopy) {
225     die "reconfiguring with other arguments present isn't supported"
226         if scalar @argvcopy > 1;
227     if (-f "./configdata.pm") {
228         my $file = "./configdata.pm";
229         unless (my $return = do $file) {
230             die "couldn't parse $file: $@" if $@;
231             die "couldn't do $file: $!"    unless defined $return;
232             die "couldn't run $file"       unless $return;
233         }
234
235         @argvcopy = defined($configdata::config{perlargv}) ?
236             @{$configdata::config{perlargv}} : ();
237         die "Incorrect data to reconfigure, please do a normal configuration\n"
238             if (grep(/^reconf/,@argvcopy));
239         $config{perlenv} = $configdata::config{perlenv} // {};
240     } else {
241         die "Insufficient data to reconfigure, please do a normal configuration\n";
242     }
243 }
244
245 $config{perlargv} = [ @argvcopy ];
246
247 # Collect version numbers
248 $config{major} = "unknown";
249 $config{minor} = "unknown";
250 $config{patch} = "unknown";
251 $config{prerelease} = "";
252 $config{build_metadata} = "";
253 $config{shlib_version} = "unknown";
254
255 collect_information(
256     collect_from_file(catfile($srcdir,'include/openssl/opensslv.h')),
257     qr/#\s+define\s+OPENSSL_VERSION_MAJOR\s+(\d+)/ =>
258         sub { $config{major} = $1; },
259     qr/#\s+define\s+OPENSSL_VERSION_MINOR\s+(\d+)/ =>
260         sub { $config{minor} = $1; },
261     qr/#\s+define\s+OPENSSL_VERSION_PATCH\s+(\d+)/ =>
262         sub { $config{patch} = $1; },
263     qr/#\s+define\s+OPENSSL_VERSION_PRE_RELEASE\s+"((?:\\.|[^"])*)"/ =>
264         sub { $config{prerelease} = $1; },
265     qr/#\s+define\s+OPENSSL_VERSION_BUILD_METADATA\s+"((?:\\.|[^"])*)"/ =>
266         sub { $config{build_metadata} = $1; },
267     qr/#\s+define\s+OPENSSL_SHLIB_VERSION\s+([\d\.]+)/ =>
268         sub { $config{shlib_version} = $1; },
269     );
270 die "erroneous version information in opensslv.h: ",
271     "$config{major}.$config{minor}.$config{patch}, $config{shlib_version}\n"
272     if ($config{major} eq "unknown"
273             || $config{minor} eq "unknown"
274             || $config{patch} eq "unknown"
275             || $config{shlib_version} eq "unknown");
276
277 $config{version} = "$config{major}.$config{minor}.$config{patch}";
278 $config{full_version} = "$config{version}$config{prerelease}$config{build_metadata}";
279
280 # Collect target configurations
281
282 my $pattern = catfile(dirname($0), "Configurations", "*.conf");
283 foreach (sort glob($pattern)) {
284     &read_config($_);
285 }
286
287 if (defined env($local_config_envname)) {
288     if ($^O eq 'VMS') {
289         # VMS environment variables are logical names,
290         # which can be used as is
291         $pattern = $local_config_envname . ':' . '*.conf';
292     } else {
293         $pattern = catfile(env($local_config_envname), '*.conf');
294     }
295
296     foreach (sort glob($pattern)) {
297         &read_config($_);
298     }
299 }
300
301 # Save away perl command information
302 $config{perl_cmd} = $^X;
303 $config{perl_version} = $Config{version};
304 $config{perl_archname} = $Config{archname};
305
306 $config{prefix}="";
307 $config{openssldir}="";
308 $config{processor}="";
309 $config{libdir}="";
310 my $auto_threads=1;    # enable threads automatically? true by default
311 my $default_ranlib;
312
313 # Known TLS and DTLS protocols
314 my @tls = qw(ssl3 tls1 tls1_1 tls1_2 tls1_3);
315 my @dtls = qw(dtls1 dtls1_2);
316
317 # Explicitly known options that are possible to disable.  They can
318 # be regexps, and will be used like this: /^no-${option}$/
319 # For developers: keep it sorted alphabetically
320
321 my @disablables = (
322     "ktls",
323     "afalgeng",
324     "aria",
325     "asan",
326     "asm",
327     "async",
328     "autoalginit",
329     "autoerrinit",
330     "autoload-config",
331     "bf",
332     "blake2",
333     "buildtest-c++",
334     "camellia",
335     "capieng",
336     "cast",
337     "chacha",
338     "cmac",
339     "cmp",
340     "cms",
341     "comp",
342     "crypto-mdebug",
343     "crypto-mdebug-backtrace",
344     "ct",
345     "deprecated",
346     "des",
347     "devcryptoeng",
348     "dgram",
349     "dh",
350     "dsa",
351     "dtls",
352     "dynamic-engine",
353     "ec",
354     "ec2m",
355     "ecdh",
356     "ecdsa",
357     "ec_nistp_64_gcc_128",
358     "egd",
359     "engine",
360     "err",
361     "external-tests",
362     "filenames",
363     "fips",
364     "fuzz-libfuzzer",
365     "fuzz-afl",
366     "gost",
367     "idea",
368     "legacy",
369     "makedepend",
370     "md2",
371     "md4",
372     "mdc2",
373     "module",
374     "msan",
375     "multiblock",
376     "nextprotoneg",
377     "pinshared",
378     "ocb",
379     "ocsp",
380     "padlockeng",
381     "pic",
382     "poly1305",
383     "posix-io",
384     "psk",
385     "rc2",
386     "rc4",
387     "rc5",
388     "rdrand",
389     "rfc3779",
390     "rmd160",
391     "scrypt",
392     "sctp",
393     "seed",
394     "shared",
395     "siphash",
396     "siv",
397     "sm2",
398     "sm3",
399     "sm4",
400     "sock",
401     "srp",
402     "srtp",
403     "sse2",
404     "ssl",
405     "ssl-trace",
406     "static-engine",
407     "stdio",
408     "tests",
409     "threads",
410     "tls",
411     "trace",
412     "ts",
413     "ubsan",
414     "ui-console",
415     "unit-test",
416     "uplink",
417     "whirlpool",
418     "weak-ssl-ciphers",
419     "zlib",
420     "zlib-dynamic",
421     );
422 foreach my $proto ((@tls, @dtls))
423         {
424         push(@disablables, $proto);
425         push(@disablables, "$proto-method") unless $proto eq "tls1_3";
426         }
427
428 # Internal disablables, for aliasing purposes.  They serve no special
429 # purpose here, but allow scripts to get to know them through configdata.pm,
430 # where these are merged with @disablables.
431 # The actual aliasing mechanism is done via %disable_cascades
432 my @disablables_int = qw(
433     crmf
434     );
435
436 my %deprecated_disablables = (
437     "ssl2" => undef,
438     "buf-freelists" => undef,
439     "hw" => "hw",               # causes cascade, but no macro
440     "hw-padlock" => "padlockeng",
441     "ripemd" => "rmd160",
442     "ui" => "ui-console",
443     "dso" => undef,
444     "heartbeats" => undef,
445     );
446
447 # All of the following are disabled by default:
448
449 our %disabled = ( # "what"         => "comment"
450                   "asan"                => "default",
451                   "buildtest-c++"       => "default",
452                   "crypto-mdebug"       => "default",
453                   "crypto-mdebug-backtrace" => "default",
454                   "devcryptoeng"        => "default",
455                   "ec_nistp_64_gcc_128" => "default",
456                   "egd"                 => "default",
457                   "external-tests"      => "default",
458                   "fuzz-libfuzzer"      => "default",
459                   "fuzz-afl"            => "default",
460                   "md2"                 => "default",
461                   "msan"                => "default",
462                   "rc5"                 => "default",
463                   "sctp"                => "default",
464                   "ssl-trace"           => "default",
465                   "ssl3"                => "default",
466                   "ssl3-method"         => "default",
467                   "trace"               => "default",
468                   "ubsan"               => "default",
469                   "unit-test"           => "default",
470                   "weak-ssl-ciphers"    => "default",
471                   "zlib"                => "default",
472                   "zlib-dynamic"        => "default",
473                   "ktls"                => "default",
474                 );
475
476 # Note: => pair form used for aesthetics, not to truly make a hash table
477 my @disable_cascades = (
478     # "what"            => [ "cascade", ... ]
479     sub { $config{processor} eq "386" }
480                         => [ "sse2" ],
481     "ssl"               => [ "ssl3" ],
482     "ssl3-method"       => [ "ssl3" ],
483     "zlib"              => [ "zlib-dynamic" ],
484     "des"               => [ "mdc2" ],
485     "ec"                => [ "ecdsa", "ecdh", "sm2" ],
486     sub { $disabled{"ec"} && $disabled{"dh"} }
487                         => [ "tls1_3" ],
488     "dgram"             => [ "dtls", "sctp" ],
489     "sock"              => [ "dgram" ],
490     "dtls"              => [ @dtls ],
491     sub { 0 == scalar grep { !$disabled{$_} } @dtls }
492                         => [ "dtls" ],
493
494     "tls"               => [ @tls ],
495     sub { 0 == scalar grep { !$disabled{$_} } @tls }
496                         => [ "tls" ],
497
498     "crypto-mdebug"     => [ "crypto-mdebug-backtrace" ],
499
500     # If no modules, then no dynamic engines either
501     "module"            => [ "dynamic-engine" ],
502
503     # Without shared libraries, dynamic engines aren't possible.
504     # This is due to them having to link with libcrypto and register features
505     # using the ENGINE functionality, and since that relies on global tables,
506     # those *have* to be exacty the same as the ones accessed from the app,
507     # which cannot be guaranteed if shared libraries aren't present.
508     # (note that even with shared libraries, both the app and dynamic engines
509     # must be linked with the same library)
510     "shared"            => [ "dynamic-engine", "uplink" ],
511     # Other modules don't necessarily have to link with libcrypto, so shared
512     # libraries do not have to be a condition to produce those.
513
514     # Without position independent code, there can be no shared libraries
515     # or modules.
516     "pic"               => [ "shared", "module" ],
517
518     "module"            => [ "fips", "legacy" ],
519
520     "engine"            => [ grep /eng$/, @disablables ],
521     "hw"                => [ "padlockeng" ],
522
523     # no-autoalginit is only useful when building non-shared
524     "autoalginit"       => [ "shared", "apps" ],
525
526     "stdio"             => [ "apps", "capieng", "egd" ],
527     "apps"              => [ "tests" ],
528     "tests"             => [ "external-tests" ],
529     "comp"              => [ "zlib" ],
530     "sm3"               => [ "sm2" ],
531     sub { !$disabled{"unit-test"} } => [ "heartbeats" ],
532
533     sub { !$disabled{"msan"} } => [ "asm" ],
534
535     sub { $disabled{cmac}; } => [ "siv" ],
536     "legacy"                 => [ "md2" ],
537
538     "cmp"               => [ "crmf" ],
539     );
540
541 # Avoid protocol support holes.  Also disable all versions below N, if version
542 # N is disabled while N+1 is enabled.
543 #
544 my @list = (reverse @tls);
545 while ((my $first, my $second) = (shift @list, shift @list)) {
546     last unless @list;
547     push @disable_cascades, ( sub { !$disabled{$first} && $disabled{$second} }
548                               => [ @list ] );
549     unshift @list, $second;
550 }
551 my @list = (reverse @dtls);
552 while ((my $first, my $second) = (shift @list, shift @list)) {
553     last unless @list;
554     push @disable_cascades, ( sub { !$disabled{$first} && $disabled{$second} }
555                               => [ @list ] );
556     unshift @list, $second;
557 }
558
559 # Explicit "no-..." options will be collected in %disabled along with the defaults.
560 # To remove something from %disabled, use "enable-foo".
561 # For symmetry, "disable-foo" is a synonym for "no-foo".
562
563 &usage if ($#ARGV < 0);
564
565 # For the "make variables" CINCLUDES and CDEFINES, we support lists with
566 # platform specific list separators.  Users from those platforms should
567 # recognise those separators from how you set up the PATH to find executables.
568 # The default is the Unix like separator, :, but as an exception, we also
569 # support the space as separator.
570 my $list_separator_re =
571     { VMS           => qr/(?<!\^),/,
572       MSWin32       => qr/(?<!\\);/ } -> {$^O} // qr/(?<!\\)[:\s]/;
573 # All the "make variables" we support
574 # Some get pre-populated for the sake of backward compatibility
575 # (we supported those before the change to "make variable" support.
576 my %user = (
577     AR          => env('AR'),
578     ARFLAGS     => [],
579     AS          => undef,
580     ASFLAGS     => [],
581     CC          => env('CC'),
582     CFLAGS      => [ env('CFLAGS') || () ],
583     CXX         => env('CXX'),
584     CXXFLAGS    => [ env('CXXFLAGS') || () ],
585     CPP         => undef,
586     CPPFLAGS    => [ env('CPPFLAGS') || () ],  # -D, -I, -Wp,
587     CPPDEFINES  => [],  # Alternative for -D
588     CPPINCLUDES => [],  # Alternative for -I
589     CROSS_COMPILE => env('CROSS_COMPILE'),
590     HASHBANGPERL=> env('HASHBANGPERL') || env('PERL'),
591     LD          => undef,
592     LDFLAGS     => [ env('LDFLAGS') || () ],  # -L, -Wl,
593     LDLIBS      => [ env('LDLIBS') || () ],  # -l
594     MT          => undef,
595     MTFLAGS     => [],
596     PERL        => env('PERL') || ($^O ne "VMS" ? $^X : "perl"),
597     RANLIB      => env('RANLIB'),
598     RC          => env('RC') || env('WINDRES'),
599     RCFLAGS     => [ env('RCFLAGS') || () ],
600     RM          => undef,
601    );
602 # Info about what "make variables" may be prefixed with the cross compiler
603 # prefix.  This should NEVER mention any such variable with a list for value.
604 my @user_crossable = qw ( AR AS CC CXX CPP LD MT RANLIB RC );
605 # The same but for flags given as Configure options.  These are *additional*
606 # input, as opposed to the VAR=string option that override the corresponding
607 # config target attributes
608 my %useradd = (
609     CPPDEFINES  => [],
610     CPPINCLUDES => [],
611     CPPFLAGS    => [],
612     CFLAGS      => [],
613     CXXFLAGS    => [],
614     LDFLAGS     => [],
615     LDLIBS      => [],
616     RCFLAGS     => [],
617    );
618
619 my %user_synonyms = (
620     HASHBANGPERL=> 'PERL',
621     RC          => 'WINDRES',
622    );
623
624 # Some target attributes have been renamed, this is the translation table
625 my %target_attr_translate =(
626     ar          => 'AR',
627     as          => 'AS',
628     cc          => 'CC',
629     cxx         => 'CXX',
630     cpp         => 'CPP',
631     hashbangperl => 'HASHBANGPERL',
632     ld          => 'LD',
633     mt          => 'MT',
634     ranlib      => 'RANLIB',
635     rc          => 'RC',
636     rm          => 'RM',
637    );
638
639 # Initialisers coming from 'config' scripts
640 $config{defines} = [ split(/$list_separator_re/, env('__CNF_CPPDEFINES')) ];
641 $config{includes} = [ split(/$list_separator_re/, env('__CNF_CPPINCLUDES')) ];
642 $config{cppflags} = [ env('__CNF_CPPFLAGS') || () ];
643 $config{cflags} = [ env('__CNF_CFLAGS') || () ];
644 $config{cxxflags} = [ env('__CNF_CXXFLAGS') || () ];
645 $config{lflags} = [ env('__CNF_LDFLAGS') || () ];
646 $config{ex_libs} = [ env('__CNF_LDLIBS') || () ];
647
648 $config{openssl_api_defines}=[];
649 $config{openssl_sys_defines}=[];
650 $config{openssl_feature_defines}=[];
651 $config{options}="";
652 $config{build_type} = "release";
653 my $target="";
654
655 my %cmdvars = ();               # Stores FOO='blah' type arguments
656 my %unsupported_options = ();
657 my %deprecated_options = ();
658 # If you change this, update apps/version.c
659 my @known_seed_sources = qw(getrandom devrandom os egd none rdcpu librandom);
660 my @seed_sources = ();
661 while (@argvcopy)
662         {
663         $_ = shift @argvcopy;
664
665         # Support env variable assignments among the options
666         if (m|^(\w+)=(.+)?$|)
667                 {
668                 $cmdvars{$1} = $2;
669                 # Every time a variable is given as a configuration argument,
670                 # it acts as a reset if the variable.
671                 if (exists $user{$1})
672                         {
673                         $user{$1} = ref $user{$1} eq "ARRAY" ? [] : undef;
674                         }
675                 #if (exists $useradd{$1})
676                 #       {
677                 #       $useradd{$1} = [];
678                 #       }
679                 next;
680                 }
681
682         # VMS is a case insensitive environment, and depending on settings
683         # out of our control, we may receive options uppercased.  Let's
684         # downcase at least the part before any equal sign.
685         if ($^O eq "VMS")
686                 {
687                 s/^([^=]*)/lc($1)/e;
688                 }
689
690         # some people just can't read the instructions, clang people have to...
691         s/^-no-(?!integrated-as)/no-/;
692
693         # rewrite some options in "enable-..." form
694         s /^-?-?shared$/enable-shared/;
695         s /^sctp$/enable-sctp/;
696         s /^threads$/enable-threads/;
697         s /^zlib$/enable-zlib/;
698         s /^zlib-dynamic$/enable-zlib-dynamic/;
699
700         if (/^(no|disable|enable)-(.+)$/)
701                 {
702                 my $word = $2;
703                 if ($word !~ m|hw(?:-.+)| # special treatment for hw regexp opt
704                         && !exists $deprecated_disablables{$word}
705                         && !grep { $word eq $_ } @disablables)
706                         {
707                         $unsupported_options{$_} = 1;
708                         next;
709                         }
710                 }
711         if (/^no-(.+)$/ || /^disable-(.+)$/)
712                 {
713                 foreach my $proto ((@tls, @dtls))
714                         {
715                         if ($1 eq "$proto-method")
716                                 {
717                                 $disabled{"$proto"} = "option($proto-method)";
718                                 last;
719                                 }
720                         }
721                 if ($1 eq "dtls")
722                         {
723                         foreach my $proto (@dtls)
724                                 {
725                                 $disabled{$proto} = "option(dtls)";
726                                 }
727                         $disabled{"dtls"} = "option(dtls)";
728                         }
729                 elsif ($1 eq "ssl")
730                         {
731                         # Last one of its kind
732                         $disabled{"ssl3"} = "option(ssl)";
733                         }
734                 elsif ($1 eq "tls")
735                         {
736                         # XXX: Tests will fail if all SSL/TLS
737                         # protocols are disabled.
738                         foreach my $proto (@tls)
739                                 {
740                                 $disabled{$proto} = "option(tls)";
741                                 }
742                         }
743                 elsif ($1 eq "static-engine")
744                         {
745                         delete $disabled{"dynamic-engine"};
746                         }
747                 elsif ($1 eq "dynamic-engine")
748                         {
749                         $disabled{"dynamic-engine"} = "option";
750                         }
751                 elsif (exists $deprecated_disablables{$1})
752                         {
753                         $deprecated_options{$_} = 1;
754                         if (defined $deprecated_disablables{$1})
755                                 {
756                                 $disabled{$deprecated_disablables{$1}} = "option";
757                                 }
758                         }
759                 elsif ($1 =~ m|hw(?:-.+)|) # deprecate hw options in regexp form
760                         {
761                         $deprecated_options{$_} = 1;
762                         }
763                 else
764                         {
765                         $disabled{$1} = "option";
766                         }
767                 # No longer an automatic choice
768                 $auto_threads = 0 if ($1 eq "threads");
769                 }
770         elsif (/^enable-(.+)$/)
771                 {
772                 if ($1 eq "static-engine")
773                         {
774                         $disabled{"dynamic-engine"} = "option";
775                         }
776                 elsif ($1 eq "dynamic-engine")
777                         {
778                         delete $disabled{"dynamic-engine"};
779                         }
780                 elsif ($1 eq "zlib-dynamic")
781                         {
782                         delete $disabled{"zlib"};
783                         }
784                 my $algo = $1;
785                 delete $disabled{$algo};
786
787                 # No longer an automatic choice
788                 $auto_threads = 0 if ($1 eq "threads");
789                 }
790         elsif (/^--strict-warnings$/)
791                 {
792                 # Pretend that our strict flags is a C flag, and replace it
793                 # with the proper flags later on
794                 push @{$useradd{CFLAGS}}, '--ossl-strict-warnings';
795                 $strict_warnings=1;
796                 }
797         elsif (/^--debug$/)
798                 {
799                 $config{build_type} = "debug";
800                 }
801         elsif (/^--release$/)
802                 {
803                 $config{build_type} = "release";
804                 }
805         elsif (/^386$/)
806                 { $config{processor}=386; }
807         elsif (/^fips$/)
808                 {
809                 die "FIPS mode not supported\n";
810                 }
811         elsif (/^rsaref$/)
812                 {
813                 # No RSAref support any more since it's not needed.
814                 # The check for the option is there so scripts aren't
815                 # broken
816                 }
817         elsif (/^nofipscanistercheck$/)
818                 {
819                 die "FIPS mode not supported\n";
820                 }
821         elsif (/^[-+]/)
822                 {
823                 if (/^--prefix=(.*)$/)
824                         {
825                         $config{prefix}=$1;
826                         die "Directory given with --prefix MUST be absolute\n"
827                                 unless file_name_is_absolute($config{prefix});
828                         }
829                 elsif (/^--api=(.*)$/)
830                         {
831                         $config{api}=$1;
832                         }
833                 elsif (/^--libdir=(.*)$/)
834                         {
835                         $config{libdir}=$1;
836                         }
837                 elsif (/^--openssldir=(.*)$/)
838                         {
839                         $config{openssldir}=$1;
840                         }
841                 elsif (/^--with-zlib-lib=(.*)$/)
842                         {
843                         $withargs{zlib_lib}=$1;
844                         }
845                 elsif (/^--with-zlib-include=(.*)$/)
846                         {
847                         $withargs{zlib_include}=$1;
848                         }
849                 elsif (/^--with-fuzzer-lib=(.*)$/)
850                         {
851                         $withargs{fuzzer_lib}=$1;
852                         }
853                 elsif (/^--with-fuzzer-include=(.*)$/)
854                         {
855                         $withargs{fuzzer_include}=$1;
856                         }
857                 elsif (/^--with-rand-seed=(.*)$/)
858                         {
859                         foreach my $x (split(m|,|, $1))
860                             {
861                             die "Unknown --with-rand-seed choice $x\n"
862                                 if ! grep { $x eq $_ } @known_seed_sources;
863                             push @seed_sources, $x;
864                             }
865                         }
866                 elsif (/^--cross-compile-prefix=(.*)$/)
867                         {
868                         $user{CROSS_COMPILE}=$1;
869                         }
870                 elsif (/^--config=(.*)$/)
871                         {
872                         read_config $1;
873                         }
874                 elsif (/^-l(.*)$/)
875                         {
876                         push @{$useradd{LDLIBS}}, $_;
877                         }
878                 elsif (/^-framework$/)
879                         {
880                         push @{$useradd{LDLIBS}}, $_, shift(@argvcopy);
881                         }
882                 elsif (/^-L(.*)$/ or /^-Wl,/)
883                         {
884                         push @{$useradd{LDFLAGS}}, $_;
885                         }
886                 elsif (/^-rpath$/ or /^-R$/)
887                         # -rpath is the OSF1 rpath flag
888                         # -R is the old Solaris rpath flag
889                         {
890                         my $rpath = shift(@argvcopy) || "";
891                         $rpath .= " " if $rpath ne "";
892                         push @{$useradd{LDFLAGS}}, $_, $rpath;
893                         }
894                 elsif (/^-static$/)
895                         {
896                         push @{$useradd{LDFLAGS}}, $_;
897                         }
898                 elsif (/^-D(.*)$/)
899                         {
900                         push @{$useradd{CPPDEFINES}}, $1;
901                         }
902                 elsif (/^-I(.*)$/)
903                         {
904                         push @{$useradd{CPPINCLUDES}}, $1;
905                         }
906                 elsif (/^-Wp,$/)
907                         {
908                         push @{$useradd{CPPFLAGS}}, $1;
909                         }
910                 else    # common if (/^[-+]/), just pass down...
911                         {
912                         $_ =~ s/%([0-9a-f]{1,2})/chr(hex($1))/gei;
913                         push @{$useradd{CFLAGS}}, $_;
914                         push @{$useradd{CXXFLAGS}}, $_;
915                         }
916                 }
917         else
918                 {
919                 die "target already defined - $target (offending arg: $_)\n" if ($target ne "");
920                 $target=$_;
921                 }
922         unless ($_ eq $target || /^no-/ || /^disable-/)
923                 {
924                 # "no-..." follows later after implied deactivations
925                 # have been derived.  (Don't take this too seriously,
926                 # we really only write OPTIONS to the Makefile out of
927                 # nostalgia.)
928
929                 if ($config{options} eq "")
930                         { $config{options} = $_; }
931                 else
932                         { $config{options} .= " ".$_; }
933                 }
934         }
935
936 if (defined($config{api}) && !exists $apitable->{$config{api}}) {
937         die "***** Unsupported api compatibility level: $config{api}\n",
938 }
939
940 if (keys %deprecated_options)
941         {
942         warn "***** Deprecated options: ",
943                 join(", ", keys %deprecated_options), "\n";
944         }
945 if (keys %unsupported_options)
946         {
947         die "***** Unsupported options: ",
948                 join(", ", keys %unsupported_options), "\n";
949         }
950
951 # If any %useradd entry has been set, we must check that the "make
952 # variables" haven't been set.  We start by checking of any %useradd entry
953 # is set.
954 if (grep { scalar @$_ > 0 } values %useradd) {
955     # Hash of env / make variables names.  The possible values are:
956     # 1 - "make vars"
957     # 2 - %useradd entry set
958     # 3 - both set
959     my %detected_vars =
960         map { my $v = 0;
961               $v += 1 if $cmdvars{$_};
962               $v += 2 if @{$useradd{$_}};
963               $_ => $v }
964         keys %useradd;
965
966     # If any of the corresponding "make variables" is set, we error
967     if (grep { $_ & 1 } values %detected_vars) {
968         my $names = join(', ', grep { $detected_vars{$_} > 0 }
969                                sort keys %detected_vars);
970         die <<"_____";
971 ***** Mixing make variables and additional compiler/linker flags as
972 ***** configure command line option is not permitted.
973 ***** Affected make variables: $names
974 _____
975     }
976 }
977
978 # Check through all supported command line variables to see if any of them
979 # were set, and canonicalise the values we got.  If no compiler or linker
980 # flag or anything else that affects %useradd was set, we also check the
981 # environment for values.
982 my $anyuseradd =
983     grep { defined $_ && (ref $_ ne 'ARRAY' || @$_) } values %useradd;
984 foreach (keys %user) {
985     my $value = $cmdvars{$_};
986     $value //= env($_) unless $anyuseradd;
987     $value //=
988         defined $user_synonyms{$_} ? $cmdvars{$user_synonyms{$_}} : undef;
989     $value //= defined $user_synonyms{$_} ? env($user_synonyms{$_}) : undef
990         unless $anyuseradd;
991
992     if (defined $value) {
993         if (ref $user{$_} eq 'ARRAY') {
994             $user{$_} = [ split /$list_separator_re/, $value ];
995         } elsif (!defined $user{$_}) {
996             $user{$_} = $value;
997         }
998     }
999 }
1000
1001 if (grep { /-rpath\b/ } ($user{LDFLAGS} ? @{$user{LDFLAGS}} : ())
1002     && !$disabled{shared}
1003     && !($disabled{asan} && $disabled{msan} && $disabled{ubsan})) {
1004     die "***** Cannot simultaneously use -rpath, shared libraries, and\n",
1005         "***** any of asan, msan or ubsan\n";
1006 }
1007
1008 sub disable {
1009     my $disable_type = shift;
1010
1011     for (@_) {
1012         $disabled{$_} = $disable_type;
1013     }
1014
1015     my @tocheckfor = (@_ ? @_ : keys %disabled);
1016     while (@tocheckfor) {
1017         my %new_tocheckfor = ();
1018         my @cascade_copy = (@disable_cascades);
1019         while (@cascade_copy) {
1020             my ($test, $descendents) =
1021                 (shift @cascade_copy, shift @cascade_copy);
1022             if (ref($test) eq "CODE" ? $test->() : defined($disabled{$test})) {
1023                 foreach (grep { !defined($disabled{$_}) } @$descendents) {
1024                     $new_tocheckfor{$_} = 1; $disabled{$_} = "cascade";
1025                 }
1026             }
1027         }
1028         @tocheckfor = (keys %new_tocheckfor);
1029     }
1030 }
1031 disable();                     # First cascade run
1032
1033 our $die = sub { die @_; };
1034 if ($target eq "TABLE") {
1035     local $die = sub { warn @_; };
1036     foreach (sort keys %table) {
1037         print_table_entry($_, "TABLE");
1038     }
1039     exit 0;
1040 }
1041
1042 if ($target eq "LIST") {
1043     foreach (sort keys %table) {
1044         print $_,"\n" unless $table{$_}->{template};
1045     }
1046     exit 0;
1047 }
1048
1049 if ($target eq "HASH") {
1050     local $die = sub { warn @_; };
1051     print "%table = (\n";
1052     foreach (sort keys %table) {
1053         print_table_entry($_, "HASH");
1054     }
1055     exit 0;
1056 }
1057
1058 print "Configuring OpenSSL version $config{full_version} ";
1059 print "for target $target\n";
1060
1061 if (scalar(@seed_sources) == 0) {
1062     print "Using os-specific seed configuration\n";
1063     push @seed_sources, 'os';
1064 }
1065 if (scalar(grep { $_ eq 'none' } @seed_sources) > 0) {
1066     die "Cannot seed with none and anything else" if scalar(@seed_sources) > 1;
1067     warn <<_____ if scalar(@seed_sources) == 1;
1068
1069 ============================== WARNING ===============================
1070 You have selected the --with-rand-seed=none option, which effectively
1071 disables automatic reseeding of the OpenSSL random generator.
1072 All operations depending on the random generator such as creating keys
1073 will not work unless the random generator is seeded manually by the
1074 application.
1075
1076 Please read the 'Note on random number generation' section in the
1077 INSTALL instructions and the RAND_DRBG(7) manual page for more details.
1078 ============================== WARNING ===============================
1079
1080 _____
1081 }
1082 push @{$config{openssl_feature_defines}},
1083      map { (my $x = $_) =~ tr|[\-a-z]|[_A-Z]|; "OPENSSL_RAND_SEED_$x" }
1084         @seed_sources;
1085
1086 # Backward compatibility?
1087 if ($target =~ m/^CygWin32(-.*)$/) {
1088     $target = "Cygwin".$1;
1089 }
1090
1091 # Support for legacy targets having a name starting with 'debug-'
1092 my ($d, $t) = $target =~ m/^(debug-)?(.*)$/;
1093 if ($d) {
1094     $config{build_type} = "debug";
1095
1096     # If we do not find debug-foo in the table, the target is set to foo.
1097     if (!$table{$target}) {
1098         $target = $t;
1099     }
1100 }
1101
1102 &usage if !$table{$target} || $table{$target}->{template};
1103
1104 $config{target} = $target;
1105 my %target = resolve_config($target);
1106
1107 foreach (keys %target_attr_translate) {
1108     $target{$target_attr_translate{$_}} = $target{$_}
1109         if $target{$_};
1110     delete $target{$_};
1111 }
1112
1113 %target = ( %{$table{DEFAULTS}}, %target );
1114
1115 my %conf_files = map { $_ => 1 } (@{$target{_conf_fname_int}});
1116 $config{conf_files} = [ sort keys %conf_files ];
1117
1118 # Using sub disable within these loops may prove fragile, so we run
1119 # a cascade afterwards
1120 foreach my $feature (@{$target{disable}}) {
1121     if (exists $deprecated_disablables{$feature}) {
1122         warn "***** config $target disables deprecated feature $feature\n";
1123     } elsif (!grep { $feature eq $_ } @disablables) {
1124         die "***** config $target disables unknown feature $feature\n";
1125     }
1126     $disabled{$feature} = 'config';
1127 }
1128 foreach my $feature (@{$target{enable}}) {
1129     if ("default" eq ($disabled{$feature} // "")) {
1130         if (exists $deprecated_disablables{$feature}) {
1131             warn "***** config $target enables deprecated feature $feature\n";
1132         } elsif (!grep { $feature eq $_ } @disablables) {
1133             die "***** config $target enables unknown feature $feature\n";
1134         }
1135         delete $disabled{$feature};
1136     }
1137 }
1138
1139 # If uplink_arch isn't defined, disable uplink
1140 $disabled{uplink} = 'no uplink_arch' unless (defined $target{uplink_arch});
1141
1142 disable();                      # Run a cascade now
1143
1144 $target{CXXFLAGS}//=$target{CFLAGS} if $target{CXX};
1145 $target{cxxflags}//=$target{cflags} if $target{CXX};
1146 $target{exe_extension}=".exe" if ($config{target} eq "DJGPP");
1147 $target{exe_extension}=".pm"  if ($config{target} =~ /vos/);
1148
1149 # Fill %config with values from %user, and in case those are undefined or
1150 # empty, use values from %target (acting as a default).
1151 foreach (keys %user) {
1152     my $ref_type = ref $user{$_};
1153
1154     # Temporary function.  Takes an intended ref type (empty string or "ARRAY")
1155     # and a value that's to be coerced into that type.
1156     my $mkvalue = sub {
1157         my $type = shift;
1158         my $value = shift;
1159         my $undef_p = shift;
1160
1161         die "Too many arguments for \$mkvalue" if @_;
1162
1163         while (ref $value eq 'CODE') {
1164             $value = $value->();
1165         }
1166
1167         if ($type eq 'ARRAY') {
1168             return undef unless defined $value;
1169             return undef if ref $value ne 'ARRAY' && !$value;
1170             return undef if ref $value eq 'ARRAY' && !@$value;
1171             return [ $value ] unless ref $value eq 'ARRAY';
1172         }
1173         return undef unless $value;
1174         return $value;
1175     };
1176
1177     $config{$_} =
1178         $mkvalue->($ref_type, $user{$_})
1179         || $mkvalue->($ref_type, $target{$_});
1180     delete $config{$_} unless defined $config{$_};
1181 }
1182
1183 # Finish up %config by appending things the user gave us on the command line
1184 # apart from "make variables"
1185 foreach (keys %useradd) {
1186     # The must all be lists, so we assert that here
1187     die "internal error: \$useradd{$_} isn't an ARRAY\n"
1188         unless ref $useradd{$_} eq 'ARRAY';
1189
1190     if (defined $config{$_}) {
1191         push @{$config{$_}}, @{$useradd{$_}};
1192     } else {
1193         $config{$_} = [ @{$useradd{$_}} ];
1194     }
1195 }
1196 # At this point, we can forget everything about %user and %useradd,
1197 # because it's now all been merged into the corresponding $config entry
1198
1199 # Allow overriding the build file name
1200 $config{build_file} = env('BUILDFILE') || $target{build_file} || "Makefile";
1201
1202 ######################################################################
1203 # Build up information for skipping certain directories depending on disabled
1204 # features, as well as setting up macros for disabled features.
1205
1206 # This is a tentative database of directories to skip.  Some entries may not
1207 # correspond to anything real, but that's ok, they will simply be ignored.
1208 # The actual processing of these entries is done in the build.info lookup
1209 # loop further down.
1210 #
1211 # The key is a Unix formated path in the source tree, the value is an index
1212 # into %disabled_info, so any existing path gets added to a corresponding
1213 # 'skipped' entry in there with the list of skipped directories.
1214 my %skipdir = ();
1215 my %disabled_info = ();         # For configdata.pm
1216 foreach my $what (sort keys %disabled) {
1217     # There are deprecated disablables that translate to themselves.
1218     # They cause disabling cascades, but should otherwise not regiter.
1219     next if $deprecated_disablables{$what};
1220
1221     $config{options} .= " no-$what";
1222
1223     if (!grep { $what eq $_ } ( 'buildtest-c++', 'fips', 'threads', 'shared',
1224                                 'module', 'pic', 'dynamic-engine', 'makedepend',
1225                                 'zlib-dynamic', 'zlib', 'sse2', 'legacy' )) {
1226         (my $WHAT = uc $what) =~ s|-|_|g;
1227         my $skipdir = $what;
1228
1229         # fix-up crypto/directory name(s)
1230         $skipdir = "ripemd" if $what eq "rmd160";
1231         $skipdir = "whrlpool" if $what eq "whirlpool";
1232
1233         my $macro = $disabled_info{$what}->{macro} = "OPENSSL_NO_$WHAT";
1234         push @{$config{openssl_feature_defines}}, $macro;
1235
1236         $skipdir{engines} = $what if $what eq 'engine';
1237         $skipdir{"crypto/$skipdir"} = $what
1238             unless $what eq 'async' || $what eq 'err';
1239     }
1240 }
1241
1242 # Make sure build_scheme is consistent.
1243 $target{build_scheme} = [ $target{build_scheme} ]
1244     if ref($target{build_scheme}) ne "ARRAY";
1245
1246 my ($builder, $builder_platform, @builder_opts) =
1247     @{$target{build_scheme}};
1248
1249 foreach my $checker (($builder_platform."-".$target{build_file}."-checker.pm",
1250                       $builder_platform."-checker.pm")) {
1251     my $checker_path = catfile($srcdir, "Configurations", $checker);
1252     if (-f $checker_path) {
1253         my $fn = $ENV{CONFIGURE_CHECKER_WARN}
1254             ? sub { warn $@; } : sub { die $@; };
1255         if (! do $checker_path) {
1256             if ($@) {
1257                 $fn->($@);
1258             } elsif ($!) {
1259                 $fn->($!);
1260             } else {
1261                 $fn->("The detected tools didn't match the platform\n");
1262             }
1263         }
1264         last;
1265     }
1266 }
1267
1268 push @{$config{defines}}, "NDEBUG"    if $config{build_type} eq "release";
1269
1270 if ($target =~ /^mingw/ && `$config{CC} --target-help 2>&1` =~ m/-mno-cygwin/m)
1271         {
1272         push @{$config{cflags}}, "-mno-cygwin";
1273         push @{$config{cxxflags}}, "-mno-cygwin" if $config{CXX};
1274         push @{$config{shared_ldflag}}, "-mno-cygwin";
1275         }
1276
1277 if ($target =~ /linux.*-mips/ && !$disabled{asm}
1278         && !grep { $_ !~ /-m(ips|arch=)/ } (@{$config{CFLAGS}})) {
1279         # minimally required architecture flags for assembly modules
1280         my $value;
1281         $value = '-mips2' if ($target =~ /mips32/);
1282         $value = '-mips3' if ($target =~ /mips64/);
1283         unshift @{$config{cflags}}, $value;
1284         unshift @{$config{cxxflags}}, $value if $config{CXX};
1285 }
1286
1287 # If threads aren't disabled, check how possible they are
1288 unless ($disabled{threads}) {
1289     if ($auto_threads) {
1290         # Enabled by default, disable it forcibly if unavailable
1291         if ($target{thread_scheme} eq "(unknown)") {
1292             disable("unavailable", 'threads');
1293         }
1294     } else {
1295         # The user chose to enable threads explicitly, let's see
1296         # if there's a chance that's possible
1297         if ($target{thread_scheme} eq "(unknown)") {
1298             # If the user asked for "threads" and we don't have internal
1299             # knowledge how to do it, [s]he is expected to provide any
1300             # system-dependent compiler options that are necessary.  We
1301             # can't truly check that the given options are correct, but
1302             # we expect the user to know what [s]He is doing.
1303             if (!@{$config{CFLAGS}} && !@{$config{CPPDEFINES}}) {
1304                 die "You asked for multi-threading support, but didn't\n"
1305                     ,"provide any system-specific compiler options\n";
1306             }
1307         }
1308     }
1309 }
1310
1311 # Find out if clang's sanitizers have been enabled with -fsanitize
1312 # flags and ensure that the corresponding %disabled elements area
1313 # removed to reflect that the sanitizers are indeed enabled.
1314 my %detected_sanitizers = ();
1315 foreach (grep /^-fsanitize=/, @{$config{CFLAGS} || []}) {
1316     (my $checks = $_) =~ s/^-fsanitize=//;
1317     foreach (split /,/, $checks) {
1318         my $d = { address       => 'asan',
1319                   undefined     => 'ubsan',
1320                   memory        => 'msan' } -> {$_};
1321         next unless defined $d;
1322
1323         $detected_sanitizers{$d} = 1;
1324         if (defined $disabled{$d}) {
1325             die "***** Conflict between disabling $d and enabling $_ sanitizer"
1326                 if $disabled{$d} ne "default";
1327             delete $disabled{$d};
1328         }
1329     }
1330 }
1331
1332 # If threads still aren't disabled, add a C macro to ensure the source
1333 # code knows about it.  Any other flag is taken care of by the configs.
1334 unless($disabled{threads}) {
1335     push @{$config{openssl_feature_defines}}, "OPENSSL_THREADS";
1336 }
1337
1338 # With "deprecated" disable all deprecated features.
1339 if (defined($disabled{"deprecated"})) {
1340         $config{api} = $maxapi;
1341 }
1342
1343 my $no_shared_warn=0;
1344 if ($target{shared_target} eq "")
1345         {
1346         $no_shared_warn = 1
1347             if (!$disabled{shared} || !$disabled{"dynamic-engine"});
1348         disable('no-shared-target', 'pic');
1349         }
1350
1351 if ($disabled{"dynamic-engine"}) {
1352         push @{$config{openssl_feature_defines}}, "OPENSSL_NO_DYNAMIC_ENGINE";
1353         $config{dynamic_engines} = 0;
1354 } else {
1355         push @{$config{openssl_feature_defines}}, "OPENSSL_NO_STATIC_ENGINE";
1356         $config{dynamic_engines} = 1;
1357 }
1358
1359 unless ($disabled{asan} || defined $detected_sanitizers{asan}) {
1360     push @{$config{cflags}}, "-fsanitize=address";
1361 }
1362
1363 unless ($disabled{ubsan} || defined $detected_sanitizers{ubsan}) {
1364     # -DPEDANTIC or -fnosanitize=alignment may also be required on some
1365     # platforms.
1366     push @{$config{cflags}}, "-fsanitize=undefined", "-fno-sanitize-recover=all";
1367 }
1368
1369 unless ($disabled{msan} || defined $detected_sanitizers{msan}) {
1370   push @{$config{cflags}}, "-fsanitize=memory";
1371 }
1372
1373 unless ($disabled{"fuzz-libfuzzer"} && $disabled{"fuzz-afl"}
1374         && $disabled{asan} && $disabled{ubsan} && $disabled{msan}) {
1375     push @{$config{cflags}}, "-fno-omit-frame-pointer", "-g";
1376     push @{$config{cxxflags}}, "-fno-omit-frame-pointer", "-g" if $config{CXX};
1377 }
1378 #
1379 # Platform fix-ups
1380 #
1381
1382 # This saves the build files from having to check
1383 if ($disabled{pic})
1384         {
1385         foreach (qw(shared_cflag shared_cxxflag shared_cppflag
1386                     shared_defines shared_includes shared_ldflag
1387                     module_cflags module_cxxflags module_cppflags
1388                     module_defines module_includes module_lflags))
1389                 {
1390                 delete $config{$_};
1391                 $target{$_} = "";
1392                 }
1393         }
1394 else
1395         {
1396         push @{$config{lib_defines}}, "OPENSSL_PIC";
1397         }
1398
1399 if ($target{sys_id} ne "")
1400         {
1401         push @{$config{openssl_sys_defines}}, "OPENSSL_SYS_$target{sys_id}";
1402         }
1403
1404 unless ($disabled{asm}) {
1405     $target{cpuid_asm_src}=$table{DEFAULTS}->{cpuid_asm_src} if ($config{processor} eq "386");
1406     if ($target{cpuid_asm_src} ne "mem_clr.c") {
1407         push @{$config{lib_defines}}, "OPENSSL_CPUID_OBJ";
1408         push @{$config{module_defines}}, "OPENSSL_CPUID_OBJ";
1409     }
1410
1411     $target{bn_asm_src} =~ s/\w+-gf2m.c// if (defined($disabled{ec2m}));
1412
1413     # bn-586 is the only one implementing bn_*_part_words
1414     if ($target{bn_asm_src} =~ /bn-586/) {
1415         push @{$config{lib_defines}}, "OPENSSL_BN_ASM_PART_WORDS";
1416         push @{$config{module_defines}}, "OPENSSL_BN_ASM_PART_WORDS";
1417     }
1418     if (!$disabled{sse2} && $target{bn_asm_src} =~ /86/) {
1419         push @{$config{lib_defines}}, "OPENSSL_IA32_SSE2";
1420         push @{$config{module_defines}}, "OPENSSL_IA32_SSE2";
1421     }
1422
1423     if ($target{bn_asm_src} =~ /-mont/) {
1424         push @{$config{lib_defines}}, "OPENSSL_BN_ASM_MONT";
1425         push @{$config{module_defines}}, "OPENSSL_BN_ASM_MONT";
1426     }
1427     if ($target{bn_asm_src} =~ /-mont5/) {
1428         push @{$config{lib_defines}}, "OPENSSL_BN_ASM_MONT5";
1429         push @{$config{module_defines}}, "OPENSSL_BN_ASM_MONT5";
1430     }
1431     if ($target{bn_asm_src} =~ /-gf2m/) {
1432         push @{$config{lib_defines}}, "OPENSSL_BN_ASM_GF2m";
1433         push @{$config{module_defines}}, "OPENSSL_BN_ASM_GF2m";
1434     }
1435     if ($target{bn_asm_src} =~ /-div3w/) {
1436         push @{$config{lib_defines}}, "BN_DIV3W";
1437         push @{$config{module_defines}}, "BN_DIV3W";
1438     }
1439
1440     if ($target{sha1_asm_src}) {
1441         push @{$config{lib_defines}}, "SHA1_ASM"   if ($target{sha1_asm_src} =~ /sx86/ || $target{sha1_asm_src} =~ /sha1/);
1442         push @{$config{lib_defines}}, "SHA256_ASM" if ($target{sha1_asm_src} =~ /sha256/);
1443         push @{$config{lib_defines}}, "SHA512_ASM" if ($target{sha1_asm_src} =~ /sha512/);
1444     }
1445     if ($target{keccak1600_asm_src} ne $table{DEFAULTS}->{keccak1600_asm_src}) {
1446         push @{$config{lib_defines}}, "KECCAK1600_ASM";
1447     }
1448     if ($target{rc4_asm_src} ne $table{DEFAULTS}->{rc4_asm_src}) {
1449         push @{$config{lib_defines}}, "RC4_ASM";
1450     }
1451     if ($target{md5_asm_src}) {
1452         push @{$config{lib_defines}}, "MD5_ASM";
1453     }
1454     $target{cast_asm_src}=$table{DEFAULTS}->{cast_asm_src} unless $disabled{pic}; # CAST assembler is not PIC
1455     if ($target{rmd160_asm_src}) {
1456         push @{$config{lib_defines}}, "RMD160_ASM";
1457     }
1458     if ($target{aes_asm_src}) {
1459         if ($target{aes_asm_src} =~ m/\baes-/) {
1460             push @{$config{lib_defines}}, "AES_ASM";
1461             push @{$config{module_defines}}, "AES_ASM";
1462         }
1463         # aes-ctr.fake is not a real file, only indication that assembler
1464         # module implements AES_ctr32_encrypt...
1465         if ($target{aes_asm_src} =~ s/\s*aes-ctr\.fake//) {
1466             push @{$config{lib_defines}}, "AES_CTR_ASM";
1467             push @{$config{module_defines}}, "AES_CTR_ASM";
1468         }
1469         # aes-xts.fake indicates presence of AES_xts_[en|de]crypt...
1470         if ($target{aes_asm_src} =~ s/\s*aes-xts\.fake//) {
1471             push @{$config{lib_defines}}, "AES_XTS_ASM";
1472             push @{$config{module_defines}}, "AES_XTS_ASM";
1473         }
1474         $target{aes_asm_src} =~ s/\s*(vpaes|aesni)-x86\.s//g if ($disabled{sse2});
1475         if ($target{aes_asm_src} =~ m/vpaes/) {
1476             push @{$config{lib_defines}}, "VPAES_ASM";
1477             push @{$config{module_defines}}, "VPAES_ASM";
1478         }
1479         if ($target{aes_asm_src} =~ m/bsaes/) {
1480             push @{$config{lib_defines}}, "BSAES_ASM";
1481             push @{$config{module_defines}}, "BSAES_ASM";
1482         }
1483     }
1484     if ($target{wp_asm_src} =~ /mmx/) {
1485         if ($config{processor} eq "386") {
1486             $target{wp_asm_src}=$table{DEFAULTS}->{wp_asm_src};
1487         } elsif (!$disabled{"whirlpool"}) {
1488             push @{$config{lib_defines}}, "WHIRLPOOL_ASM";
1489         }
1490     }
1491     if ($target{modes_asm_src} =~ /ghash-/) {
1492         push @{$config{lib_defines}}, "GHASH_ASM";
1493     }
1494     if ($target{ec_asm_src} =~ /ecp_nistz256/) {
1495         push @{$config{lib_defines}}, "ECP_NISTZ256_ASM";
1496     }
1497     if ($target{ec_asm_src} =~ /x25519/) {
1498         push @{$config{lib_defines}}, "X25519_ASM";
1499     }
1500     if ($target{padlock_asm_src} ne $table{DEFAULTS}->{padlock_asm_src}) {
1501         push @{$config{dso_defines}}, "PADLOCK_ASM";
1502     }
1503     if ($target{poly1305_asm_src} ne "") {
1504         push @{$config{lib_defines}}, "POLY1305_ASM";
1505     }
1506 }
1507
1508 my %predefined_C = compiler_predefined($config{CROSS_COMPILE}.$config{CC});
1509 my %predefined_CXX = $config{CXX}
1510     ? compiler_predefined($config{CROSS_COMPILE}.$config{CXX})
1511     : ();
1512
1513 # Check for makedepend capabilities.
1514 if (!$disabled{makedepend}) {
1515     if ($config{target} =~ /^(VC|vms)-/) {
1516         # For VC- and vms- targets, there's nothing more to do here.  The
1517         # functionality is hard coded in the corresponding build files for
1518         # cl (Windows) and CC/DECC (VMS).
1519     } elsif (($predefined_C{__GNUC__} // -1) >= 3
1520              && !($predefined_C{__APPLE_CC__} && !$predefined_C{__clang__})) {
1521         # We know that GNU C version 3 and up as well as all clang
1522         # versions support dependency generation, but Xcode did not
1523         # handle $cc -M before clang support (but claims __GNUC__ = 3)
1524         $config{makedepprog} = "\$(CROSS_COMPILE)$config{CC}";
1525     } else {
1526         # In all other cases, we look for 'makedepend', and disable the
1527         # capability if not found.
1528         $config{makedepprog} = which('makedepend');
1529         disable('unavailable', 'makedepend') unless $config{makedepprog};
1530     }
1531 }
1532
1533 if (!$disabled{asm} && !$predefined_C{__MACH__} && $^O ne 'VMS') {
1534     # probe for -Wa,--noexecstack option...
1535     if ($predefined_C{__clang__}) {
1536         # clang has builtin assembler, which doesn't recognize --help,
1537         # but it apparently recognizes the option in question on all
1538         # supported platforms even when it's meaningless. In other words
1539         # probe would fail, but probed option always accepted...
1540         push @{$config{cflags}}, "-Wa,--noexecstack", "-Qunused-arguments";
1541     } else {
1542         my $cc = $config{CROSS_COMPILE}.$config{CC};
1543         open(PIPE, "$cc -Wa,--help -c -o null.$$.o -x assembler /dev/null 2>&1 |");
1544         while(<PIPE>) {
1545             if (m/--noexecstack/) {
1546                 push @{$config{cflags}}, "-Wa,--noexecstack";
1547                 last;
1548             }
1549         }
1550         close(PIPE);
1551         unlink("null.$$.o");
1552     }
1553 }
1554
1555 # Deal with bn_ops ###################################################
1556
1557 $config{bn_ll}                  =0;
1558 $config{export_var_as_fn}       =0;
1559 my $def_int="unsigned int";
1560 $config{rc4_int}                =$def_int;
1561 ($config{b64l},$config{b64},$config{b32})=(0,0,1);
1562
1563 my $count = 0;
1564 foreach (sort split(/\s+/,$target{bn_ops})) {
1565     $count++ if /SIXTY_FOUR_BIT|SIXTY_FOUR_BIT_LONG|THIRTY_TWO_BIT/;
1566     $config{export_var_as_fn}=1                 if $_ eq 'EXPORT_VAR_AS_FN';
1567     $config{bn_ll}=1                            if $_ eq 'BN_LLONG';
1568     $config{rc4_int}="unsigned char"            if $_ eq 'RC4_CHAR';
1569     ($config{b64l},$config{b64},$config{b32})
1570         =(0,1,0)                                if $_ eq 'SIXTY_FOUR_BIT';
1571     ($config{b64l},$config{b64},$config{b32})
1572         =(1,0,0)                                if $_ eq 'SIXTY_FOUR_BIT_LONG';
1573     ($config{b64l},$config{b64},$config{b32})
1574         =(0,0,1)                                if $_ eq 'THIRTY_TWO_BIT';
1575 }
1576 die "Exactly one of SIXTY_FOUR_BIT|SIXTY_FOUR_BIT_LONG|THIRTY_TWO_BIT can be set in bn_ops\n"
1577     if $count > 1;
1578
1579
1580 # Hack cflags for better warnings (dev option) #######################
1581
1582 # "Stringify" the C and C++ flags string.  This permits it to be made part of
1583 # a string and works as well on command lines.
1584 $config{cflags} = [ map { (my $x = $_) =~ s/([\\\"])/\\$1/g; $x }
1585                         @{$config{cflags}} ];
1586 $config{cxxflags} = [ map { (my $x = $_) =~ s/([\\\"])/\\$1/g; $x }
1587                           @{$config{cxxflags}} ] if $config{CXX};
1588
1589 $config{openssl_api_defines} = [
1590     "OPENSSL_MIN_API=".($apitable->{$config{api} // ""} // -1)
1591 ];
1592
1593 my @strict_warnings_collection=();
1594 if ($strict_warnings)
1595         {
1596         my $wopt;
1597         my $gccver = $predefined_C{__GNUC__} // -1;
1598
1599         warn "WARNING --strict-warnings requires gcc[>=4] or gcc-alike"
1600             unless $gccver >= 4;
1601         push @strict_warnings_collection, @gcc_devteam_warn;
1602         push @strict_warnings_collection, @clang_devteam_warn
1603             if (defined($predefined_C{__clang__}));
1604         }
1605
1606 if (grep { $_ eq '-static' } @{$config{LDFLAGS}}) {
1607     disable('static', 'pic', 'threads');
1608 }
1609
1610 $config{CFLAGS} = [ map { $_ eq '--ossl-strict-warnings'
1611                               ? @strict_warnings_collection
1612                               : ( $_ ) }
1613                     @{$config{CFLAGS}} ];
1614
1615 unless ($disabled{"crypto-mdebug-backtrace"})
1616         {
1617         foreach my $wopt (split /\s+/, $memleak_devteam_backtrace)
1618                 {
1619                 push @{$config{cflags}}, $wopt
1620                         unless grep { $_ eq $wopt } @{$config{cflags}};
1621                 }
1622         if ($target =~ /^BSD-/)
1623                 {
1624                 push @{$config{ex_libs}}, "-lexecinfo";
1625                 }
1626         }
1627
1628 unless ($disabled{afalgeng}) {
1629     $config{afalgeng}="";
1630     if (grep { $_ eq 'afalgeng' } @{$target{enable}}) {
1631         my $minver = 4*10000 + 1*100 + 0;
1632         if ($config{CROSS_COMPILE} eq "") {
1633             my $verstr = `uname -r`;
1634             my ($ma, $mi1, $mi2) = split("\\.", $verstr);
1635             ($mi2) = $mi2 =~ /(\d+)/;
1636             my $ver = $ma*10000 + $mi1*100 + $mi2;
1637             if ($ver < $minver) {
1638                 disable('too-old-kernel', 'afalgeng');
1639             } else {
1640                 push @{$config{engdirs}}, "afalg";
1641             }
1642         } else {
1643             disable('cross-compiling', 'afalgeng');
1644         }
1645     } else {
1646         disable('not-linux', 'afalgeng');
1647     }
1648 }
1649
1650 push @{$config{openssl_feature_defines}}, "OPENSSL_NO_AFALGENG" if ($disabled{afalgeng});
1651
1652 unless ($disabled{ktls}) {
1653     $config{ktls}="";
1654     if ($target =~ m/^linux/) {
1655         my $usr = "/usr/$config{cross_compile_prefix}";
1656         chop($usr);
1657         if ($config{cross_compile_prefix} eq "") {
1658             $usr = "/usr";
1659         }
1660         my $minver = (4 << 16) + (13 << 8) + 0;
1661         my @verstr = split(" ",`cat $usr/include/linux/version.h | grep LINUX_VERSION_CODE`);
1662
1663         if ($verstr[2] < $minver) {
1664             disable('too-old-kernel', 'ktls');
1665         }
1666     } else {
1667         disable('not-linux', 'ktls');
1668     }
1669 }
1670
1671 push @{$config{openssl_other_defines}}, "OPENSSL_NO_KTLS" if ($disabled{ktls});
1672
1673 # Get the extra flags used when building shared libraries and modules.  We
1674 # do this late because some of them depend on %disabled.
1675
1676 # Make the flags to build DSOs the same as for shared libraries unless they
1677 # are already defined
1678 $target{module_cflags} = $target{shared_cflag} unless defined $target{module_cflags};
1679 $target{module_cxxflags} = $target{shared_cxxflag} unless defined $target{module_cxxflags};
1680 $target{module_ldflags} = $target{shared_ldflag} unless defined $target{module_ldflags};
1681 {
1682     my $shared_info_pl =
1683         catfile(dirname($0), "Configurations", "shared-info.pl");
1684     my %shared_info = read_eval_file($shared_info_pl);
1685     push @{$target{_conf_fname_int}}, $shared_info_pl;
1686     my $si = $target{shared_target};
1687     while (ref $si ne "HASH") {
1688         last if ! defined $si;
1689         if (ref $si eq "CODE") {
1690             $si = $si->();
1691         } else {
1692             $si = $shared_info{$si};
1693         }
1694     }
1695
1696     # Some of the 'shared_target' values don't have any entries in
1697     # %shared_info.  That's perfectly fine, AS LONG AS the build file
1698     # template knows how to handle this.  That is currently the case for
1699     # Windows and VMS.
1700     if (defined $si) {
1701         # Just as above, copy certain shared_* attributes to the corresponding
1702         # module_ attribute unless the latter is already defined
1703         $si->{module_cflags} = $si->{shared_cflag} unless defined $si->{module_cflags};
1704         $si->{module_cxxflags} = $si->{shared_cxxflag} unless defined $si->{module_cxxflags};
1705         $si->{module_ldflags} = $si->{shared_ldflag} unless defined $si->{module_ldflags};
1706         foreach (sort keys %$si) {
1707             $target{$_} = defined $target{$_}
1708                 ? add($si->{$_})->($target{$_})
1709                 : $si->{$_};
1710         }
1711     }
1712 }
1713
1714 # ALL MODIFICATIONS TO %disabled, %config and %target MUST BE DONE FROM HERE ON
1715
1716 # If we use the unified build, collect information from build.info files
1717 my %unified_info = ();
1718
1719 my $buildinfo_debug = defined($ENV{CONFIGURE_DEBUG_BUILDINFO});
1720 if ($builder eq "unified") {
1721     use with_fallback qw(Text::Template);
1722
1723     sub cleandir {
1724         my $base = shift;
1725         my $dir = shift;
1726         my $relativeto = shift || ".";
1727
1728         $dir = catdir($base,$dir) unless isabsolute($dir);
1729
1730         # Make sure the directories we're building in exists
1731         mkpath($dir);
1732
1733         my $res = abs2rel(absolutedir($dir), rel2abs($relativeto));
1734         #print STDERR "DEBUG[cleandir]: $dir , $base => $res\n";
1735         return $res;
1736     }
1737
1738     sub cleanfile {
1739         my $base = shift;
1740         my $file = shift;
1741         my $relativeto = shift || ".";
1742
1743         $file = catfile($base,$file) unless isabsolute($file);
1744
1745         my $d = dirname($file);
1746         my $f = basename($file);
1747
1748         # Make sure the directories we're building in exists
1749         mkpath($d);
1750
1751         my $res = abs2rel(catfile(absolutedir($d), $f), rel2abs($relativeto));
1752         #print STDERR "DEBUG[cleanfile]: $d , $f => $res\n";
1753         return $res;
1754     }
1755
1756     # Store the name of the template file we will build the build file from
1757     # in %config.  This may be useful for the build file itself.
1758     my @build_file_template_names =
1759         ( $builder_platform."-".$target{build_file}.".tmpl",
1760           $target{build_file}.".tmpl" );
1761     my @build_file_templates = ();
1762
1763     # First, look in the user provided directory, if given
1764     if (defined env($local_config_envname)) {
1765         @build_file_templates =
1766             map {
1767                 if ($^O eq 'VMS') {
1768                     # VMS environment variables are logical names,
1769                     # which can be used as is
1770                     $local_config_envname . ':' . $_;
1771                 } else {
1772                     catfile(env($local_config_envname), $_);
1773                 }
1774             }
1775             @build_file_template_names;
1776     }
1777     # Then, look in our standard directory
1778     push @build_file_templates,
1779         ( map { cleanfile($srcdir, catfile("Configurations", $_), $blddir) }
1780           @build_file_template_names );
1781
1782     my $build_file_template;
1783     for $_ (@build_file_templates) {
1784         $build_file_template = $_;
1785         last if -f $build_file_template;
1786
1787         $build_file_template = undef;
1788     }
1789     if (!defined $build_file_template) {
1790         die "*** Couldn't find any of:\n", join("\n", @build_file_templates), "\n";
1791     }
1792     $config{build_file_templates}
1793       = [ cleanfile($srcdir, catfile("Configurations", "common0.tmpl"),
1794                     $blddir),
1795           $build_file_template,
1796           cleanfile($srcdir, catfile("Configurations", "common.tmpl"),
1797                     $blddir) ];
1798
1799     my @build_dirs = ( [ ] );   # current directory
1800
1801     $config{build_infos} = [ ];
1802
1803     my %ordinals = ();
1804     while (@build_dirs) {
1805         my @curd = @{shift @build_dirs};
1806         my $sourced = catdir($srcdir, @curd);
1807         my $buildd = catdir($blddir, @curd);
1808
1809         my $unixdir = join('/', @curd);
1810         if (exists $skipdir{$unixdir}) {
1811             my $what = $skipdir{$unixdir};
1812             push @{$disabled_info{$what}->{skipped}}, catdir(@curd);
1813             next;
1814         }
1815
1816         mkpath($buildd);
1817
1818         my $f = 'build.info';
1819         # The basic things we're trying to build
1820         my @programs = ();
1821         my @libraries = ();
1822         my @modules = ();
1823         my @scripts = ();
1824
1825         my %attributes = ();
1826         my %sources = ();
1827         my %shared_sources = ();
1828         my %includes = ();
1829         my %defines = ();
1830         my %depends = ();
1831         my %generate = ();
1832
1833         # Support for $variablename in build.info files.
1834         # Embedded perl code is the ultimate master, still.  If its output
1835         # contains a dollar sign, it had better be escaped, or it will be
1836         # taken for a variable name prefix.
1837         my %variables = ();
1838         my $variable_re = qr/\$([[:alpha:]][[:alnum:]_]*)/;
1839         my $expand_variables = sub {
1840             my $value = '';
1841             my $value_rest = shift;
1842
1843             while ($value_rest =~ /(?<!\\)${variable_re}/) {
1844                 $value .= $`;
1845                 $value .= $variables{$1};
1846                 $value_rest = $';
1847             }
1848             return $value . $value_rest;
1849         };
1850
1851         # We want to detect configdata.pm in the source tree, so we
1852         # don't use it if the build tree is different.
1853         my $src_configdata = cleanfile($srcdir, "configdata.pm", $blddir);
1854
1855         push @{$config{build_infos}}, catfile(abs2rel($sourced, $blddir), $f);
1856         my $template =
1857             Text::Template->new(TYPE => 'FILE',
1858                                 SOURCE => catfile($sourced, $f),
1859                                 PREPEND => qq{use lib "$FindBin::Bin/util/perl";});
1860         die "Something went wrong with $sourced/$f: $!\n" unless $template;
1861         my @text =
1862             split /^/m,
1863             $template->fill_in(HASH => { config => \%config,
1864                                          target => \%target,
1865                                          disabled => \%disabled,
1866                                          withargs => \%withargs,
1867                                          builddir => abs2rel($buildd, $blddir),
1868                                          sourcedir => abs2rel($sourced, $blddir),
1869                                          buildtop => abs2rel($blddir, $blddir),
1870                                          sourcetop => abs2rel($srcdir, $blddir) },
1871                                DELIMITERS => [ "{-", "-}" ]);
1872
1873         # The top item of this stack has the following values
1874         # -2 positive already run and we found ELSE (following ELSIF should fail)
1875         # -1 positive already run (skip until ENDIF)
1876         # 0 negatives so far (if we're at a condition, check it)
1877         # 1 last was positive (don't skip lines until next ELSE, ELSIF or ENDIF)
1878         # 2 positive ELSE (following ELSIF should fail)
1879         my @skip = ();
1880         collect_information(
1881             collect_from_array([ @text ],
1882                                qr/\\$/ => sub { my $l1 = shift; my $l2 = shift;
1883                                                 $l1 =~ s/\\$//; $l1.$l2 }),
1884             # Info we're looking for
1885             qr/^\s*IF\[((?:\\.|[^\\\]])*)\]\s*$/
1886             => sub {
1887                 if (! @skip || $skip[$#skip] > 0) {
1888                     push @skip, !! $expand_variables->($1);
1889                 } else {
1890                     push @skip, -1;
1891                 }
1892             },
1893             qr/^\s*ELSIF\[((?:\\.|[^\\\]])*)\]\s*$/
1894             => sub { die "ELSIF out of scope" if ! @skip;
1895                      die "ELSIF following ELSE" if abs($skip[$#skip]) == 2;
1896                      $skip[$#skip] = -1 if $skip[$#skip] != 0;
1897                      $skip[$#skip] = !! $expand_variables->($1)
1898                          if $skip[$#skip] == 0; },
1899             qr/^\s*ELSE\s*$/
1900             => sub { die "ELSE out of scope" if ! @skip;
1901                      $skip[$#skip] = -2 if $skip[$#skip] != 0;
1902                      $skip[$#skip] = 2 if $skip[$#skip] == 0; },
1903             qr/^\s*ENDIF\s*$/
1904             => sub { die "ENDIF out of scope" if ! @skip;
1905                      pop @skip; },
1906             qr/^\s*${variable_re}\s*=\s*(.*?)\s*$/
1907             => sub {
1908                 if (!@skip || $skip[$#skip] > 0) {
1909                     my $n = $1;
1910                     my $v = $2;
1911                     $variables{$n} = $expand_variables->($v);
1912                 }
1913             },
1914             qr/^\s*SUBDIRS\s*=\s*(.*)\s*$/
1915             => sub {
1916                 if (!@skip || $skip[$#skip] > 0) {
1917                     foreach (tokenize($expand_variables->($1))) {
1918                         push @build_dirs, [ @curd, splitdir($_, 1) ];
1919                     }
1920                 }
1921             },
1922             qr/^\s*PROGRAMS(?:{([\w=]+(?:\s*,\s*[\w=]+)*)})?\s*=\s*(.*)\s*$/
1923             => sub {
1924                 if (!@skip || $skip[$#skip] > 0) {
1925                     my @a = tokenize($1, qr|\s*,\s*|);
1926                     my @p = tokenize($expand_variables->($2));
1927                     push @programs, @p;
1928                     foreach my $a (@a) {
1929                         my $ak = $a;
1930                         my $av = 1;
1931                         if ($a =~ m|^(.*?)\s*=\s*(.*?)$|) {
1932                             $ak = $1;
1933                             $av = $2;
1934                         }
1935                         foreach my $p (@p) {
1936                             $attributes{$p}->{$ak} = $av;
1937                         }
1938                     }
1939                 }
1940             },
1941             qr/^\s*LIBS(?:{([\w=]+(?:\s*,\s*[\w=]+)*)})?\s*=\s*(.*)\s*$/
1942             => sub {
1943                 if (!@skip || $skip[$#skip] > 0) {
1944                     my @a = tokenize($1, qr|\s*,\s*|);
1945                     my @l = tokenize($expand_variables->($2));
1946                     push @libraries, @l;
1947                     foreach my $a (@a) {
1948                         my $ak = $a;
1949                         my $av = 1;
1950                         if ($a =~ m|^(.*?)\s*=\s*(.*?)$|) {
1951                             $ak = $1;
1952                             $av = $2;
1953                         }
1954                         foreach my $l (@l) {
1955                             $attributes{$l}->{$ak} = $av;
1956                         }
1957                     }
1958                 }
1959             },
1960             qr/^\s*MODULES(?:{([\w=]+(?:\s*,\s*[\w=]+)*)})?\s*=\s*(.*)\s*$/
1961             => sub {
1962                 if (!@skip || $skip[$#skip] > 0) {
1963                     my @a = tokenize($1, qr|\s*,\s*|);
1964                     my @m = tokenize($expand_variables->($2));
1965                     push @modules, @m;
1966                     foreach my $a (@a) {
1967                         my $ak = $a;
1968                         my $av = 1;
1969                         if ($a =~ m|^(.*?)\s*=\s*(.*?)$|) {
1970                             $ak = $1;
1971                             $av = $2;
1972                         }
1973                         foreach my $m (@m) {
1974                             $attributes{$m}->{$ak} = $av;
1975                         }
1976                     }
1977                 }
1978             },
1979             qr/^\s*SCRIPTS(?:{([\w=]+(?:\s*,\s*[\w=]+)*)})?\s*=\s*(.*)\s*$/
1980             => sub {
1981                 if (!@skip || $skip[$#skip] > 0) {
1982                     my @a = tokenize($1, qr|\s*,\s*|);
1983                     my @s = tokenize($expand_variables->($2));
1984                     push @scripts, @s;
1985                     foreach my $a (@a) {
1986                         my $ak = $a;
1987                         my $av = 1;
1988                         if ($a =~ m|^(.*?)\s*=\s*(.*?)$|) {
1989                             $ak = $1;
1990                             $av = $2;
1991                         }
1992                         foreach my $s (@s) {
1993                             $attributes{$s}->{$ak} = $av;
1994                         }
1995                     }
1996                 }
1997             },
1998
1999             qr/^\s*ORDINALS\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/,
2000             => sub { push @{$ordinals{$1}}, tokenize($expand_variables->($2))
2001                          if !@skip || $skip[$#skip] > 0 },
2002             qr/^\s*SOURCE\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
2003             => sub { push @{$sources{$1}}, tokenize($expand_variables->($2))
2004                          if !@skip || $skip[$#skip] > 0 },
2005             qr/^\s*SHARED_SOURCE\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
2006             => sub { push @{$shared_sources{$1}},
2007                          tokenize($expand_variables->($2))
2008                          if !@skip || $skip[$#skip] > 0 },
2009             qr/^\s*INCLUDE\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
2010             => sub { push @{$includes{$1}}, tokenize($expand_variables->($2))
2011                          if !@skip || $skip[$#skip] > 0 },
2012             qr/^\s*DEFINE\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
2013             => sub { push @{$defines{$1}}, tokenize($expand_variables->($2))
2014                          if !@skip || $skip[$#skip] > 0 },
2015             qr/^\s*DEPEND\[((?:\\.|[^\\\]])*)\]\s*=\s*(.*)\s*$/
2016             => sub { push @{$depends{$1}}, tokenize($expand_variables->($2))
2017                          if !@skip || $skip[$#skip] > 0 },
2018             qr/^\s*GENERATE\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
2019             => sub { push @{$generate{$1}}, $2
2020                          if !@skip || $skip[$#skip] > 0 },
2021             qr/^\s*(?:#.*)?$/ => sub { },
2022             "OTHERWISE" => sub { die "Something wrong with this line:\n$_\nat $sourced/$f" },
2023             "BEFORE" => sub {
2024                 if ($buildinfo_debug) {
2025                     print STDERR "DEBUG: Parsing ",join(" ", @_),"\n";
2026                     print STDERR "DEBUG: ... before parsing, skip stack is ",join(" ", map { int($_) } @skip),"\n";
2027                 }
2028             },
2029             "AFTER" => sub {
2030                 if ($buildinfo_debug) {
2031                     print STDERR "DEBUG: .... after parsing, skip stack is ",join(" ", map { int($_) } @skip),"\n";
2032                 }
2033             },
2034             );
2035         die "runaway IF?" if (@skip);
2036
2037         if (grep { defined $attributes{$_}->{engine} } keys %attributes
2038                 and !$config{dynamic_engines}) {
2039             die <<"EOF"
2040 ENGINES can only be used if configured with 'dynamic-engine'.
2041 This is usually a fault in a build.info file.
2042 EOF
2043         }
2044
2045         foreach (keys %attributes) {
2046             my $dest = $_;
2047             my $ddest = cleanfile($buildd, $_, $blddir);
2048             foreach (keys %{$attributes{$dest} // {}}) {
2049                 $unified_info{attributes}->{$ddest}->{$_} =
2050                     $attributes{$dest}->{$_};
2051             }
2052         }
2053
2054         {
2055             my %infos = ( programs  => [ @programs  ],
2056                           libraries => [ @libraries ],
2057                           modules   => [ @modules   ],
2058                           scripts   => [ @scripts   ] );
2059             foreach my $k (keys %infos) {
2060                 foreach (@{$infos{$k}}) {
2061                     my $item = cleanfile($buildd, $_, $blddir);
2062                     $unified_info{$k}->{$item} = 1;
2063                 }
2064             }
2065         }
2066
2067         # Check that we haven't defined any library as both shared and
2068         # explicitly static.  That is forbidden.
2069         my @doubles = ();
2070         foreach (grep /\.a$/, keys %{$unified_info{libraries}}) {
2071             (my $l = $_) =~ s/\.a$//;
2072             push @doubles, $l if defined $unified_info{libraries}->{$l};
2073         }
2074         die "these libraries are both explicitly static and shared:\n  ",
2075             join(" ", @doubles), "\n"
2076             if @doubles;
2077
2078         foreach (keys %sources) {
2079             my $dest = $_;
2080             my $ddest = cleanfile($buildd, $_, $blddir);
2081             foreach (@{$sources{$dest}}) {
2082                 my $s = cleanfile($sourced, $_, $blddir);
2083
2084                 # If it isn't in the source tree, we assume it's generated
2085                 # in the build tree
2086                 if ($s eq $src_configdata || ! -f $s || $generate{$_}) {
2087                     $s = cleanfile($buildd, $_, $blddir);
2088                 }
2089                 # We recognise C++, C and asm files
2090                 if ($s =~ /\.(cc|cpp|c|s|S)$/) {
2091                     my $o = $_;
2092                     $o =~ s/\.[csS]$/.o/; # C and assembler
2093                     $o =~ s/\.(cc|cpp)$/_cc.o/; # C++
2094                     $o = cleanfile($buildd, $o, $blddir);
2095                     $unified_info{sources}->{$ddest}->{$o} = -1;
2096                     $unified_info{sources}->{$o}->{$s} = -1;
2097                 } elsif ($s =~ /\.rc$/) {
2098                     # We also recognise resource files
2099                     my $o = $_;
2100                     $o =~ s/\.rc$/.res/; # Resource configuration
2101                     my $o = cleanfile($buildd, $o, $blddir);
2102                     $unified_info{sources}->{$ddest}->{$o} = -1;
2103                     $unified_info{sources}->{$o}->{$s} = -1;
2104                 } else {
2105                     $unified_info{sources}->{$ddest}->{$s} = 1;
2106                 }
2107             }
2108         }
2109
2110         foreach (keys %shared_sources) {
2111             my $dest = $_;
2112             my $ddest = cleanfile($buildd, $_, $blddir);
2113             foreach (@{$shared_sources{$dest}}) {
2114                 my $s = cleanfile($sourced, $_, $blddir);
2115
2116                 # If it isn't in the source tree, we assume it's generated
2117                 # in the build tree
2118                 if ($s eq $src_configdata || ! -f $s || $generate{$_}) {
2119                     $s = cleanfile($buildd, $_, $blddir);
2120                 }
2121
2122                 if ($s =~ /\.(cc|cpp|c|s|S)$/) {
2123                     # We recognise C++, C and asm files
2124                     my $o = $_;
2125                     $o =~ s/\.[csS]$/.o/; # C and assembler
2126                     $o =~ s/\.(cc|cpp)$/_cc.o/; # C++
2127                     $o = cleanfile($buildd, $o, $blddir);
2128                     $unified_info{shared_sources}->{$ddest}->{$o} = -1;
2129                     $unified_info{sources}->{$o}->{$s} = -1;
2130                 } elsif ($s =~ /\.rc$/) {
2131                     # We also recognise resource files
2132                     my $o = $_;
2133                     $o =~ s/\.rc$/.res/; # Resource configuration
2134                     my $o = cleanfile($buildd, $o, $blddir);
2135                     $unified_info{shared_sources}->{$ddest}->{$o} = -1;
2136                     $unified_info{sources}->{$o}->{$s} = -1;
2137                 } elsif ($s =~ /\.ld$/) {
2138                     # We also recognise linker scripts (or corresponding)
2139                     # We know they are generated files
2140                     my $ld = cleanfile($buildd, $_, $blddir);
2141                     $unified_info{shared_sources}->{$ddest}->{$ld} = 1;
2142                 } else {
2143                     die "unrecognised source file type for shared library: $s\n";
2144                 }
2145             }
2146         }
2147
2148         foreach (keys %generate) {
2149             my $dest = $_;
2150             my $ddest = cleanfile($buildd, $_, $blddir);
2151             die "more than one generator for $dest: "
2152                     ,join(" ", @{$generate{$_}}),"\n"
2153                     if scalar @{$generate{$_}} > 1;
2154             my @generator = split /\s+/, $generate{$dest}->[0];
2155             $generator[0] = cleanfile($sourced, $generator[0], $blddir),
2156             $unified_info{generate}->{$ddest} = [ @generator ];
2157         }
2158
2159         foreach (keys %depends) {
2160             my $dest = $_;
2161             my $ddest = $dest eq "" ? "" : cleanfile($sourced, $_, $blddir);
2162
2163             # If the destination doesn't exist in source, it can only be
2164             # a generated file in the build tree.
2165             if ($ddest ne "" && ($ddest eq $src_configdata || ! -f $ddest)) {
2166                 $ddest = cleanfile($buildd, $_, $blddir);
2167             }
2168             foreach (@{$depends{$dest}}) {
2169                 my $d = cleanfile($sourced, $_, $blddir);
2170
2171                 # If we know it's generated, or assume it is because we can't
2172                 # find it in the source tree, we set file we depend on to be
2173                 # in the build tree rather than the source tree, and assume
2174                 # and that there are lines to build it in a BEGINRAW..ENDRAW
2175                 # section or in the Makefile template.
2176                 if ($d eq $src_configdata
2177                     || ! -f $d
2178                     || (grep { $d eq $_ }
2179                         map { cleanfile($srcdir, $_, $blddir) }
2180                         grep { /\.h$/ } keys %{$unified_info{generate}})) {
2181                     $d = cleanfile($buildd, $_, $blddir);
2182                 }
2183                 # Take note if the file to depend on is being renamed
2184                 # Take extra care with files ending with .a, they should
2185                 # be treated without that extension, and the extension
2186                 # should be added back after treatment.
2187                 $d =~ /(\.a)?$/;
2188                 my $e = $1 // "";
2189                 $d = $`.$e;
2190                 $unified_info{depends}->{$ddest}->{$d} = 1;
2191             }
2192         }
2193
2194         foreach (keys %includes) {
2195             my $dest = $_;
2196             my $ddest = cleanfile($sourced, $_, $blddir);
2197
2198             # If the destination doesn't exist in source, it can only be
2199             # a generated file in the build tree.
2200             if ($ddest eq $src_configdata || ! -f $ddest) {
2201                 $ddest = cleanfile($buildd, $_, $blddir);
2202             }
2203             foreach (@{$includes{$dest}}) {
2204                 my $is = cleandir($sourced, $_, $blddir);
2205                 my $ib = cleandir($buildd, $_, $blddir);
2206                 push @{$unified_info{includes}->{$ddest}->{source}}, $is
2207                     unless grep { $_ eq $is } @{$unified_info{includes}->{$ddest}->{source}};
2208                 push @{$unified_info{includes}->{$ddest}->{build}}, $ib
2209                     unless grep { $_ eq $ib } @{$unified_info{includes}->{$ddest}->{build}};
2210             }
2211         }
2212
2213         foreach (keys %defines) {
2214             my $dest = $_;
2215             my $ddest = cleanfile($sourced, $_, $blddir);
2216
2217             # If the destination doesn't exist in source, it can only be
2218             # a generated file in the build tree.
2219             if (! -f $ddest) {
2220                 $ddest = cleanfile($buildd, $_, $blddir);
2221                 if ($unified_info{rename}->{$ddest}) {
2222                     $ddest = $unified_info{rename}->{$ddest};
2223                 }
2224             }
2225             foreach (@{$defines{$dest}}) {
2226                 m|^([^=]*)(=.*)?$|;
2227                 die "0 length macro name not permitted\n" if $1 eq "";
2228                 die "$1 defined more than once\n"
2229                     if defined $unified_info{defines}->{$ddest}->{$1};
2230                 $unified_info{defines}->{$ddest}->{$1} = $2;
2231             }
2232         }
2233     }
2234
2235     my $ordinals_text = join(', ', sort keys %ordinals);
2236     warn <<"EOF" if $ordinals_text;
2237
2238 WARNING: ORDINALS were specified for $ordinals_text
2239 They are ignored and should be replaced with a combination of GENERATE,
2240 DEPEND and SHARED_SOURCE.
2241 EOF
2242
2243
2244     # Go through the sources of all libraries and check that the same basename
2245     # doesn't appear more than once.  Some static library archivers depend on
2246     # them being unique.
2247     {
2248         my $err = 0;
2249         foreach my $prod (keys %{$unified_info{libraries}}) {
2250             my @prod_sources =
2251                 map { keys %{$unified_info{sources}->{$_}} }
2252                 keys %{$unified_info{sources}->{$prod}};
2253             my %srccnt = ();
2254
2255             # Count how many times a given each source basename
2256             # appears for each product.
2257             foreach my $src (@prod_sources) {
2258                 $srccnt{basename $src}++;
2259             }
2260
2261             foreach my $src (keys %srccnt) {
2262                 if ((my $cnt = $srccnt{$src}) > 1) {
2263                     print STDERR "$src appears $cnt times for the product $prod\n";
2264                     $err++
2265                 }
2266             }
2267         }
2268         die if $err > 0;
2269     }
2270
2271     # Massage the result
2272
2273     # If we depend on a header file or a perl module, add an inclusion of
2274     # its directory to allow smoothe inclusion
2275     foreach my $dest (keys %{$unified_info{depends}}) {
2276         next if $dest eq "";
2277         foreach my $d (keys %{$unified_info{depends}->{$dest}}) {
2278             next unless $d =~ /\.(h|pm)$/;
2279             my $i = dirname($d);
2280             my $spot =
2281                 $d eq "configdata.pm" || defined($unified_info{generate}->{$d})
2282                 ? 'build' : 'source';
2283             push @{$unified_info{includes}->{$dest}->{$spot}}, $i
2284                 unless grep { $_ eq $i } @{$unified_info{includes}->{$dest}->{$spot}};
2285         }
2286     }
2287
2288     # Go through all intermediary files and change their names to something that
2289     # reflects what they will be built for.  Note that for some source files,
2290     # this leads to duplicate object files because they are used multiple times.
2291     # the goal is to rename all object files according to this scheme:
2292     #    {productname}-{midfix}-{origobjname}.[o|res]
2293     # the {midfix} is a keyword indicating the type of product, which is mostly
2294     # valuable for libraries since they come in two forms.
2295     #
2296     # This also reorganises the {sources} and {shared_sources} so that the
2297     # former only contains ALL object files that are supposed to end up in
2298     # static libraries and programs, while the latter contains ALL object files
2299     # that are supposed to end up in shared libraries and DSOs.
2300     # The main reason for having two different source structures is to allow
2301     # the same name to be used for the static and the shared variants of a
2302     # library.
2303     {
2304         # Take copies so we don't get interference from added stuff
2305         my %unified_copy = ();
2306         foreach (('sources', 'shared_sources')) {
2307             $unified_copy{$_} = { %{$unified_info{$_}} }
2308                 if defined($unified_info{$_});
2309             delete $unified_info{$_};
2310         }
2311         foreach my $prodtype (('programs', 'libraries', 'modules', 'scripts')) {
2312             # $intent serves multi purposes:
2313             # - give a prefix for the new object files names
2314             # - in the case of libraries, rearrange the object files so static
2315             #   libraries use the 'sources' structure exclusively, while shared
2316             #   libraries use the 'shared_sources' structure exclusively.
2317             my $intent = {
2318                 programs  => { bin    => { src => [ 'sources' ],
2319                                            dst => 'sources' } },
2320                 libraries => { lib    => { src => [ 'sources' ],
2321                                            dst => 'sources' },
2322                                shlib  => { prodselect =>
2323                                                sub { grep !/\.a$/, @_ },
2324                                            src => [ 'sources',
2325                                                     'shared_sources' ],
2326                                            dst => 'shared_sources' } },
2327                 modules   => { dso    => { src => [ 'sources' ],
2328                                            dst => 'sources' } },
2329                 scripts   => { script => { src => [ 'sources' ],
2330                                            dst => 'sources' } }
2331                } -> {$prodtype};
2332             foreach my $kind (keys %$intent) {
2333                 next if ($intent->{$kind}->{dst} eq 'shared_sources'
2334                              && $disabled{shared});
2335
2336                 my @src = @{$intent->{$kind}->{src}};
2337                 my $dst = $intent->{$kind}->{dst};
2338                 my $prodselect = $intent->{$kind}->{prodselect} // sub { @_ };
2339                 foreach my $prod ($prodselect->(keys %{$unified_info{$prodtype}})) {
2340                     # %prod_sources has all applicable objects as keys, and
2341                     # their corresponding sources as values
2342                     my %prod_sources =
2343                         map { $_ => [ keys %{$unified_copy{sources}->{$_}} ] }
2344                         map { keys %{$unified_copy{$_}->{$prod}} }
2345                         @src;
2346                     foreach (keys %prod_sources) {
2347                         # Only affect object files and resource files,
2348                         # the others simply get a new value
2349                         # (+1 instead of -1)
2350                         if ($_ =~ /\.(o|res)$/) {
2351                             (my $prodname = $prod) =~ s|\.a$||;
2352                             my $newobj =
2353                                 catfile(dirname($_),
2354                                         basename($prodname)
2355                                             . '-' . $kind
2356                                             . '-' . basename($_));
2357                             $unified_info{$dst}->{$prod}->{$newobj} = 1;
2358                             foreach my $src (@{$prod_sources{$_}}) {
2359                                 $unified_info{sources}->{$newobj}->{$src} = 1;
2360                             }
2361                             # Adjust dependencies
2362                             foreach my $deps (keys %{$unified_info{depends}->{$_}}) {
2363                                 $unified_info{depends}->{$_}->{$deps} = -1;
2364                                 $unified_info{depends}->{$newobj}->{$deps} = 1;
2365                             }
2366                             # Adjust includes
2367                             foreach my $k (('source', 'build')) {
2368                                 next unless
2369                                     defined($unified_info{includes}->{$_}->{$k});
2370                                 my @incs = @{$unified_info{includes}->{$_}->{$k}};
2371                                 $unified_info{includes}->{$newobj}->{$k} = [ @incs ];
2372                             }
2373                         } else {
2374                             $unified_info{$dst}->{$prod}->{$_} = 1;
2375                         }
2376                     }
2377                 }
2378             }
2379         }
2380     }
2381
2382     # At this point, we have a number of sources with the value -1.  They
2383     # aren't part of the local build and are probably meant for a different
2384     # platform, and can therefore be cleaned away.  That happens when making
2385     # %unified_info more efficient below.
2386
2387     ### Make unified_info a bit more efficient
2388     # One level structures
2389     foreach (("programs", "libraries", "modules", "scripts")) {
2390         $unified_info{$_} = [ sort keys %{$unified_info{$_}} ];
2391     }
2392     # Two level structures
2393     foreach my $l1 (("sources", "shared_sources", "ldadd", "depends")) {
2394         foreach my $l2 (sort keys %{$unified_info{$l1}}) {
2395             my @items =
2396                 sort
2397                 grep { $unified_info{$l1}->{$l2}->{$_} > 0 }
2398                 keys %{$unified_info{$l1}->{$l2}};
2399             if (@items) {
2400                 $unified_info{$l1}->{$l2} = [ @items ];
2401             } else {
2402                 delete $unified_info{$l1}->{$l2};
2403             }
2404         }
2405     }
2406     # Defines
2407     foreach my $dest (sort keys %{$unified_info{defines}}) {
2408         $unified_info{defines}->{$dest}
2409             = [ map { $_.$unified_info{defines}->{$dest}->{$_} }
2410                 sort keys %{$unified_info{defines}->{$dest}} ];
2411     }
2412     # Includes
2413     foreach my $dest (sort keys %{$unified_info{includes}}) {
2414         if (defined($unified_info{includes}->{$dest}->{build})) {
2415             my @source_includes = ();
2416             @source_includes = ( @{$unified_info{includes}->{$dest}->{source}} )
2417                 if defined($unified_info{includes}->{$dest}->{source});
2418             $unified_info{includes}->{$dest} =
2419                 [ @{$unified_info{includes}->{$dest}->{build}} ];
2420             foreach my $inc (@source_includes) {
2421                 push @{$unified_info{includes}->{$dest}}, $inc
2422                     unless grep { $_ eq $inc } @{$unified_info{includes}->{$dest}};
2423             }
2424         } elsif (defined($unified_info{includes}->{$dest}->{source})) {
2425             $unified_info{includes}->{$dest} =
2426                 [ @{$unified_info{includes}->{$dest}->{source}} ];
2427         } else {
2428             delete $unified_info{includes}->{$dest};
2429         }
2430     }
2431
2432     # For convenience collect information regarding directories where
2433     # files are generated, those generated files and the end product
2434     # they end up in where applicable.  Then, add build rules for those
2435     # directories
2436     my %loopinfo = ( "lib" => [ @{$unified_info{libraries}} ],
2437                      "dso" => [ @{$unified_info{modules}} ],
2438                      "bin" => [ @{$unified_info{programs}} ],
2439                      "script" => [ @{$unified_info{scripts}} ] );
2440     foreach my $type (keys %loopinfo) {
2441         foreach my $product (@{$loopinfo{$type}}) {
2442             my %dirs = ();
2443             my $pd = dirname($product);
2444
2445             foreach (@{$unified_info{sources}->{$product} // []},
2446                      @{$unified_info{shared_sources}->{$product} // []}) {
2447                 my $d = dirname($_);
2448
2449                 # We don't want to create targets for source directories
2450                 # when building out of source
2451                 next if ($config{sourcedir} ne $config{builddir}
2452                              && $d =~ m|^\Q$config{sourcedir}\E|);
2453                 # We already have a "test" target, and the current directory
2454                 # is just silly to make a target for
2455                 next if $d eq "test" || $d eq ".";
2456
2457                 $dirs{$d} = 1;
2458                 push @{$unified_info{dirinfo}->{$d}->{deps}}, $_
2459                     if $d ne $pd;
2460             }
2461             foreach (keys %dirs) {
2462                 push @{$unified_info{dirinfo}->{$_}->{products}->{$type}},
2463                     $product;
2464             }
2465         }
2466     }
2467 }
2468
2469 # For the schemes that need it, we provide the old *_obj configs
2470 # from the *_asm_obj ones
2471 foreach (grep /_(asm|aux)_src$/, keys %target) {
2472     my $src = $_;
2473     (my $obj = $_) =~ s/_(asm|aux)_src$/_obj/;
2474     $target{$obj} = $target{$src};
2475     $target{$obj} =~ s/\.[csS]\b/.o/g; # C and assembler
2476     $target{$obj} =~ s/\.(cc|cpp)\b/_cc.o/g; # C++
2477 }
2478
2479 # Write down our configuration where it fits #########################
2480
2481 print "Creating configdata.pm\n";
2482 open(OUT,">configdata.pm") || die "unable to create configdata.pm: $!\n";
2483 print OUT <<"EOF";
2484 #! $config{HASHBANGPERL}
2485
2486 package configdata;
2487
2488 use strict;
2489 use warnings;
2490
2491 use Exporter;
2492 #use vars qw(\@ISA \@EXPORT);
2493 our \@ISA = qw(Exporter);
2494 our \@EXPORT = qw(\%config \%target \%disabled \%withargs \%unified_info \@disablables \@disablables_int);
2495
2496 EOF
2497 print OUT "our %config = (\n";
2498 foreach (sort keys %config) {
2499     if (ref($config{$_}) eq "ARRAY") {
2500         print OUT "  ", $_, " => [ ", join(", ",
2501                                            map { quotify("perl", $_) }
2502                                            @{$config{$_}}), " ],\n";
2503     } elsif (ref($config{$_}) eq "HASH") {
2504         print OUT "  ", $_, " => {";
2505         if (scalar keys %{$config{$_}} > 0) {
2506             print OUT "\n";
2507             foreach my $key (sort keys %{$config{$_}}) {
2508                 print OUT "      ",
2509                     join(" => ",
2510                          quotify("perl", $key),
2511                          defined $config{$_}->{$key}
2512                              ? quotify("perl", $config{$_}->{$key})
2513                              : "undef");
2514                 print OUT ",\n";
2515             }
2516             print OUT "  ";
2517         }
2518         print OUT "},\n";
2519     } else {
2520         print OUT "  ", $_, " => ", quotify("perl", $config{$_}), ",\n"
2521     }
2522 }
2523 print OUT <<"EOF";
2524 );
2525
2526 EOF
2527 print OUT "our %target = (\n";
2528 foreach (sort keys %target) {
2529     if (ref($target{$_}) eq "ARRAY") {
2530         print OUT "  ", $_, " => [ ", join(", ",
2531                                            map { quotify("perl", $_) }
2532                                            @{$target{$_}}), " ],\n";
2533     } else {
2534         print OUT "  ", $_, " => ", quotify("perl", $target{$_}), ",\n"
2535     }
2536 }
2537 print OUT <<"EOF";
2538 );
2539
2540 EOF
2541 print OUT "our \%available_protocols = (\n";
2542 print OUT "  tls => [ ", join(", ", map { quotify("perl", $_) } @tls), " ],\n";
2543 print OUT "  dtls => [ ", join(", ", map { quotify("perl", $_) } @dtls), " ],\n";
2544 print OUT <<"EOF";
2545 );
2546
2547 EOF
2548 print OUT "our \@disablables = (\n";
2549 foreach (@disablables) {
2550     print OUT "  ", quotify("perl", $_), ",\n";
2551 }
2552 print OUT <<"EOF";
2553 );
2554
2555 EOF
2556 print OUT "# The following come from Configure's @disablables_int\n";
2557 print OUT "our \@disablables_int = (\n";
2558 foreach (@disablables_int) {
2559     print OUT "  ", quotify("perl", $_), ",\n";
2560 }
2561 print OUT <<"EOF";
2562 );
2563
2564 EOF
2565 print OUT "our \%disabled = (\n";
2566 foreach (sort keys %disabled) {
2567     print OUT "  ", quotify("perl", $_), " => ", quotify("perl", $disabled{$_}), ",\n";
2568 }
2569 print OUT <<"EOF";
2570 );
2571
2572 EOF
2573 print OUT "our %withargs = (\n";
2574 foreach (sort keys %withargs) {
2575     if (ref($withargs{$_}) eq "ARRAY") {
2576         print OUT "  ", $_, " => [ ", join(", ",
2577                                            map { quotify("perl", $_) }
2578                                            @{$withargs{$_}}), " ],\n";
2579     } else {
2580         print OUT "  ", $_, " => ", quotify("perl", $withargs{$_}), ",\n"
2581     }
2582 }
2583 print OUT <<"EOF";
2584 );
2585
2586 EOF
2587 if ($builder eq "unified") {
2588     my $recurse;
2589     $recurse = sub {
2590         my $indent = shift;
2591         foreach (@_) {
2592             if (ref $_ eq "ARRAY") {
2593                 print OUT " "x$indent, "[\n";
2594                 foreach (@$_) {
2595                     $recurse->($indent + 4, $_);
2596                 }
2597                 print OUT " "x$indent, "],\n";
2598             } elsif (ref $_ eq "HASH") {
2599                 my %h = %$_;
2600                 print OUT " "x$indent, "{\n";
2601                 foreach (sort keys %h) {
2602                     if (ref $h{$_} eq "") {
2603                         print OUT " "x($indent + 4), quotify("perl", $_), " => ", quotify("perl", $h{$_}), ",\n";
2604                     } else {
2605                         print OUT " "x($indent + 4), quotify("perl", $_), " =>\n";
2606                         $recurse->($indent + 8, $h{$_});
2607                     }
2608                 }
2609                 print OUT " "x$indent, "},\n";
2610             } else {
2611                 print OUT " "x$indent, quotify("perl", $_), ",\n";
2612             }
2613         }
2614     };
2615     print OUT "our %unified_info = (\n";
2616     foreach (sort keys %unified_info) {
2617         if (ref $unified_info{$_} eq "") {
2618             print OUT " "x4, quotify("perl", $_), " => ", quotify("perl", $unified_info{$_}), ",\n";
2619         } else {
2620             print OUT " "x4, quotify("perl", $_), " =>\n";
2621             $recurse->(8, $unified_info{$_});
2622         }
2623     }
2624     print OUT <<"EOF";
2625 );
2626
2627 EOF
2628 }
2629 print OUT
2630     "# The following data is only used when this files is use as a script\n";
2631 print OUT "my \@makevars = (\n";
2632 foreach (sort keys %user) {
2633     print OUT "    '",$_,"',\n";
2634 }
2635 print OUT ");\n";
2636 print OUT "my \%disabled_info = (\n";
2637 foreach my $what (sort keys %disabled_info) {
2638     print OUT "    '$what' => {\n";
2639     foreach my $info (sort keys %{$disabled_info{$what}}) {
2640         if (ref $disabled_info{$what}->{$info} eq 'ARRAY') {
2641             print OUT "        $info => [ ",
2642                 join(', ', map { "'$_'" } @{$disabled_info{$what}->{$info}}),
2643                 " ],\n";
2644         } else {
2645             print OUT "        $info => '", $disabled_info{$what}->{$info},
2646                 "',\n";
2647         }
2648     }
2649     print OUT "    },\n";
2650 }
2651 print OUT ");\n";
2652 print OUT 'my @user_crossable = qw( ', join (' ', @user_crossable), " );\n";
2653 print OUT << 'EOF';
2654 # If run directly, we can give some answers, and even reconfigure
2655 unless (caller) {
2656     use Getopt::Long;
2657     use File::Spec::Functions;
2658     use File::Basename;
2659     use Pod::Usage;
2660
2661     my $here = dirname($0);
2662
2663     my $dump = undef;
2664     my $cmdline = undef;
2665     my $options = undef;
2666     my $target = undef;
2667     my $envvars = undef;
2668     my $makevars = undef;
2669     my $buildparams = undef;
2670     my $reconf = undef;
2671     my $verbose = undef;
2672     my $help = undef;
2673     my $man = undef;
2674     GetOptions('dump|d'                 => \$dump,
2675                'command-line|c'         => \$cmdline,
2676                'options|o'              => \$options,
2677                'target|t'               => \$target,
2678                'environment|e'          => \$envvars,
2679                'make-variables|m'       => \$makevars,
2680                'build-parameters|b'     => \$buildparams,
2681                'reconfigure|reconf|r'   => \$reconf,
2682                'verbose|v'              => \$verbose,
2683                'help'                   => \$help,
2684                'man'                    => \$man)
2685         or die "Errors in command line arguments\n";
2686
2687     unless ($dump || $cmdline || $options || $target || $envvars || $makevars
2688             || $buildparams || $reconf || $verbose || $help || $man) {
2689         print STDERR <<"_____";
2690 You must give at least one option.
2691 For more information, do '$0 --help'
2692 _____
2693         exit(2);
2694     }
2695
2696     if ($help) {
2697         pod2usage(-exitval => 0,
2698                   -verbose => 1);
2699     }
2700     if ($man) {
2701         pod2usage(-exitval => 0,
2702                   -verbose => 2);
2703     }
2704     if ($dump || $cmdline) {
2705         print "\nCommand line (with current working directory = $here):\n\n";
2706         print '    ',join(' ',
2707                           $config{PERL},
2708                           catfile($config{sourcedir}, 'Configure'),
2709                           @{$config{perlargv}}), "\n";
2710         print "\nPerl information:\n\n";
2711         print '    ',$config{perl_cmd},"\n";
2712         print '    ',$config{perl_version},' for ',$config{perl_archname},"\n";
2713     }
2714     if ($dump || $options) {
2715         my $longest = 0;
2716         my $longest2 = 0;
2717         foreach my $what (@disablables) {
2718             $longest = length($what) if $longest < length($what);
2719             $longest2 = length($disabled{$what})
2720                 if $disabled{$what} && $longest2 < length($disabled{$what});
2721         }
2722         print "\nEnabled features:\n\n";
2723         foreach my $what (@disablables) {
2724             print "    $what\n" unless $disabled{$what};
2725         }
2726         print "\nDisabled features:\n\n";
2727         foreach my $what (@disablables) {
2728             if ($disabled{$what}) {
2729                 print "    $what", ' ' x ($longest - length($what) + 1),
2730                     "[$disabled{$what}]", ' ' x ($longest2 - length($disabled{$what}) + 1);
2731                 print $disabled_info{$what}->{macro}
2732                     if $disabled_info{$what}->{macro};
2733                 print ' (skip ',
2734                     join(', ', @{$disabled_info{$what}->{skipped}}),
2735                     ')'
2736                     if $disabled_info{$what}->{skipped};
2737                 print "\n";
2738             }
2739         }
2740     }
2741     if ($dump || $target) {
2742         print "\nConfig target attributes:\n\n";
2743         foreach (sort keys %target) {
2744             next if $_ =~ m|^_| || $_ eq 'template';
2745             my $quotify = sub {
2746                 map { (my $x = $_) =~ s|([\\\$\@"])|\\$1|g; "\"$x\""} @_;
2747             };
2748             print '    ', $_, ' => ';
2749             if (ref($target{$_}) eq "ARRAY") {
2750                 print '[ ', join(', ', $quotify->(@{$target{$_}})), " ],\n";
2751             } else {
2752                 print $quotify->($target{$_}), ",\n"
2753             }
2754         }
2755     }
2756     if ($dump || $envvars) {
2757         print "\nRecorded environment:\n\n";
2758         foreach (sort keys %{$config{perlenv}}) {
2759             print '    ',$_,' = ',($config{perlenv}->{$_} || ''),"\n";
2760         }
2761     }
2762     if ($dump || $makevars) {
2763         print "\nMakevars:\n\n";
2764         foreach my $var (@makevars) {
2765             my $prefix = '';
2766             $prefix = $config{CROSS_COMPILE}
2767                 if grep { $var eq $_ } @user_crossable;
2768             $prefix //= '';
2769             print '    ',$var,' ' x (16 - length $var),'= ',
2770                 (ref $config{$var} eq 'ARRAY'
2771                  ? join(' ', @{$config{$var}})
2772                  : $prefix.$config{$var}),
2773                 "\n"
2774                 if defined $config{$var};
2775         }
2776
2777         my @buildfile = ($config{builddir}, $config{build_file});
2778         unshift @buildfile, $here
2779             unless file_name_is_absolute($config{builddir});
2780         my $buildfile = canonpath(catdir(@buildfile));
2781         print <<"_____";
2782
2783 NOTE: These variables only represent the configuration view.  The build file
2784 template may have processed these variables further, please have a look at the
2785 build file for more exact data:
2786     $buildfile
2787 _____
2788     }
2789     if ($dump || $buildparams) {
2790         my @buildfile = ($config{builddir}, $config{build_file});
2791         unshift @buildfile, $here
2792             unless file_name_is_absolute($config{builddir});
2793         print "\nbuild file:\n\n";
2794         print "    ", canonpath(catfile(@buildfile)),"\n";
2795
2796         print "\nbuild file templates:\n\n";
2797         foreach (@{$config{build_file_templates}}) {
2798             my @tmpl = ($_);
2799             unshift @tmpl, $here
2800                 unless file_name_is_absolute($config{sourcedir});
2801             print '    ',canonpath(catfile(@tmpl)),"\n";
2802         }
2803     }
2804     if ($reconf) {
2805         if ($verbose) {
2806             print 'Reconfiguring with: ', join(' ',@{$config{perlargv}}), "\n";
2807             foreach (sort keys %{$config{perlenv}}) {
2808                 print '    ',$_,' = ',($config{perlenv}->{$_} || ""),"\n";
2809             }
2810         }
2811
2812         chdir $here;
2813         exec $^X,catfile($config{sourcedir}, 'Configure'),'reconf';
2814     }
2815 }
2816
2817 1;
2818
2819 __END__
2820
2821 =head1 NAME
2822
2823 configdata.pm - configuration data for OpenSSL builds
2824
2825 =head1 SYNOPSIS
2826
2827 Interactive:
2828
2829   perl configdata.pm [options]
2830
2831 As data bank module:
2832
2833   use configdata;
2834
2835 =head1 DESCRIPTION
2836
2837 This module can be used in two modes, interactively and as a module containing
2838 all the data recorded by OpenSSL's Configure script.
2839
2840 When used interactively, simply run it as any perl script, with at least one
2841 option, and you will get the information you ask for.  See L</OPTIONS> below.
2842
2843 When loaded as a module, you get a few databanks with useful information to
2844 perform build related tasks.  The databanks are:
2845
2846     %config             Configured things.
2847     %target             The OpenSSL config target with all inheritances
2848                         resolved.
2849     %disabled           The features that are disabled.
2850     @disablables        The list of features that can be disabled.
2851     %withargs           All data given through --with-THING options.
2852     %unified_info       All information that was computed from the build.info
2853                         files.
2854
2855 =head1 OPTIONS
2856
2857 =over 4
2858
2859 =item B<--help>
2860
2861 Print a brief help message and exit.
2862
2863 =item B<--man>
2864
2865 Print the manual page and exit.
2866
2867 =item B<--dump> | B<-d>
2868
2869 Print all relevant configuration data.  This is equivalent to B<--command-line>
2870 B<--options> B<--target> B<--environment> B<--make-variables>
2871 B<--build-parameters>.
2872
2873 =item B<--command-line> | B<-c>
2874
2875 Print the current configuration command line.
2876
2877 =item B<--options> | B<-o>
2878
2879 Print the features, both enabled and disabled, and display defined macro and
2880 skipped directories where applicable.
2881
2882 =item B<--target> | B<-t>
2883
2884 Print the config attributes for this config target.
2885
2886 =item B<--environment> | B<-e>
2887
2888 Print the environment variables and their values at the time of configuration.
2889
2890 =item B<--make-variables> | B<-m>
2891
2892 Print the main make variables generated in the current configuration
2893
2894 =item B<--build-parameters> | B<-b>
2895
2896 Print the build parameters, i.e. build file and build file templates.
2897
2898 =item B<--reconfigure> | B<--reconf> | B<-r>
2899
2900 Redo the configuration.
2901
2902 =item B<--verbose> | B<-v>
2903
2904 Verbose output.
2905
2906 =back
2907
2908 =cut
2909
2910 EOF
2911 close(OUT);
2912 if ($builder_platform eq 'unix') {
2913     my $mode = (0755 & ~umask);
2914     chmod $mode, 'configdata.pm'
2915         or warn sprintf("WARNING: Couldn't change mode for 'configdata.pm' to 0%03o: %s\n",$mode,$!);
2916 }
2917
2918 my %builders = (
2919     unified => sub {
2920         print 'Creating ',$target{build_file},"\n";
2921         run_dofile(catfile($blddir, $target{build_file}),
2922                    @{$config{build_file_templates}});
2923     },
2924     );
2925
2926 $builders{$builder}->($builder_platform, @builder_opts);
2927
2928 $SIG{__DIE__} = $orig_death_handler;
2929
2930 print <<"EOF" if ($disabled{threads} eq "unavailable");
2931
2932 The library could not be configured for supporting multi-threaded
2933 applications as the compiler options required on this system are not known.
2934 See file INSTALL for details if you need multi-threading.
2935 EOF
2936
2937 print <<"EOF" if ($no_shared_warn);
2938
2939 The options 'shared', 'pic' and 'dynamic-engine' aren't supported on this
2940 platform, so we will pretend you gave the option 'no-pic', which also disables
2941 'shared' and 'dynamic-engine'.  If you know how to implement shared libraries
2942 or position independent code, please let us know (but please first make sure
2943 you have tried with a current version of OpenSSL).
2944 EOF
2945
2946 print <<"EOF";
2947
2948 **********************************************************************
2949 ***                                                                ***
2950 ***   OpenSSL has been successfully configured                     ***
2951 ***                                                                ***
2952 ***   If you encounter a problem while building, please open an    ***
2953 ***   issue on GitHub <https://github.com/openssl/openssl/issues>  ***
2954 ***   and include the output from the following command:           ***
2955 ***                                                                ***
2956 ***       perl configdata.pm --dump                                ***
2957 ***                                                                ***
2958 ***   (If you are new to OpenSSL, you might want to consult the    ***
2959 ***   'Troubleshooting' section in the INSTALL file first)         ***
2960 ***                                                                ***
2961 **********************************************************************
2962 EOF
2963
2964 exit(0);
2965
2966 ######################################################################
2967 #
2968 # Helpers and utility functions
2969 #
2970
2971 # Death handler, to print a helpful message in case of failure #######
2972 #
2973 sub death_handler {
2974     die @_ if $^S;              # To prevent the added message in eval blocks
2975     my $build_file = $target{build_file} // "build file";
2976     my @message = ( <<"_____", @_ );
2977
2978 Failure!  $build_file wasn't produced.
2979 Please read INSTALL and associated NOTES files.  You may also have to look over
2980 your available compiler tool chain or change your configuration.
2981
2982 _____
2983
2984     # Dying is terminal, so it's ok to reset the signal handler here.
2985     $SIG{__DIE__} = $orig_death_handler;
2986     die @message;
2987 }
2988
2989 # Configuration file reading #########################################
2990
2991 # Note: All of the helper functions are for lazy evaluation.  They all
2992 # return a CODE ref, which will return the intended value when evaluated.
2993 # Thus, whenever there's mention of a returned value, it's about that
2994 # intended value.
2995
2996 # Helper function to implement conditional inheritance depending on the
2997 # value of $disabled{asm}.  Used in inherit_from values as follows:
2998 #
2999 #      inherit_from => [ "template", asm("asm_tmpl") ]
3000 #
3001 sub asm {
3002     my @x = @_;
3003     sub {
3004         $disabled{asm} ? () : @x;
3005     }
3006 }
3007
3008 # Helper function to implement conditional value variants, with a default
3009 # plus additional values based on the value of $config{build_type}.
3010 # Arguments are given in hash table form:
3011 #
3012 #       picker(default => "Basic string: ",
3013 #              debug   => "debug",
3014 #              release => "release")
3015 #
3016 # When configuring with --debug, the resulting string will be
3017 # "Basic string: debug", and when not, it will be "Basic string: release"
3018 #
3019 # This can be used to create variants of sets of flags according to the
3020 # build type:
3021 #
3022 #       cflags => picker(default => "-Wall",
3023 #                        debug   => "-g -O0",
3024 #                        release => "-O3")
3025 #
3026 sub picker {
3027     my %opts = @_;
3028     return sub { add($opts{default} || (),
3029                      $opts{$config{build_type}} || ())->(); }
3030 }
3031
3032 # Helper function to combine several values of different types into one.
3033 # This is useful if you want to combine a string with the result of a
3034 # lazy function, such as:
3035 #
3036 #       cflags => combine("-Wall", sub { $disabled{zlib} ? () : "-DZLIB" })
3037 #
3038 sub combine {
3039     my @stuff = @_;
3040     return sub { add(@stuff)->(); }
3041 }
3042
3043 # Helper function to implement conditional values depending on the value
3044 # of $disabled{threads}.  Can be used as follows:
3045 #
3046 #       cflags => combine("-Wall", threads("-pthread"))
3047 #
3048 sub threads {
3049     my @flags = @_;
3050     return sub { add($disabled{threads} ? () : @flags)->(); }
3051 }
3052
3053 sub shared {
3054     my @flags = @_;
3055     return sub { add($disabled{shared} ? () : @flags)->(); }
3056 }
3057
3058 our $add_called = 0;
3059 # Helper function to implement adding values to already existing configuration
3060 # values.  It handles elements that are ARRAYs, CODEs and scalars
3061 sub _add {
3062     my $separator = shift;
3063
3064     # If there's any ARRAY in the collection of values OR the separator
3065     # is undef, we will return an ARRAY of combined values, otherwise a
3066     # string of joined values with $separator as the separator.
3067     my $found_array = !defined($separator);
3068
3069     my @values =
3070         map {
3071             my $res = $_;
3072             while (ref($res) eq "CODE") {
3073                 $res = $res->();
3074             }
3075             if (defined($res)) {
3076                 if (ref($res) eq "ARRAY") {
3077                     $found_array = 1;
3078                     @$res;
3079                 } else {
3080                     $res;
3081                 }
3082             } else {
3083                 ();
3084             }
3085     } (@_);
3086
3087     $add_called = 1;
3088
3089     if ($found_array) {
3090         [ @values ];
3091     } else {
3092         join($separator, grep { defined($_) && $_ ne "" } @values);
3093     }
3094 }
3095 sub add_before {
3096     my $separator = " ";
3097     if (ref($_[$#_]) eq "HASH") {
3098         my $opts = pop;
3099         $separator = $opts->{separator};
3100     }
3101     my @x = @_;
3102     sub { _add($separator, @x, @_) };
3103 }
3104 sub add {
3105     my $separator = " ";
3106     if (ref($_[$#_]) eq "HASH") {
3107         my $opts = pop;
3108         $separator = $opts->{separator};
3109     }
3110     my @x = @_;
3111     sub { _add($separator, @_, @x) };
3112 }
3113
3114 sub read_eval_file {
3115     my $fname = shift;
3116     my $content;
3117     my @result;
3118
3119     open F, "< $fname" or die "Can't open '$fname': $!\n";
3120     {
3121         undef local $/;
3122         $content = <F>;
3123     }
3124     close F;
3125     {
3126         local $@;
3127
3128         @result = ( eval $content );
3129         warn $@ if $@;
3130     }
3131     return wantarray ? @result : $result[0];
3132 }
3133
3134 # configuration reader, evaluates the input file as a perl script and expects
3135 # it to fill %targets with target configurations.  Those are then added to
3136 # %table.
3137 sub read_config {
3138     my $fname = shift;
3139     my %targets;
3140
3141     {
3142         # Protect certain tables from tampering
3143         local %table = ();
3144
3145         %targets = read_eval_file($fname);
3146     }
3147     my %preexisting = ();
3148     foreach (sort keys %targets) {
3149         $preexisting{$_} = 1 if $table{$_};
3150     }
3151     die <<"EOF",
3152 The following config targets from $fname
3153 shadow pre-existing config targets with the same name:
3154 EOF
3155         map { "  $_\n" } sort keys %preexisting
3156         if %preexisting;
3157
3158
3159     # For each target, check that it's configured with a hash table.
3160     foreach (keys %targets) {
3161         if (ref($targets{$_}) ne "HASH") {
3162             if (ref($targets{$_}) eq "") {
3163                 warn "Deprecated target configuration for $_, ignoring...\n";
3164             } else {
3165                 warn "Misconfigured target configuration for $_ (should be a hash table), ignoring...\n";
3166             }
3167             delete $targets{$_};
3168         } else {
3169             $targets{$_}->{_conf_fname_int} = add([ $fname ]);
3170         }
3171     }
3172
3173     %table = (%table, %targets);
3174
3175 }
3176
3177 # configuration resolver.  Will only resolve all the lazy evaluation
3178 # codeblocks for the chosen target and all those it inherits from,
3179 # recursively
3180 sub resolve_config {
3181     my $target = shift;
3182     my @breadcrumbs = @_;
3183
3184 #    my $extra_checks = defined($ENV{CONFIGURE_EXTRA_CHECKS});
3185
3186     if (grep { $_ eq $target } @breadcrumbs) {
3187         die "inherit_from loop!  target backtrace:\n  "
3188             ,$target,"\n  ",join("\n  ", @breadcrumbs),"\n";
3189     }
3190
3191     if (!defined($table{$target})) {
3192         warn "Warning! target $target doesn't exist!\n";
3193         return ();
3194     }
3195     # Recurse through all inheritances.  They will be resolved on the
3196     # fly, so when this operation is done, they will all just be a
3197     # bunch of attributes with string values.
3198     # What we get here, though, are keys with references to lists of
3199     # the combined values of them all.  We will deal with lists after
3200     # this stage is done.
3201     my %combined_inheritance = ();
3202     if ($table{$target}->{inherit_from}) {
3203         my @inherit_from =
3204             map { ref($_) eq "CODE" ? $_->() : $_ } @{$table{$target}->{inherit_from}};
3205         foreach (@inherit_from) {
3206             my %inherited_config = resolve_config($_, $target, @breadcrumbs);
3207
3208             # 'template' is a marker that's considered private to
3209             # the config that had it.
3210             delete $inherited_config{template};
3211
3212             foreach (keys %inherited_config) {
3213                 if (!$combined_inheritance{$_}) {
3214                     $combined_inheritance{$_} = [];
3215                 }
3216                 push @{$combined_inheritance{$_}}, $inherited_config{$_};
3217             }
3218         }
3219     }
3220
3221     # We won't need inherit_from in this target any more, since we've
3222     # resolved all the inheritances that lead to this
3223     delete $table{$target}->{inherit_from};
3224
3225     # Now is the time to deal with those lists.  Here's the place to
3226     # decide what shall be done with those lists, all based on the
3227     # values of the target we're currently dealing with.
3228     # - If a value is a coderef, it will be executed with the list of
3229     #   inherited values as arguments.
3230     # - If the corresponding key doesn't have a value at all or is the
3231     #   empty string, the inherited value list will be run through the
3232     #   default combiner (below), and the result becomes this target's
3233     #   value.
3234     # - Otherwise, this target's value is assumed to be a string that
3235     #   will simply override the inherited list of values.
3236     my $default_combiner = add();
3237
3238     my %all_keys =
3239         map { $_ => 1 } (keys %combined_inheritance,
3240                          keys %{$table{$target}});
3241
3242     sub process_values {
3243         my $object    = shift;
3244         my $inherited = shift;  # Always a [ list ]
3245         my $target    = shift;
3246         my $entry     = shift;
3247
3248         $add_called = 0;
3249
3250         while(ref($object) eq "CODE") {
3251             $object = $object->(@$inherited);
3252         }
3253         if (!defined($object)) {
3254             return ();
3255         }
3256         elsif (ref($object) eq "ARRAY") {
3257             local $add_called;  # To make sure recursive calls don't affect it
3258             return [ map { process_values($_, $inherited, $target, $entry) }
3259                      @$object ];
3260         } elsif (ref($object) eq "") {
3261             return $object;
3262         } else {
3263             die "cannot handle reference type ",ref($object)
3264                 ," found in target ",$target," -> ",$entry,"\n";
3265         }
3266     }
3267
3268     foreach (sort keys %all_keys) {
3269         my $previous = $combined_inheritance{$_};
3270
3271         # Current target doesn't have a value for the current key?
3272         # Assign it the default combiner, the rest of this loop body
3273         # will handle it just like any other coderef.
3274         if (!exists $table{$target}->{$_}) {
3275             $table{$target}->{$_} = $default_combiner;
3276         }
3277
3278         $table{$target}->{$_} = process_values($table{$target}->{$_},
3279                                                $combined_inheritance{$_},
3280                                                $target, $_);
3281         unless(defined($table{$target}->{$_})) {
3282             delete $table{$target}->{$_};
3283         }
3284 #        if ($extra_checks &&
3285 #            $previous && !($add_called ||  $previous ~~ $table{$target}->{$_})) {
3286 #            warn "$_ got replaced in $target\n";
3287 #        }
3288     }
3289
3290     # Finally done, return the result.
3291     return %{$table{$target}};
3292 }
3293
3294 sub usage
3295         {
3296         print STDERR $usage;
3297         print STDERR "\npick os/compiler from:\n";
3298         my $j=0;
3299         my $i;
3300         my $k=0;
3301         foreach $i (sort keys %table)
3302                 {
3303                 next if $table{$i}->{template};
3304                 next if $i =~ /^debug/;
3305                 $k += length($i) + 1;
3306                 if ($k > 78)
3307                         {
3308                         print STDERR "\n";
3309                         $k=length($i);
3310                         }
3311                 print STDERR $i . " ";
3312                 }
3313         foreach $i (sort keys %table)
3314                 {
3315                 next if $table{$i}->{template};
3316                 next if $i !~ /^debug/;
3317                 $k += length($i) + 1;
3318                 if ($k > 78)
3319                         {
3320                         print STDERR "\n";
3321                         $k=length($i);
3322                         }
3323                 print STDERR $i . " ";
3324                 }
3325         print STDERR "\n\nNOTE: If in doubt, on Unix-ish systems use './config'.\n";
3326         exit(1);
3327         }
3328
3329 sub run_dofile
3330 {
3331     my $out = shift;
3332     my @templates = @_;
3333
3334     unlink $out || warn "Can't remove $out, $!"
3335         if -f $out;
3336     foreach (@templates) {
3337         die "Can't open $_, $!" unless -f $_;
3338     }
3339     my $perlcmd = (quotify("maybeshell", $config{PERL}))[0];
3340     my $cmd = "$perlcmd \"-I.\" \"-Mconfigdata\" \"$dofile\" -o\"Configure\" \"".join("\" \"",@templates)."\" > \"$out.new\"";
3341     #print STDERR "DEBUG[run_dofile]: \$cmd = $cmd\n";
3342     system($cmd);
3343     exit 1 if $? != 0;
3344     rename("$out.new", $out) || die "Can't rename $out.new, $!";
3345 }
3346
3347 sub compiler_predefined {
3348     state %predefined;
3349     my $cc = shift;
3350
3351     return () if $^O eq 'VMS';
3352
3353     die 'compiler_predefined called without a compiler command'
3354         unless $cc;
3355
3356     if (! $predefined{$cc}) {
3357
3358         $predefined{$cc} = {};
3359
3360         # collect compiler pre-defines from gcc or gcc-alike...
3361         open(PIPE, "$cc -dM -E -x c /dev/null 2>&1 |");
3362         while (my $l = <PIPE>) {
3363             $l =~ m/^#define\s+(\w+(?:\(\w+\))?)(?:\s+(.+))?/ or last;
3364             $predefined{$cc}->{$1} = $2 // '';
3365         }
3366         close(PIPE);
3367     }
3368
3369     return %{$predefined{$cc}};
3370 }
3371
3372 sub which
3373 {
3374     my ($name)=@_;
3375
3376     if (eval { require IPC::Cmd; 1; }) {
3377         IPC::Cmd->import();
3378         return scalar IPC::Cmd::can_run($name);
3379     } else {
3380         # if there is $directories component in splitpath,
3381         # then it's not something to test with $PATH...
3382         return $name if (File::Spec->splitpath($name))[1];
3383
3384         foreach (File::Spec->path()) {
3385             my $fullpath = catfile($_, "$name$target{exe_extension}");
3386             if (-f $fullpath and -x $fullpath) {
3387                 return $fullpath;
3388             }
3389         }
3390     }
3391 }
3392
3393 sub env
3394 {
3395     my $name = shift;
3396     my %opts = @_;
3397
3398     unless ($opts{cacheonly}) {
3399         # Note that if $ENV{$name} doesn't exist or is undefined,
3400         # $config{perlenv}->{$name} will be created with the value
3401         # undef.  This is intentional.
3402
3403         $config{perlenv}->{$name} = $ENV{$name}
3404             if ! exists $config{perlenv}->{$name};
3405     }
3406     return $config{perlenv}->{$name};
3407 }
3408
3409 # Configuration printer ##############################################
3410
3411 sub print_table_entry
3412 {
3413     local $now_printing = shift;
3414     my %target = resolve_config($now_printing);
3415     my $type = shift;
3416
3417     # Don't print the templates
3418     return if $target{template};
3419
3420     my @sequence = (
3421         "sys_id",
3422         "cpp",
3423         "cppflags",
3424         "defines",
3425         "includes",
3426         "cc",
3427         "cflags",
3428         "unistd",
3429         "ld",
3430         "lflags",
3431         "loutflag",
3432         "ex_libs",
3433         "bn_ops",
3434         "apps_aux_src",
3435         "cpuid_asm_src",
3436         "uplink_aux_src",
3437         "bn_asm_src",
3438         "ec_asm_src",
3439         "des_asm_src",
3440         "aes_asm_src",
3441         "bf_asm_src",
3442         "md5_asm_src",
3443         "cast_asm_src",
3444         "sha1_asm_src",
3445         "rc4_asm_src",
3446         "rmd160_asm_src",
3447         "rc5_asm_src",
3448         "wp_asm_src",
3449         "cmll_asm_src",
3450         "modes_asm_src",
3451         "padlock_asm_src",
3452         "chacha_asm_src",
3453         "poly1035_asm_src",
3454         "thread_scheme",
3455         "perlasm_scheme",
3456         "dso_scheme",
3457         "shared_target",
3458         "shared_cflag",
3459         "shared_defines",
3460         "shared_ldflag",
3461         "shared_rcflag",
3462         "shared_extension",
3463         "dso_extension",
3464         "obj_extension",
3465         "exe_extension",
3466         "ranlib",
3467         "ar",
3468         "arflags",
3469         "aroutflag",
3470         "rc",
3471         "rcflags",
3472         "rcoutflag",
3473         "mt",
3474         "mtflags",
3475         "mtinflag",
3476         "mtoutflag",
3477         "multilib",
3478         "build_scheme",
3479         );
3480
3481     if ($type eq "TABLE") {
3482         print "\n";
3483         print "*** $now_printing\n";
3484         foreach (@sequence) {
3485             if (ref($target{$_}) eq "ARRAY") {
3486                 printf "\$%-12s = %s\n", $_, join(" ", @{$target{$_}});
3487             } else {
3488                 printf "\$%-12s = %s\n", $_, $target{$_};
3489             }
3490         }
3491     } elsif ($type eq "HASH") {
3492         my $largest =
3493             length((sort { length($a) <=> length($b) } @sequence)[-1]);
3494         print "    '$now_printing' => {\n";
3495         foreach (@sequence) {
3496             if ($target{$_}) {
3497                 if (ref($target{$_}) eq "ARRAY") {
3498                     print "      '",$_,"'"," " x ($largest - length($_))," => [ ",join(", ", map { "'$_'" } @{$target{$_}})," ],\n";
3499                 } else {
3500                     print "      '",$_,"'"," " x ($largest - length($_))," => '",$target{$_},"',\n";
3501                 }
3502             }
3503         }
3504         print "    },\n";
3505     }
3506 }
3507
3508 # Utility routines ###################################################
3509
3510 # On VMS, if the given file is a logical name, File::Spec::Functions
3511 # will consider it an absolute path.  There are cases when we want a
3512 # purely syntactic check without checking the environment.
3513 sub isabsolute {
3514     my $file = shift;
3515
3516     # On non-platforms, we just use file_name_is_absolute().
3517     return file_name_is_absolute($file) unless $^O eq "VMS";
3518
3519     # If the file spec includes a device or a directory spec,
3520     # file_name_is_absolute() is perfectly safe.
3521     return file_name_is_absolute($file) if $file =~ m|[:\[]|;
3522
3523     # Here, we know the given file spec isn't absolute
3524     return 0;
3525 }
3526
3527 # Makes a directory absolute and cleans out /../ in paths like foo/../bar
3528 # On some platforms, this uses rel2abs(), while on others, realpath() is used.
3529 # realpath() requires that at least all path components except the last is an
3530 # existing directory.  On VMS, the last component of the directory spec must
3531 # exist.
3532 sub absolutedir {
3533     my $dir = shift;
3534
3535     # realpath() is quite buggy on VMS.  It uses LIB$FID_TO_NAME, which
3536     # will return the volume name for the device, no matter what.  Also,
3537     # it will return an incorrect directory spec if the argument is a
3538     # directory that doesn't exist.
3539     if ($^O eq "VMS") {
3540         return rel2abs($dir);
3541     }
3542
3543     # We use realpath() on Unix, since no other will properly clean out
3544     # a directory spec.
3545     use Cwd qw/realpath/;
3546
3547     return realpath($dir);
3548 }
3549
3550 sub quotify {
3551     my %processors = (
3552         perl    => sub { my $x = shift;
3553                          $x =~ s/([\\\$\@"])/\\$1/g;
3554                          return '"'.$x.'"'; },
3555         maybeshell => sub { my $x = shift;
3556                             (my $y = $x) =~ s/([\\\"])/\\$1/g;
3557                             if ($x ne $y || $x =~ m|\s|) {
3558                                 return '"'.$y.'"';
3559                             } else {
3560                                 return $x;
3561                             }
3562                         },
3563         );
3564     my $for = shift;
3565     my $processor =
3566         defined($processors{$for}) ? $processors{$for} : sub { shift; };
3567
3568     return map { $processor->($_); } @_;
3569 }
3570
3571 # collect_from_file($filename, $line_concat_cond_re, $line_concat)
3572 # $filename is a file name to read from
3573 # $line_concat_cond_re is a regexp detecting a line continuation ending
3574 # $line_concat is a CODEref that takes care of concatenating two lines
3575 sub collect_from_file {
3576     my $filename = shift;
3577     my $line_concat_cond_re = shift;
3578     my $line_concat = shift;
3579
3580     open my $fh, $filename || die "unable to read $filename: $!\n";
3581     return sub {
3582         my $saved_line = "";
3583         $_ = "";
3584         while (<$fh>) {
3585             s|\R$||;
3586             if (defined $line_concat) {
3587                 $_ = $line_concat->($saved_line, $_);
3588                 $saved_line = "";
3589             }
3590             if (defined $line_concat_cond_re && /$line_concat_cond_re/) {
3591                 $saved_line = $_;
3592                 next;
3593             }
3594             return $_;
3595         }
3596         die "$filename ending with continuation line\n" if $_;
3597         close $fh;
3598         return undef;
3599     }
3600 }
3601
3602 # collect_from_array($array, $line_concat_cond_re, $line_concat)
3603 # $array is an ARRAYref of lines
3604 # $line_concat_cond_re is a regexp detecting a line continuation ending
3605 # $line_concat is a CODEref that takes care of concatenating two lines
3606 sub collect_from_array {
3607     my $array = shift;
3608     my $line_concat_cond_re = shift;
3609     my $line_concat = shift;
3610     my @array = (@$array);
3611
3612     return sub {
3613         my $saved_line = "";
3614         $_ = "";
3615         while (defined($_ = shift @array)) {
3616             s|\R$||;
3617             if (defined $line_concat) {
3618                 $_ = $line_concat->($saved_line, $_);
3619                 $saved_line = "";
3620             }
3621             if (defined $line_concat_cond_re && /$line_concat_cond_re/) {
3622                 $saved_line = $_;
3623                 next;
3624             }
3625             return $_;
3626         }
3627         die "input text ending with continuation line\n" if $_;
3628         return undef;
3629     }
3630 }
3631
3632 # collect_information($lineiterator, $line_continue, $regexp => $CODEref, ...)
3633 # $lineiterator is a CODEref that delivers one line at a time.
3634 # All following arguments are regex/CODEref pairs, where the regexp detects a
3635 # line and the CODEref does something with the result of the regexp.
3636 sub collect_information {
3637     my $lineiterator = shift;
3638     my %collectors = @_;
3639
3640     while(defined($_ = $lineiterator->())) {
3641         s|\R$||;
3642         my $found = 0;
3643         if ($collectors{"BEFORE"}) {
3644             $collectors{"BEFORE"}->($_);
3645         }
3646         foreach my $re (keys %collectors) {
3647             if ($re !~ /^OTHERWISE|BEFORE|AFTER$/ && /$re/) {
3648                 $collectors{$re}->($lineiterator);
3649                 $found = 1;
3650             };
3651         }
3652         if ($collectors{"OTHERWISE"}) {
3653             $collectors{"OTHERWISE"}->($lineiterator, $_)
3654                 unless $found || !defined $collectors{"OTHERWISE"};
3655         }
3656         if ($collectors{"AFTER"}) {
3657             $collectors{"AFTER"}->($_);
3658         }
3659     }
3660 }
3661
3662 # tokenize($line)
3663 # tokenize($line,$separator)
3664 # $line is a line of text to split up into tokens
3665 # $separator [optional] is a regular expression that separates the tokens,
3666 # the default being spaces.  Do not use quotes of any kind as separators,
3667 # that will give undefined results.
3668 # Returns a list of tokens.
3669 #
3670 # Tokens are divided by separator (spaces by default).  If the tokens include
3671 # the separators, they have to be quoted with single or double quotes.
3672 # Double quotes inside a double quoted token must be escaped.  Escaping is done
3673 # with backslash.
3674 # Basically, the same quoting rules apply for " and ' as in any
3675 # Unix shell.
3676 sub tokenize {
3677     my $line = my $debug_line = shift;
3678     my $separator = shift // qr|\s+|;
3679     my @result = ();
3680
3681     if ($ENV{CONFIGURE_DEBUG_TOKENIZE}) {
3682         print STDERR "DEBUG[tokenize]: \$separator = $separator\n";
3683     }
3684
3685     while ($line =~ s|^${separator}||, $line ne "") {
3686         my $token = "";
3687     again:
3688         $line =~ m/^(.*?)(${separator}|"|'|$)/;
3689         $token .= $1;
3690         $line = $2.$';
3691
3692         if ($line =~ m/^"((?:[^"\\]+|\\.)*)"/) {
3693             $token .= $1;
3694             $line = $';
3695             goto again;
3696         } elsif ($line =~ m/^'([^']*)'/) {
3697             $token .= $1;
3698             $line = $';
3699             goto again;
3700         }
3701         push @result, $token;
3702     }
3703
3704     if ($ENV{CONFIGURE_DEBUG_TOKENIZE}) {
3705         print STDERR "DEBUG[tokenize]: Parsed '$debug_line' into:\n";
3706         print STDERR "DEBUG[tokenize]: ('", join("', '", @result), "')\n";
3707     }
3708     return @result;
3709 }