Test use of a brainpool ECDSA certificate
[openssl.git] / Configure
1 #! /usr/bin/env perl
2 # -*- mode: perl; -*-
3 # Copyright 2016-2018 The OpenSSL Project Authors. All Rights Reserved.
4 #
5 # Licensed under the OpenSSL license (the "License").  You may not use
6 # this file except in compliance with the License.  You can obtain a copy
7 # in the file LICENSE in the source distribution or at
8 # https://www.openssl.org/source/license.html
9
10 ##  Configure -- OpenSSL source tree configuration script
11
12 use 5.10.0;
13 use strict;
14 use Config;
15 use FindBin;
16 use lib "$FindBin::Bin/util/perl";
17 use File::Basename;
18 use File::Spec::Functions qw/:DEFAULT abs2rel rel2abs/;
19 use File::Path qw/mkpath/;
20 use OpenSSL::Glob;
21
22 # see INSTALL for instructions.
23
24 my $orig_death_handler = $SIG{__DIE__};
25 $SIG{__DIE__} = \&death_handler;
26
27 my $usage="Usage: Configure [no-<cipher> ...] [enable-<cipher> ...] [-Dxxx] [-lxxx] [-Lxxx] [-fxxx] [-Kxxx] [no-hw-xxx|no-hw] [[no-]threads] [[no-]shared] [[no-]zlib|zlib-dynamic] [no-asm] [no-dso] [no-egd] [sctp] [386] [--prefix=DIR] [--openssldir=OPENSSLDIR] [--with-xxx[=vvv]] [--config=FILE] os/compiler[:flags]\n";
28
29 # Options:
30 #
31 # --config      add the given configuration file, which will be read after
32 #               any "Configurations*" files that are found in the same
33 #               directory as this script.
34 # --prefix      prefix for the OpenSSL installation, which includes the
35 #               directories bin, lib, include, share/man, share/doc/openssl
36 #               This becomes the value of INSTALLTOP in Makefile
37 #               (Default: /usr/local)
38 # --openssldir  OpenSSL data area, such as openssl.cnf, certificates and keys.
39 #               If it's a relative directory, it will be added on the directory
40 #               given with --prefix.
41 #               This becomes the value of OPENSSLDIR in Makefile and in C.
42 #               (Default: PREFIX/ssl)
43 #
44 # --cross-compile-prefix Add specified prefix to binutils components.
45 #
46 # --api         One of 0.9.8, 1.0.0 or 1.1.0.  Do not compile support for
47 #               interfaces deprecated as of the specified OpenSSL version.
48 #
49 # no-hw-xxx     do not compile support for specific crypto hardware.
50 #               Generic OpenSSL-style methods relating to this support
51 #               are always compiled but return NULL if the hardware
52 #               support isn't compiled.
53 # no-hw         do not compile support for any crypto hardware.
54 # [no-]threads  [don't] try to create a library that is suitable for
55 #               multithreaded applications (default is "threads" if we
56 #               know how to do it)
57 # [no-]shared   [don't] try to create shared libraries when supported.
58 # [no-]pic      [don't] try to build position independent code when supported.
59 #               If disabled, it also disables shared and dynamic-engine.
60 # no-asm        do not use assembler
61 # no-dso        do not compile in any native shared-library methods. This
62 #               will ensure that all methods just return NULL.
63 # no-egd        do not compile support for the entropy-gathering daemon APIs
64 # [no-]zlib     [don't] compile support for zlib compression.
65 # zlib-dynamic  Like "zlib", but the zlib library is expected to be a shared
66 #               library and will be loaded in run-time by the OpenSSL library.
67 # sctp          include SCTP support
68 # enable-weak-ssl-ciphers
69 #               Enable weak ciphers that are disabled by default.
70 # 386           generate 80386 code in assembly modules
71 # no-sse2       disables IA-32 SSE2 code in assembly modules, the above
72 #               mentioned '386' option implies this one
73 # no-<cipher>   build without specified algorithm (rsa, idea, rc5, ...)
74 # -<xxx> +<xxx> compiler options are passed through
75 # -static       while -static is also a pass-through compiler option (and
76 #               as such is limited to environments where it's actually
77 #               meaningful), it triggers a number configuration options,
78 #               namely no-dso, no-pic, no-shared and no-threads. It is
79 #               argued that the only reason to produce statically linked
80 #               binaries (and in context it means executables linked with
81 #               -static flag, and not just executables linked with static
82 #               libcrypto.a) is to eliminate dependency on specific run-time,
83 #               a.k.a. libc version. The mentioned config options are meant
84 #               to achieve just that. Unfortunately on Linux it's impossible
85 #               to eliminate the dependency completely for openssl executable
86 #               because of getaddrinfo and gethostbyname calls, which can
87 #               invoke dynamically loadable library facility anyway to meet
88 #               the lookup requests. For this reason on Linux statically
89 #               linked openssl executable has rather debugging value than
90 #               production quality.
91 #
92 # DEBUG_SAFESTACK use type-safe stacks to enforce type-safety on stack items
93 #               provided to stack calls. Generates unique stack functions for
94 #               each possible stack type.
95 # BN_LLONG      use the type 'long long' in crypto/bn/bn.h
96 # RC4_CHAR      use 'char' instead of 'int' for RC4_INT in crypto/rc4/rc4.h
97 # Following are set automatically by this script
98 #
99 # MD5_ASM       use some extra md5 assembler,
100 # SHA1_ASM      use some extra sha1 assembler, must define L_ENDIAN for x86
101 # RMD160_ASM    use some extra ripemd160 assembler,
102 # SHA256_ASM    sha256_block is implemented in assembler
103 # SHA512_ASM    sha512_block is implemented in assembler
104 # AES_ASM       AES_[en|de]crypt is implemented in assembler
105
106 # Minimum warning options... any contributions to OpenSSL should at least get
107 # past these.
108
109 # DEBUG_UNUSED enables __owur (warn unused result) checks.
110 # -DPEDANTIC complements -pedantic and is meant to mask code that
111 # is not strictly standard-compliant and/or implementation-specific,
112 # e.g. inline assembly, disregards to alignment requirements, such
113 # that -pedantic would complain about. Incidentally -DPEDANTIC has
114 # to be used even in sanitized builds, because sanitizer too is
115 # supposed to and does take notice of non-standard behaviour. Then
116 # -pedantic with pre-C9x compiler would also complain about 'long
117 # long' not being supported. As 64-bit algorithms are common now,
118 # it grew impossible to resolve this without sizeable additional
119 # code, so we just tell compiler to be pedantic about everything
120 # but 'long long' type.
121
122 my $gcc_devteam_warn = "-DDEBUG_UNUSED"
123         . " -DPEDANTIC -pedantic -Wno-long-long"
124         . " -Wall"
125         . " -Wextra"
126         . " -Wno-unused-parameter"
127         . " -Wno-missing-field-initializers"
128         . " -Wswitch"
129         . " -Wsign-compare"
130         . " -Wmissing-prototypes"
131         . " -Wstrict-prototypes"
132         . " -Wshadow"
133         . " -Wformat"
134         . " -Wtype-limits"
135         . " -Wundef"
136         . " -Werror"
137         ;
138
139 # These are used in addition to $gcc_devteam_warn when the compiler is clang.
140 # TODO(openssl-team): fix problems and investigate if (at least) the
141 # following warnings can also be enabled:
142 #       -Wcast-align
143 #       -Wunreachable-code -- no, too ugly/compiler-specific
144 #       -Wlanguage-extension-token -- no, we use asm()
145 #       -Wunused-macros -- no, too tricky for BN and _XOPEN_SOURCE etc
146 #       -Wextended-offsetof -- no, needed in CMS ASN1 code
147 my $clang_devteam_warn = ""
148         . " -Wswitch-default"
149         . " -Wno-parentheses-equality"
150         . " -Wno-language-extension-token"
151         . " -Wno-extended-offsetof"
152         . " -Wconditional-uninitialized"
153         . " -Wincompatible-pointer-types-discards-qualifiers"
154         . " -Wmissing-variable-declarations"
155         . " -Wno-unknown-warning-option"
156         ;
157
158 # This adds backtrace information to the memory leak info.  Is only used
159 # when crypto-mdebug-backtrace is enabled.
160 my $memleak_devteam_backtrace = "-rdynamic";
161
162 my $strict_warnings = 0;
163
164 # As for $BSDthreads. Idea is to maintain "collective" set of flags,
165 # which would cover all BSD flavors. -pthread applies to them all,
166 # but is treated differently. OpenBSD expands is as -D_POSIX_THREAD
167 # -lc_r, which is sufficient. FreeBSD 4.x expands it as -lc_r,
168 # which has to be accompanied by explicit -D_THREAD_SAFE and
169 # sometimes -D_REENTRANT. FreeBSD 5.x expands it as -lc_r, which
170 # seems to be sufficient?
171 our $BSDthreads="-pthread -D_THREAD_SAFE -D_REENTRANT";
172
173 #
174 # API compatibility name to version number mapping.
175 #
176 my $maxapi = "1.1.0";           # API for "no-deprecated" builds
177 my $apitable = {
178     "1.1.0" => "0x10100000L",
179     "1.0.0" => "0x10000000L",
180     "0.9.8" => "0x00908000L",
181 };
182
183 our %table = ();
184 our %config = ();
185 our %withargs = ();
186 our $now_printing;      # set to current entry's name in print_table_entry
187                         # (todo: right thing would be to encapsulate name
188                         # into %target [class] and make print_table_entry
189                         # a method)
190
191 # Forward declarations ###############################################
192
193 # read_config(filename)
194 #
195 # Reads a configuration file and populates %table with the contents
196 # (which the configuration file places in %targets).
197 sub read_config;
198
199 # resolve_config(target)
200 #
201 # Resolves all the late evaluations, inheritances and so on for the
202 # chosen target and any target it inherits from.
203 sub resolve_config;
204
205
206 # Information collection #############################################
207
208 # Unified build supports separate build dir
209 my $srcdir = catdir(absolutedir(dirname($0))); # catdir ensures local syntax
210 my $blddir = catdir(absolutedir("."));         # catdir ensures local syntax
211 my $dofile = abs2rel(catfile($srcdir, "util/dofile.pl"));
212
213 my $local_config_envname = 'OPENSSL_LOCAL_CONFIG_DIR';
214
215 $config{sourcedir} = abs2rel($srcdir);
216 $config{builddir} = abs2rel($blddir);
217
218 # Collect reconfiguration information if needed
219 my @argvcopy=@ARGV;
220
221 if (grep /^reconf(igure)?$/, @argvcopy) {
222     die "reconfiguring with other arguments present isn't supported"
223         if scalar @argvcopy > 1;
224     if (-f "./configdata.pm") {
225         my $file = "./configdata.pm";
226         unless (my $return = do $file) {
227             die "couldn't parse $file: $@" if $@;
228             die "couldn't do $file: $!"    unless defined $return;
229             die "couldn't run $file"       unless $return;
230         }
231
232         @argvcopy = defined($configdata::config{perlargv}) ?
233             @{$configdata::config{perlargv}} : ();
234         die "Incorrect data to reconfigure, please do a normal configuration\n"
235             if (grep(/^reconf/,@argvcopy));
236         $config{perlenv} = $configdata::config{perlenv} // {};
237     } else {
238         die "Insufficient data to reconfigure, please do a normal configuration\n";
239     }
240 }
241
242 $config{perlargv} = [ @argvcopy ];
243
244 # Collect version numbers
245 $config{version} = "unknown";
246 $config{version_num} = "unknown";
247 $config{shlib_version_number} = "unknown";
248 $config{shlib_version_history} = "unknown";
249
250 collect_information(
251     collect_from_file(catfile($srcdir,'include/openssl/opensslv.h')),
252     qr/OPENSSL.VERSION.TEXT.*OpenSSL (\S+) / => sub { $config{version} = $1; },
253     qr/OPENSSL.VERSION.NUMBER.*(0x\S+)/      => sub { $config{version_num}=$1 },
254     qr/SHLIB_VERSION_NUMBER *"([^"]+)"/      => sub { $config{shlib_version_number}=$1 },
255     qr/SHLIB_VERSION_HISTORY *"([^"]*)"/     => sub { $config{shlib_version_history}=$1 }
256     );
257 if ($config{shlib_version_history} ne "") { $config{shlib_version_history} .= ":"; }
258
259 ($config{major}, $config{minor})
260     = ($config{version} =~ /^([0-9]+)\.([0-9\.]+)/);
261 ($config{shlib_major}, $config{shlib_minor})
262     = ($config{shlib_version_number} =~ /^([0-9]+)\.([0-9\.]+)/);
263 die "erroneous version information in opensslv.h: ",
264     "$config{major}, $config{minor}, $config{shlib_major}, $config{shlib_minor}\n"
265     if ($config{major} eq "" || $config{minor} eq ""
266         || $config{shlib_major} eq "" ||  $config{shlib_minor} eq "");
267
268 # Collect target configurations
269
270 my $pattern = catfile(dirname($0), "Configurations", "*.conf");
271 foreach (sort glob($pattern)) {
272     &read_config($_);
273 }
274
275 if (defined env($local_config_envname)) {
276     if ($^O eq 'VMS') {
277         # VMS environment variables are logical names,
278         # which can be used as is
279         $pattern = $local_config_envname . ':' . '*.conf';
280     } else {
281         $pattern = catfile(env($local_config_envname), '*.conf');
282     }
283
284     foreach (sort glob($pattern)) {
285         &read_config($_);
286     }
287 }
288
289 # Save away perl command information
290 $config{perl_cmd} = $^X;
291 $config{perl_version} = $Config{version};
292 $config{perl_archname} = $Config{archname};
293
294 $config{prefix}="";
295 $config{openssldir}="";
296 $config{processor}="";
297 $config{libdir}="";
298 my $auto_threads=1;    # enable threads automatically? true by default
299 my $default_ranlib;
300
301 # Top level directories to build
302 $config{dirs} = [ "crypto", "ssl", "engines", "apps", "test", "util", "tools", "fuzz" ];
303 # crypto/ subdirectories to build
304 $config{sdirs} = [
305     "objects",
306     "md2", "md4", "md5", "sha", "mdc2", "hmac", "ripemd", "whrlpool", "poly1305", "blake2", "siphash", "sm3",
307     "des", "aes", "rc2", "rc4", "rc5", "idea", "aria", "bf", "cast", "camellia", "seed", "sm4", "chacha", "modes",
308     "bn", "ec", "rsa", "dsa", "dh", "sm2", "dso", "engine",
309     "buffer", "bio", "stack", "lhash", "rand", "err",
310     "evp", "asn1", "pem", "x509", "x509v3", "conf", "txt_db", "pkcs7", "pkcs12", "comp", "ocsp", "ui",
311     "cms", "ts", "srp", "cmac", "ct", "async", "kdf", "store"
312     ];
313 # test/ subdirectories to build
314 $config{tdirs} = [ "ossl_shim" ];
315
316 # Known TLS and DTLS protocols
317 my @tls = qw(ssl3 tls1 tls1_1 tls1_2 tls1_3);
318 my @dtls = qw(dtls1 dtls1_2);
319
320 # Explicitly known options that are possible to disable.  They can
321 # be regexps, and will be used like this: /^no-${option}$/
322 # For developers: keep it sorted alphabetically
323
324 my @disablables = (
325     "afalgeng",
326     "aria",
327     "asan",
328     "asm",
329     "async",
330     "autoalginit",
331     "autoerrinit",
332     "autoload-config",
333     "bf",
334     "blake2",
335     "camellia",
336     "capieng",
337     "cast",
338     "chacha",
339     "cmac",
340     "cms",
341     "comp",
342     "crypto-mdebug",
343     "crypto-mdebug-backtrace",
344     "ct",
345     "deprecated",
346     "des",
347     "devcryptoeng",
348     "dgram",
349     "dh",
350     "dsa",
351     "dso",
352     "dtls",
353     "dynamic-engine",
354     "ec",
355     "ec2m",
356     "ecdh",
357     "ecdsa",
358     "ec_nistp_64_gcc_128",
359     "egd",
360     "engine",
361     "err",
362     "external-tests",
363     "filenames",
364     "fuzz-libfuzzer",
365     "fuzz-afl",
366     "gost",
367     "heartbeats",
368     "hw(-.+)?",
369     "idea",
370     "makedepend",
371     "md2",
372     "md4",
373     "mdc2",
374     "msan",
375     "multiblock",
376     "nextprotoneg",
377     "ocb",
378     "ocsp",
379     "pic",
380     "poly1305",
381     "posix-io",
382     "psk",
383     "rc2",
384     "rc4",
385     "rc5",
386     "rdrand",
387     "rfc3779",
388     "rmd160",
389     "scrypt",
390     "sctp",
391     "seed",
392     "shared",
393     "siphash",
394     "sm2",
395     "sm3",
396     "sm4",
397     "sock",
398     "srp",
399     "srtp",
400     "sse2",
401     "ssl",
402     "ssl-trace",
403     "static-engine",
404     "stdio",
405     "tests",
406     "threads",
407     "tls",
408     "ts",
409     "ubsan",
410     "ui-console",
411     "unit-test",
412     "whirlpool",
413     "weak-ssl-ciphers",
414     "zlib",
415     "zlib-dynamic",
416     );
417 foreach my $proto ((@tls, @dtls))
418         {
419         push(@disablables, $proto);
420         push(@disablables, "$proto-method") unless $proto eq "tls1_3";
421         }
422
423 my %deprecated_disablables = (
424     "ssl2" => undef,
425     "buf-freelists" => undef,
426     "ripemd" => "rmd160",
427     "ui" => "ui-console",
428     );
429
430 # All of the following are disabled by default:
431
432 our %disabled = ( # "what"         => "comment"
433                   "asan"                => "default",
434                   "crypto-mdebug"       => "default",
435                   "crypto-mdebug-backtrace" => "default",
436                   "devcryptoeng"        => "default",
437                   "ec_nistp_64_gcc_128" => "default",
438                   "egd"                 => "default",
439                   "external-tests"      => "default",
440                   "fuzz-libfuzzer"      => "default",
441                   "fuzz-afl"            => "default",
442                   "heartbeats"          => "default",
443                   "md2"                 => "default",
444                   "msan"                => "default",
445                   "rc5"                 => "default",
446                   "sctp"                => "default",
447                   "ssl-trace"           => "default",
448                   "ssl3"                => "default",
449                   "ssl3-method"         => "default",
450                   "ubsan"               => "default",
451                   "unit-test"           => "default",
452                   "weak-ssl-ciphers"    => "default",
453                   "zlib"                => "default",
454                   "zlib-dynamic"        => "default",
455                 );
456
457 # Note: => pair form used for aesthetics, not to truly make a hash table
458 my @disable_cascades = (
459     # "what"            => [ "cascade", ... ]
460     sub { $config{processor} eq "386" }
461                         => [ "sse2" ],
462     "ssl"               => [ "ssl3" ],
463     "ssl3-method"       => [ "ssl3" ],
464     "zlib"              => [ "zlib-dynamic" ],
465     "des"               => [ "mdc2" ],
466     "ec"                => [ "ecdsa", "ecdh" ],
467
468     "dgram"             => [ "dtls", "sctp" ],
469     "sock"              => [ "dgram" ],
470     "dtls"              => [ @dtls ],
471     sub { 0 == scalar grep { !$disabled{$_} } @dtls }
472                         => [ "dtls" ],
473
474     "tls"               => [ @tls ],
475     sub { 0 == scalar grep { !$disabled{$_} } @tls }
476                         => [ "tls" ],
477
478     "crypto-mdebug"     => [ "crypto-mdebug-backtrace" ],
479
480     # Without DSO, we can't load dynamic engines, so don't build them dynamic
481     "dso"               => [ "dynamic-engine" ],
482
483     # Without position independent code, there can be no shared libraries or DSOs
484     "pic"               => [ "shared" ],
485     "shared"            => [ "dynamic-engine" ],
486     "engine"            => [ "afalgeng", "devcryptoeng" ],
487
488     # no-autoalginit is only useful when building non-shared
489     "autoalginit"       => [ "shared", "apps" ],
490
491     "stdio"             => [ "apps", "capieng", "egd" ],
492     "apps"              => [ "tests" ],
493     "tests"             => [ "external-tests" ],
494     "comp"              => [ "zlib" ],
495     "ec"                => [ "tls1_3", "sm2" ],
496     "sm3"               => [ "sm2" ],
497     sub { !$disabled{"unit-test"} } => [ "heartbeats" ],
498
499     sub { !$disabled{"msan"} } => [ "asm" ],
500     );
501
502 # Avoid protocol support holes.  Also disable all versions below N, if version
503 # N is disabled while N+1 is enabled.
504 #
505 my @list = (reverse @tls);
506 while ((my $first, my $second) = (shift @list, shift @list)) {
507     last unless @list;
508     push @disable_cascades, ( sub { !$disabled{$first} && $disabled{$second} }
509                               => [ @list ] );
510     unshift @list, $second;
511 }
512 my @list = (reverse @dtls);
513 while ((my $first, my $second) = (shift @list, shift @list)) {
514     last unless @list;
515     push @disable_cascades, ( sub { !$disabled{$first} && $disabled{$second} }
516                               => [ @list ] );
517     unshift @list, $second;
518 }
519
520 # Explicit "no-..." options will be collected in %disabled along with the defaults.
521 # To remove something from %disabled, use "enable-foo".
522 # For symmetry, "disable-foo" is a synonym for "no-foo".
523
524 &usage if ($#ARGV < 0);
525
526 # For the "make variables" CINCLUDES and CDEFINES, we support lists with
527 # platform specific list separators.  Users from those platforms should
528 # recognise those separators from how you set up the PATH to find executables.
529 # The default is the Unix like separator, :, but as an exception, we also
530 # support the space as separator.
531 my $list_separator_re =
532     { VMS           => qr/(?<!\^),/,
533       MSWin32       => qr/(?<!\\);/ } -> {$^O} // qr/(?<!\\)[:\s]/;
534 # All the "make variables" we support
535 # Some get pre-populated for the sake of backward compatibility
536 # (we supported those before the change to "make variable" support.
537 my %user = (
538     AR          => env('AR'),
539     ARFLAGS     => [],
540     AS          => undef,
541     ASFLAGS     => [],
542     CC          => env('CC'),
543     CFLAGS      => [],
544     CXX         => env('CXX'),
545     CXXFLAGS    => [],
546     CPP         => undef,
547     CPPFLAGS    => [],  # -D, -I, -Wp,
548     CPPDEFINES  => [],  # Alternative for -D
549     CPPINCLUDES => [],  # Alternative for -I
550     CROSS_COMPILE => env('CROSS_COMPILE'),
551     HASHBANGPERL=> env('HASHBANGPERL') || env('PERL'),
552     LD          => undef,
553     LDFLAGS     => [],  # -L, -Wl,
554     LDLIBS      => [],  # -l
555     MT          => undef,
556     MTFLAGS     => [],
557     PERL        => env('PERL') || ($^O ne "VMS" ? $^X : "perl"),
558     RANLIB      => env('RANLIB'),
559     RC          => env('RC') || env('WINDRES'),
560     RCFLAGS     => [],
561     RM          => undef,
562    );
563 # Info about what "make variables" may be prefixed with the cross compiler
564 # prefix.  This should NEVER mention any such variable with a list for value.
565 my @user_crossable = qw ( AR AS CC CXX CPP LD MT RANLIB RC );
566 # The same but for flags given as Configure options.  These are *additional*
567 # input, as opposed to the VAR=string option that override the corresponding
568 # config target attributes
569 my %useradd = (
570     CPPDEFINES  => [],
571     CPPINCLUDES => [],
572     CPPFLAGS    => [],
573     CFLAGS      => [],
574     CXXFLAGS    => [],
575     LDFLAGS     => [],
576     LDLIBS      => [],
577    );
578
579 my %user_synonyms = (
580     HASHBANGPERL=> 'PERL',
581     RC          => 'WINDRES',
582    );
583
584 # Some target attributes have been renamed, this is the translation table
585 my %target_attr_translate =(
586     ar          => 'AR',
587     as          => 'AS',
588     cc          => 'CC',
589     cxx         => 'CXX',
590     cpp         => 'CPP',
591     hashbangperl => 'HASHBANGPERL',
592     ld          => 'LD',
593     mt          => 'MT',
594     ranlib      => 'RANLIB',
595     rc          => 'RC',
596     rm          => 'RM',
597    );
598
599 # Initialisers coming from 'config' scripts
600 $config{defines} = [ split(/$list_separator_re/, env('__CNF_CPPDEFINES')) ];
601 $config{includes} = [ split(/$list_separator_re/, env('__CNF_CPPINCLUDES')) ];
602 $config{cppflags} = [ env('__CNF_CPPFLAGS') || () ];
603 $config{cflags} = [ env('__CNF_CFLAGS') || () ];
604 $config{cxxflags} = [ env('__CNF_CXXFLAGS') || () ];
605 $config{lflags} = [ env('__CNF_LDFLAGS') || () ];
606 $config{ex_libs} = [ env('__CNF_LDLIBS') || () ];
607
608 $config{openssl_api_defines}=[];
609 $config{openssl_algorithm_defines}=[];
610 $config{openssl_thread_defines}=[];
611 $config{openssl_sys_defines}=[];
612 $config{openssl_other_defines}=[];
613 $config{options}="";
614 $config{build_type} = "release";
615 my $target="";
616
617 my %cmdvars = ();               # Stores FOO='blah' type arguments
618 my %unsupported_options = ();
619 my %deprecated_options = ();
620 # If you change this, update apps/version.c
621 my @known_seed_sources = qw(getrandom devrandom os egd none rdcpu librandom);
622 my @seed_sources = ();
623 while (@argvcopy)
624         {
625         $_ = shift @argvcopy;
626
627         # Support env variable assignments among the options
628         if (m|^(\w+)=(.+)?$|)
629                 {
630                 $cmdvars{$1} = $2;
631                 # Every time a variable is given as a configuration argument,
632                 # it acts as a reset if the variable.
633                 if (exists $user{$1})
634                         {
635                         $user{$1} = ref $user{$1} eq "ARRAY" ? [] : undef;
636                         }
637                 #if (exists $useradd{$1})
638                 #       {
639                 #       $useradd{$1} = [];
640                 #       }
641                 next;
642                 }
643
644         # VMS is a case insensitive environment, and depending on settings
645         # out of our control, we may receive options uppercased.  Let's
646         # downcase at least the part before any equal sign.
647         if ($^O eq "VMS")
648                 {
649                 s/^([^=]*)/lc($1)/e;
650                 }
651
652         # some people just can't read the instructions, clang people have to...
653         s/^-no-(?!integrated-as)/no-/;
654
655         # rewrite some options in "enable-..." form
656         s /^-?-?shared$/enable-shared/;
657         s /^sctp$/enable-sctp/;
658         s /^threads$/enable-threads/;
659         s /^zlib$/enable-zlib/;
660         s /^zlib-dynamic$/enable-zlib-dynamic/;
661
662         if (/^(no|disable|enable)-(.+)$/)
663                 {
664                 my $word = $2;
665                 if (!exists $deprecated_disablables{$word}
666                         && !grep { $word =~ /^${_}$/ } @disablables)
667                         {
668                         $unsupported_options{$_} = 1;
669                         next;
670                         }
671                 }
672         if (/^no-(.+)$/ || /^disable-(.+)$/)
673                 {
674                 foreach my $proto ((@tls, @dtls))
675                         {
676                         if ($1 eq "$proto-method")
677                                 {
678                                 $disabled{"$proto"} = "option($proto-method)";
679                                 last;
680                                 }
681                         }
682                 if ($1 eq "dtls")
683                         {
684                         foreach my $proto (@dtls)
685                                 {
686                                 $disabled{$proto} = "option(dtls)";
687                                 }
688                         $disabled{"dtls"} = "option(dtls)";
689                         }
690                 elsif ($1 eq "ssl")
691                         {
692                         # Last one of its kind
693                         $disabled{"ssl3"} = "option(ssl)";
694                         }
695                 elsif ($1 eq "tls")
696                         {
697                         # XXX: Tests will fail if all SSL/TLS
698                         # protocols are disabled.
699                         foreach my $proto (@tls)
700                                 {
701                                 $disabled{$proto} = "option(tls)";
702                                 }
703                         }
704                 elsif ($1 eq "static-engine")
705                         {
706                         delete $disabled{"dynamic-engine"};
707                         }
708                 elsif ($1 eq "dynamic-engine")
709                         {
710                         $disabled{"dynamic-engine"} = "option";
711                         }
712                 elsif (exists $deprecated_disablables{$1})
713                         {
714                         $deprecated_options{$_} = 1;
715                         if (defined $deprecated_disablables{$1})
716                                 {
717                                 $disabled{$deprecated_disablables{$1}} = "option";
718                                 }
719                         }
720                 else
721                         {
722                         $disabled{$1} = "option";
723                         }
724                 # No longer an automatic choice
725                 $auto_threads = 0 if ($1 eq "threads");
726                 }
727         elsif (/^enable-(.+)$/)
728                 {
729                 if ($1 eq "static-engine")
730                         {
731                         $disabled{"dynamic-engine"} = "option";
732                         }
733                 elsif ($1 eq "dynamic-engine")
734                         {
735                         delete $disabled{"dynamic-engine"};
736                         }
737                 elsif ($1 eq "zlib-dynamic")
738                         {
739                         delete $disabled{"zlib"};
740                         }
741                 my $algo = $1;
742                 delete $disabled{$algo};
743
744                 # No longer an automatic choice
745                 $auto_threads = 0 if ($1 eq "threads");
746                 }
747         elsif (/^--strict-warnings$/)
748                 {
749                 $strict_warnings = 1;
750                 }
751         elsif (/^--debug$/)
752                 {
753                 $config{build_type} = "debug";
754                 }
755         elsif (/^--release$/)
756                 {
757                 $config{build_type} = "release";
758                 }
759         elsif (/^386$/)
760                 { $config{processor}=386; }
761         elsif (/^fips$/)
762                 {
763                 die "FIPS mode not supported\n";
764                 }
765         elsif (/^rsaref$/)
766                 {
767                 # No RSAref support any more since it's not needed.
768                 # The check for the option is there so scripts aren't
769                 # broken
770                 }
771         elsif (/^nofipscanistercheck$/)
772                 {
773                 die "FIPS mode not supported\n";
774                 }
775         elsif (/^[-+]/)
776                 {
777                 if (/^--prefix=(.*)$/)
778                         {
779                         $config{prefix}=$1;
780                         die "Directory given with --prefix MUST be absolute\n"
781                                 unless file_name_is_absolute($config{prefix});
782                         }
783                 elsif (/^--api=(.*)$/)
784                         {
785                         $config{api}=$1;
786                         }
787                 elsif (/^--libdir=(.*)$/)
788                         {
789                         $config{libdir}=$1;
790                         }
791                 elsif (/^--openssldir=(.*)$/)
792                         {
793                         $config{openssldir}=$1;
794                         }
795                 elsif (/^--with-zlib-lib=(.*)$/)
796                         {
797                         $withargs{zlib_lib}=$1;
798                         }
799                 elsif (/^--with-zlib-include=(.*)$/)
800                         {
801                         $withargs{zlib_include}=$1;
802                         }
803                 elsif (/^--with-fuzzer-lib=(.*)$/)
804                         {
805                         $withargs{fuzzer_lib}=$1;
806                         }
807                 elsif (/^--with-fuzzer-include=(.*)$/)
808                         {
809                         $withargs{fuzzer_include}=$1;
810                         }
811                 elsif (/^--with-rand-seed=(.*)$/)
812                         {
813                         foreach my $x (split(m|,|, $1))
814                             {
815                             die "Unknown --with-rand-seed choice $x\n"
816                                 if ! grep { $x eq $_ } @known_seed_sources;
817                             push @seed_sources, $x;
818                             }
819                         }
820                 elsif (/^--cross-compile-prefix=(.*)$/)
821                         {
822                         $user{CROSS_COMPILE}=$1;
823                         }
824                 elsif (/^--config=(.*)$/)
825                         {
826                         read_config $1;
827                         }
828                 elsif (/^-l(.*)$/)
829                         {
830                         push @{$useradd{LDLIBS}}, $_;
831                         }
832                 elsif (/^-framework$/)
833                         {
834                         push @{$useradd{LDLIBS}}, $_, shift(@argvcopy);
835                         }
836                 elsif (/^-L(.*)$/ or /^-Wl,/)
837                         {
838                         push @{$useradd{LDFLAGS}}, $_;
839                         }
840                 elsif (/^-rpath$/ or /^-R$/)
841                         # -rpath is the OSF1 rpath flag
842                         # -R is the old Solaris rpath flag
843                         {
844                         my $rpath = shift(@argvcopy) || "";
845                         $rpath .= " " if $rpath ne "";
846                         push @{$useradd{LDFLAGS}}, $_, $rpath;
847                         }
848                 elsif (/^-static$/)
849                         {
850                         push @{$useradd{LDFLAGS}}, $_;
851                         $disabled{"dso"} = "forced";
852                         $disabled{"pic"} = "forced";
853                         $disabled{"shared"} = "forced";
854                         $disabled{"threads"} = "forced";
855                         }
856                 elsif (/^-D(.*)$/)
857                         {
858                         push @{$useradd{CPPDEFINES}}, $1;
859                         }
860                 elsif (/^-I(.*)$/)
861                         {
862                         push @{$useradd{CPPINCLUDES}}, $1;
863                         }
864                 elsif (/^-Wp,$/)
865                         {
866                         push @{$useradd{CPPFLAGS}}, $1;
867                         }
868                 else    # common if (/^[-+]/), just pass down...
869                         {
870                         $_ =~ s/%([0-9a-f]{1,2})/chr(hex($1))/gei;
871                         push @{$useradd{CFLAGS}}, $_;
872                         push @{$useradd{CXXFLAGS}}, $_;
873                         }
874                 }
875         else
876                 {
877                 die "target already defined - $target (offending arg: $_)\n" if ($target ne "");
878                 $target=$_;
879                 }
880         unless ($_ eq $target || /^no-/ || /^disable-/)
881                 {
882                 # "no-..." follows later after implied deactivations
883                 # have been derived.  (Don't take this too seriously,
884                 # we really only write OPTIONS to the Makefile out of
885                 # nostalgia.)
886
887                 if ($config{options} eq "")
888                         { $config{options} = $_; }
889                 else
890                         { $config{options} .= " ".$_; }
891                 }
892         }
893
894 if (defined($config{api}) && !exists $apitable->{$config{api}}) {
895         die "***** Unsupported api compatibility level: $config{api}\n",
896 }
897
898 if (keys %deprecated_options)
899         {
900         warn "***** Deprecated options: ",
901                 join(", ", keys %deprecated_options), "\n";
902         }
903 if (keys %unsupported_options)
904         {
905         die "***** Unsupported options: ",
906                 join(", ", keys %unsupported_options), "\n";
907         }
908
909 # If any %useradd entry has been set, we must check that the "make
910 # variables" haven't been set.  We start by checking of any %useradd entry
911 # is set.
912 if (grep { scalar @$_ > 0 } values %useradd) {
913     # Hash of env / make variables names.  The possible values are:
914     # 1 - "make vars"
915     # 2 - %useradd entry set
916     # 3 - both set
917     my %detected_vars =
918         map { my $v = 0;
919               $v += 1 if $cmdvars{$_};
920               $v += 2 if @{$useradd{$_}};
921               $_ => $v }
922         keys %useradd;
923
924     # If any of the corresponding "make variables" is set, we error
925     if (grep { $_ & 1 } values %detected_vars) {
926         my $names = join(', ', grep { $detected_vars{$_} > 0 }
927                                sort keys %detected_vars);
928         die <<"_____";
929 ***** Mixing make variables and additional compiler/linker flags as
930 ***** configure command line option is not permitted.
931 ***** Affected make variables: $names
932 _____
933     }
934 }
935
936 # Check through all supported command line variables to see if any of them
937 # were set, and canonicalise the values we got.  If no compiler or linker
938 # flag or anything else that affects %useradd was set, we also check the
939 # environment for values.
940 my $anyuseradd =
941     grep { defined $_ && (ref $_ ne 'ARRAY' || @$_) } values %useradd;
942 foreach (keys %user) {
943     my $value = $cmdvars{$_};
944     $value //= env($_) unless $anyuseradd;
945     $value //=
946         defined $user_synonyms{$_} ? $cmdvars{$user_synonyms{$_}} : undef;
947     $value //= defined $user_synonyms{$_} ? env($user_synonyms{$_}) : undef
948         unless $anyuseradd;
949
950     if (defined $value) {
951         if (ref $user{$_} eq 'ARRAY') {
952             $user{$_} = [ split /$list_separator_re/, $value ];
953         } elsif (!defined $user{$_}) {
954             $user{$_} = $value;
955         }
956     }
957 }
958
959 if (grep { /-rpath\b/ } ($user{LDFLAGS} ? @{$user{LDFLAGS}} : ())
960     && !$disabled{shared}
961     && !($disabled{asan} && $disabled{msan} && $disabled{ubsan})) {
962     die "***** Cannot simultaneously use -rpath, shared libraries, and\n",
963         "***** any of asan, msan or ubsan\n";
964 }
965
966 my @tocheckfor = (keys %disabled);
967 while (@tocheckfor) {
968     my %new_tocheckfor = ();
969     my @cascade_copy = (@disable_cascades);
970     while (@cascade_copy) {
971         my ($test, $descendents) = (shift @cascade_copy, shift @cascade_copy);
972         if (ref($test) eq "CODE" ? $test->() : defined($disabled{$test})) {
973             foreach(grep { !defined($disabled{$_}) } @$descendents) {
974                 $new_tocheckfor{$_} = 1; $disabled{$_} = "forced";
975             }
976         }
977     }
978     @tocheckfor = (keys %new_tocheckfor);
979 }
980
981 our $die = sub { die @_; };
982 if ($target eq "TABLE") {
983     local $die = sub { warn @_; };
984     foreach (sort keys %table) {
985         print_table_entry($_, "TABLE");
986     }
987     exit 0;
988 }
989
990 if ($target eq "LIST") {
991     foreach (sort keys %table) {
992         print $_,"\n" unless $table{$_}->{template};
993     }
994     exit 0;
995 }
996
997 if ($target eq "HASH") {
998     local $die = sub { warn @_; };
999     print "%table = (\n";
1000     foreach (sort keys %table) {
1001         print_table_entry($_, "HASH");
1002     }
1003     exit 0;
1004 }
1005
1006 print "Configuring OpenSSL version $config{version} ($config{version_num}) ";
1007 print "for $target\n";
1008
1009 if (scalar(@seed_sources) == 0) {
1010     print "Using os-specific seed configuration\n";
1011     push @seed_sources, 'os';
1012 }
1013 if (scalar(grep { $_ eq 'none' } @seed_sources) > 0) {
1014     die "Cannot seed with none and anything else" if scalar(@seed_sources) > 1;
1015     warn <<_____ if scalar(@seed_sources) == 1;
1016
1017 ============================== WARNING ===============================
1018 You have selected the --with-rand-seed=none option, which effectively
1019 disables automatic reseeding of the OpenSSL random generator.
1020 All operations depending on the random generator such as creating keys
1021 will not work unless the random generator is seeded manually by the
1022 application.
1023
1024 Please read the 'Note on random number generation' section in the
1025 INSTALL instructions and the RAND_DRBG(7) manual page for more details.
1026 ============================== WARNING ===============================
1027
1028 _____
1029 }
1030 push @{$config{openssl_other_defines}},
1031      map { (my $x = $_) =~ tr|[\-a-z]|[_A-Z]|; "OPENSSL_RAND_SEED_$x" }
1032         @seed_sources;
1033
1034 # Backward compatibility?
1035 if ($target =~ m/^CygWin32(-.*)$/) {
1036     $target = "Cygwin".$1;
1037 }
1038
1039 # Support for legacy targets having a name starting with 'debug-'
1040 my ($d, $t) = $target =~ m/^(debug-)?(.*)$/;
1041 if ($d) {
1042     $config{build_type} = "debug";
1043
1044     # If we do not find debug-foo in the table, the target is set to foo.
1045     if (!$table{$target}) {
1046         $target = $t;
1047     }
1048 }
1049
1050 &usage if !$table{$target} || $table{$target}->{template};
1051
1052 $config{target} = $target;
1053 my %target = resolve_config($target);
1054
1055 foreach (keys %target_attr_translate) {
1056     $target{$target_attr_translate{$_}} = $target{$_}
1057         if $target{$_};
1058     delete $target{$_};
1059 }
1060
1061 %target = ( %{$table{DEFAULTS}}, %target );
1062
1063 # Make the flags to build DSOs the same as for shared libraries unless they
1064 # are already defined
1065 $target{module_cflags} = $target{shared_cflag} unless defined $target{module_cflags};
1066 $target{module_cxxflags} = $target{shared_cxxflag} unless defined $target{module_cxxflags};
1067 $target{module_ldflags} = $target{shared_ldflag} unless defined $target{module_ldflags};
1068 {
1069     my $shared_info_pl =
1070         catfile(dirname($0), "Configurations", "shared-info.pl");
1071     my %shared_info = read_eval_file($shared_info_pl);
1072     push @{$target{_conf_fname_int}}, $shared_info_pl;
1073     my $si = $target{shared_target};
1074     while (ref $si ne "HASH") {
1075         last if ! defined $si;
1076         if (ref $si eq "CODE") {
1077             $si = $si->();
1078         } else {
1079             $si = $shared_info{$si};
1080         }
1081     }
1082
1083     # Some of the 'shared_target' values don't have any entried in
1084     # %shared_info.  That's perfectly fine, AS LONG AS the build file
1085     # template knows how to handle this.  That is currently the case for
1086     # Windows and VMS.
1087     if (defined $si) {
1088         # Just as above, copy certain shared_* attributes to the corresponding
1089         # module_ attribute unless the latter is already defined
1090         $si->{module_cflags} = $si->{shared_cflag} unless defined $si->{module_cflags};
1091         $si->{module_cxxflags} = $si->{shared_cxxflag} unless defined $si->{module_cxxflags};
1092         $si->{module_ldflags} = $si->{shared_ldflag} unless defined $si->{module_ldflags};
1093         foreach (sort keys %$si) {
1094             $target{$_} = defined $target{$_}
1095                 ? add($si->{$_})->($target{$_})
1096                 : $si->{$_};
1097         }
1098     }
1099 }
1100
1101 my %conf_files = map { $_ => 1 } (@{$target{_conf_fname_int}});
1102 $config{conf_files} = [ sort keys %conf_files ];
1103
1104 foreach my $feature (@{$target{disable}}) {
1105     if (exists $deprecated_disablables{$feature}) {
1106         warn "***** config $target disables deprecated feature $feature\n";
1107     } elsif (!grep { $feature eq $_ } @disablables) {
1108         die "***** config $target disables unknown feature $feature\n";
1109     }
1110     $disabled{$feature} = 'config';
1111 }
1112 foreach my $feature (@{$target{enable}}) {
1113     if ("default" eq ($disabled{$_} // "")) {
1114         if (exists $deprecated_disablables{$feature}) {
1115             warn "***** config $target enables deprecated feature $feature\n";
1116         } elsif (!grep { $feature eq $_ } @disablables) {
1117             die "***** config $target enables unknown feature $feature\n";
1118         }
1119         delete $disabled{$_};
1120     }
1121 }
1122
1123 $target{CXXFLAGS}//=$target{CFLAGS} if $target{CXX};
1124 $target{cxxflags}//=$target{cflags} if $target{CXX};
1125 $target{exe_extension}="";
1126 $target{exe_extension}=".exe" if ($config{target} eq "DJGPP"
1127                                   || $config{target} =~ /^(?:Cygwin|mingw)/);
1128 $target{exe_extension}=".pm"  if ($config{target} =~ /vos/);
1129
1130 ($target{shared_extension_simple}=$target{shared_extension})
1131     =~ s|\.\$\(SHLIB_VERSION_NUMBER\)||
1132     unless defined($target{shared_extension_simple});
1133 $target{dso_extension}//=$target{shared_extension_simple};
1134 ($target{shared_import_extension}=$target{shared_extension_simple}.".a")
1135     if ($config{target} =~ /^(?:Cygwin|mingw)/);
1136
1137 # Fill %config with values from %user, and in case those are undefined or
1138 # empty, use values from %target (acting as a default).
1139 foreach (keys %user) {
1140     my $ref_type = ref $user{$_};
1141
1142     # Temporary function.  Takes an intended ref type (empty string or "ARRAY")
1143     # and a value that's to be coerced into that type.
1144     my $mkvalue = sub {
1145         my $type = shift;
1146         my $value = shift;
1147         my $undef_p = shift;
1148
1149         die "Too many arguments for \$mkvalue" if @_;
1150
1151         while (ref $value eq 'CODE') {
1152             $value = $value->();
1153         }
1154
1155         if ($type eq 'ARRAY') {
1156             return undef unless defined $value;
1157             return undef if ref $value ne 'ARRAY' && !$value;
1158             return undef if ref $value eq 'ARRAY' && !@$value;
1159             return [ $value ] unless ref $value eq 'ARRAY';
1160         }
1161         return undef unless $value;
1162         return $value;
1163     };
1164
1165     $config{$_} =
1166         $mkvalue->($ref_type, $user{$_})
1167         || $mkvalue->($ref_type, $target{$_});
1168     delete $config{$_} unless defined $config{$_};
1169 }
1170
1171 # Allow overriding the build file name
1172 $config{build_file} = env('BUILDFILE') || $target{build_file} || "Makefile";
1173
1174 my %disabled_info = ();         # For configdata.pm
1175 foreach my $what (sort keys %disabled) {
1176     $config{options} .= " no-$what";
1177
1178     if (!grep { $what eq $_ } ( 'dso', 'threads', 'shared', 'pic',
1179                                 'dynamic-engine', 'makedepend',
1180                                 'zlib-dynamic', 'zlib', 'sse2' )) {
1181         (my $WHAT = uc $what) =~ s|-|_|g;
1182
1183         # Fix up C macro end names
1184         $WHAT = "RMD160" if $what eq "ripemd";
1185
1186         # fix-up crypto/directory name(s)
1187         $what = "ripemd" if $what eq "rmd160";
1188         $what = "whrlpool" if $what eq "whirlpool";
1189
1190         my $macro = $disabled_info{$what}->{macro} = "OPENSSL_NO_$WHAT";
1191
1192         if ((grep { $what eq $_ } @{$config{sdirs}})
1193                 && $what ne 'async' && $what ne 'err') {
1194             @{$config{sdirs}} = grep { $what ne $_} @{$config{sdirs}};
1195             $disabled_info{$what}->{skipped} = [ catdir('crypto', $what) ];
1196
1197             if ($what ne 'engine') {
1198                 push @{$config{openssl_algorithm_defines}}, $macro;
1199             } else {
1200                 @{$config{dirs}} = grep !/^engines$/, @{$config{dirs}};
1201                 push @{$disabled_info{engine}->{skipped}}, catdir('engines');
1202                 push @{$config{openssl_other_defines}}, $macro;
1203             }
1204         } else {
1205             push @{$config{openssl_other_defines}}, $macro;
1206         }
1207
1208     }
1209 }
1210
1211 # Make sure build_scheme is consistent.
1212 $target{build_scheme} = [ $target{build_scheme} ]
1213     if ref($target{build_scheme}) ne "ARRAY";
1214
1215 my ($builder, $builder_platform, @builder_opts) =
1216     @{$target{build_scheme}};
1217
1218 foreach my $checker (($builder_platform."-".$target{build_file}."-checker.pm",
1219                       $builder_platform."-checker.pm")) {
1220     my $checker_path = catfile($srcdir, "Configurations", $checker);
1221     if (-f $checker_path) {
1222         my $fn = $ENV{CONFIGURE_CHECKER_WARN}
1223             ? sub { warn $@; } : sub { die $@; };
1224         if (! do $checker_path) {
1225             if ($@) {
1226                 $fn->($@);
1227             } elsif ($!) {
1228                 $fn->($!);
1229             } else {
1230                 $fn->("The detected tools didn't match the platform\n");
1231             }
1232         }
1233         last;
1234     }
1235 }
1236
1237 push @{$config{defines}}, "NDEBUG"    if $config{build_type} eq "release";
1238
1239 if ($target =~ /^mingw/ && `$config{CC} --target-help 2>&1` =~ m/-mno-cygwin/m)
1240         {
1241         push @{$config{cflags}}, "-mno-cygwin";
1242         push @{$config{cxxflags}}, "-mno-cygwin" if $config{CXX};
1243         push @{$config{shared_ldflag}}, "-mno-cygwin";
1244         }
1245
1246 if ($target =~ /linux.*-mips/ && !$disabled{asm}
1247         && !grep { $_ !~ /-m(ips|arch=)/ } (@{$user{CFLAGS}},
1248                                             @{$useradd{CFLAGS}})) {
1249         # minimally required architecture flags for assembly modules
1250         my $value;
1251         $value = '-mips2' if ($target =~ /mips32/);
1252         $value = '-mips3' if ($target =~ /mips64/);
1253         unshift @{$config{cflags}}, $value;
1254         unshift @{$config{cxxflags}}, $value if $config{CXX};
1255 }
1256
1257 # If threads aren't disabled, check how possible they are
1258 unless ($disabled{threads}) {
1259     if ($auto_threads) {
1260         # Enabled by default, disable it forcibly if unavailable
1261         if ($target{thread_scheme} eq "(unknown)") {
1262             $disabled{threads} = "unavailable";
1263         }
1264     } else {
1265         # The user chose to enable threads explicitly, let's see
1266         # if there's a chance that's possible
1267         if ($target{thread_scheme} eq "(unknown)") {
1268             # If the user asked for "threads" and we don't have internal
1269             # knowledge how to do it, [s]he is expected to provide any
1270             # system-dependent compiler options that are necessary.  We
1271             # can't truly check that the given options are correct, but
1272             # we expect the user to know what [s]He is doing.
1273             if (!@{$user{CFLAGS}} && !@{$useradd{CFLAGS}}
1274                     && !@{$user{CPPDEFINES}} && !@{$useradd{CPPDEFINES}}) {
1275                 die "You asked for multi-threading support, but didn't\n"
1276                     ,"provide any system-specific compiler options\n";
1277             }
1278         }
1279     }
1280 }
1281
1282 # If threads still aren't disabled, add a C macro to ensure the source
1283 # code knows about it.  Any other flag is taken care of by the configs.
1284 unless($disabled{threads}) {
1285     push @{$config{openssl_thread_defines}}, "OPENSSL_THREADS";
1286 }
1287
1288 # With "deprecated" disable all deprecated features.
1289 if (defined($disabled{"deprecated"})) {
1290         $config{api} = $maxapi;
1291 }
1292
1293 my $no_shared_warn=0;
1294 if ($target{shared_target} eq "")
1295         {
1296         $no_shared_warn = 1
1297             if (!$disabled{shared} || !$disabled{"dynamic-engine"});
1298         $disabled{shared} = "no-shared-target";
1299         $disabled{pic} = $disabled{shared} = $disabled{"dynamic-engine"} =
1300             "no-shared-target";
1301         }
1302
1303 if ($disabled{"dynamic-engine"}) {
1304         push @{$config{openssl_other_defines}}, "OPENSSL_NO_DYNAMIC_ENGINE";
1305         $config{dynamic_engines} = 0;
1306 } else {
1307         push @{$config{openssl_other_defines}}, "OPENSSL_NO_STATIC_ENGINE";
1308         $config{dynamic_engines} = 1;
1309 }
1310
1311 unless ($disabled{asan}) {
1312     push @{$config{cflags}}, "-fsanitize=address";
1313     push @{$config{cxxflags}}, "-fsanitize=address" if $config{CXX};
1314 }
1315
1316 unless ($disabled{ubsan}) {
1317     # -DPEDANTIC or -fnosanitize=alignment may also be required on some
1318     # platforms.
1319     push @{$config{cflags}}, "-fsanitize=undefined", "-fno-sanitize-recover=all";
1320     push @{$config{cxxflags}}, "-fsanitize=undefined", "-fno-sanitize-recover=all"
1321         if $config{CXX};
1322 }
1323
1324 unless ($disabled{msan}) {
1325   push @{$config{cflags}}, "-fsanitize=memory";
1326   push @{$config{cxxflags}}, "-fsanitize=memory" if $config{CXX};
1327 }
1328
1329 unless ($disabled{"fuzz-libfuzzer"} && $disabled{"fuzz-afl"}
1330         && $disabled{asan} && $disabled{ubsan} && $disabled{msan}) {
1331     push @{$config{cflags}}, "-fno-omit-frame-pointer", "-g";
1332     push @{$config{cxxflags}}, "-fno-omit-frame-pointer", "-g" if $config{CXX};
1333 }
1334 #
1335 # Platform fix-ups
1336 #
1337
1338 # This saves the build files from having to check
1339 if ($disabled{pic})
1340         {
1341         foreach (qw(shared_cflag shared_cxxflag shared_cppflag
1342                     shared_defines shared_includes shared_ldflag
1343                     module_cflags module_cxxflags module_cppflags
1344                     module_defines module_includes module_lflags))
1345                 {
1346                 delete $config{$_};
1347                 $target{$_} = "";
1348                 }
1349         }
1350 else
1351         {
1352         push @{$config{lib_defines}}, "OPENSSL_PIC";
1353         }
1354
1355 if ($target{sys_id} ne "")
1356         {
1357         push @{$config{openssl_sys_defines}}, "OPENSSL_SYS_$target{sys_id}";
1358         }
1359
1360 unless ($disabled{asm}) {
1361     $target{cpuid_asm_src}=$table{DEFAULTS}->{cpuid_asm_src} if ($config{processor} eq "386");
1362     push @{$config{lib_defines}}, "OPENSSL_CPUID_OBJ" if ($target{cpuid_asm_src} ne "mem_clr.c");
1363
1364     $target{bn_asm_src} =~ s/\w+-gf2m.c// if (defined($disabled{ec2m}));
1365
1366     # bn-586 is the only one implementing bn_*_part_words
1367     push @{$config{lib_defines}}, "OPENSSL_BN_ASM_PART_WORDS" if ($target{bn_asm_src} =~ /bn-586/);
1368     push @{$config{lib_defines}}, "OPENSSL_IA32_SSE2" if (!$disabled{sse2} && $target{bn_asm_src} =~ /86/);
1369
1370     push @{$config{lib_defines}}, "OPENSSL_BN_ASM_MONT" if ($target{bn_asm_src} =~ /-mont/);
1371     push @{$config{lib_defines}}, "OPENSSL_BN_ASM_MONT5" if ($target{bn_asm_src} =~ /-mont5/);
1372     push @{$config{lib_defines}}, "OPENSSL_BN_ASM_GF2m" if ($target{bn_asm_src} =~ /-gf2m/);
1373
1374     if ($target{sha1_asm_src}) {
1375         push @{$config{lib_defines}}, "SHA1_ASM"   if ($target{sha1_asm_src} =~ /sx86/ || $target{sha1_asm_src} =~ /sha1/);
1376         push @{$config{lib_defines}}, "SHA256_ASM" if ($target{sha1_asm_src} =~ /sha256/);
1377         push @{$config{lib_defines}}, "SHA512_ASM" if ($target{sha1_asm_src} =~ /sha512/);
1378     }
1379     if ($target{keccak1600_asm_src} ne $table{DEFAULTS}->{keccak1600_asm_src}) {
1380         push @{$config{lib_defines}}, "KECCAK1600_ASM";
1381     }
1382     if ($target{rc4_asm_src} ne $table{DEFAULTS}->{rc4_asm_src}) {
1383         push @{$config{lib_defines}}, "RC4_ASM";
1384     }
1385     if ($target{md5_asm_src}) {
1386         push @{$config{lib_defines}}, "MD5_ASM";
1387     }
1388     $target{cast_asm_src}=$table{DEFAULTS}->{cast_asm_src} unless $disabled{pic}; # CAST assembler is not PIC
1389     if ($target{rmd160_asm_src}) {
1390         push @{$config{lib_defines}}, "RMD160_ASM";
1391     }
1392     if ($target{aes_asm_src}) {
1393         push @{$config{lib_defines}}, "AES_ASM" if ($target{aes_asm_src} =~ m/\baes-/);;
1394         # aes-ctr.fake is not a real file, only indication that assembler
1395         # module implements AES_ctr32_encrypt...
1396         push @{$config{lib_defines}}, "AES_CTR_ASM" if ($target{aes_asm_src} =~ s/\s*aes-ctr\.fake//);
1397         # aes-xts.fake indicates presence of AES_xts_[en|de]crypt...
1398         push @{$config{lib_defines}}, "AES_XTS_ASM" if ($target{aes_asm_src} =~ s/\s*aes-xts\.fake//);
1399         $target{aes_asm_src} =~ s/\s*(vpaes|aesni)-x86\.s//g if ($disabled{sse2});
1400         push @{$config{lib_defines}}, "VPAES_ASM" if ($target{aes_asm_src} =~ m/vpaes/);
1401         push @{$config{lib_defines}}, "BSAES_ASM" if ($target{aes_asm_src} =~ m/bsaes/);
1402     }
1403     if ($target{wp_asm_src} =~ /mmx/) {
1404         if ($config{processor} eq "386") {
1405             $target{wp_asm_src}=$table{DEFAULTS}->{wp_asm_src};
1406         } elsif (!$disabled{"whirlpool"}) {
1407             push @{$config{lib_defines}}, "WHIRLPOOL_ASM";
1408         }
1409     }
1410     if ($target{modes_asm_src} =~ /ghash-/) {
1411         push @{$config{lib_defines}}, "GHASH_ASM";
1412     }
1413     if ($target{ec_asm_src} =~ /ecp_nistz256/) {
1414         push @{$config{lib_defines}}, "ECP_NISTZ256_ASM";
1415     }
1416     if ($target{ec_asm_src} =~ /x25519/) {
1417         push @{$config{lib_defines}}, "X25519_ASM";
1418     }
1419     if ($target{padlock_asm_src} ne $table{DEFAULTS}->{padlock_asm_src}) {
1420         push @{$config{lib_defines}}, "PADLOCK_ASM";
1421     }
1422     if ($target{poly1305_asm_src} ne "") {
1423         push @{$config{lib_defines}}, "POLY1305_ASM";
1424     }
1425 }
1426
1427 my %predefined = compiler_predefined($config{CROSS_COMPILE}.$config{CC});
1428
1429 # Check for makedepend capabilities.
1430 if (!$disabled{makedepend}) {
1431     if ($config{target} =~ /^(VC|vms)-/) {
1432         # For VC- and vms- targets, there's nothing more to do here.  The
1433         # functionality is hard coded in the corresponding build files for
1434         # cl (Windows) and CC/DECC (VMS).
1435     } elsif (($predefined{__GNUC__} // -1) >= 3
1436              && !($predefined{__APPLE_CC__} && !$predefined{__clang__})) {
1437         # We know that GNU C version 3 and up as well as all clang
1438         # versions support dependency generation, but Xcode did not
1439         # handle $cc -M before clang support (but claims __GNUC__ = 3)
1440         $config{makedepprog} = "\$(CROSS_COMPILE)$config{CC}";
1441     } else {
1442         # In all other cases, we look for 'makedepend', and disable the
1443         # capability if not found.
1444         $config{makedepprog} = which('makedepend');
1445         $disabled{makedepend} = "unavailable" unless $config{makedepprog};
1446     }
1447 }
1448
1449 if (!$disabled{asm} && !$predefined{__MACH__} && $^O ne 'VMS') {
1450     # probe for -Wa,--noexecstack option...
1451     if ($predefined{__clang__}) {
1452         # clang has builtin assembler, which doesn't recognize --help,
1453         # but it apparently recognizes the option in question on all
1454         # supported platforms even when it's meaningless. In other words
1455         # probe would fail, but probed option always accepted...
1456         push @{$config{cflags}}, "-Wa,--noexecstack", "-Qunused-arguments";
1457     } else {
1458         my $cc = $config{CROSS_COMPILE}.$config{CC};
1459         open(PIPE, "$cc -Wa,--help -c -o null.$$.o -x assembler /dev/null 2>&1 |");
1460         while(<PIPE>) {
1461             if (m/--noexecstack/) {
1462                 push @{$config{cflags}}, "-Wa,--noexecstack";
1463                 last;
1464             }
1465         }
1466         close(PIPE);
1467         unlink("null.$$.o");
1468     }
1469 }
1470
1471 # Deal with bn_ops ###################################################
1472
1473 $config{bn_ll}                  =0;
1474 $config{export_var_as_fn}       =0;
1475 my $def_int="unsigned int";
1476 $config{rc4_int}                =$def_int;
1477 ($config{b64l},$config{b64},$config{b32})=(0,0,1);
1478
1479 my $count = 0;
1480 foreach (sort split(/\s+/,$target{bn_ops})) {
1481     $count++ if /SIXTY_FOUR_BIT|SIXTY_FOUR_BIT_LONG|THIRTY_TWO_BIT/;
1482     $config{export_var_as_fn}=1                 if $_ eq 'EXPORT_VAR_AS_FN';
1483     $config{bn_ll}=1                            if $_ eq 'BN_LLONG';
1484     $config{rc4_int}="unsigned char"            if $_ eq 'RC4_CHAR';
1485     ($config{b64l},$config{b64},$config{b32})
1486         =(0,1,0)                                if $_ eq 'SIXTY_FOUR_BIT';
1487     ($config{b64l},$config{b64},$config{b32})
1488         =(1,0,0)                                if $_ eq 'SIXTY_FOUR_BIT_LONG';
1489     ($config{b64l},$config{b64},$config{b32})
1490         =(0,0,1)                                if $_ eq 'THIRTY_TWO_BIT';
1491 }
1492 die "Exactly one of SIXTY_FOUR_BIT|SIXTY_FOUR_BIT_LONG|THIRTY_TWO_BIT can be set in bn_ops\n"
1493     if $count > 1;
1494
1495
1496 # Hack cflags for better warnings (dev option) #######################
1497
1498 # "Stringify" the C and C++ flags string.  This permits it to be made part of
1499 # a string and works as well on command lines.
1500 $config{cflags} = [ map { (my $x = $_) =~ s/([\\\"])/\\$1/g; $x }
1501                         @{$config{cflags}} ];
1502 $config{cxxflags} = [ map { (my $x = $_) =~ s/([\\\"])/\\$1/g; $x }
1503                           @{$config{cxxflags}} ] if $config{CXX};
1504
1505 if (defined($config{api})) {
1506     $config{openssl_api_defines} = [ "OPENSSL_MIN_API=".$apitable->{$config{api}} ];
1507     my $apiflag = sprintf("OPENSSL_API_COMPAT=%s", $apitable->{$config{api}});
1508     push @{$config{defines}}, $apiflag;
1509 }
1510
1511 if ($strict_warnings)
1512         {
1513         my $wopt;
1514         my $gccver = $predefined{__GNUC__} // -1;
1515
1516         die "ERROR --strict-warnings requires gcc[>=4] or gcc-alike"
1517             unless $gccver >= 4;
1518         foreach $wopt (split /\s+/, $gcc_devteam_warn)
1519                 {
1520                 push @{$config{cflags}}, $wopt
1521                         unless grep { $_ eq $wopt } @{$config{cflags}};
1522                 push @{$config{cxxflags}}, $wopt
1523                         if ($config{CXX}
1524                             && !grep { $_ eq $wopt } @{$config{cxxflags}});
1525                 }
1526         if (defined($predefined{__clang__}))
1527                 {
1528                 foreach $wopt (split /\s+/, $clang_devteam_warn)
1529                         {
1530                         push @{$config{cflags}}, $wopt
1531                                 unless grep { $_ eq $wopt } @{$config{cflags}};
1532                         push @{$config{cxxflags}}, $wopt
1533                                 if ($config{CXX}
1534                                     && !grep { $_ eq $wopt } @{$config{cxxflags}});
1535                         }
1536                 }
1537         }
1538
1539 unless ($disabled{"crypto-mdebug-backtrace"})
1540         {
1541         foreach my $wopt (split /\s+/, $memleak_devteam_backtrace)
1542                 {
1543                 push @{$config{cflags}}, $wopt
1544                         unless grep { $_ eq $wopt } @{$config{cflags}};
1545                 push @{$config{cxxflags}}, $wopt
1546                         if ($config{CXX}
1547                             && !grep { $_ eq $wopt } @{$config{cxxflags}});
1548                 }
1549         if ($target =~ /^BSD-/)
1550                 {
1551                 push @{$config{ex_libs}}, "-lexecinfo";
1552                 }
1553         }
1554
1555 unless ($disabled{afalgeng}) {
1556     $config{afalgeng}="";
1557     if (grep { $_ eq 'afalgeng' } @{$target{enable}}) {
1558         my $minver = 4*10000 + 1*100 + 0;
1559         if ($config{CROSS_COMPILE} eq "") {
1560             my $verstr = `uname -r`;
1561             my ($ma, $mi1, $mi2) = split("\\.", $verstr);
1562             ($mi2) = $mi2 =~ /(\d+)/;
1563             my $ver = $ma*10000 + $mi1*100 + $mi2;
1564             if ($ver < $minver) {
1565                 $disabled{afalgeng} = "too-old-kernel";
1566             } else {
1567                 push @{$config{engdirs}}, "afalg";
1568             }
1569         } else {
1570             $disabled{afalgeng} = "cross-compiling";
1571         }
1572     } else {
1573         $disabled{afalgeng}  = "not-linux";
1574     }
1575 }
1576
1577 push @{$config{openssl_other_defines}}, "OPENSSL_NO_AFALGENG" if ($disabled{afalgeng});
1578
1579 # Finish up %config by appending things the user gave us on the command line
1580 # apart from "make variables"
1581 foreach (keys %useradd) {
1582     # The must all be lists, so we assert that here
1583     die "internal error: \$useradd{$_} isn't an ARRAY\n"
1584         unless ref $useradd{$_} eq 'ARRAY';
1585
1586     if (defined $config{$_}) {
1587         push @{$config{$_}}, @{$useradd{$_}};
1588     } else {
1589         $config{$_} = [ @{$useradd{$_}} ];
1590     }
1591 }
1592
1593 # ALL MODIFICATIONS TO %config and %target MUST BE DONE FROM HERE ON
1594
1595 # If we use the unified build, collect information from build.info files
1596 my %unified_info = ();
1597
1598 my $buildinfo_debug = defined($ENV{CONFIGURE_DEBUG_BUILDINFO});
1599 if ($builder eq "unified") {
1600     use with_fallback qw(Text::Template);
1601
1602     sub cleandir {
1603         my $base = shift;
1604         my $dir = shift;
1605         my $relativeto = shift || ".";
1606
1607         $dir = catdir($base,$dir) unless isabsolute($dir);
1608
1609         # Make sure the directories we're building in exists
1610         mkpath($dir);
1611
1612         my $res = abs2rel(absolutedir($dir), rel2abs($relativeto));
1613         #print STDERR "DEBUG[cleandir]: $dir , $base => $res\n";
1614         return $res;
1615     }
1616
1617     sub cleanfile {
1618         my $base = shift;
1619         my $file = shift;
1620         my $relativeto = shift || ".";
1621
1622         $file = catfile($base,$file) unless isabsolute($file);
1623
1624         my $d = dirname($file);
1625         my $f = basename($file);
1626
1627         # Make sure the directories we're building in exists
1628         mkpath($d);
1629
1630         my $res = abs2rel(catfile(absolutedir($d), $f), rel2abs($relativeto));
1631         #print STDERR "DEBUG[cleanfile]: $d , $f => $res\n";
1632         return $res;
1633     }
1634
1635     # Store the name of the template file we will build the build file from
1636     # in %config.  This may be useful for the build file itself.
1637     my @build_file_template_names =
1638         ( $builder_platform."-".$target{build_file}.".tmpl",
1639           $target{build_file}.".tmpl" );
1640     my @build_file_templates = ();
1641
1642     # First, look in the user provided directory, if given
1643     if (defined env($local_config_envname)) {
1644         @build_file_templates =
1645             map {
1646                 if ($^O eq 'VMS') {
1647                     # VMS environment variables are logical names,
1648                     # which can be used as is
1649                     $local_config_envname . ':' . $_;
1650                 } else {
1651                     catfile(env($local_config_envname), $_);
1652                 }
1653             }
1654             @build_file_template_names;
1655     }
1656     # Then, look in our standard directory
1657     push @build_file_templates,
1658         ( map { cleanfile($srcdir, catfile("Configurations", $_), $blddir) }
1659           @build_file_template_names );
1660
1661     my $build_file_template;
1662     for $_ (@build_file_templates) {
1663         $build_file_template = $_;
1664         last if -f $build_file_template;
1665
1666         $build_file_template = undef;
1667     }
1668     if (!defined $build_file_template) {
1669         die "*** Couldn't find any of:\n", join("\n", @build_file_templates), "\n";
1670     }
1671     $config{build_file_templates}
1672       = [ cleanfile($srcdir, catfile("Configurations", "common0.tmpl"),
1673                     $blddir),
1674           $build_file_template,
1675           cleanfile($srcdir, catfile("Configurations", "common.tmpl"),
1676                     $blddir) ];
1677
1678     my @build_infos = ( [ ".", "build.info" ] );
1679     foreach (@{$config{dirs}}) {
1680         push @build_infos, [ $_, "build.info" ]
1681             if (-f catfile($srcdir, $_, "build.info"));
1682     }
1683     foreach (@{$config{sdirs}}) {
1684         push @build_infos, [ catdir("crypto", $_), "build.info" ]
1685             if (-f catfile($srcdir, "crypto", $_, "build.info"));
1686     }
1687     foreach (@{$config{engdirs}}) {
1688         push @build_infos, [ catdir("engines", $_), "build.info" ]
1689             if (-f catfile($srcdir, "engines", $_, "build.info"));
1690     }
1691     foreach (@{$config{tdirs}}) {
1692         push @build_infos, [ catdir("test", $_), "build.info" ]
1693             if (-f catfile($srcdir, "test", $_, "build.info"));
1694     }
1695
1696     $config{build_infos} = [ ];
1697
1698     my %ordinals = ();
1699     foreach (@build_infos) {
1700         my $sourced = catdir($srcdir, $_->[0]);
1701         my $buildd = catdir($blddir, $_->[0]);
1702
1703         mkpath($buildd);
1704
1705         my $f = $_->[1];
1706         # The basic things we're trying to build
1707         my @programs = ();
1708         my @programs_install = ();
1709         my @libraries = ();
1710         my @libraries_install = ();
1711         my @engines = ();
1712         my @engines_install = ();
1713         my @scripts = ();
1714         my @scripts_install = ();
1715         my @extra = ();
1716         my @overrides = ();
1717         my @intermediates = ();
1718         my @rawlines = ();
1719
1720         my %sources = ();
1721         my %shared_sources = ();
1722         my %includes = ();
1723         my %depends = ();
1724         my %renames = ();
1725         my %sharednames = ();
1726         my %generate = ();
1727
1728         # We want to detect configdata.pm in the source tree, so we
1729         # don't use it if the build tree is different.
1730         my $src_configdata = cleanfile($srcdir, "configdata.pm", $blddir);
1731
1732         push @{$config{build_infos}}, catfile(abs2rel($sourced, $blddir), $f);
1733         my $template =
1734             Text::Template->new(TYPE => 'FILE',
1735                                 SOURCE => catfile($sourced, $f),
1736                                 PREPEND => qq{use lib "$FindBin::Bin/util/perl";});
1737         die "Something went wrong with $sourced/$f: $!\n" unless $template;
1738         my @text =
1739             split /^/m,
1740             $template->fill_in(HASH => { config => \%config,
1741                                          target => \%target,
1742                                          disabled => \%disabled,
1743                                          withargs => \%withargs,
1744                                          builddir => abs2rel($buildd, $blddir),
1745                                          sourcedir => abs2rel($sourced, $blddir),
1746                                          buildtop => abs2rel($blddir, $blddir),
1747                                          sourcetop => abs2rel($srcdir, $blddir) },
1748                                DELIMITERS => [ "{-", "-}" ]);
1749
1750         # The top item of this stack has the following values
1751         # -2 positive already run and we found ELSE (following ELSIF should fail)
1752         # -1 positive already run (skip until ENDIF)
1753         # 0 negatives so far (if we're at a condition, check it)
1754         # 1 last was positive (don't skip lines until next ELSE, ELSIF or ENDIF)
1755         # 2 positive ELSE (following ELSIF should fail)
1756         my @skip = ();
1757         collect_information(
1758             collect_from_array([ @text ],
1759                                qr/\\$/ => sub { my $l1 = shift; my $l2 = shift;
1760                                                 $l1 =~ s/\\$//; $l1.$l2 }),
1761             # Info we're looking for
1762             qr/^\s*IF\[((?:\\.|[^\\\]])*)\]\s*$/
1763             => sub {
1764                 if (! @skip || $skip[$#skip] > 0) {
1765                     push @skip, !! $1;
1766                 } else {
1767                     push @skip, -1;
1768                 }
1769             },
1770             qr/^\s*ELSIF\[((?:\\.|[^\\\]])*)\]\s*$/
1771             => sub { die "ELSIF out of scope" if ! @skip;
1772                      die "ELSIF following ELSE" if abs($skip[$#skip]) == 2;
1773                      $skip[$#skip] = -1 if $skip[$#skip] != 0;
1774                      $skip[$#skip] = !! $1
1775                          if $skip[$#skip] == 0; },
1776             qr/^\s*ELSE\s*$/
1777             => sub { die "ELSE out of scope" if ! @skip;
1778                      $skip[$#skip] = -2 if $skip[$#skip] != 0;
1779                      $skip[$#skip] = 2 if $skip[$#skip] == 0; },
1780             qr/^\s*ENDIF\s*$/
1781             => sub { die "ENDIF out of scope" if ! @skip;
1782                      pop @skip; },
1783             qr/^\s*PROGRAMS(_NO_INST)?\s*=\s*(.*)\s*$/
1784             => sub {
1785                 if (!@skip || $skip[$#skip] > 0) {
1786                     my $install = $1;
1787                     my @x = tokenize($2);
1788                     push @programs, @x;
1789                     push @programs_install, @x unless $install;
1790                 }
1791             },
1792             qr/^\s*LIBS(_NO_INST)?\s*=\s*(.*)\s*$/
1793             => sub {
1794                 if (!@skip || $skip[$#skip] > 0) {
1795                     my $install = $1;
1796                     my @x = tokenize($2);
1797                     push @libraries, @x;
1798                     push @libraries_install, @x unless $install;
1799                 }
1800             },
1801             qr/^\s*ENGINES(_NO_INST)?\s*=\s*(.*)\s*$/
1802             => sub {
1803                 if (!@skip || $skip[$#skip] > 0) {
1804                     my $install = $1;
1805                     my @x = tokenize($2);
1806                     push @engines, @x;
1807                     push @engines_install, @x unless $install;
1808                 }
1809             },
1810             qr/^\s*SCRIPTS(_NO_INST)?\s*=\s*(.*)\s*$/
1811             => sub {
1812                 if (!@skip || $skip[$#skip] > 0) {
1813                     my $install = $1;
1814                     my @x = tokenize($2);
1815                     push @scripts, @x;
1816                     push @scripts_install, @x unless $install;
1817                 }
1818             },
1819             qr/^\s*EXTRA\s*=\s*(.*)\s*$/
1820             => sub { push @extra, tokenize($1)
1821                          if !@skip || $skip[$#skip] > 0 },
1822             qr/^\s*OVERRIDES\s*=\s*(.*)\s*$/
1823             => sub { push @overrides, tokenize($1)
1824                          if !@skip || $skip[$#skip] > 0 },
1825
1826             qr/^\s*ORDINALS\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/,
1827             => sub { push @{$ordinals{$1}}, tokenize($2)
1828                          if !@skip || $skip[$#skip] > 0 },
1829             qr/^\s*SOURCE\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
1830             => sub { push @{$sources{$1}}, tokenize($2)
1831                          if !@skip || $skip[$#skip] > 0 },
1832             qr/^\s*SHARED_SOURCE\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
1833             => sub { push @{$shared_sources{$1}}, tokenize($2)
1834                          if !@skip || $skip[$#skip] > 0 },
1835             qr/^\s*INCLUDE\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
1836             => sub { push @{$includes{$1}}, tokenize($2)
1837                          if !@skip || $skip[$#skip] > 0 },
1838             qr/^\s*DEPEND\[((?:\\.|[^\\\]])*)\]\s*=\s*(.*)\s*$/
1839             => sub { push @{$depends{$1}}, tokenize($2)
1840                          if !@skip || $skip[$#skip] > 0 },
1841             qr/^\s*GENERATE\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
1842             => sub { push @{$generate{$1}}, $2
1843                          if !@skip || $skip[$#skip] > 0 },
1844             qr/^\s*RENAME\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
1845             => sub { push @{$renames{$1}}, tokenize($2)
1846                          if !@skip || $skip[$#skip] > 0 },
1847             qr/^\s*SHARED_NAME\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
1848             => sub { push @{$sharednames{$1}}, tokenize($2)
1849                          if !@skip || $skip[$#skip] > 0 },
1850             qr/^\s*BEGINRAW\[((?:\\.|[^\\\]])+)\]\s*$/
1851             => sub {
1852                 my $lineiterator = shift;
1853                 my $target_kind = $1;
1854                 while (defined $lineiterator->()) {
1855                     s|\R$||;
1856                     if (/^\s*ENDRAW\[((?:\\.|[^\\\]])+)\]\s*$/) {
1857                         die "ENDRAW doesn't match BEGINRAW"
1858                             if $1 ne $target_kind;
1859                         last;
1860                     }
1861                     next if @skip && $skip[$#skip] <= 0;
1862                     push @rawlines,  $_
1863                         if ($target_kind eq $target{build_file}
1864                             || $target_kind eq $target{build_file}."(".$builder_platform.")");
1865                 }
1866             },
1867             qr/^\s*(?:#.*)?$/ => sub { },
1868             "OTHERWISE" => sub { die "Something wrong with this line:\n$_\nat $sourced/$f" },
1869             "BEFORE" => sub {
1870                 if ($buildinfo_debug) {
1871                     print STDERR "DEBUG: Parsing ",join(" ", @_),"\n";
1872                     print STDERR "DEBUG: ... before parsing, skip stack is ",join(" ", map { int($_) } @skip),"\n";
1873                 }
1874             },
1875             "AFTER" => sub {
1876                 if ($buildinfo_debug) {
1877                     print STDERR "DEBUG: .... after parsing, skip stack is ",join(" ", map { int($_) } @skip),"\n";
1878                 }
1879             },
1880             );
1881         die "runaway IF?" if (@skip);
1882
1883         foreach (keys %renames) {
1884             die "$_ renamed to more than one thing: "
1885                 ,join(" ", @{$renames{$_}}),"\n"
1886                 if scalar @{$renames{$_}} > 1;
1887             my $dest = cleanfile($buildd, $_, $blddir);
1888             my $to = cleanfile($buildd, $renames{$_}->[0], $blddir);
1889             die "$dest renamed to more than one thing: "
1890                 ,$unified_info{rename}->{$dest}, $to
1891                 unless !defined($unified_info{rename}->{$dest})
1892                 or $unified_info{rename}->{$dest} eq $to;
1893             $unified_info{rename}->{$dest} = $to;
1894         }
1895
1896         foreach (@programs) {
1897             my $program = cleanfile($buildd, $_, $blddir);
1898             if ($unified_info{rename}->{$program}) {
1899                 $program = $unified_info{rename}->{$program};
1900             }
1901             $unified_info{programs}->{$program} = 1;
1902         }
1903
1904         foreach (@programs_install) {
1905             my $program = cleanfile($buildd, $_, $blddir);
1906             if ($unified_info{rename}->{$program}) {
1907                 $program = $unified_info{rename}->{$program};
1908             }
1909             $unified_info{install}->{programs}->{$program} = 1;
1910         }
1911
1912         foreach (@libraries) {
1913             my $library = cleanfile($buildd, $_, $blddir);
1914             if ($unified_info{rename}->{$library}) {
1915                 $library = $unified_info{rename}->{$library};
1916             }
1917             $unified_info{libraries}->{$library} = 1;
1918         }
1919
1920         foreach (@libraries_install) {
1921             my $library = cleanfile($buildd, $_, $blddir);
1922             if ($unified_info{rename}->{$library}) {
1923                 $library = $unified_info{rename}->{$library};
1924             }
1925             $unified_info{install}->{libraries}->{$library} = 1;
1926         }
1927
1928         die <<"EOF" if scalar @engines and !$config{dynamic_engines};
1929 ENGINES can only be used if configured with 'dynamic-engine'.
1930 This is usually a fault in a build.info file.
1931 EOF
1932         foreach (@engines) {
1933             my $library = cleanfile($buildd, $_, $blddir);
1934             if ($unified_info{rename}->{$library}) {
1935                 $library = $unified_info{rename}->{$library};
1936             }
1937             $unified_info{engines}->{$library} = 1;
1938         }
1939
1940         foreach (@engines_install) {
1941             my $library = cleanfile($buildd, $_, $blddir);
1942             if ($unified_info{rename}->{$library}) {
1943                 $library = $unified_info{rename}->{$library};
1944             }
1945             $unified_info{install}->{engines}->{$library} = 1;
1946         }
1947
1948         foreach (@scripts) {
1949             my $script = cleanfile($buildd, $_, $blddir);
1950             if ($unified_info{rename}->{$script}) {
1951                 $script = $unified_info{rename}->{$script};
1952             }
1953             $unified_info{scripts}->{$script} = 1;
1954         }
1955
1956         foreach (@scripts_install) {
1957             my $script = cleanfile($buildd, $_, $blddir);
1958             if ($unified_info{rename}->{$script}) {
1959                 $script = $unified_info{rename}->{$script};
1960             }
1961             $unified_info{install}->{scripts}->{$script} = 1;
1962         }
1963
1964         foreach (@extra) {
1965             my $extra = cleanfile($buildd, $_, $blddir);
1966             $unified_info{extra}->{$extra} = 1;
1967         }
1968
1969         foreach (@overrides) {
1970             my $override = cleanfile($buildd, $_, $blddir);
1971             $unified_info{overrides}->{$override} = 1;
1972         }
1973
1974         push @{$unified_info{rawlines}}, @rawlines;
1975
1976         unless ($disabled{shared}) {
1977             # Check sharednames.
1978             foreach (keys %sharednames) {
1979                 my $dest = cleanfile($buildd, $_, $blddir);
1980                 if ($unified_info{rename}->{$dest}) {
1981                     $dest = $unified_info{rename}->{$dest};
1982                 }
1983                 die "shared_name for $dest with multiple values: "
1984                     ,join(" ", @{$sharednames{$_}}),"\n"
1985                     if scalar @{$sharednames{$_}} > 1;
1986                 my $to = cleanfile($buildd, $sharednames{$_}->[0], $blddir);
1987                 die "shared_name found for a library $dest that isn't defined\n"
1988                     unless $unified_info{libraries}->{$dest};
1989                 die "shared_name for $dest with multiple values: "
1990                     ,$unified_info{sharednames}->{$dest}, ", ", $to
1991                     unless !defined($unified_info{sharednames}->{$dest})
1992                     or $unified_info{sharednames}->{$dest} eq $to;
1993                 $unified_info{sharednames}->{$dest} = $to;
1994             }
1995
1996             # Additionally, we set up sharednames for libraries that don't
1997             # have any, as themselves.  Only for libraries that aren't
1998             # explicitly static.
1999             foreach (grep !/\.a$/, keys %{$unified_info{libraries}}) {
2000                 if (!defined $unified_info{sharednames}->{$_}) {
2001                     $unified_info{sharednames}->{$_} = $_
2002                 }
2003             }
2004
2005             # Check that we haven't defined any library as both shared and
2006             # explicitly static.  That is forbidden.
2007             my @doubles = ();
2008             foreach (grep /\.a$/, keys %{$unified_info{libraries}}) {
2009                 (my $l = $_) =~ s/\.a$//;
2010                 push @doubles, $l if defined $unified_info{sharednames}->{$l};
2011             }
2012             die "these libraries are both explicitly static and shared:\n  ",
2013                 join(" ", @doubles), "\n"
2014                 if @doubles;
2015         }
2016
2017         foreach (keys %sources) {
2018             my $dest = $_;
2019             my $ddest = cleanfile($buildd, $_, $blddir);
2020             if ($unified_info{rename}->{$ddest}) {
2021                 $ddest = $unified_info{rename}->{$ddest};
2022             }
2023             foreach (@{$sources{$dest}}) {
2024                 my $s = cleanfile($sourced, $_, $blddir);
2025
2026                 # If it isn't in the source tree, we assume it's generated
2027                 # in the build tree
2028                 if ($s eq $src_configdata || ! -f $s || $generate{$_}) {
2029                     $s = cleanfile($buildd, $_, $blddir);
2030                 }
2031                 # We recognise C++, C and asm files
2032                 if ($s =~ /\.(cc|cpp|c|s|S)$/) {
2033                     my $o = $_;
2034                     $o =~ s/\.[csS]$/.o/; # C and assembler
2035                     $o =~ s/\.(cc|cpp)$/_cc.o/; # C++
2036                     $o = cleanfile($buildd, $o, $blddir);
2037                     $unified_info{sources}->{$ddest}->{$o} = 1;
2038                     $unified_info{sources}->{$o}->{$s} = 1;
2039                 } elsif ($s =~ /\.rc$/) {
2040                     # We also recognise resource files
2041                     my $o = $_;
2042                     $o =~ s/\.rc$/.res/; # Resource configuration
2043                     my $o = cleanfile($buildd, $o, $blddir);
2044                     $unified_info{sources}->{$ddest}->{$o} = 1;
2045                     $unified_info{sources}->{$o}->{$s} = 1;
2046                 } else {
2047                     $unified_info{sources}->{$ddest}->{$s} = 1;
2048                 }
2049             }
2050         }
2051
2052         foreach (keys %shared_sources) {
2053             my $dest = $_;
2054             my $ddest = cleanfile($buildd, $_, $blddir);
2055             if ($unified_info{rename}->{$ddest}) {
2056                 $ddest = $unified_info{rename}->{$ddest};
2057             }
2058             foreach (@{$shared_sources{$dest}}) {
2059                 my $s = cleanfile($sourced, $_, $blddir);
2060
2061                 # If it isn't in the source tree, we assume it's generated
2062                 # in the build tree
2063                 if ($s eq $src_configdata || ! -f $s || $generate{$_}) {
2064                     $s = cleanfile($buildd, $_, $blddir);
2065                 }
2066
2067                 if ($s =~ /\.(cc|cpp|c|s|S)$/) {
2068                     # We recognise C++, C and asm files
2069                     my $o = $_;
2070                     $o =~ s/\.[csS]$/.o/; # C and assembler
2071                     $o =~ s/\.(cc|cpp)$/_cc.o/; # C++
2072                     $o = cleanfile($buildd, $o, $blddir);
2073                     $unified_info{shared_sources}->{$ddest}->{$o} = 1;
2074                     $unified_info{sources}->{$o}->{$s} = 1;
2075                 } elsif ($s =~ /\.rc$/) {
2076                     # We also recognise resource files
2077                     my $o = $_;
2078                     $o =~ s/\.rc$/.res/; # Resource configuration
2079                     my $o = cleanfile($buildd, $o, $blddir);
2080                     $unified_info{shared_sources}->{$ddest}->{$o} = 1;
2081                     $unified_info{sources}->{$o}->{$s} = 1;
2082                 } elsif ($s =~ /\.(def|map|opt)$/) {
2083                     # We also recognise .def / .map / .opt files
2084                     # We know they are generated files
2085                     my $def = cleanfile($buildd, $s, $blddir);
2086                     $unified_info{shared_sources}->{$ddest}->{$def} = 1;
2087                 } else {
2088                     die "unrecognised source file type for shared library: $s\n";
2089                 }
2090             }
2091         }
2092
2093         foreach (keys %generate) {
2094             my $dest = $_;
2095             my $ddest = cleanfile($buildd, $_, $blddir);
2096             if ($unified_info{rename}->{$ddest}) {
2097                 $ddest = $unified_info{rename}->{$ddest};
2098             }
2099             die "more than one generator for $dest: "
2100                     ,join(" ", @{$generate{$_}}),"\n"
2101                     if scalar @{$generate{$_}} > 1;
2102             my @generator = split /\s+/, $generate{$dest}->[0];
2103             $generator[0] = cleanfile($sourced, $generator[0], $blddir),
2104             $unified_info{generate}->{$ddest} = [ @generator ];
2105         }
2106
2107         foreach (keys %depends) {
2108             my $dest = $_;
2109             my $ddest = $dest eq "" ? "" : cleanfile($sourced, $_, $blddir);
2110
2111             # If the destination doesn't exist in source, it can only be
2112             # a generated file in the build tree.
2113             if ($ddest ne "" && ($ddest eq $src_configdata || ! -f $ddest)) {
2114                 $ddest = cleanfile($buildd, $_, $blddir);
2115                 if ($unified_info{rename}->{$ddest}) {
2116                     $ddest = $unified_info{rename}->{$ddest};
2117                 }
2118             }
2119             foreach (@{$depends{$dest}}) {
2120                 my $d = cleanfile($sourced, $_, $blddir);
2121
2122                 # If we know it's generated, or assume it is because we can't
2123                 # find it in the source tree, we set file we depend on to be
2124                 # in the build tree rather than the source tree, and assume
2125                 # and that there are lines to build it in a BEGINRAW..ENDRAW
2126                 # section or in the Makefile template.
2127                 if ($d eq $src_configdata
2128                     || ! -f $d
2129                     || (grep { $d eq $_ }
2130                         map { cleanfile($srcdir, $_, $blddir) }
2131                         grep { /\.h$/ } keys %{$unified_info{generate}})) {
2132                     $d = cleanfile($buildd, $_, $blddir);
2133                 }
2134                 # Take note if the file to depend on is being renamed
2135                 # Take extra care with files ending with .a, they should
2136                 # be treated without that extension, and the extension
2137                 # should be added back after treatment.
2138                 $d =~ /(\.a)?$/;
2139                 my $e = $1 // "";
2140                 $d = $`;
2141                 if ($unified_info{rename}->{$d}) {
2142                     $d = $unified_info{rename}->{$d};
2143                 }
2144                 $d .= $e;
2145                 $unified_info{depends}->{$ddest}->{$d} = 1;
2146             }
2147         }
2148
2149         foreach (keys %includes) {
2150             my $dest = $_;
2151             my $ddest = cleanfile($sourced, $_, $blddir);
2152
2153             # If the destination doesn't exist in source, it can only be
2154             # a generated file in the build tree.
2155             if ($ddest eq $src_configdata || ! -f $ddest) {
2156                 $ddest = cleanfile($buildd, $_, $blddir);
2157                 if ($unified_info{rename}->{$ddest}) {
2158                     $ddest = $unified_info{rename}->{$ddest};
2159                 }
2160             }
2161             foreach (@{$includes{$dest}}) {
2162                 my $is = cleandir($sourced, $_, $blddir);
2163                 my $ib = cleandir($buildd, $_, $blddir);
2164                 push @{$unified_info{includes}->{$ddest}->{source}}, $is
2165                     unless grep { $_ eq $is } @{$unified_info{includes}->{$ddest}->{source}};
2166                 push @{$unified_info{includes}->{$ddest}->{build}}, $ib
2167                     unless grep { $_ eq $ib } @{$unified_info{includes}->{$ddest}->{build}};
2168             }
2169         }
2170     }
2171
2172     my $ordinals_text = join(', ', sort keys %ordinals);
2173     warn <<"EOF" if $ordinals_text;
2174
2175 WARNING: ORDINALS were specified for $ordinals_text
2176 They are ignored and should be replaced with a combination of GENERATE,
2177 DEPEND and SHARED_SOURCE.
2178 EOF
2179
2180     # Massage the result
2181
2182     # If we depend on a header file or a perl module, add an inclusion of
2183     # its directory to allow smoothe inclusion
2184     foreach my $dest (keys %{$unified_info{depends}}) {
2185         next if $dest eq "";
2186         foreach my $d (keys %{$unified_info{depends}->{$dest}}) {
2187             next unless $d =~ /\.(h|pm)$/;
2188             my $i = dirname($d);
2189             my $spot =
2190                 $d eq "configdata.pm" || defined($unified_info{generate}->{$d})
2191                 ? 'build' : 'source';
2192             push @{$unified_info{includes}->{$dest}->{$spot}}, $i
2193                 unless grep { $_ eq $i } @{$unified_info{includes}->{$dest}->{$spot}};
2194         }
2195     }
2196
2197     # Trickle down includes placed on libraries, engines and programs to
2198     # their sources (i.e. object files)
2199     foreach my $dest (keys %{$unified_info{engines}},
2200                       keys %{$unified_info{libraries}},
2201                       keys %{$unified_info{programs}}) {
2202         foreach my $k (("source", "build")) {
2203             next unless defined($unified_info{includes}->{$dest}->{$k});
2204             my @incs = reverse @{$unified_info{includes}->{$dest}->{$k}};
2205             foreach my $obj (grep /\.o$/,
2206                              (keys %{$unified_info{sources}->{$dest}},
2207                               keys %{$unified_info{shared_sources}->{$dest}})) {
2208                 foreach my $inc (@incs) {
2209                     unshift @{$unified_info{includes}->{$obj}->{$k}}, $inc
2210                         unless grep { $_ eq $inc } @{$unified_info{includes}->{$obj}->{$k}};
2211                 }
2212             }
2213         }
2214         delete $unified_info{includes}->{$dest};
2215     }
2216
2217     ### Make unified_info a bit more efficient
2218     # One level structures
2219     foreach (("programs", "libraries", "engines", "scripts", "extra", "overrides")) {
2220         $unified_info{$_} = [ sort keys %{$unified_info{$_}} ];
2221     }
2222     # Two level structures
2223     foreach my $l1 (("install", "sources", "shared_sources", "ldadd", "depends")) {
2224         foreach my $l2 (sort keys %{$unified_info{$l1}}) {
2225             $unified_info{$l1}->{$l2} =
2226                 [ sort keys %{$unified_info{$l1}->{$l2}} ];
2227         }
2228     }
2229     # Includes
2230     foreach my $dest (sort keys %{$unified_info{includes}}) {
2231         if (defined($unified_info{includes}->{$dest}->{build})) {
2232             my @source_includes = ();
2233             @source_includes = ( @{$unified_info{includes}->{$dest}->{source}} )
2234                 if defined($unified_info{includes}->{$dest}->{source});
2235             $unified_info{includes}->{$dest} =
2236                 [ @{$unified_info{includes}->{$dest}->{build}} ];
2237             foreach my $inc (@source_includes) {
2238                 push @{$unified_info{includes}->{$dest}}, $inc
2239                     unless grep { $_ eq $inc } @{$unified_info{includes}->{$dest}};
2240             }
2241         } else {
2242             $unified_info{includes}->{$dest} =
2243                 [ @{$unified_info{includes}->{$dest}->{source}} ];
2244         }
2245     }
2246
2247     # For convenience collect information regarding directories where
2248     # files are generated, those generated files and the end product
2249     # they end up in where applicable.  Then, add build rules for those
2250     # directories
2251     my %loopinfo = ( "lib" => [ @{$unified_info{libraries}} ],
2252                      "dso" => [ @{$unified_info{engines}} ],
2253                      "bin" => [ @{$unified_info{programs}} ],
2254                      "script" => [ @{$unified_info{scripts}} ] );
2255     foreach my $type (keys %loopinfo) {
2256         foreach my $product (@{$loopinfo{$type}}) {
2257             my %dirs = ();
2258             my $pd = dirname($product);
2259
2260             foreach (@{$unified_info{sources}->{$product}},
2261                      @{$unified_info{shared_sources}->{$product} // []}) {
2262                 my $d = dirname($_);
2263
2264                 # We don't want to create targets for source directories
2265                 # when building out of source
2266                 next if ($config{sourcedir} ne $config{builddir}
2267                              && $d =~ m|^\Q$config{sourcedir}\E|);
2268                 # We already have a "test" target, and the current directory
2269                 # is just silly to make a target for
2270                 next if $d eq "test" || $d eq ".";
2271
2272                 $dirs{$d} = 1;
2273                 push @{$unified_info{dirinfo}->{$d}->{deps}}, $_
2274                     if $d ne $pd;
2275             }
2276             foreach (keys %dirs) {
2277                 push @{$unified_info{dirinfo}->{$_}->{products}->{$type}},
2278                     $product;
2279             }
2280         }
2281     }
2282 }
2283
2284 # For the schemes that need it, we provide the old *_obj configs
2285 # from the *_asm_obj ones
2286 foreach (grep /_(asm|aux)_src$/, keys %target) {
2287     my $src = $_;
2288     (my $obj = $_) =~ s/_(asm|aux)_src$/_obj/;
2289     $target{$obj} = $target{$src};
2290     $target{$obj} =~ s/\.[csS]\b/.o/g; # C and assembler
2291     $target{$obj} =~ s/\.(cc|cpp)\b/_cc.o/g; # C++
2292 }
2293
2294 # Write down our configuration where it fits #########################
2295
2296 print "Creating configdata.pm\n";
2297 open(OUT,">configdata.pm") || die "unable to create configdata.pm: $!\n";
2298 print OUT <<"EOF";
2299 #! $config{HASHBANGPERL}
2300
2301 package configdata;
2302
2303 use strict;
2304 use warnings;
2305
2306 use Exporter;
2307 #use vars qw(\@ISA \@EXPORT);
2308 our \@ISA = qw(Exporter);
2309 our \@EXPORT = qw(\%config \%target \%disabled \%withargs \%unified_info \@disablables);
2310
2311 EOF
2312 print OUT "our %config = (\n";
2313 foreach (sort keys %config) {
2314     if (ref($config{$_}) eq "ARRAY") {
2315         print OUT "  ", $_, " => [ ", join(", ",
2316                                            map { quotify("perl", $_) }
2317                                            @{$config{$_}}), " ],\n";
2318     } elsif (ref($config{$_}) eq "HASH") {
2319         print OUT "  ", $_, " => {";
2320         if (scalar keys %{$config{$_}} > 0) {
2321             print OUT "\n";
2322             foreach my $key (sort keys %{$config{$_}}) {
2323                 print OUT "      ",
2324                     join(" => ",
2325                          quotify("perl", $key),
2326                          defined $config{$_}->{$key}
2327                              ? quotify("perl", $config{$_}->{$key})
2328                              : "undef");
2329                 print OUT ",\n";
2330             }
2331             print OUT "  ";
2332         }
2333         print OUT "},\n";
2334     } else {
2335         print OUT "  ", $_, " => ", quotify("perl", $config{$_}), ",\n"
2336     }
2337 }
2338 print OUT <<"EOF";
2339 );
2340
2341 EOF
2342 print OUT "our %target = (\n";
2343 foreach (sort keys %target) {
2344     if (ref($target{$_}) eq "ARRAY") {
2345         print OUT "  ", $_, " => [ ", join(", ",
2346                                            map { quotify("perl", $_) }
2347                                            @{$target{$_}}), " ],\n";
2348     } else {
2349         print OUT "  ", $_, " => ", quotify("perl", $target{$_}), ",\n"
2350     }
2351 }
2352 print OUT <<"EOF";
2353 );
2354
2355 EOF
2356 print OUT "our \%available_protocols = (\n";
2357 print OUT "  tls => [ ", join(", ", map { quotify("perl", $_) } @tls), " ],\n";
2358 print OUT "  dtls => [ ", join(", ", map { quotify("perl", $_) } @dtls), " ],\n";
2359 print OUT <<"EOF";
2360 );
2361
2362 EOF
2363 print OUT "our \@disablables = (\n";
2364 foreach (@disablables) {
2365     print OUT "  ", quotify("perl", $_), ",\n";
2366 }
2367 print OUT <<"EOF";
2368 );
2369
2370 EOF
2371 print OUT "our \%disabled = (\n";
2372 foreach (sort keys %disabled) {
2373     print OUT "  ", quotify("perl", $_), " => ", quotify("perl", $disabled{$_}), ",\n";
2374 }
2375 print OUT <<"EOF";
2376 );
2377
2378 EOF
2379 print OUT "our %withargs = (\n";
2380 foreach (sort keys %withargs) {
2381     if (ref($withargs{$_}) eq "ARRAY") {
2382         print OUT "  ", $_, " => [ ", join(", ",
2383                                            map { quotify("perl", $_) }
2384                                            @{$withargs{$_}}), " ],\n";
2385     } else {
2386         print OUT "  ", $_, " => ", quotify("perl", $withargs{$_}), ",\n"
2387     }
2388 }
2389 print OUT <<"EOF";
2390 );
2391
2392 EOF
2393 if ($builder eq "unified") {
2394     my $recurse;
2395     $recurse = sub {
2396         my $indent = shift;
2397         foreach (@_) {
2398             if (ref $_ eq "ARRAY") {
2399                 print OUT " "x$indent, "[\n";
2400                 foreach (@$_) {
2401                     $recurse->($indent + 4, $_);
2402                 }
2403                 print OUT " "x$indent, "],\n";
2404             } elsif (ref $_ eq "HASH") {
2405                 my %h = %$_;
2406                 print OUT " "x$indent, "{\n";
2407                 foreach (sort keys %h) {
2408                     if (ref $h{$_} eq "") {
2409                         print OUT " "x($indent + 4), quotify("perl", $_), " => ", quotify("perl", $h{$_}), ",\n";
2410                     } else {
2411                         print OUT " "x($indent + 4), quotify("perl", $_), " =>\n";
2412                         $recurse->($indent + 8, $h{$_});
2413                     }
2414                 }
2415                 print OUT " "x$indent, "},\n";
2416             } else {
2417                 print OUT " "x$indent, quotify("perl", $_), ",\n";
2418             }
2419         }
2420     };
2421     print OUT "our %unified_info = (\n";
2422     foreach (sort keys %unified_info) {
2423         if (ref $unified_info{$_} eq "") {
2424             print OUT " "x4, quotify("perl", $_), " => ", quotify("perl", $unified_info{$_}), ",\n";
2425         } else {
2426             print OUT " "x4, quotify("perl", $_), " =>\n";
2427             $recurse->(8, $unified_info{$_});
2428         }
2429     }
2430     print OUT <<"EOF";
2431 );
2432
2433 EOF
2434 }
2435 print OUT
2436     "# The following data is only used when this files is use as a script\n";
2437 print OUT "my \@makevars = (\n";
2438 foreach (sort keys %user) {
2439     print OUT "    '",$_,"',\n";
2440 }
2441 print OUT ");\n";
2442 print OUT "my \%disabled_info = (\n";
2443 foreach my $what (sort keys %disabled_info) {
2444     print OUT "    '$what' => {\n";
2445     foreach my $info (sort keys %{$disabled_info{$what}}) {
2446         if (ref $disabled_info{$what}->{$info} eq 'ARRAY') {
2447             print OUT "        $info => [ ",
2448                 join(', ', map { "'$_'" } @{$disabled_info{$what}->{$info}}),
2449                 " ],\n";
2450         } else {
2451             print OUT "        $info => '", $disabled_info{$what}->{$info},
2452                 "',\n";
2453         }
2454     }
2455     print OUT "    },\n";
2456 }
2457 print OUT ");\n";
2458 print OUT 'my @user_crossable = qw( ', join (' ', @user_crossable), " );\n";
2459 print OUT << 'EOF';
2460 # If run directly, we can give some answers, and even reconfigure
2461 unless (caller) {
2462     use Getopt::Long;
2463     use File::Spec::Functions;
2464     use File::Basename;
2465     use Pod::Usage;
2466
2467     my $here = dirname($0);
2468
2469     my $dump = undef;
2470     my $cmdline = undef;
2471     my $options = undef;
2472     my $target = undef;
2473     my $envvars = undef;
2474     my $makevars = undef;
2475     my $buildparams = undef;
2476     my $reconf = undef;
2477     my $verbose = undef;
2478     my $help = undef;
2479     my $man = undef;
2480     GetOptions('dump|d'                 => \$dump,
2481                'command-line|c'         => \$cmdline,
2482                'options|o'              => \$options,
2483                'target|t'               => \$target,
2484                'environment|e'          => \$envvars,
2485                'make-variables|m'       => \$makevars,
2486                'build-parameters|b'     => \$buildparams,
2487                'reconfigure|reconf|r'   => \$reconf,
2488                'verbose|v'              => \$verbose,
2489                'help'                   => \$help,
2490                'man'                    => \$man)
2491         or die "Errors in command line arguments\n";
2492
2493     unless ($dump || $cmdline || $options || $target || $envvars || $makevars
2494             || $buildparams || $reconf || $verbose || $help || $man) {
2495         print STDERR <<"_____";
2496 You must give at least one option.
2497 For more information, do '$0 --help'
2498 _____
2499         exit(2);
2500     }
2501
2502     if ($help) {
2503         pod2usage(-exitval => 0,
2504                   -verbose => 1);
2505     }
2506     if ($man) {
2507         pod2usage(-exitval => 0,
2508                   -verbose => 2);
2509     }
2510     if ($dump || $cmdline) {
2511         print "\nCommand line (with current working directory = $here):\n\n";
2512         print '    ',join(' ',
2513                           $config{PERL},
2514                           catfile($config{sourcedir}, 'Configure'),
2515                           @{$config{perlargv}}), "\n";
2516         print "\nPerl information:\n\n";
2517         print '    ',$config{perl_cmd},"\n";
2518         print '    ',$config{perl_version},' for ',$config{perl_archname},"\n";
2519     }
2520     if ($dump || $options) {
2521         my $longest = 0;
2522         my $longest2 = 0;
2523         foreach my $what (@disablables) {
2524             $longest = length($what) if $longest < length($what);
2525             $longest2 = length($disabled{$what})
2526                 if $disabled{$what} && $longest2 < length($disabled{$what});
2527         }
2528         print "\nEnabled features:\n\n";
2529         foreach my $what (@disablables) {
2530             print "    $what\n" unless $disabled{$what};
2531         }
2532         print "\nDisabled features:\n\n";
2533         foreach my $what (@disablables) {
2534             if ($disabled{$what}) {
2535                 print "    $what", ' ' x ($longest - length($what) + 1),
2536                     "[$disabled{$what}]", ' ' x ($longest2 - length($disabled{$what}) + 1);
2537                 print $disabled_info{$what}->{macro}
2538                     if $disabled_info{$what}->{macro};
2539                 print ' (skip ',
2540                     join(', ', @{$disabled_info{$what}->{skipped}}),
2541                     ')'
2542                     if $disabled_info{$what}->{skipped};
2543                 print "\n";
2544             }
2545         }
2546     }
2547     if ($dump || $target) {
2548         print "\nConfig target attributes:\n\n";
2549         foreach (sort keys %target) {
2550             next if $_ =~ m|^_| || $_ eq 'template';
2551             my $quotify = sub {
2552                 map { (my $x = $_) =~ s|([\\\$\@"])|\\$1|g; "\"$x\""} @_;
2553             };
2554             print '    ', $_, ' => ';
2555             if (ref($target{$_}) eq "ARRAY") {
2556                 print '[ ', join(', ', $quotify->(@{$target{$_}})), " ],\n";
2557             } else {
2558                 print $quotify->($target{$_}), ",\n"
2559             }
2560         }
2561     }
2562     if ($dump || $envvars) {
2563         print "\nRecorded environment:\n\n";
2564         foreach (sort keys %{$config{perlenv}}) {
2565             print '    ',$_,' = ',($config{perlenv}->{$_} || ''),"\n";
2566         }
2567     }
2568     if ($dump || $makevars) {
2569         print "\nMakevars:\n\n";
2570         foreach my $var (@makevars) {
2571             my $prefix = '';
2572             $prefix = $config{CROSS_COMPILE}
2573                 if grep { $var eq $_ } @user_crossable;
2574             $prefix //= '';
2575             print '    ',$var,' ' x (16 - length $var),'= ',
2576                 (ref $config{$var} eq 'ARRAY'
2577                  ? join(' ', @{$config{$var}})
2578                  : $prefix.$config{$var}),
2579                 "\n"
2580                 if defined $config{$var};
2581         }
2582
2583         my @buildfile = ($config{builddir}, $config{build_file});
2584         unshift @buildfile, $here
2585             unless file_name_is_absolute($config{builddir});
2586         my $buildfile = canonpath(catdir(@buildfile));
2587         print <<"_____";
2588
2589 NOTE: These variables only represent the configuration view.  The build file
2590 template may have processed these variables further, please have a look at the
2591 build file for more exact data:
2592     $buildfile
2593 _____
2594     }
2595     if ($dump || $buildparams) {
2596         my @buildfile = ($config{builddir}, $config{build_file});
2597         unshift @buildfile, $here
2598             unless file_name_is_absolute($config{builddir});
2599         print "\nbuild file:\n\n";
2600         print "    ", canonpath(catfile(@buildfile)),"\n";
2601
2602         print "\nbuild file templates:\n\n";
2603         foreach (@{$config{build_file_templates}}) {
2604             my @tmpl = ($_);
2605             unshift @tmpl, $here
2606                 unless file_name_is_absolute($config{sourcedir});
2607             print '    ',canonpath(catfile(@tmpl)),"\n";
2608         }
2609     }
2610     if ($reconf) {
2611         if ($verbose) {
2612             print 'Reconfiguring with: ', join(' ',@{$config{perlargv}}), "\n";
2613             foreach (sort keys %{$config{perlenv}}) {
2614                 print '    ',$_,' = ',($config{perlenv}->{$_} || ""),"\n";
2615             }
2616         }
2617
2618         chdir $here;
2619         exec $^X,catfile($config{sourcedir}, 'Configure'),'reconf';
2620     }
2621 }
2622
2623 1;
2624
2625 __END__
2626
2627 =head1 NAME
2628
2629 configdata.pm - configuration data for OpenSSL builds
2630
2631 =head1 SYNOPSIS
2632
2633 Interactive:
2634
2635   perl configdata.pm [options]
2636
2637 As data bank module:
2638
2639   use configdata;
2640
2641 =head1 DESCRIPTION
2642
2643 This module can be used in two modes, interactively and as a module containing
2644 all the data recorded by OpenSSL's Configure script.
2645
2646 When used interactively, simply run it as any perl script, with at least one
2647 option, and you will get the information you ask for.  See L</OPTIONS> below.
2648
2649 When loaded as a module, you get a few databanks with useful information to
2650 perform build related tasks.  The databanks are:
2651
2652     %config             Configured things.
2653     %target             The OpenSSL config target with all inheritances
2654                         resolved.
2655     %disabled           The features that are disabled.
2656     @disablables        The list of features that can be disabled.
2657     %withargs           All data given through --with-THING options.
2658     %unified_info       All information that was computed from the build.info
2659                         files.
2660
2661 =head1 OPTIONS
2662
2663 =over 4
2664
2665 =item B<--help>
2666
2667 Print a brief help message and exit.
2668
2669 =item B<--man>
2670
2671 Print the manual page and exit.
2672
2673 =item B<--dump> | B<-d>
2674
2675 Print all relevant configuration data.  This is equivalent to B<--command-line>
2676 B<--options> B<--target> B<--environment> B<--make-variables>
2677 B<--build-parameters>.
2678
2679 =item B<--command-line> | B<-c>
2680
2681 Print the current configuration command line.
2682
2683 =item B<--options> | B<-o>
2684
2685 Print the features, both enabled and disabled, and display defined macro and
2686 skipped directories where applicable.
2687
2688 =item B<--target> | B<-t>
2689
2690 Print the config attributes for this config target.
2691
2692 =item B<--environment> | B<-e>
2693
2694 Print the environment variables and their values at the time of configuration.
2695
2696 =item B<--make-variables> | B<-m>
2697
2698 Print the main make variables generated in the current configuration
2699
2700 =item B<--build-parameters> | B<-b>
2701
2702 Print the build parameters, i.e. build file and build file templates.
2703
2704 =item B<--reconfigure> | B<--reconf> | B<-r>
2705
2706 Redo the configuration.
2707
2708 =item B<--verbose> | B<-v>
2709
2710 Verbose output.
2711
2712 =back
2713
2714 =cut
2715
2716 EOF
2717 close(OUT);
2718 if ($builder_platform eq 'unix') {
2719     my $mode = (0755 & ~umask);
2720     chmod $mode, 'configdata.pm'
2721         or warn sprintf("WARNING: Couldn't change mode for 'configdata.pm' to 0%03o: %s\n",$mode,$!);
2722 }
2723
2724 my %builders = (
2725     unified => sub {
2726         print 'Creating ',$target{build_file},"\n";
2727         run_dofile(catfile($blddir, $target{build_file}),
2728                    @{$config{build_file_templates}});
2729     },
2730     );
2731
2732 $builders{$builder}->($builder_platform, @builder_opts);
2733
2734 $SIG{__DIE__} = $orig_death_handler;
2735
2736 print <<"EOF" if ($disabled{threads} eq "unavailable");
2737
2738 The library could not be configured for supporting multi-threaded
2739 applications as the compiler options required on this system are not known.
2740 See file INSTALL for details if you need multi-threading.
2741 EOF
2742
2743 print <<"EOF" if ($no_shared_warn);
2744
2745 The options 'shared', 'pic' and 'dynamic-engine' aren't supported on this
2746 platform, so we will pretend you gave the option 'no-pic', which also disables
2747 'shared' and 'dynamic-engine'.  If you know how to implement shared libraries
2748 or position independent code, please let us know (but please first make sure
2749 you have tried with a current version of OpenSSL).
2750 EOF
2751
2752 print <<"EOF";
2753
2754 **********************************************************************
2755 ***                                                                ***
2756 ***   OpenSSL has been successfully configured                     ***
2757 ***                                                                ***
2758 ***   If you encounter a problem while building, please open an    ***
2759 ***   issue on GitHub <https://github.com/openssl/openssl/issues>  ***
2760 ***   and include the output from the following command:           ***
2761 ***                                                                ***
2762 ***       perl configdata.pm --dump                                ***
2763 ***                                                                ***
2764 ***   (If you are new to OpenSSL, you might want to consult the    ***
2765 ***   'Troubleshooting' section in the INSTALL file first)         ***
2766 ***                                                                ***
2767 **********************************************************************
2768 EOF
2769
2770 exit(0);
2771
2772 ######################################################################
2773 #
2774 # Helpers and utility functions
2775 #
2776
2777 # Death handler, to print a helpful message in case of failure #######
2778 #
2779 sub death_handler {
2780     die @_ if $^S;              # To prevent the added message in eval blocks
2781     my $build_file = $target{build_file} // "build file";
2782     my @message = ( <<"_____", @_ );
2783
2784 Failure!  $build_file wasn't produced.
2785 Please read INSTALL and associated NOTES files.  You may also have to look over
2786 your available compiler tool chain or change your configuration.
2787
2788 _____
2789
2790     # Dying is terminal, so it's ok to reset the signal handler here.
2791     $SIG{__DIE__} = $orig_death_handler;
2792     die @message;
2793 }
2794
2795 # Configuration file reading #########################################
2796
2797 # Note: All of the helper functions are for lazy evaluation.  They all
2798 # return a CODE ref, which will return the intended value when evaluated.
2799 # Thus, whenever there's mention of a returned value, it's about that
2800 # intended value.
2801
2802 # Helper function to implement conditional inheritance depending on the
2803 # value of $disabled{asm}.  Used in inherit_from values as follows:
2804 #
2805 #      inherit_from => [ "template", asm("asm_tmpl") ]
2806 #
2807 sub asm {
2808     my @x = @_;
2809     sub {
2810         $disabled{asm} ? () : @x;
2811     }
2812 }
2813
2814 # Helper function to implement conditional value variants, with a default
2815 # plus additional values based on the value of $config{build_type}.
2816 # Arguments are given in hash table form:
2817 #
2818 #       picker(default => "Basic string: ",
2819 #              debug   => "debug",
2820 #              release => "release")
2821 #
2822 # When configuring with --debug, the resulting string will be
2823 # "Basic string: debug", and when not, it will be "Basic string: release"
2824 #
2825 # This can be used to create variants of sets of flags according to the
2826 # build type:
2827 #
2828 #       cflags => picker(default => "-Wall",
2829 #                        debug   => "-g -O0",
2830 #                        release => "-O3")
2831 #
2832 sub picker {
2833     my %opts = @_;
2834     return sub { add($opts{default} || (),
2835                      $opts{$config{build_type}} || ())->(); }
2836 }
2837
2838 # Helper function to combine several values of different types into one.
2839 # This is useful if you want to combine a string with the result of a
2840 # lazy function, such as:
2841 #
2842 #       cflags => combine("-Wall", sub { $disabled{zlib} ? () : "-DZLIB" })
2843 #
2844 sub combine {
2845     my @stuff = @_;
2846     return sub { add(@stuff)->(); }
2847 }
2848
2849 # Helper function to implement conditional values depending on the value
2850 # of $disabled{threads}.  Can be used as follows:
2851 #
2852 #       cflags => combine("-Wall", threads("-pthread"))
2853 #
2854 sub threads {
2855     my @flags = @_;
2856     return sub { add($disabled{threads} ? () : @flags)->(); }
2857 }
2858
2859 sub shared {
2860     my @flags = @_;
2861     return sub { add($disabled{shared} ? () : @flags)->(); }
2862 }
2863
2864 our $add_called = 0;
2865 # Helper function to implement adding values to already existing configuration
2866 # values.  It handles elements that are ARRAYs, CODEs and scalars
2867 sub _add {
2868     my $separator = shift;
2869
2870     # If there's any ARRAY in the collection of values OR the separator
2871     # is undef, we will return an ARRAY of combined values, otherwise a
2872     # string of joined values with $separator as the separator.
2873     my $found_array = !defined($separator);
2874
2875     my @values =
2876         map {
2877             my $res = $_;
2878             while (ref($res) eq "CODE") {
2879                 $res = $res->();
2880             }
2881             if (defined($res)) {
2882                 if (ref($res) eq "ARRAY") {
2883                     $found_array = 1;
2884                     @$res;
2885                 } else {
2886                     $res;
2887                 }
2888             } else {
2889                 ();
2890             }
2891     } (@_);
2892
2893     $add_called = 1;
2894
2895     if ($found_array) {
2896         [ @values ];
2897     } else {
2898         join($separator, grep { defined($_) && $_ ne "" } @values);
2899     }
2900 }
2901 sub add_before {
2902     my $separator = " ";
2903     if (ref($_[$#_]) eq "HASH") {
2904         my $opts = pop;
2905         $separator = $opts->{separator};
2906     }
2907     my @x = @_;
2908     sub { _add($separator, @x, @_) };
2909 }
2910 sub add {
2911     my $separator = " ";
2912     if (ref($_[$#_]) eq "HASH") {
2913         my $opts = pop;
2914         $separator = $opts->{separator};
2915     }
2916     my @x = @_;
2917     sub { _add($separator, @_, @x) };
2918 }
2919
2920 sub read_eval_file {
2921     my $fname = shift;
2922     my $content;
2923     my @result;
2924
2925     open F, "< $fname" or die "Can't open '$fname': $!\n";
2926     {
2927         undef local $/;
2928         $content = <F>;
2929     }
2930     close F;
2931     {
2932         local $@;
2933
2934         @result = ( eval $content );
2935         warn $@ if $@;
2936     }
2937     return wantarray ? @result : $result[0];
2938 }
2939
2940 # configuration reader, evaluates the input file as a perl script and expects
2941 # it to fill %targets with target configurations.  Those are then added to
2942 # %table.
2943 sub read_config {
2944     my $fname = shift;
2945     my %targets;
2946
2947     {
2948         # Protect certain tables from tampering
2949         local %table = ();
2950
2951         %targets = read_eval_file($fname);
2952     }
2953     my %preexisting = ();
2954     foreach (sort keys %targets) {
2955         $preexisting{$_} = 1 if $table{$_};
2956     }
2957     die <<"EOF",
2958 The following config targets from $fname
2959 shadow pre-existing config targets with the same name:
2960 EOF
2961         map { "  $_\n" } sort keys %preexisting
2962         if %preexisting;
2963
2964
2965     # For each target, check that it's configured with a hash table.
2966     foreach (keys %targets) {
2967         if (ref($targets{$_}) ne "HASH") {
2968             if (ref($targets{$_}) eq "") {
2969                 warn "Deprecated target configuration for $_, ignoring...\n";
2970             } else {
2971                 warn "Misconfigured target configuration for $_ (should be a hash table), ignoring...\n";
2972             }
2973             delete $targets{$_};
2974         } else {
2975             $targets{$_}->{_conf_fname_int} = add([ $fname ]);
2976         }
2977     }
2978
2979     %table = (%table, %targets);
2980
2981 }
2982
2983 # configuration resolver.  Will only resolve all the lazy evaluation
2984 # codeblocks for the chosen target and all those it inherits from,
2985 # recursively
2986 sub resolve_config {
2987     my $target = shift;
2988     my @breadcrumbs = @_;
2989
2990 #    my $extra_checks = defined($ENV{CONFIGURE_EXTRA_CHECKS});
2991
2992     if (grep { $_ eq $target } @breadcrumbs) {
2993         die "inherit_from loop!  target backtrace:\n  "
2994             ,$target,"\n  ",join("\n  ", @breadcrumbs),"\n";
2995     }
2996
2997     if (!defined($table{$target})) {
2998         warn "Warning! target $target doesn't exist!\n";
2999         return ();
3000     }
3001     # Recurse through all inheritances.  They will be resolved on the
3002     # fly, so when this operation is done, they will all just be a
3003     # bunch of attributes with string values.
3004     # What we get here, though, are keys with references to lists of
3005     # the combined values of them all.  We will deal with lists after
3006     # this stage is done.
3007     my %combined_inheritance = ();
3008     if ($table{$target}->{inherit_from}) {
3009         my @inherit_from =
3010             map { ref($_) eq "CODE" ? $_->() : $_ } @{$table{$target}->{inherit_from}};
3011         foreach (@inherit_from) {
3012             my %inherited_config = resolve_config($_, $target, @breadcrumbs);
3013
3014             # 'template' is a marker that's considered private to
3015             # the config that had it.
3016             delete $inherited_config{template};
3017
3018             foreach (keys %inherited_config) {
3019                 if (!$combined_inheritance{$_}) {
3020                     $combined_inheritance{$_} = [];
3021                 }
3022                 push @{$combined_inheritance{$_}}, $inherited_config{$_};
3023             }
3024         }
3025     }
3026
3027     # We won't need inherit_from in this target any more, since we've
3028     # resolved all the inheritances that lead to this
3029     delete $table{$target}->{inherit_from};
3030
3031     # Now is the time to deal with those lists.  Here's the place to
3032     # decide what shall be done with those lists, all based on the
3033     # values of the target we're currently dealing with.
3034     # - If a value is a coderef, it will be executed with the list of
3035     #   inherited values as arguments.
3036     # - If the corresponding key doesn't have a value at all or is the
3037     #   empty string, the inherited value list will be run through the
3038     #   default combiner (below), and the result becomes this target's
3039     #   value.
3040     # - Otherwise, this target's value is assumed to be a string that
3041     #   will simply override the inherited list of values.
3042     my $default_combiner = add();
3043
3044     my %all_keys =
3045         map { $_ => 1 } (keys %combined_inheritance,
3046                          keys %{$table{$target}});
3047
3048     sub process_values {
3049         my $object    = shift;
3050         my $inherited = shift;  # Always a [ list ]
3051         my $target    = shift;
3052         my $entry     = shift;
3053
3054         $add_called = 0;
3055
3056         while(ref($object) eq "CODE") {
3057             $object = $object->(@$inherited);
3058         }
3059         if (!defined($object)) {
3060             return ();
3061         }
3062         elsif (ref($object) eq "ARRAY") {
3063             local $add_called;  # To make sure recursive calls don't affect it
3064             return [ map { process_values($_, $inherited, $target, $entry) }
3065                      @$object ];
3066         } elsif (ref($object) eq "") {
3067             return $object;
3068         } else {
3069             die "cannot handle reference type ",ref($object)
3070                 ," found in target ",$target," -> ",$entry,"\n";
3071         }
3072     }
3073
3074     foreach (sort keys %all_keys) {
3075         my $previous = $combined_inheritance{$_};
3076
3077         # Current target doesn't have a value for the current key?
3078         # Assign it the default combiner, the rest of this loop body
3079         # will handle it just like any other coderef.
3080         if (!exists $table{$target}->{$_}) {
3081             $table{$target}->{$_} = $default_combiner;
3082         }
3083
3084         $table{$target}->{$_} = process_values($table{$target}->{$_},
3085                                                $combined_inheritance{$_},
3086                                                $target, $_);
3087         unless(defined($table{$target}->{$_})) {
3088             delete $table{$target}->{$_};
3089         }
3090 #        if ($extra_checks &&
3091 #            $previous && !($add_called ||  $previous ~~ $table{$target}->{$_})) {
3092 #            warn "$_ got replaced in $target\n";
3093 #        }
3094     }
3095
3096     # Finally done, return the result.
3097     return %{$table{$target}};
3098 }
3099
3100 sub usage
3101         {
3102         print STDERR $usage;
3103         print STDERR "\npick os/compiler from:\n";
3104         my $j=0;
3105         my $i;
3106         my $k=0;
3107         foreach $i (sort keys %table)
3108                 {
3109                 next if $table{$i}->{template};
3110                 next if $i =~ /^debug/;
3111                 $k += length($i) + 1;
3112                 if ($k > 78)
3113                         {
3114                         print STDERR "\n";
3115                         $k=length($i);
3116                         }
3117                 print STDERR $i . " ";
3118                 }
3119         foreach $i (sort keys %table)
3120                 {
3121                 next if $table{$i}->{template};
3122                 next if $i !~ /^debug/;
3123                 $k += length($i) + 1;
3124                 if ($k > 78)
3125                         {
3126                         print STDERR "\n";
3127                         $k=length($i);
3128                         }
3129                 print STDERR $i . " ";
3130                 }
3131         print STDERR "\n\nNOTE: If in doubt, on Unix-ish systems use './config'.\n";
3132         exit(1);
3133         }
3134
3135 sub run_dofile
3136 {
3137     my $out = shift;
3138     my @templates = @_;
3139
3140     unlink $out || warn "Can't remove $out, $!"
3141         if -f $out;
3142     foreach (@templates) {
3143         die "Can't open $_, $!" unless -f $_;
3144     }
3145     my $perlcmd = (quotify("maybeshell", $config{PERL}))[0];
3146     my $cmd = "$perlcmd \"-I.\" \"-Mconfigdata\" \"$dofile\" -o\"Configure\" \"".join("\" \"",@templates)."\" > \"$out.new\"";
3147     #print STDERR "DEBUG[run_dofile]: \$cmd = $cmd\n";
3148     system($cmd);
3149     exit 1 if $? != 0;
3150     rename("$out.new", $out) || die "Can't rename $out.new, $!";
3151 }
3152
3153 sub compiler_predefined {
3154     state %predefined;
3155     my $cc = shift;
3156
3157     return () if $^O eq 'VMS';
3158
3159     die 'compiler_predefined called without a compiler command'
3160         unless $cc;
3161
3162     if (! $predefined{$cc}) {
3163
3164         $predefined{$cc} = {};
3165
3166         # collect compiler pre-defines from gcc or gcc-alike...
3167         open(PIPE, "$cc -dM -E -x c /dev/null 2>&1 |");
3168         while (my $l = <PIPE>) {
3169             $l =~ m/^#define\s+(\w+(?:\(\w+\))?)(?:\s+(.+))?/ or last;
3170             $predefined{$cc}->{$1} = $2 // '';
3171         }
3172         close(PIPE);
3173     }
3174
3175     return %{$predefined{$cc}};
3176 }
3177
3178 sub which
3179 {
3180     my ($name)=@_;
3181
3182     if (eval { require IPC::Cmd; 1; }) {
3183         IPC::Cmd->import();
3184         return scalar IPC::Cmd::can_run($name);
3185     } else {
3186         # if there is $directories component in splitpath,
3187         # then it's not something to test with $PATH...
3188         return $name if (File::Spec->splitpath($name))[1];
3189
3190         foreach (File::Spec->path()) {
3191             my $fullpath = catfile($_, "$name$target{exe_extension}");
3192             if (-f $fullpath and -x $fullpath) {
3193                 return $fullpath;
3194             }
3195         }
3196     }
3197 }
3198
3199 sub env
3200 {
3201     my $name = shift;
3202     my %opts = @_;
3203
3204     unless ($opts{cacheonly}) {
3205         # Note that if $ENV{$name} doesn't exist or is undefined,
3206         # $config{perlenv}->{$name} will be created with the value
3207         # undef.  This is intentional.
3208
3209         $config{perlenv}->{$name} = $ENV{$name}
3210             if ! exists $config{perlenv}->{$name};
3211     }
3212     return $config{perlenv}->{$name};
3213 }
3214
3215 # Configuration printer ##############################################
3216
3217 sub print_table_entry
3218 {
3219     local $now_printing = shift;
3220     my %target = resolve_config($now_printing);
3221     my $type = shift;
3222
3223     # Don't print the templates
3224     return if $target{template};
3225
3226     my @sequence = (
3227         "sys_id",
3228         "cpp",
3229         "cppflags",
3230         "defines",
3231         "includes",
3232         "cc",
3233         "cflags",
3234         "unistd",
3235         "ld",
3236         "lflags",
3237         "loutflag",
3238         "ex_libs",
3239         "bn_ops",
3240         "apps_aux_src",
3241         "cpuid_asm_src",
3242         "uplink_aux_src",
3243         "bn_asm_src",
3244         "ec_asm_src",
3245         "des_asm_src",
3246         "aes_asm_src",
3247         "bf_asm_src",
3248         "md5_asm_src",
3249         "cast_asm_src",
3250         "sha1_asm_src",
3251         "rc4_asm_src",
3252         "rmd160_asm_src",
3253         "rc5_asm_src",
3254         "wp_asm_src",
3255         "cmll_asm_src",
3256         "modes_asm_src",
3257         "padlock_asm_src",
3258         "chacha_asm_src",
3259         "poly1035_asm_src",
3260         "thread_scheme",
3261         "perlasm_scheme",
3262         "dso_scheme",
3263         "shared_target",
3264         "shared_cflag",
3265         "shared_defines",
3266         "shared_ldflag",
3267         "shared_rcflag",
3268         "shared_extension",
3269         "dso_extension",
3270         "obj_extension",
3271         "exe_extension",
3272         "ranlib",
3273         "ar",
3274         "arflags",
3275         "aroutflag",
3276         "rc",
3277         "rcflags",
3278         "rcoutflag",
3279         "mt",
3280         "mtflags",
3281         "mtinflag",
3282         "mtoutflag",
3283         "multilib",
3284         "build_scheme",
3285         );
3286
3287     if ($type eq "TABLE") {
3288         print "\n";
3289         print "*** $now_printing\n";
3290         foreach (@sequence) {
3291             if (ref($target{$_}) eq "ARRAY") {
3292                 printf "\$%-12s = %s\n", $_, join(" ", @{$target{$_}});
3293             } else {
3294                 printf "\$%-12s = %s\n", $_, $target{$_};
3295             }
3296         }
3297     } elsif ($type eq "HASH") {
3298         my $largest =
3299             length((sort { length($a) <=> length($b) } @sequence)[-1]);
3300         print "    '$now_printing' => {\n";
3301         foreach (@sequence) {
3302             if ($target{$_}) {
3303                 if (ref($target{$_}) eq "ARRAY") {
3304                     print "      '",$_,"'"," " x ($largest - length($_))," => [ ",join(", ", map { "'$_'" } @{$target{$_}})," ],\n";
3305                 } else {
3306                     print "      '",$_,"'"," " x ($largest - length($_))," => '",$target{$_},"',\n";
3307                 }
3308             }
3309         }
3310         print "    },\n";
3311     }
3312 }
3313
3314 # Utility routines ###################################################
3315
3316 # On VMS, if the given file is a logical name, File::Spec::Functions
3317 # will consider it an absolute path.  There are cases when we want a
3318 # purely syntactic check without checking the environment.
3319 sub isabsolute {
3320     my $file = shift;
3321
3322     # On non-platforms, we just use file_name_is_absolute().
3323     return file_name_is_absolute($file) unless $^O eq "VMS";
3324
3325     # If the file spec includes a device or a directory spec,
3326     # file_name_is_absolute() is perfectly safe.
3327     return file_name_is_absolute($file) if $file =~ m|[:\[]|;
3328
3329     # Here, we know the given file spec isn't absolute
3330     return 0;
3331 }
3332
3333 # Makes a directory absolute and cleans out /../ in paths like foo/../bar
3334 # On some platforms, this uses rel2abs(), while on others, realpath() is used.
3335 # realpath() requires that at least all path components except the last is an
3336 # existing directory.  On VMS, the last component of the directory spec must
3337 # exist.
3338 sub absolutedir {
3339     my $dir = shift;
3340
3341     # realpath() is quite buggy on VMS.  It uses LIB$FID_TO_NAME, which
3342     # will return the volume name for the device, no matter what.  Also,
3343     # it will return an incorrect directory spec if the argument is a
3344     # directory that doesn't exist.
3345     if ($^O eq "VMS") {
3346         return rel2abs($dir);
3347     }
3348
3349     # We use realpath() on Unix, since no other will properly clean out
3350     # a directory spec.
3351     use Cwd qw/realpath/;
3352
3353     return realpath($dir);
3354 }
3355
3356 sub quotify {
3357     my %processors = (
3358         perl    => sub { my $x = shift;
3359                          $x =~ s/([\\\$\@"])/\\$1/g;
3360                          return '"'.$x.'"'; },
3361         maybeshell => sub { my $x = shift;
3362                             (my $y = $x) =~ s/([\\\"])/\\$1/g;
3363                             if ($x ne $y || $x =~ m|\s|) {
3364                                 return '"'.$y.'"';
3365                             } else {
3366                                 return $x;
3367                             }
3368                         },
3369         );
3370     my $for = shift;
3371     my $processor =
3372         defined($processors{$for}) ? $processors{$for} : sub { shift; };
3373
3374     return map { $processor->($_); } @_;
3375 }
3376
3377 # collect_from_file($filename, $line_concat_cond_re, $line_concat)
3378 # $filename is a file name to read from
3379 # $line_concat_cond_re is a regexp detecting a line continuation ending
3380 # $line_concat is a CODEref that takes care of concatenating two lines
3381 sub collect_from_file {
3382     my $filename = shift;
3383     my $line_concat_cond_re = shift;
3384     my $line_concat = shift;
3385
3386     open my $fh, $filename || die "unable to read $filename: $!\n";
3387     return sub {
3388         my $saved_line = "";
3389         $_ = "";
3390         while (<$fh>) {
3391             s|\R$||;
3392             if (defined $line_concat) {
3393                 $_ = $line_concat->($saved_line, $_);
3394                 $saved_line = "";
3395             }
3396             if (defined $line_concat_cond_re && /$line_concat_cond_re/) {
3397                 $saved_line = $_;
3398                 next;
3399             }
3400             return $_;
3401         }
3402         die "$filename ending with continuation line\n" if $_;
3403         close $fh;
3404         return undef;
3405     }
3406 }
3407
3408 # collect_from_array($array, $line_concat_cond_re, $line_concat)
3409 # $array is an ARRAYref of lines
3410 # $line_concat_cond_re is a regexp detecting a line continuation ending
3411 # $line_concat is a CODEref that takes care of concatenating two lines
3412 sub collect_from_array {
3413     my $array = shift;
3414     my $line_concat_cond_re = shift;
3415     my $line_concat = shift;
3416     my @array = (@$array);
3417
3418     return sub {
3419         my $saved_line = "";
3420         $_ = "";
3421         while (defined($_ = shift @array)) {
3422             s|\R$||;
3423             if (defined $line_concat) {
3424                 $_ = $line_concat->($saved_line, $_);
3425                 $saved_line = "";
3426             }
3427             if (defined $line_concat_cond_re && /$line_concat_cond_re/) {
3428                 $saved_line = $_;
3429                 next;
3430             }
3431             return $_;
3432         }
3433         die "input text ending with continuation line\n" if $_;
3434         return undef;
3435     }
3436 }
3437
3438 # collect_information($lineiterator, $line_continue, $regexp => $CODEref, ...)
3439 # $lineiterator is a CODEref that delivers one line at a time.
3440 # All following arguments are regex/CODEref pairs, where the regexp detects a
3441 # line and the CODEref does something with the result of the regexp.
3442 sub collect_information {
3443     my $lineiterator = shift;
3444     my %collectors = @_;
3445
3446     while(defined($_ = $lineiterator->())) {
3447         s|\R$||;
3448         my $found = 0;
3449         if ($collectors{"BEFORE"}) {
3450             $collectors{"BEFORE"}->($_);
3451         }
3452         foreach my $re (keys %collectors) {
3453             if ($re !~ /^OTHERWISE|BEFORE|AFTER$/ && /$re/) {
3454                 $collectors{$re}->($lineiterator);
3455                 $found = 1;
3456             };
3457         }
3458         if ($collectors{"OTHERWISE"}) {
3459             $collectors{"OTHERWISE"}->($lineiterator, $_)
3460                 unless $found || !defined $collectors{"OTHERWISE"};
3461         }
3462         if ($collectors{"AFTER"}) {
3463             $collectors{"AFTER"}->($_);
3464         }
3465     }
3466 }
3467
3468 # tokenize($line)
3469 # $line is a line of text to split up into tokens
3470 # returns a list of tokens
3471 #
3472 # Tokens are divided by spaces.  If the tokens include spaces, they
3473 # have to be quoted with single or double quotes.  Double quotes
3474 # inside a double quoted token must be escaped.  Escaping is done
3475 # with backslash.
3476 # Basically, the same quoting rules apply for " and ' as in any
3477 # Unix shell.
3478 sub tokenize {
3479     my $line = my $debug_line = shift;
3480     my @result = ();
3481
3482     while ($line =~ s|^\s+||, $line ne "") {
3483         my $token = "";
3484         while ($line ne "" && $line !~ m|^\s|) {
3485             if ($line =~ m/^"((?:[^"\\]+|\\.)*)"/) {
3486                 $token .= $1;
3487                 $line = $';
3488             } elsif ($line =~ m/^'([^']*)'/) {
3489                 $token .= $1;
3490                 $line = $';
3491             } elsif ($line =~ m/^(\S+)/) {
3492                 $token .= $1;
3493                 $line = $';
3494             }
3495         }
3496         push @result, $token;
3497     }
3498
3499     if ($ENV{CONFIGURE_DEBUG_TOKENIZE}) {
3500         print STDERR "DEBUG[tokenize]: Parsed '$debug_line' into:\n";
3501         print STDERR "DEBUG[tokenize]: ('", join("', '", @result), "')\n";
3502     }
3503     return @result;
3504 }