Fix resource files
[openssl.git] / Configure
1 #! /usr/bin/env perl
2 # -*- mode: perl; -*-
3 # Copyright 2016-2018 The OpenSSL Project Authors. All Rights Reserved.
4 #
5 # Licensed under the OpenSSL license (the "License").  You may not use
6 # this file except in compliance with the License.  You can obtain a copy
7 # in the file LICENSE in the source distribution or at
8 # https://www.openssl.org/source/license.html
9
10 ##  Configure -- OpenSSL source tree configuration script
11
12 use 5.10.0;
13 use strict;
14 use Config;
15 use FindBin;
16 use lib "$FindBin::Bin/util/perl";
17 use File::Basename;
18 use File::Spec::Functions qw/:DEFAULT abs2rel rel2abs/;
19 use File::Path qw/mkpath/;
20 use OpenSSL::Glob;
21
22 # see INSTALL for instructions.
23
24 my $usage="Usage: Configure [no-<cipher> ...] [enable-<cipher> ...] [-Dxxx] [-lxxx] [-Lxxx] [-fxxx] [-Kxxx] [no-hw-xxx|no-hw] [[no-]threads] [[no-]shared] [[no-]zlib|zlib-dynamic] [no-asm] [no-dso] [no-egd] [sctp] [386] [--prefix=DIR] [--openssldir=OPENSSLDIR] [--with-xxx[=vvv]] [--config=FILE] os/compiler[:flags]\n";
25
26 # Options:
27 #
28 # --config      add the given configuration file, which will be read after
29 #               any "Configurations*" files that are found in the same
30 #               directory as this script.
31 # --prefix      prefix for the OpenSSL installation, which includes the
32 #               directories bin, lib, include, share/man, share/doc/openssl
33 #               This becomes the value of INSTALLTOP in Makefile
34 #               (Default: /usr/local)
35 # --openssldir  OpenSSL data area, such as openssl.cnf, certificates and keys.
36 #               If it's a relative directory, it will be added on the directory
37 #               given with --prefix.
38 #               This becomes the value of OPENSSLDIR in Makefile and in C.
39 #               (Default: PREFIX/ssl)
40 #
41 # --cross-compile-prefix Add specified prefix to binutils components.
42 #
43 # --api         One of 0.9.8, 1.0.0 or 1.1.0.  Do not compile support for
44 #               interfaces deprecated as of the specified OpenSSL version.
45 #
46 # no-hw-xxx     do not compile support for specific crypto hardware.
47 #               Generic OpenSSL-style methods relating to this support
48 #               are always compiled but return NULL if the hardware
49 #               support isn't compiled.
50 # no-hw         do not compile support for any crypto hardware.
51 # [no-]threads  [don't] try to create a library that is suitable for
52 #               multithreaded applications (default is "threads" if we
53 #               know how to do it)
54 # [no-]shared   [don't] try to create shared libraries when supported.
55 # [no-]pic      [don't] try to build position independent code when supported.
56 #               If disabled, it also disables shared and dynamic-engine.
57 # no-asm        do not use assembler
58 # no-dso        do not compile in any native shared-library methods. This
59 #               will ensure that all methods just return NULL.
60 # no-egd        do not compile support for the entropy-gathering daemon APIs
61 # [no-]zlib     [don't] compile support for zlib compression.
62 # zlib-dynamic  Like "zlib", but the zlib library is expected to be a shared
63 #               library and will be loaded in run-time by the OpenSSL library.
64 # sctp          include SCTP support
65 # enable-weak-ssl-ciphers
66 #               Enable weak ciphers that are disabled by default.
67 # 386           generate 80386 code in assembly modules
68 # no-sse2       disables IA-32 SSE2 code in assembly modules, the above
69 #               mentioned '386' option implies this one
70 # no-<cipher>   build without specified algorithm (rsa, idea, rc5, ...)
71 # -<xxx> +<xxx> compiler options are passed through
72 # -static       while -static is also a pass-through compiler option (and
73 #               as such is limited to environments where it's actually
74 #               meaningful), it triggers a number configuration options,
75 #               namely no-dso, no-pic, no-shared and no-threads. It is
76 #               argued that the only reason to produce statically linked
77 #               binaries (and in context it means executables linked with
78 #               -static flag, and not just executables linked with static
79 #               libcrypto.a) is to eliminate dependency on specific run-time,
80 #               a.k.a. libc version. The mentioned config options are meant
81 #               to achieve just that. Unfortunately on Linux it's impossible
82 #               to eliminate the dependency completely for openssl executable
83 #               because of getaddrinfo and gethostbyname calls, which can
84 #               invoke dynamically loadable library facility anyway to meet
85 #               the lookup requests. For this reason on Linux statically
86 #               linked openssl executable has rather debugging value than
87 #               production quality.
88 #
89 # DEBUG_SAFESTACK use type-safe stacks to enforce type-safety on stack items
90 #               provided to stack calls. Generates unique stack functions for
91 #               each possible stack type.
92 # BN_LLONG      use the type 'long long' in crypto/bn/bn.h
93 # RC4_CHAR      use 'char' instead of 'int' for RC4_INT in crypto/rc4/rc4.h
94 # Following are set automatically by this script
95 #
96 # MD5_ASM       use some extra md5 assembler,
97 # SHA1_ASM      use some extra sha1 assembler, must define L_ENDIAN for x86
98 # RMD160_ASM    use some extra ripemd160 assembler,
99 # SHA256_ASM    sha256_block is implemented in assembler
100 # SHA512_ASM    sha512_block is implemented in assembler
101 # AES_ASM       AES_[en|de]crypt is implemented in assembler
102
103 # Minimum warning options... any contributions to OpenSSL should at least get
104 # past these.
105
106 # DEBUG_UNUSED enables __owur (warn unused result) checks.
107 # -DPEDANTIC complements -pedantic and is meant to mask code that
108 # is not strictly standard-compliant and/or implementation-specific,
109 # e.g. inline assembly, disregards to alignment requirements, such
110 # that -pedantic would complain about. Incidentally -DPEDANTIC has
111 # to be used even in sanitized builds, because sanitizer too is
112 # supposed to and does take notice of non-standard behaviour. Then
113 # -pedantic with pre-C9x compiler would also complain about 'long
114 # long' not being supported. As 64-bit algorithms are common now,
115 # it grew impossible to resolve this without sizeable additional
116 # code, so we just tell compiler to be pedantic about everything
117 # but 'long long' type.
118
119 my $gcc_devteam_warn = "-DDEBUG_UNUSED"
120         . " -DPEDANTIC -pedantic -Wno-long-long"
121         . " -Wall"
122         . " -Wextra"
123         . " -Wno-unused-parameter"
124         . " -Wno-missing-field-initializers"
125         . " -Wswitch"
126         . " -Wsign-compare"
127         . " -Wmissing-prototypes"
128         . " -Wshadow"
129         . " -Wformat"
130         . " -Wtype-limits"
131         . " -Wundef"
132         . " -Werror"
133         ;
134
135 # These are used in addition to $gcc_devteam_warn when the compiler is clang.
136 # TODO(openssl-team): fix problems and investigate if (at least) the
137 # following warnings can also be enabled:
138 #       -Wcast-align
139 #       -Wunreachable-code -- no, too ugly/compiler-specific
140 #       -Wlanguage-extension-token -- no, we use asm()
141 #       -Wunused-macros -- no, too tricky for BN and _XOPEN_SOURCE etc
142 #       -Wextended-offsetof -- no, needed in CMS ASN1 code
143 my $clang_devteam_warn = ""
144         . " -Wswitch-default"
145         . " -Wno-parentheses-equality"
146         . " -Wno-language-extension-token"
147         . " -Wno-extended-offsetof"
148         . " -Wconditional-uninitialized"
149         . " -Wincompatible-pointer-types-discards-qualifiers"
150         . " -Wmissing-variable-declarations"
151         . " -Wno-unknown-warning-option"
152         ;
153
154 # This adds backtrace information to the memory leak info.  Is only used
155 # when crypto-mdebug-backtrace is enabled.
156 my $memleak_devteam_backtrace = "-rdynamic";
157
158 my $strict_warnings = 0;
159
160 # As for $BSDthreads. Idea is to maintain "collective" set of flags,
161 # which would cover all BSD flavors. -pthread applies to them all,
162 # but is treated differently. OpenBSD expands is as -D_POSIX_THREAD
163 # -lc_r, which is sufficient. FreeBSD 4.x expands it as -lc_r,
164 # which has to be accompanied by explicit -D_THREAD_SAFE and
165 # sometimes -D_REENTRANT. FreeBSD 5.x expands it as -lc_r, which
166 # seems to be sufficient?
167 our $BSDthreads="-pthread -D_THREAD_SAFE -D_REENTRANT";
168
169 #
170 # API compatibility name to version number mapping.
171 #
172 my $maxapi = "1.1.0";           # API for "no-deprecated" builds
173 my $apitable = {
174     "1.1.0" => "0x10100000L",
175     "1.0.0" => "0x10000000L",
176     "0.9.8" => "0x00908000L",
177 };
178
179 our %table = ();
180 our %config = ();
181 our %withargs = ();
182
183 # Forward declarations ###############################################
184
185 # read_config(filename)
186 #
187 # Reads a configuration file and populates %table with the contents
188 # (which the configuration file places in %targets).
189 sub read_config;
190
191 # resolve_config(target)
192 #
193 # Resolves all the late evaluations, inheritances and so on for the
194 # chosen target and any target it inherits from.
195 sub resolve_config;
196
197
198 # Information collection #############################################
199
200 # Unified build supports separate build dir
201 my $srcdir = catdir(absolutedir(dirname($0))); # catdir ensures local syntax
202 my $blddir = catdir(absolutedir("."));         # catdir ensures local syntax
203 my $dofile = abs2rel(catfile($srcdir, "util/dofile.pl"));
204
205 my $local_config_envname = 'OPENSSL_LOCAL_CONFIG_DIR';
206
207 $config{sourcedir} = abs2rel($srcdir);
208 $config{builddir} = abs2rel($blddir);
209
210 # Collect reconfiguration information if needed
211 my @argvcopy=@ARGV;
212
213 if (grep /^reconf(igure)?$/, @argvcopy) {
214     die "reconfiguring with other arguments present isn't supported"
215         if scalar @argvcopy > 1;
216     if (-f "./configdata.pm") {
217         my $file = "./configdata.pm";
218         unless (my $return = do $file) {
219             die "couldn't parse $file: $@" if $@;
220             die "couldn't do $file: $!"    unless defined $return;
221             die "couldn't run $file"       unless $return;
222         }
223
224         @argvcopy = defined($configdata::config{perlargv}) ?
225             @{$configdata::config{perlargv}} : ();
226         die "Incorrect data to reconfigure, please do a normal configuration\n"
227             if (grep(/^reconf/,@argvcopy));
228         $config{perlenv} = $configdata::config{perlenv} // {};
229     } else {
230         die "Insufficient data to reconfigure, please do a normal configuration\n";
231     }
232 }
233
234 $config{perlargv} = [ @argvcopy ];
235
236 # Collect version numbers
237 $config{version} = "unknown";
238 $config{version_num} = "unknown";
239 $config{shlib_version_number} = "unknown";
240 $config{shlib_version_history} = "unknown";
241
242 collect_information(
243     collect_from_file(catfile($srcdir,'include/openssl/opensslv.h')),
244     qr/OPENSSL.VERSION.TEXT.*OpenSSL (\S+) / => sub { $config{version} = $1; },
245     qr/OPENSSL.VERSION.NUMBER.*(0x\S+)/      => sub { $config{version_num}=$1 },
246     qr/SHLIB_VERSION_NUMBER *"([^"]+)"/      => sub { $config{shlib_version_number}=$1 },
247     qr/SHLIB_VERSION_HISTORY *"([^"]*)"/     => sub { $config{shlib_version_history}=$1 }
248     );
249 if ($config{shlib_version_history} ne "") { $config{shlib_version_history} .= ":"; }
250
251 ($config{major}, $config{minor})
252     = ($config{version} =~ /^([0-9]+)\.([0-9\.]+)/);
253 ($config{shlib_major}, $config{shlib_minor})
254     = ($config{shlib_version_number} =~ /^([0-9]+)\.([0-9\.]+)/);
255 die "erroneous version information in opensslv.h: ",
256     "$config{major}, $config{minor}, $config{shlib_major}, $config{shlib_minor}\n"
257     if ($config{major} eq "" || $config{minor} eq ""
258         || $config{shlib_major} eq "" ||  $config{shlib_minor} eq "");
259
260 # Collect target configurations
261
262 my $pattern = catfile(dirname($0), "Configurations", "*.conf");
263 foreach (sort glob($pattern)) {
264     &read_config($_);
265 }
266
267 if (defined env($local_config_envname)) {
268     if ($^O eq 'VMS') {
269         # VMS environment variables are logical names,
270         # which can be used as is
271         $pattern = $local_config_envname . ':' . '*.conf';
272     } else {
273         $pattern = catfile(env($local_config_envname), '*.conf');
274     }
275
276     foreach (sort glob($pattern)) {
277         &read_config($_);
278     }
279 }
280
281 # Save away perl command information
282 $config{perl_cmd} = $^X;
283 $config{perl_version} = $Config{version};
284 $config{perl_archname} = $Config{archname};
285
286 $config{prefix}="";
287 $config{openssldir}="";
288 $config{processor}="";
289 $config{libdir}="";
290 my $auto_threads=1;    # enable threads automatically? true by default
291 my $default_ranlib;
292
293 # Top level directories to build
294 $config{dirs} = [ "crypto", "ssl", "engines", "apps", "test", "util", "tools", "fuzz" ];
295 # crypto/ subdirectories to build
296 $config{sdirs} = [
297     "objects",
298     "md2", "md4", "md5", "sha", "mdc2", "hmac", "ripemd", "whrlpool", "poly1305", "blake2", "siphash", "sm3",
299     "des", "aes", "rc2", "rc4", "rc5", "idea", "aria", "bf", "cast", "camellia", "seed", "sm4", "chacha", "modes",
300     "bn", "ec", "rsa", "dsa", "dh", "sm2", "dso", "engine",
301     "buffer", "bio", "stack", "lhash", "rand", "err",
302     "evp", "asn1", "pem", "x509", "x509v3", "conf", "txt_db", "pkcs7", "pkcs12", "comp", "ocsp", "ui",
303     "cms", "ts", "srp", "cmac", "ct", "async", "kdf", "store"
304     ];
305 # test/ subdirectories to build
306 $config{tdirs} = [ "ossl_shim" ];
307
308 # Known TLS and DTLS protocols
309 my @tls = qw(ssl3 tls1 tls1_1 tls1_2 tls1_3);
310 my @dtls = qw(dtls1 dtls1_2);
311
312 # Explicitly known options that are possible to disable.  They can
313 # be regexps, and will be used like this: /^no-${option}$/
314 # For developers: keep it sorted alphabetically
315
316 my @disablables = (
317     "afalgeng",
318     "aria",
319     "asan",
320     "asm",
321     "async",
322     "autoalginit",
323     "autoerrinit",
324     "bf",
325     "blake2",
326     "camellia",
327     "capieng",
328     "cast",
329     "chacha",
330     "cmac",
331     "cms",
332     "comp",
333     "crypto-mdebug",
334     "crypto-mdebug-backtrace",
335     "ct",
336     "deprecated",
337     "des",
338     "devcryptoeng",
339     "dgram",
340     "dh",
341     "dsa",
342     "dso",
343     "dtls",
344     "dynamic-engine",
345     "ec",
346     "ec2m",
347     "ecdh",
348     "ecdsa",
349     "ec_nistp_64_gcc_128",
350     "egd",
351     "engine",
352     "err",
353     "external-tests",
354     "filenames",
355     "fuzz-libfuzzer",
356     "fuzz-afl",
357     "gost",
358     "heartbeats",
359     "hw(-.+)?",
360     "idea",
361     "makedepend",
362     "md2",
363     "md4",
364     "mdc2",
365     "msan",
366     "multiblock",
367     "nextprotoneg",
368     "ocb",
369     "ocsp",
370     "pic",
371     "poly1305",
372     "posix-io",
373     "psk",
374     "rc2",
375     "rc4",
376     "rc5",
377     "rdrand",
378     "rfc3779",
379     "rmd160",
380     "scrypt",
381     "sctp",
382     "seed",
383     "shared",
384     "siphash",
385     "sm2",
386     "sm3",
387     "sm4",
388     "sock",
389     "srp",
390     "srtp",
391     "sse2",
392     "ssl",
393     "ssl-trace",
394     "static-engine",
395     "stdio",
396     "tests",
397     "threads",
398     "tls",
399     "tls13downgrade",
400     "ts",
401     "ubsan",
402     "ui-console",
403     "unit-test",
404     "whirlpool",
405     "weak-ssl-ciphers",
406     "zlib",
407     "zlib-dynamic",
408     );
409 foreach my $proto ((@tls, @dtls))
410         {
411         push(@disablables, $proto);
412         push(@disablables, "$proto-method") unless $proto eq "tls1_3";
413         }
414
415 my %deprecated_disablables = (
416     "ssl2" => undef,
417     "buf-freelists" => undef,
418     "ripemd" => "rmd160",
419     "ui" => "ui-console",
420     );
421
422 # All of the following is disabled by default (RC5 was enabled before 0.9.8):
423
424 our %disabled = ( # "what"         => "comment"
425                   "asan"                => "default",
426                   "crypto-mdebug"       => "default",
427                   "crypto-mdebug-backtrace" => "default",
428                   "devcryptoeng"        => "default",
429                   "ec_nistp_64_gcc_128" => "default",
430                   "egd"                 => "default",
431                   "external-tests"      => "default",
432                   "fuzz-libfuzzer"      => "default",
433                   "fuzz-afl"            => "default",
434                   "heartbeats"          => "default",
435                   "md2"                 => "default",
436                   "msan"                => "default",
437                   "rc5"                 => "default",
438                   "sctp"                => "default",
439                   "ssl-trace"           => "default",
440                   "ssl3"                => "default",
441                   "ssl3-method"         => "default",
442                   "ubsan"               => "default",
443                   "tls13downgrade"      => "default",
444                   "unit-test"           => "default",
445                   "weak-ssl-ciphers"    => "default",
446                   "zlib"                => "default",
447                   "zlib-dynamic"        => "default",
448                 );
449
450 # Note: => pair form used for aesthetics, not to truly make a hash table
451 my @disable_cascades = (
452     # "what"            => [ "cascade", ... ]
453     sub { $config{processor} eq "386" }
454                         => [ "sse2" ],
455     "ssl"               => [ "ssl3" ],
456     "ssl3-method"       => [ "ssl3" ],
457     "zlib"              => [ "zlib-dynamic" ],
458     "des"               => [ "mdc2" ],
459     "ec"                => [ "ecdsa", "ecdh" ],
460
461     "dgram"             => [ "dtls", "sctp" ],
462     "sock"              => [ "dgram" ],
463     "dtls"              => [ @dtls ],
464     sub { 0 == scalar grep { !$disabled{$_} } @dtls }
465                         => [ "dtls" ],
466
467     "tls"               => [ @tls ],
468     sub { 0 == scalar grep { !$disabled{$_} } @tls }
469                         => [ "tls" ],
470
471     "crypto-mdebug"     => [ "crypto-mdebug-backtrace" ],
472
473     # Without DSO, we can't load dynamic engines, so don't build them dynamic
474     "dso"               => [ "dynamic-engine" ],
475
476     # Without position independent code, there can be no shared libraries or DSOs
477     "pic"               => [ "shared" ],
478     "shared"            => [ "dynamic-engine" ],
479     "engine"            => [ "afalgeng", "devcryptoeng" ],
480
481     # no-autoalginit is only useful when building non-shared
482     "autoalginit"       => [ "shared", "apps" ],
483
484     "stdio"             => [ "apps", "capieng", "egd" ],
485     "apps"              => [ "tests" ],
486     "tests"             => [ "external-tests" ],
487     "comp"              => [ "zlib" ],
488     "ec"                => [ "tls1_3", "sm2" ],
489     "sm3"               => [ "sm2" ],
490     sub { !$disabled{"unit-test"} } => [ "heartbeats" ],
491
492     sub { !$disabled{"msan"} } => [ "asm" ],
493     );
494
495 # Avoid protocol support holes.  Also disable all versions below N, if version
496 # N is disabled while N+1 is enabled.
497 #
498 my @list = (reverse @tls);
499 while ((my $first, my $second) = (shift @list, shift @list)) {
500     last unless @list;
501     push @disable_cascades, ( sub { !$disabled{$first} && $disabled{$second} }
502                               => [ @list ] );
503     unshift @list, $second;
504 }
505 my @list = (reverse @dtls);
506 while ((my $first, my $second) = (shift @list, shift @list)) {
507     last unless @list;
508     push @disable_cascades, ( sub { !$disabled{$first} && $disabled{$second} }
509                               => [ @list ] );
510     unshift @list, $second;
511 }
512
513 # Explicit "no-..." options will be collected in %disabled along with the defaults.
514 # To remove something from %disabled, use "enable-foo".
515 # For symmetry, "disable-foo" is a synonym for "no-foo".
516
517 &usage if ($#ARGV < 0);
518
519 # For the "make variables" CINCLUDES and CDEFINES, we support lists with
520 # platform specific list separators.  Users from those platforms should
521 # recognise those separators from how you set up the PATH to find executables.
522 # The default is the Unix like separator, :, but as an exception, we also
523 # support the space as separator.
524 my $list_separator_re =
525     { VMS           => qr/(?<!\^),/,
526       MSWin32       => qr/(?<!\\);/ } -> {$^O} // qr/(?<!\\)[:\s]/;
527 # All the "make variables" we support
528 # Some get pre-populated for the sake of backward compatibility
529 # (we supported those before the change to "make variable" support.
530 my %user = (
531     AR          => env('AR'),
532     ARFLAGS     => [],
533     AS          => undef,
534     ASFLAGS     => [],
535     CC          => env('CC'),
536     CFLAGS      => [],
537     CXX         => env('CXX'),
538     CXXFLAGS    => [],
539     CPP         => undef,
540     CPPFLAGS    => [],  # -D, -I, -Wp,
541     CPPDEFINES  => [],  # Alternative for -D
542     CPPINCLUDES => [],  # Alternative for -I
543     CROSS_COMPILE => env('CROSS_COMPILE'),
544     HASHBANGPERL=> env('HASHBANGPERL') || env('PERL'),
545     LD          => undef,
546     LDFLAGS     => [],  # -L, -Wl,
547     LDLIBS      => [],  # -l
548     MT          => undef,
549     MTFLAGS     => [],
550     RANLIB      => env('RANLIB'),
551     RC          => env('RC') || env('WINDRES'),
552     RCFLAGS     => [],
553     RM          => undef,
554    );
555 # Info about what "make variables" may be prefixed with the cross compiler
556 # prefix.  This should NEVER mention any such variable with a list for value.
557 my @user_crossable = qw ( AR AS CC CXX CPP LD MT RANLIB RC );
558 # The same but for flags given as Configure options.  These are *additional*
559 # input, as opposed to the VAR=string option that override the corresponding
560 # config target attributes
561 my %useradd = (
562     CPPDEFINES  => [],
563     CPPINCLUDES => [],
564     CPPFLAGS    => [],
565     CFLAGS      => [],
566     CXXFLAGS    => [],
567     LDFLAGS     => [],
568     LDLIBS      => [],
569    );
570
571 my %user_synonyms = (
572     HASHBANGPERL=> 'PERL',
573     RC          => 'WINDRES',
574    );
575
576 # Some target attributes have been renamed, this is the translation table
577 my %target_attr_translate =(
578     ar          => 'AR',
579     as          => 'AS',
580     cc          => 'CC',
581     cxx         => 'CXX',
582     cpp         => 'CPP',
583     hashbangperl => 'HASHBANGPERL',
584     ld          => 'LD',
585     mt          => 'MT',
586     ranlib      => 'RANLIB',
587     rc          => 'RC',
588     rm          => 'RM',
589    );
590
591 # Initialisers coming from 'config' scripts
592 $config{defines} = [ split(/$list_separator_re/, env('__CNF_CPPDEFINES')) ],
593 $config{includes} = [ split(/$list_separator_re/, env('__CNF_CPPINCLUDES')) ],
594 $config{cppflags} = [ env('__CNF_CPPFLAGS') || () ],
595 $config{cflags} = [ env('__CNF_CFLAGS') || () ],
596 $config{cxxflags} = [ env('__CNF_CXXFLAGS') || () ],
597 $config{lflags} = [ env('__CNF_LDFLAGS') || () ],
598 $config{ex_libs} = [ env('__CNF_LDLIBS') || () ],
599
600 $config{openssl_api_defines}=[];
601 $config{openssl_algorithm_defines}=[];
602 $config{openssl_thread_defines}=[];
603 $config{openssl_sys_defines}=[];
604 $config{openssl_other_defines}=[];
605 $config{options}="";
606 $config{build_type} = "release";
607 my $target="";
608
609 my %cmdvars = ();               # Stores FOO='blah' type arguments
610 my %unsupported_options = ();
611 my %deprecated_options = ();
612 # If you change this, update apps/version.c
613 my @known_seed_sources = qw(getrandom devrandom os egd none rdcpu librandom);
614 my @seed_sources = ();
615 while (@argvcopy)
616         {
617         $_ = shift @argvcopy;
618
619         # Support env variable assignments among the options
620         if (m|^(\w+)=(.+)?$|)
621                 {
622                 $cmdvars{$1} = $2;
623                 # Every time a variable is given as a configuration argument,
624                 # it acts as a reset if the variable.
625                 if (exists $user{$1})
626                         {
627                         $user{$1} = ref $user{$1} eq "ARRAY" ? [] : undef;
628                         }
629                 #if (exists $useradd{$1})
630                 #       {
631                 #       $useradd{$1} = [];
632                 #       }
633                 next;
634                 }
635
636         # VMS is a case insensitive environment, and depending on settings
637         # out of our control, we may receive options uppercased.  Let's
638         # downcase at least the part before any equal sign.
639         if ($^O eq "VMS")
640                 {
641                 s/^([^=]*)/lc($1)/e;
642                 }
643
644         # some people just can't read the instructions, clang people have to...
645         s/^-no-(?!integrated-as)/no-/;
646
647         # rewrite some options in "enable-..." form
648         s /^-?-?shared$/enable-shared/;
649         s /^sctp$/enable-sctp/;
650         s /^threads$/enable-threads/;
651         s /^zlib$/enable-zlib/;
652         s /^zlib-dynamic$/enable-zlib-dynamic/;
653
654         if (/^(no|disable|enable)-(.+)$/)
655                 {
656                 my $word = $2;
657                 if (!exists $deprecated_disablables{$word}
658                         && !grep { $word =~ /^${_}$/ } @disablables)
659                         {
660                         $unsupported_options{$_} = 1;
661                         next;
662                         }
663                 }
664         if (/^no-(.+)$/ || /^disable-(.+)$/)
665                 {
666                 foreach my $proto ((@tls, @dtls))
667                         {
668                         if ($1 eq "$proto-method")
669                                 {
670                                 $disabled{"$proto"} = "option($proto-method)";
671                                 last;
672                                 }
673                         }
674                 if ($1 eq "dtls")
675                         {
676                         foreach my $proto (@dtls)
677                                 {
678                                 $disabled{$proto} = "option(dtls)";
679                                 }
680                         $disabled{"dtls"} = "option(dtls)";
681                         }
682                 elsif ($1 eq "ssl")
683                         {
684                         # Last one of its kind
685                         $disabled{"ssl3"} = "option(ssl)";
686                         }
687                 elsif ($1 eq "tls")
688                         {
689                         # XXX: Tests will fail if all SSL/TLS
690                         # protocols are disabled.
691                         foreach my $proto (@tls)
692                                 {
693                                 $disabled{$proto} = "option(tls)";
694                                 }
695                         }
696                 elsif ($1 eq "static-engine")
697                         {
698                         delete $disabled{"dynamic-engine"};
699                         }
700                 elsif ($1 eq "dynamic-engine")
701                         {
702                         $disabled{"dynamic-engine"} = "option";
703                         }
704                 elsif (exists $deprecated_disablables{$1})
705                         {
706                         $deprecated_options{$_} = 1;
707                         if (defined $deprecated_disablables{$1})
708                                 {
709                                 $disabled{$deprecated_disablables{$1}} = "option";
710                                 }
711                         }
712                 else
713                         {
714                         $disabled{$1} = "option";
715                         }
716                 # No longer an automatic choice
717                 $auto_threads = 0 if ($1 eq "threads");
718                 }
719         elsif (/^enable-(.+)$/)
720                 {
721                 if ($1 eq "static-engine")
722                         {
723                         $disabled{"dynamic-engine"} = "option";
724                         }
725                 elsif ($1 eq "dynamic-engine")
726                         {
727                         delete $disabled{"dynamic-engine"};
728                         }
729                 elsif ($1 eq "zlib-dynamic")
730                         {
731                         delete $disabled{"zlib"};
732                         }
733                 my $algo = $1;
734                 delete $disabled{$algo};
735
736                 # No longer an automatic choice
737                 $auto_threads = 0 if ($1 eq "threads");
738                 }
739         elsif (/^--strict-warnings$/)
740                 {
741                 $strict_warnings = 1;
742                 }
743         elsif (/^--debug$/)
744                 {
745                 $config{build_type} = "debug";
746                 }
747         elsif (/^--release$/)
748                 {
749                 $config{build_type} = "release";
750                 }
751         elsif (/^386$/)
752                 { $config{processor}=386; }
753         elsif (/^fips$/)
754                 {
755                 die "FIPS mode not supported\n";
756                 }
757         elsif (/^rsaref$/)
758                 {
759                 # No RSAref support any more since it's not needed.
760                 # The check for the option is there so scripts aren't
761                 # broken
762                 }
763         elsif (/^nofipscanistercheck$/)
764                 {
765                 die "FIPS mode not supported\n";
766                 }
767         elsif (/^[-+]/)
768                 {
769                 if (/^--prefix=(.*)$/)
770                         {
771                         $config{prefix}=$1;
772                         die "Directory given with --prefix MUST be absolute\n"
773                                 unless file_name_is_absolute($config{prefix});
774                         }
775                 elsif (/^--api=(.*)$/)
776                         {
777                         $config{api}=$1;
778                         }
779                 elsif (/^--libdir=(.*)$/)
780                         {
781                         $config{libdir}=$1;
782                         }
783                 elsif (/^--openssldir=(.*)$/)
784                         {
785                         $config{openssldir}=$1;
786                         }
787                 elsif (/^--with-zlib-lib=(.*)$/)
788                         {
789                         $withargs{zlib_lib}=$1;
790                         }
791                 elsif (/^--with-zlib-include=(.*)$/)
792                         {
793                         $withargs{zlib_include}=$1;
794                         }
795                 elsif (/^--with-fuzzer-lib=(.*)$/)
796                         {
797                         $withargs{fuzzer_lib}=$1;
798                         }
799                 elsif (/^--with-fuzzer-include=(.*)$/)
800                         {
801                         $withargs{fuzzer_include}=$1;
802                         }
803                 elsif (/^--with-rand-seed=(.*)$/)
804                         {
805                         foreach my $x (split(m|,|, $1))
806                             {
807                             die "Unknown --with-rand-seed choice $x\n"
808                                 if ! grep { $x eq $_ } @known_seed_sources;
809                             push @seed_sources, $x;
810                             }
811                         }
812                 elsif (/^--cross-compile-prefix=(.*)$/)
813                         {
814                         $user{CROSS_COMPILE}=$1;
815                         }
816                 elsif (/^--config=(.*)$/)
817                         {
818                         read_config $1;
819                         }
820                 elsif (/^-L(.*)$/)
821                         {
822                         push @{$useradd{LDFLAGS}}, $_;
823                         }
824                 elsif (/^-l(.*)$/ or /^-Wl,/)
825                         {
826                         push @{$useradd{LDLIBS}}, $_;
827                         }
828                 elsif (/^-framework$/)
829                         {
830                         push @{$useradd{LDLIBS}}, $_, shift(@argvcopy);
831                         }
832                 elsif (/^-rpath$/ or /^-R$/)
833                         # -rpath is the OSF1 rpath flag
834                         # -R is the old Solaris rpath flag
835                         {
836                         my $rpath = shift(@argvcopy) || "";
837                         $rpath .= " " if $rpath ne "";
838                         push @{$useradd{LDFLAGS}}, $_, $rpath;
839                         }
840                 elsif (/^-static$/)
841                         {
842                         push @{$useradd{LDFLAGS}}, $_;
843                         $disabled{"dso"} = "forced";
844                         $disabled{"pic"} = "forced";
845                         $disabled{"shared"} = "forced";
846                         $disabled{"threads"} = "forced";
847                         }
848                 elsif (/^-D(.*)$/)
849                         {
850                         push @{$useradd{CPPDEFINES}}, $1;
851                         }
852                 elsif (/^-I(.*)$/)
853                         {
854                         push @{$useradd{CPPINCLUDES}}, $1;
855                         }
856                 elsif (/^-Wp,$/)
857                         {
858                         push @{$useradd{CPPFLAGS}}, $1;
859                         }
860                 else    # common if (/^[-+]/), just pass down...
861                         {
862                         $_ =~ s/%([0-9a-f]{1,2})/chr(hex($1))/gei;
863                         push @{$useradd{CFLAGS}}, $_;
864                         push @{$useradd{CXXFLAGS}}, $_;
865                         }
866                 }
867         else
868                 {
869                 die "target already defined - $target (offending arg: $_)\n" if ($target ne "");
870                 $target=$_;
871                 }
872         unless ($_ eq $target || /^no-/ || /^disable-/)
873                 {
874                 # "no-..." follows later after implied deactivations
875                 # have been derived.  (Don't take this too seriously,
876                 # we really only write OPTIONS to the Makefile out of
877                 # nostalgia.)
878
879                 if ($config{options} eq "")
880                         { $config{options} = $_; }
881                 else
882                         { $config{options} .= " ".$_; }
883                 }
884
885         if (defined($config{api}) && !exists $apitable->{$config{api}}) {
886                 die "***** Unsupported api compatibility level: $config{api}\n",
887         }
888
889         if (keys %deprecated_options)
890                 {
891                 warn "***** Deprecated options: ",
892                         join(", ", keys %deprecated_options), "\n";
893                 }
894         if (keys %unsupported_options)
895                 {
896                 die "***** Unsupported options: ",
897                         join(", ", keys %unsupported_options), "\n";
898                 }
899         }
900
901 # If any %useradd entry has been set, we must check that the "make
902 # variables" haven't been set.  We start by checking of any %useradd entry
903 # is set.
904 if (grep { scalar @$_ > 0 } values %useradd) {
905     # Hash of env / make variables names.  The possible values are:
906     # 1 - "make vars"
907     # 2 - %useradd entry set
908     # 3 - both set
909     my %detected_vars =
910         map { my $v = 0;
911               $v += 1 if $cmdvars{$_};
912               $v += 2 if @{$useradd{$_}};
913               $_ => $v }
914         keys %useradd;
915
916     # If any of the corresponding "make variables" is set, we error
917     if (grep { $_ & 1 } values %detected_vars) {
918         my $names = join(', ', grep { $detected_vars{$_} > 0 }
919                                sort keys %detected_vars);
920         die <<"_____";
921 ***** Mixing make variables and additional compiler/linker flags as
922 ***** configure command line option is not permitted.
923 ***** Affected make variables: $names
924 _____
925     }
926 }
927
928 # Check through all supported command line variables to see if any of them
929 # were set, and canonicalise the values we got.  If no compiler or linker
930 # flag or anything else that affects %useradd was set, we also check the
931 # environment for values.
932 my $anyuseradd =
933     grep { defined $_ && (ref $_ ne 'ARRAY' || @$_) } values %useradd;
934 foreach (keys %user) {
935     my $value = $cmdvars{$_};
936     $value //= env($_) unless $anyuseradd;
937     $value //=
938         defined $user_synonyms{$_} ? $cmdvars{$user_synonyms{$_}} : undef;
939     $value //= defined $user_synonyms{$_} ? env($user_synonyms{$_}) : undef
940         unless $anyuseradd;
941
942     if (defined $value) {
943         if (ref $user{$_} eq 'ARRAY') {
944             $user{$_} = [ split /$list_separator_re/, $value ];
945         } elsif (!defined $user{$_}) {
946             $user{$_} = $value;
947         }
948     }
949 }
950
951 if (grep { $_ =~ /(^|\s)-Wl,-rpath,/ } ($user{LDLIBS} ? @{$user{LDLIBS}} : ())
952     && !$disabled{shared}
953     && !($disabled{asan} && $disabled{msan} && $disabled{ubsan})) {
954     die "***** Cannot simultaneously use -rpath, shared libraries, and\n",
955         "***** any of asan, msan or ubsan\n";
956 }
957
958 my @tocheckfor = (keys %disabled);
959 while (@tocheckfor) {
960     my %new_tocheckfor = ();
961     my @cascade_copy = (@disable_cascades);
962     while (@cascade_copy) {
963         my ($test, $descendents) = (shift @cascade_copy, shift @cascade_copy);
964         if (ref($test) eq "CODE" ? $test->() : defined($disabled{$test})) {
965             foreach(grep { !defined($disabled{$_}) } @$descendents) {
966                 $new_tocheckfor{$_} = 1; $disabled{$_} = "forced";
967             }
968         }
969     }
970     @tocheckfor = (keys %new_tocheckfor);
971 }
972
973 our $die = sub { die @_; };
974 if ($target eq "TABLE") {
975     local $die = sub { warn @_; };
976     foreach (sort keys %table) {
977         print_table_entry($_, "TABLE");
978     }
979     exit 0;
980 }
981
982 if ($target eq "LIST") {
983     foreach (sort keys %table) {
984         print $_,"\n" unless $table{$_}->{template};
985     }
986     exit 0;
987 }
988
989 if ($target eq "HASH") {
990     local $die = sub { warn @_; };
991     print "%table = (\n";
992     foreach (sort keys %table) {
993         print_table_entry($_, "HASH");
994     }
995     exit 0;
996 }
997
998 print "Configuring OpenSSL version $config{version} ($config{version_num}) ";
999 print "for $target\n";
1000
1001 if (scalar(@seed_sources) == 0) {
1002     print "Using os-specific seed configuration\n";
1003     push @seed_sources, 'os';
1004 }
1005 die "Cannot seed with none and anything else"
1006     if scalar(grep { $_ eq 'none' } @seed_sources) > 0
1007         && scalar(@seed_sources) > 1;
1008 push @{$config{openssl_other_defines}},
1009      map { (my $x = $_) =~ tr|[\-a-z]|[_A-Z]|; "OPENSSL_RAND_SEED_$x" }
1010         @seed_sources;
1011
1012 # Backward compatibility?
1013 if ($target =~ m/^CygWin32(-.*)$/) {
1014     $target = "Cygwin".$1;
1015 }
1016
1017 # Support for legacy targets having a name starting with 'debug-'
1018 my ($d, $t) = $target =~ m/^(debug-)?(.*)$/;
1019 if ($d) {
1020     $config{build_type} = "debug";
1021
1022     # If we do not find debug-foo in the table, the target is set to foo.
1023     if (!$table{$target}) {
1024         $target = $t;
1025     }
1026 }
1027 $config{target} = $target;
1028 my %target = resolve_config($target);
1029
1030 &usage if (!%target || $target{template});
1031
1032 foreach (keys %target_attr_translate) {
1033     $target{$target_attr_translate{$_}} = $target{$_}
1034         if $target{$_};
1035     delete $target{$_};
1036 }
1037
1038 %target = ( %{$table{DEFAULTS}}, %target );
1039
1040 # Make the flags to build DSOs the same as for shared libraries unless they
1041 # are already defined
1042 $target{module_cflags} = $target{shared_cflag} unless defined $target{module_cflags};
1043 $target{module_cxxflags} = $target{shared_cxxflag} unless defined $target{module_cxxflags};
1044 $target{module_ldflags} = $target{shared_ldflag} unless defined $target{module_ldflags};
1045 {
1046     my $shared_info_pl =
1047         catfile(dirname($0), "Configurations", "shared-info.pl");
1048     my %shared_info = read_eval_file($shared_info_pl);
1049     push @{$target{_conf_fname_int}}, $shared_info_pl;
1050     my $si = $target{shared_target};
1051     while (ref $si ne "HASH") {
1052         last if ! defined $si;
1053         if (ref $si eq "CODE") {
1054             $si = $si->();
1055         } else {
1056             $si = $shared_info{$si};
1057         }
1058     }
1059
1060     # Some of the 'shared_target' values don't have any entried in
1061     # %shared_info.  That's perfectly fine, AS LONG AS the build file
1062     # template knows how to handle this.  That is currently the case for
1063     # Windows and VMS.
1064     if (defined $si) {
1065         # Just as above, copy certain shared_* attributes to the corresponding
1066         # module_ attribute unless the latter is already defined
1067         $si->{module_cflags} = $si->{shared_cflag} unless defined $si->{module_cflags};
1068         $si->{module_cxxflags} = $si->{shared_cxxflag} unless defined $si->{module_cxxflags};
1069         $si->{module_ldflags} = $si->{shared_ldflag} unless defined $si->{module_ldflags};
1070         foreach (sort keys %$si) {
1071             $target{$_} = defined $target{$_}
1072                 ? add($si->{$_})->($target{$_})
1073                 : $si->{$_};
1074         }
1075     }
1076 }
1077
1078 my %conf_files = map { $_ => 1 } (@{$target{_conf_fname_int}});
1079 $config{conf_files} = [ sort keys %conf_files ];
1080
1081 foreach my $feature (@{$target{disable}}) {
1082     if (exists $deprecated_disablables{$feature}) {
1083         warn "***** config $target disables deprecated feature $feature\n";
1084     } elsif (!grep { $feature eq $_ } @disablables) {
1085         die "***** config $target disables unknown feature $feature\n";
1086     }
1087     $disabled{$feature} = 'config';
1088 }
1089 foreach my $feature (@{$target{enable}}) {
1090     if ("default" eq ($disabled{$_} // "")) {
1091         if (exists $deprecated_disablables{$feature}) {
1092             warn "***** config $target enables deprecated feature $feature\n";
1093         } elsif (!grep { $feature eq $_ } @disablables) {
1094             die "***** config $target enables unknown feature $feature\n";
1095         }
1096         delete $disabled{$_};
1097     }
1098 }
1099
1100 $target{CXXFLAGS}//=$target{CFLAGS} if $target{CXX};
1101 $target{cxxflags}//=$target{cflags} if $target{CXX};
1102 $target{exe_extension}="";
1103 $target{exe_extension}=".exe" if ($config{target} eq "DJGPP"
1104                                   || $config{target} =~ /^(?:Cygwin|mingw)/);
1105 $target{exe_extension}=".pm"  if ($config{target} =~ /vos/);
1106
1107 ($target{shared_extension_simple}=$target{shared_extension})
1108     =~ s|\.\$\(SHLIB_VERSION_NUMBER\)||;
1109 $target{dso_extension}=$target{shared_extension_simple};
1110 ($target{shared_import_extension}=$target{shared_extension_simple}.".a")
1111     if ($config{target} =~ /^(?:Cygwin|mingw)/);
1112
1113 # Allow overriding the names of some tools.  USE WITH CARE
1114 # Note: only Unix cares about HASHBANGPERL...  that explains
1115 # the default string.
1116 $config{perl} =    ($^O ne "VMS" ? $^X : "perl");
1117 foreach (keys %user) {
1118     my $ref_type = ref $user{$_};
1119
1120     # Temporary function.  Takes an intended ref type (empty string or "ARRAY")
1121     # and a value that's to be coerced into that type.
1122     my $mkvalue = sub {
1123         my $type = shift;
1124         my $value = shift;
1125         my $undef_p = shift;
1126
1127         die "Too many arguments for \$mkvalue" if @_;
1128
1129         while (ref $value eq 'CODE') {
1130             $value = $value->();
1131         }
1132
1133         if ($type eq 'ARRAY') {
1134             return undef unless defined $value;
1135             return undef if ref $value ne 'ARRAY' && !$value;
1136             return undef if ref $value eq 'ARRAY' && !@$value;
1137             return [ $value ] unless ref $value eq 'ARRAY';
1138         }
1139         return undef unless $value;
1140         return $value;
1141     };
1142
1143     $config{$_} =
1144         $mkvalue->($ref_type, $user{$_})
1145         || $mkvalue->($ref_type, $target{$_});
1146     delete $config{$_} unless defined $config{$_};
1147 }
1148
1149 # Allow overriding the build file name
1150 $config{build_file} = env('BUILDFILE') || $target{build_file} || "Makefile";
1151
1152 my %disabled_info = ();         # For configdata.pm
1153 foreach my $what (sort keys %disabled) {
1154     $config{options} .= " no-$what";
1155
1156     if (!grep { $what eq $_ } ( 'dso', 'threads', 'shared', 'pic',
1157                                 'dynamic-engine', 'makedepend',
1158                                 'zlib-dynamic', 'zlib', 'sse2' )) {
1159         (my $WHAT = uc $what) =~ s|-|_|g;
1160
1161         # Fix up C macro end names
1162         $WHAT = "RMD160" if $what eq "ripemd";
1163
1164         # fix-up crypto/directory name(s)
1165         $what = "ripemd" if $what eq "rmd160";
1166         $what = "whrlpool" if $what eq "whirlpool";
1167
1168         my $macro = $disabled_info{$what}->{macro} = "OPENSSL_NO_$WHAT";
1169
1170         if ((grep { $what eq $_ } @{$config{sdirs}})
1171                 && $what ne 'async' && $what ne 'err') {
1172             @{$config{sdirs}} = grep { $what ne $_} @{$config{sdirs}};
1173             $disabled_info{$what}->{skipped} = [ catdir('crypto', $what) ];
1174
1175             if ($what ne 'engine') {
1176                 push @{$config{openssl_algorithm_defines}}, $macro;
1177             } else {
1178                 @{$config{dirs}} = grep !/^engines$/, @{$config{dirs}};
1179                 push @{$disabled_info{engine}->{skipped}}, catdir('engines');
1180                 push @{$config{openssl_other_defines}}, $macro;
1181             }
1182         } else {
1183             push @{$config{openssl_other_defines}}, $macro;
1184         }
1185
1186     }
1187 }
1188
1189 # Make sure build_scheme is consistent.
1190 $target{build_scheme} = [ $target{build_scheme} ]
1191     if ref($target{build_scheme}) ne "ARRAY";
1192
1193 my ($builder, $builder_platform, @builder_opts) =
1194     @{$target{build_scheme}};
1195
1196 foreach my $checker (($builder_platform."-".$target{build_file}."-checker.pm",
1197                       $builder_platform."-checker.pm")) {
1198     my $checker_path = catfile($srcdir, "Configurations", $checker);
1199     if (-f $checker_path) {
1200         my $fn = $ENV{CONFIGURE_CHECKER_WARN}
1201             ? sub { warn $@; } : sub { die $@; };
1202         if (! do $checker_path) {
1203             if ($@) {
1204                 $fn->($@);
1205             } elsif ($!) {
1206                 $fn->($!);
1207             } else {
1208                 $fn->("The detected tools didn't match the platform\n");
1209             }
1210         }
1211         last;
1212     }
1213 }
1214
1215 push @{$config{defines}}, "NDEBUG"    if $config{build_type} eq "release";
1216
1217 if ($target =~ /^mingw/ && `$config{CC} --target-help 2>&1` =~ m/-mno-cygwin/m)
1218         {
1219         push @{$config{cflags}}, "-mno-cygwin";
1220         push @{$config{cxxflags}}, "-mno-cygwin" if $config{CXX};
1221         push @{$config{shared_ldflag}}, "-mno-cygwin";
1222         }
1223
1224 if ($target =~ /linux.*-mips/ && !$disabled{asm}
1225         && !grep { $_ !~ /-m(ips|arch=)/ } (@{$user{CFLAGS}},
1226                                             @{$useradd{CFLAGS}})) {
1227         # minimally required architecture flags for assembly modules
1228         my $value;
1229         $value = '-mips2' if ($target =~ /mips32/);
1230         $value = '-mips3' if ($target =~ /mips64/);
1231         unshift @{$config{cflags}}, $value;
1232         unshift @{$config{cxxflags}}, $value if $config{CXX};
1233 }
1234
1235 # The DSO code currently always implements all functions so that no
1236 # applications will have to worry about that from a compilation point
1237 # of view. However, the "method"s may return zero unless that platform
1238 # has support compiled in for them. Currently each method is enabled
1239 # by a define "DSO_<name>" ... we translate the "dso_scheme" config
1240 # string entry into using the following logic;
1241 if (!$disabled{dso} && $target{dso_scheme} ne "")
1242         {
1243         $target{dso_scheme} =~ tr/[a-z]/[A-Z]/;
1244         if ($target{dso_scheme} eq "DLFCN")
1245                 {
1246                 unshift @{$config{lib_defines}}, "DSO_DLFCN", "HAVE_DLFCN_H";
1247                 }
1248         elsif ($target{dso_scheme} eq "DLFCN_NO_H")
1249                 {
1250                 unshift @{$config{lib_defines}}, "DSO_DLFCN";
1251                 }
1252         else
1253                 {
1254                 unshift @{$config{lib_defines}}, "DSO_$target{dso_scheme}";
1255                 }
1256         }
1257
1258 # If threads aren't disabled, check how possible they are
1259 unless ($disabled{threads}) {
1260     if ($auto_threads) {
1261         # Enabled by default, disable it forcibly if unavailable
1262         if ($target{thread_scheme} eq "(unknown)") {
1263             $disabled{threads} = "unavailable";
1264         }
1265     } else {
1266         # The user chose to enable threads explicitly, let's see
1267         # if there's a chance that's possible
1268         if ($target{thread_scheme} eq "(unknown)") {
1269             # If the user asked for "threads" and we don't have internal
1270             # knowledge how to do it, [s]he is expected to provide any
1271             # system-dependent compiler options that are necessary.  We
1272             # can't truly check that the given options are correct, but
1273             # we expect the user to know what [s]He is doing.
1274             if (!@{$user{CFLAGS}} && !@{$useradd{CFLAGS}}
1275                     && !@{$user{CPPDEFINES}} && !@{$useradd{CPPDEFINES}}) {
1276                 die "You asked for multi-threading support, but didn't\n"
1277                     ,"provide any system-specific compiler options\n";
1278             }
1279         }
1280     }
1281 }
1282
1283 # If threads still aren't disabled, add a C macro to ensure the source
1284 # code knows about it.  Any other flag is taken care of by the configs.
1285 unless($disabled{threads}) {
1286     push @{$config{openssl_thread_defines}}, "OPENSSL_THREADS";
1287 }
1288
1289 # With "deprecated" disable all deprecated features.
1290 if (defined($disabled{"deprecated"})) {
1291         $config{api} = $maxapi;
1292 }
1293
1294 my $no_shared_warn=0;
1295 if ($target{shared_target} eq "")
1296         {
1297         $no_shared_warn = 1
1298             if (!$disabled{shared} || !$disabled{"dynamic-engine"});
1299         $disabled{shared} = "no-shared-target";
1300         $disabled{pic} = $disabled{shared} = $disabled{"dynamic-engine"} =
1301             "no-shared-target";
1302         }
1303
1304 if ($disabled{"dynamic-engine"}) {
1305         push @{$config{openssl_other_defines}}, "OPENSSL_NO_DYNAMIC_ENGINE";
1306         $config{dynamic_engines} = 0;
1307 } else {
1308         push @{$config{openssl_other_defines}}, "OPENSSL_NO_STATIC_ENGINE";
1309         $config{dynamic_engines} = 1;
1310 }
1311
1312 unless ($disabled{asan}) {
1313     push @{$config{cflags}}, "-fsanitize=address";
1314     push @{$config{cxxflags}}, "-fsanitize=address" if $config{CXX};
1315 }
1316
1317 unless ($disabled{ubsan}) {
1318     # -DPEDANTIC or -fnosanitize=alignment may also be required on some
1319     # platforms.
1320     push @{$config{cflags}}, "-fsanitize=undefined", "-fno-sanitize-recover=all";
1321     push @{$config{cxxflags}}, "-fsanitize=undefined", "-fno-sanitize-recover=all"
1322         if $config{CXX};
1323 }
1324
1325 unless ($disabled{msan}) {
1326   push @{$config{cflags}}, "-fsanitize=memory";
1327   push @{$config{cxxflags}}, "-fsanitize=memory" if $config{CXX};
1328 }
1329
1330 unless ($disabled{"fuzz-libfuzzer"} && $disabled{"fuzz-afl"}
1331         && $disabled{asan} && $disabled{ubsan} && $disabled{msan}) {
1332     push @{$config{cflags}}, "-fno-omit-frame-pointer", "-g";
1333     push @{$config{cxxflags}}, "-fno-omit-frame-pointer", "-g" if $config{CXX};
1334 }
1335 #
1336 # Platform fix-ups
1337 #
1338
1339 # This saves the build files from having to check
1340 if ($disabled{pic})
1341         {
1342         foreach (qw(shared_cflag shared_cxxflag shared_cppflag
1343                     shared_defines shared_includes shared_ldflag
1344                     module_cflags module_cxxflags module_cppflags
1345                     module_defines module_includes module_lflags))
1346                 {
1347                 delete $config{$_};
1348                 $target{$_} = "";
1349                 }
1350         }
1351 else
1352         {
1353         push @{$config{lib_defines}}, "OPENSSL_PIC";
1354         }
1355
1356 if ($target{sys_id} ne "")
1357         {
1358         push @{$config{openssl_sys_defines}}, "OPENSSL_SYS_$target{sys_id}";
1359         }
1360
1361 unless ($disabled{asm}) {
1362     $target{cpuid_asm_src}=$table{DEFAULTS}->{cpuid_asm_src} if ($config{processor} eq "386");
1363     push @{$config{lib_defines}}, "OPENSSL_CPUID_OBJ" if ($target{cpuid_asm_src} ne "mem_clr.c");
1364
1365     $target{bn_asm_src} =~ s/\w+-gf2m.c// if (defined($disabled{ec2m}));
1366
1367     # bn-586 is the only one implementing bn_*_part_words
1368     push @{$config{lib_defines}}, "OPENSSL_BN_ASM_PART_WORDS" if ($target{bn_asm_src} =~ /bn-586/);
1369     push @{$config{lib_defines}}, "OPENSSL_IA32_SSE2" if (!$disabled{sse2} && $target{bn_asm_src} =~ /86/);
1370
1371     push @{$config{lib_defines}}, "OPENSSL_BN_ASM_MONT" if ($target{bn_asm_src} =~ /-mont/);
1372     push @{$config{lib_defines}}, "OPENSSL_BN_ASM_MONT5" if ($target{bn_asm_src} =~ /-mont5/);
1373     push @{$config{lib_defines}}, "OPENSSL_BN_ASM_GF2m" if ($target{bn_asm_src} =~ /-gf2m/);
1374
1375     if ($target{sha1_asm_src}) {
1376         push @{$config{lib_defines}}, "SHA1_ASM"   if ($target{sha1_asm_src} =~ /sx86/ || $target{sha1_asm_src} =~ /sha1/);
1377         push @{$config{lib_defines}}, "SHA256_ASM" if ($target{sha1_asm_src} =~ /sha256/);
1378         push @{$config{lib_defines}}, "SHA512_ASM" if ($target{sha1_asm_src} =~ /sha512/);
1379     }
1380     if ($target{rc4_asm_src} ne $table{DEFAULTS}->{rc4_asm_src}) {
1381         push @{$config{lib_defines}}, "RC4_ASM";
1382     }
1383     if ($target{md5_asm_src}) {
1384         push @{$config{lib_defines}}, "MD5_ASM";
1385     }
1386     $target{cast_asm_src}=$table{DEFAULTS}->{cast_asm_src} unless $disabled{pic}; # CAST assembler is not PIC
1387     if ($target{rmd160_asm_src}) {
1388         push @{$config{lib_defines}}, "RMD160_ASM";
1389     }
1390     if ($target{aes_asm_src}) {
1391         push @{$config{lib_defines}}, "AES_ASM" if ($target{aes_asm_src} =~ m/\baes-/);;
1392         # aes-ctr.fake is not a real file, only indication that assembler
1393         # module implements AES_ctr32_encrypt...
1394         push @{$config{lib_defines}}, "AES_CTR_ASM" if ($target{aes_asm_src} =~ s/\s*aes-ctr\.fake//);
1395         # aes-xts.fake indicates presence of AES_xts_[en|de]crypt...
1396         push @{$config{lib_defines}}, "AES_XTS_ASM" if ($target{aes_asm_src} =~ s/\s*aes-xts\.fake//);
1397         $target{aes_asm_src} =~ s/\s*(vpaes|aesni)-x86\.s//g if ($disabled{sse2});
1398         push @{$config{lib_defines}}, "VPAES_ASM" if ($target{aes_asm_src} =~ m/vpaes/);
1399         push @{$config{lib_defines}}, "BSAES_ASM" if ($target{aes_asm_src} =~ m/bsaes/);
1400     }
1401     if ($target{wp_asm_src} =~ /mmx/) {
1402         if ($config{processor} eq "386") {
1403             $target{wp_asm_src}=$table{DEFAULTS}->{wp_asm_src};
1404         } elsif (!$disabled{"whirlpool"}) {
1405             push @{$config{lib_defines}}, "WHIRLPOOL_ASM";
1406         }
1407     }
1408     if ($target{modes_asm_src} =~ /ghash-/) {
1409         push @{$config{lib_defines}}, "GHASH_ASM";
1410     }
1411     if ($target{ec_asm_src} =~ /ecp_nistz256/) {
1412         push @{$config{lib_defines}}, "ECP_NISTZ256_ASM";
1413     }
1414     if ($target{ec_asm_src} =~ /x25519/) {
1415         push @{$config{lib_defines}}, "X25519_ASM";
1416     }
1417     if ($target{padlock_asm_src} ne $table{DEFAULTS}->{padlock_asm_src}) {
1418         push @{$config{lib_defines}}, "PADLOCK_ASM";
1419     }
1420     if ($target{poly1305_asm_src} ne "") {
1421         push @{$config{lib_defines}}, "POLY1305_ASM";
1422     }
1423 }
1424
1425 my %predefined = compiler_predefined($config{CC});
1426
1427 # Check for makedepend capabilities.
1428 if (!$disabled{makedepend}) {
1429     if ($config{target} =~ /^(VC|vms)-/) {
1430         # For VC- and vms- targets, there's nothing more to do here.  The
1431         # functionality is hard coded in the corresponding build files for
1432         # cl (Windows) and CC/DECC (VMS).
1433     } elsif ($predefined{__GNUC__} >= 3) {
1434         # We know that GNU C version 3 and up as well as all clang
1435         # versions support dependency generation
1436         $config{makedepprog} = "\$(CROSS_COMPILE)$config{CC}";
1437     } else {
1438         # In all other cases, we look for 'makedepend', and disable the
1439         # capability if not found.
1440         $config{makedepprog} = which('makedepend');
1441         $disabled{makedepend} = "unavailable" unless $config{makedepprog};
1442     }
1443 }
1444
1445
1446 # Deal with bn_ops ###################################################
1447
1448 $config{bn_ll}                  =0;
1449 $config{export_var_as_fn}       =0;
1450 my $def_int="unsigned int";
1451 $config{rc4_int}                =$def_int;
1452 ($config{b64l},$config{b64},$config{b32})=(0,0,1);
1453
1454 my $count = 0;
1455 foreach (sort split(/\s+/,$target{bn_ops})) {
1456     $count++ if /SIXTY_FOUR_BIT|SIXTY_FOUR_BIT_LONG|THIRTY_TWO_BIT/;
1457     $config{export_var_as_fn}=1                 if $_ eq 'EXPORT_VAR_AS_FN';
1458     $config{bn_ll}=1                            if $_ eq 'BN_LLONG';
1459     $config{rc4_int}="unsigned char"            if $_ eq 'RC4_CHAR';
1460     ($config{b64l},$config{b64},$config{b32})
1461         =(0,1,0)                                if $_ eq 'SIXTY_FOUR_BIT';
1462     ($config{b64l},$config{b64},$config{b32})
1463         =(1,0,0)                                if $_ eq 'SIXTY_FOUR_BIT_LONG';
1464     ($config{b64l},$config{b64},$config{b32})
1465         =(0,0,1)                                if $_ eq 'THIRTY_TWO_BIT';
1466 }
1467 die "Exactly one of SIXTY_FOUR_BIT|SIXTY_FOUR_BIT_LONG|THIRTY_TWO_BIT can be set in bn_ops\n"
1468     if $count > 1;
1469
1470
1471 # Hack cflags for better warnings (dev option) #######################
1472
1473 # "Stringify" the C and C++ flags string.  This permits it to be made part of
1474 # a string and works as well on command lines.
1475 $config{cflags} = [ map { (my $x = $_) =~ s/([\\\"])/\\$1/g; $x }
1476                         @{$config{cflags}} ];
1477 $config{cxxflags} = [ map { (my $x = $_) =~ s/([\\\"])/\\$1/g; $x }
1478                           @{$config{cxxflags}} ] if $config{CXX};
1479
1480 if (defined($config{api})) {
1481     $config{openssl_api_defines} = [ "OPENSSL_MIN_API=".$apitable->{$config{api}} ];
1482     my $apiflag = sprintf("OPENSSL_API_COMPAT=%s", $apitable->{$config{api}});
1483     push @{$config{defines}}, $apiflag;
1484 }
1485
1486 if (defined($predefined{__clang__}) && !$disabled{asm}) {
1487     push @{$config{cflags}}, "-Qunused-arguments";
1488     push @{$config{cxxflags}}, "-Qunused-arguments" if $config{CXX};
1489 }
1490
1491 if ($strict_warnings)
1492         {
1493         my $wopt;
1494         my $gccver = $predefined{__GNUC__} // -1;
1495
1496         die "ERROR --strict-warnings requires gcc[>=4] or gcc-alike"
1497             unless $gccver >= 4;
1498         $gcc_devteam_warn .= " -Wmisleading-indentation" if $gccver >= 6;
1499         foreach $wopt (split /\s+/, $gcc_devteam_warn)
1500                 {
1501                 push @{$config{cflags}}, $wopt
1502                         unless grep { $_ eq $wopt } @{$config{cflags}};
1503                 push @{$config{cxxflags}}, $wopt
1504                         if ($config{CXX}
1505                             && !grep { $_ eq $wopt } @{$config{cxxflags}});
1506                 }
1507         if (defined($predefined{__clang__}))
1508                 {
1509                 foreach $wopt (split /\s+/, $clang_devteam_warn)
1510                         {
1511                         push @{$config{cflags}}, $wopt
1512                                 unless grep { $_ eq $wopt } @{$config{cflags}};
1513                         push @{$config{cxxflags}}, $wopt
1514                                 if ($config{CXX}
1515                                     && !grep { $_ eq $wopt } @{$config{cxxflags}});
1516                         }
1517                 }
1518         }
1519
1520 unless ($disabled{"crypto-mdebug-backtrace"})
1521         {
1522         foreach my $wopt (split /\s+/, $memleak_devteam_backtrace)
1523                 {
1524                 push @{$config{cflags}}, $wopt
1525                         unless grep { $_ eq $wopt } @{$config{cflags}};
1526                 push @{$config{cxxflags}}, $wopt
1527                         if ($config{CXX}
1528                             && !grep { $_ eq $wopt } @{$config{cxxflags}});
1529                 }
1530         if ($target =~ /^BSD-/)
1531                 {
1532                 push @{$config{ex_libs}}, "-lexecinfo";
1533                 }
1534         }
1535
1536 unless ($disabled{afalgeng}) {
1537     $config{afalgeng}="";
1538     if (grep { $_ eq 'afalgeng' } @{$target{enable}}) {
1539         my $minver = 4*10000 + 1*100 + 0;
1540         if ($config{CROSS_COMPILE} eq "") {
1541             my $verstr = `uname -r`;
1542             my ($ma, $mi1, $mi2) = split("\\.", $verstr);
1543             ($mi2) = $mi2 =~ /(\d+)/;
1544             my $ver = $ma*10000 + $mi1*100 + $mi2;
1545             if ($ver < $minver) {
1546                 $disabled{afalgeng} = "too-old-kernel";
1547             } else {
1548                 push @{$config{engdirs}}, "afalg";
1549             }
1550         } else {
1551             $disabled{afalgeng} = "cross-compiling";
1552         }
1553     } else {
1554         $disabled{afalgeng}  = "not-linux";
1555     }
1556 }
1557
1558 push @{$config{openssl_other_defines}}, "OPENSSL_NO_AFALGENG" if ($disabled{afalgeng});
1559
1560 # Finish up %config by appending things the user gave us on the command line
1561 # apart from "make variables"
1562 foreach (keys %useradd) {
1563     # The must all be lists, so we assert that here
1564     die "internal error: \$useradd{$_} isn't an ARRAY\n"
1565         unless ref $useradd{$_} eq 'ARRAY';
1566
1567     if (defined $config{$_}) {
1568         push @{$config{$_}}, @{$useradd{$_}};
1569     } else {
1570         $config{$_} = [ @{$useradd{$_}} ];
1571     }
1572 }
1573
1574 # ALL MODIFICATIONS TO %config and %target MUST BE DONE FROM HERE ON
1575
1576 # If we use the unified build, collect information from build.info files
1577 my %unified_info = ();
1578
1579 my $buildinfo_debug = defined($ENV{CONFIGURE_DEBUG_BUILDINFO});
1580 if ($builder eq "unified") {
1581     use with_fallback qw(Text::Template);
1582
1583     sub cleandir {
1584         my $base = shift;
1585         my $dir = shift;
1586         my $relativeto = shift || ".";
1587
1588         $dir = catdir($base,$dir) unless isabsolute($dir);
1589
1590         # Make sure the directories we're building in exists
1591         mkpath($dir);
1592
1593         my $res = abs2rel(absolutedir($dir), rel2abs($relativeto));
1594         #print STDERR "DEBUG[cleandir]: $dir , $base => $res\n";
1595         return $res;
1596     }
1597
1598     sub cleanfile {
1599         my $base = shift;
1600         my $file = shift;
1601         my $relativeto = shift || ".";
1602
1603         $file = catfile($base,$file) unless isabsolute($file);
1604
1605         my $d = dirname($file);
1606         my $f = basename($file);
1607
1608         # Make sure the directories we're building in exists
1609         mkpath($d);
1610
1611         my $res = abs2rel(catfile(absolutedir($d), $f), rel2abs($relativeto));
1612         #print STDERR "DEBUG[cleanfile]: $d , $f => $res\n";
1613         return $res;
1614     }
1615
1616     # Store the name of the template file we will build the build file from
1617     # in %config.  This may be useful for the build file itself.
1618     my @build_file_template_names =
1619         ( $builder_platform."-".$target{build_file}.".tmpl",
1620           $target{build_file}.".tmpl" );
1621     my @build_file_templates = ();
1622
1623     # First, look in the user provided directory, if given
1624     if (defined env($local_config_envname)) {
1625         @build_file_templates =
1626             map {
1627                 if ($^O eq 'VMS') {
1628                     # VMS environment variables are logical names,
1629                     # which can be used as is
1630                     $local_config_envname . ':' . $_;
1631                 } else {
1632                     catfile(env($local_config_envname), $_);
1633                 }
1634             }
1635             @build_file_template_names;
1636     }
1637     # Then, look in our standard directory
1638     push @build_file_templates,
1639         ( map { cleanfile($srcdir, catfile("Configurations", $_), $blddir) }
1640           @build_file_template_names );
1641
1642     my $build_file_template;
1643     for $_ (@build_file_templates) {
1644         $build_file_template = $_;
1645         last if -f $build_file_template;
1646
1647         $build_file_template = undef;
1648     }
1649     if (!defined $build_file_template) {
1650         die "*** Couldn't find any of:\n", join("\n", @build_file_templates), "\n";
1651     }
1652     $config{build_file_templates}
1653       = [ $build_file_template,
1654           cleanfile($srcdir, catfile("Configurations", "common.tmpl"),
1655                     $blddir) ];
1656
1657     my @build_infos = ( [ ".", "build.info" ] );
1658     foreach (@{$config{dirs}}) {
1659         push @build_infos, [ $_, "build.info" ]
1660             if (-f catfile($srcdir, $_, "build.info"));
1661     }
1662     foreach (@{$config{sdirs}}) {
1663         push @build_infos, [ catdir("crypto", $_), "build.info" ]
1664             if (-f catfile($srcdir, "crypto", $_, "build.info"));
1665     }
1666     foreach (@{$config{engdirs}}) {
1667         push @build_infos, [ catdir("engines", $_), "build.info" ]
1668             if (-f catfile($srcdir, "engines", $_, "build.info"));
1669     }
1670     foreach (@{$config{tdirs}}) {
1671         push @build_infos, [ catdir("test", $_), "build.info" ]
1672             if (-f catfile($srcdir, "test", $_, "build.info"));
1673     }
1674
1675     $config{build_infos} = [ ];
1676
1677     my %ordinals = ();
1678     foreach (@build_infos) {
1679         my $sourced = catdir($srcdir, $_->[0]);
1680         my $buildd = catdir($blddir, $_->[0]);
1681
1682         mkpath($buildd);
1683
1684         my $f = $_->[1];
1685         # The basic things we're trying to build
1686         my @programs = ();
1687         my @programs_install = ();
1688         my @libraries = ();
1689         my @libraries_install = ();
1690         my @engines = ();
1691         my @engines_install = ();
1692         my @scripts = ();
1693         my @scripts_install = ();
1694         my @extra = ();
1695         my @overrides = ();
1696         my @intermediates = ();
1697         my @rawlines = ();
1698
1699         my %sources = ();
1700         my %shared_sources = ();
1701         my %includes = ();
1702         my %depends = ();
1703         my %renames = ();
1704         my %sharednames = ();
1705         my %generate = ();
1706
1707         # We want to detect configdata.pm in the source tree, so we
1708         # don't use it if the build tree is different.
1709         my $src_configdata = cleanfile($srcdir, "configdata.pm", $blddir);
1710
1711         push @{$config{build_infos}}, catfile(abs2rel($sourced, $blddir), $f);
1712         my $template =
1713             Text::Template->new(TYPE => 'FILE',
1714                                 SOURCE => catfile($sourced, $f),
1715                                 PREPEND => qq{use lib "$FindBin::Bin/util/perl";});
1716         die "Something went wrong with $sourced/$f: $!\n" unless $template;
1717         my @text =
1718             split /^/m,
1719             $template->fill_in(HASH => { config => \%config,
1720                                          target => \%target,
1721                                          disabled => \%disabled,
1722                                          withargs => \%withargs,
1723                                          builddir => abs2rel($buildd, $blddir),
1724                                          sourcedir => abs2rel($sourced, $blddir),
1725                                          buildtop => abs2rel($blddir, $blddir),
1726                                          sourcetop => abs2rel($srcdir, $blddir) },
1727                                DELIMITERS => [ "{-", "-}" ]);
1728
1729         # The top item of this stack has the following values
1730         # -2 positive already run and we found ELSE (following ELSIF should fail)
1731         # -1 positive already run (skip until ENDIF)
1732         # 0 negatives so far (if we're at a condition, check it)
1733         # 1 last was positive (don't skip lines until next ELSE, ELSIF or ENDIF)
1734         # 2 positive ELSE (following ELSIF should fail)
1735         my @skip = ();
1736         collect_information(
1737             collect_from_array([ @text ],
1738                                qr/\\$/ => sub { my $l1 = shift; my $l2 = shift;
1739                                                 $l1 =~ s/\\$//; $l1.$l2 }),
1740             # Info we're looking for
1741             qr/^\s*IF\[((?:\\.|[^\\\]])*)\]\s*$/
1742             => sub {
1743                 if (! @skip || $skip[$#skip] > 0) {
1744                     push @skip, !! $1;
1745                 } else {
1746                     push @skip, -1;
1747                 }
1748             },
1749             qr/^\s*ELSIF\[((?:\\.|[^\\\]])*)\]\s*$/
1750             => sub { die "ELSIF out of scope" if ! @skip;
1751                      die "ELSIF following ELSE" if abs($skip[$#skip]) == 2;
1752                      $skip[$#skip] = -1 if $skip[$#skip] != 0;
1753                      $skip[$#skip] = !! $1
1754                          if $skip[$#skip] == 0; },
1755             qr/^\s*ELSE\s*$/
1756             => sub { die "ELSE out of scope" if ! @skip;
1757                      $skip[$#skip] = -2 if $skip[$#skip] != 0;
1758                      $skip[$#skip] = 2 if $skip[$#skip] == 0; },
1759             qr/^\s*ENDIF\s*$/
1760             => sub { die "ENDIF out of scope" if ! @skip;
1761                      pop @skip; },
1762             qr/^\s*PROGRAMS(_NO_INST)?\s*=\s*(.*)\s*$/
1763             => sub {
1764                 if (!@skip || $skip[$#skip] > 0) {
1765                     my $install = $1;
1766                     my @x = tokenize($2);
1767                     push @programs, @x;
1768                     push @programs_install, @x unless $install;
1769                 }
1770             },
1771             qr/^\s*LIBS(_NO_INST)?\s*=\s*(.*)\s*$/
1772             => sub {
1773                 if (!@skip || $skip[$#skip] > 0) {
1774                     my $install = $1;
1775                     my @x = tokenize($2);
1776                     push @libraries, @x;
1777                     push @libraries_install, @x unless $install;
1778                 }
1779             },
1780             qr/^\s*ENGINES(_NO_INST)?\s*=\s*(.*)\s*$/
1781             => sub {
1782                 if (!@skip || $skip[$#skip] > 0) {
1783                     my $install = $1;
1784                     my @x = tokenize($2);
1785                     push @engines, @x;
1786                     push @engines_install, @x unless $install;
1787                 }
1788             },
1789             qr/^\s*SCRIPTS(_NO_INST)?\s*=\s*(.*)\s*$/
1790             => sub {
1791                 if (!@skip || $skip[$#skip] > 0) {
1792                     my $install = $1;
1793                     my @x = tokenize($2);
1794                     push @scripts, @x;
1795                     push @scripts_install, @x unless $install;
1796                 }
1797             },
1798             qr/^\s*EXTRA\s*=\s*(.*)\s*$/
1799             => sub { push @extra, tokenize($1)
1800                          if !@skip || $skip[$#skip] > 0 },
1801             qr/^\s*OVERRIDES\s*=\s*(.*)\s*$/
1802             => sub { push @overrides, tokenize($1)
1803                          if !@skip || $skip[$#skip] > 0 },
1804
1805             qr/^\s*ORDINALS\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/,
1806             => sub { push @{$ordinals{$1}}, tokenize($2)
1807                          if !@skip || $skip[$#skip] > 0 },
1808             qr/^\s*SOURCE\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
1809             => sub { push @{$sources{$1}}, tokenize($2)
1810                          if !@skip || $skip[$#skip] > 0 },
1811             qr/^\s*SHARED_SOURCE\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
1812             => sub { push @{$shared_sources{$1}}, tokenize($2)
1813                          if !@skip || $skip[$#skip] > 0 },
1814             qr/^\s*INCLUDE\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
1815             => sub { push @{$includes{$1}}, tokenize($2)
1816                          if !@skip || $skip[$#skip] > 0 },
1817             qr/^\s*DEPEND\[((?:\\.|[^\\\]])*)\]\s*=\s*(.*)\s*$/
1818             => sub { push @{$depends{$1}}, tokenize($2)
1819                          if !@skip || $skip[$#skip] > 0 },
1820             qr/^\s*GENERATE\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
1821             => sub { push @{$generate{$1}}, $2
1822                          if !@skip || $skip[$#skip] > 0 },
1823             qr/^\s*RENAME\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
1824             => sub { push @{$renames{$1}}, tokenize($2)
1825                          if !@skip || $skip[$#skip] > 0 },
1826             qr/^\s*SHARED_NAME\[((?:\\.|[^\\\]])+)\]\s*=\s*(.*)\s*$/
1827             => sub { push @{$sharednames{$1}}, tokenize($2)
1828                          if !@skip || $skip[$#skip] > 0 },
1829             qr/^\s*BEGINRAW\[((?:\\.|[^\\\]])+)\]\s*$/
1830             => sub {
1831                 my $lineiterator = shift;
1832                 my $target_kind = $1;
1833                 while (defined $lineiterator->()) {
1834                     s|\R$||;
1835                     if (/^\s*ENDRAW\[((?:\\.|[^\\\]])+)\]\s*$/) {
1836                         die "ENDRAW doesn't match BEGINRAW"
1837                             if $1 ne $target_kind;
1838                         last;
1839                     }
1840                     next if @skip && $skip[$#skip] <= 0;
1841                     push @rawlines,  $_
1842                         if ($target_kind eq $target{build_file}
1843                             || $target_kind eq $target{build_file}."(".$builder_platform.")");
1844                 }
1845             },
1846             qr/^\s*(?:#.*)?$/ => sub { },
1847             "OTHERWISE" => sub { die "Something wrong with this line:\n$_\nat $sourced/$f" },
1848             "BEFORE" => sub {
1849                 if ($buildinfo_debug) {
1850                     print STDERR "DEBUG: Parsing ",join(" ", @_),"\n";
1851                     print STDERR "DEBUG: ... before parsing, skip stack is ",join(" ", map { int($_) } @skip),"\n";
1852                 }
1853             },
1854             "AFTER" => sub {
1855                 if ($buildinfo_debug) {
1856                     print STDERR "DEBUG: .... after parsing, skip stack is ",join(" ", map { int($_) } @skip),"\n";
1857                 }
1858             },
1859             );
1860         die "runaway IF?" if (@skip);
1861
1862         foreach (keys %renames) {
1863             die "$_ renamed to more than one thing: "
1864                 ,join(" ", @{$renames{$_}}),"\n"
1865                 if scalar @{$renames{$_}} > 1;
1866             my $dest = cleanfile($buildd, $_, $blddir);
1867             my $to = cleanfile($buildd, $renames{$_}->[0], $blddir);
1868             die "$dest renamed to more than one thing: "
1869                 ,$unified_info{rename}->{$dest}, $to
1870                 unless !defined($unified_info{rename}->{$dest})
1871                 or $unified_info{rename}->{$dest} eq $to;
1872             $unified_info{rename}->{$dest} = $to;
1873         }
1874
1875         foreach (@programs) {
1876             my $program = cleanfile($buildd, $_, $blddir);
1877             if ($unified_info{rename}->{$program}) {
1878                 $program = $unified_info{rename}->{$program};
1879             }
1880             $unified_info{programs}->{$program} = 1;
1881         }
1882
1883         foreach (@programs_install) {
1884             my $program = cleanfile($buildd, $_, $blddir);
1885             if ($unified_info{rename}->{$program}) {
1886                 $program = $unified_info{rename}->{$program};
1887             }
1888             $unified_info{install}->{programs}->{$program} = 1;
1889         }
1890
1891         foreach (@libraries) {
1892             my $library = cleanfile($buildd, $_, $blddir);
1893             if ($unified_info{rename}->{$library}) {
1894                 $library = $unified_info{rename}->{$library};
1895             }
1896             $unified_info{libraries}->{$library} = 1;
1897         }
1898
1899         foreach (@libraries_install) {
1900             my $library = cleanfile($buildd, $_, $blddir);
1901             if ($unified_info{rename}->{$library}) {
1902                 $library = $unified_info{rename}->{$library};
1903             }
1904             $unified_info{install}->{libraries}->{$library} = 1;
1905         }
1906
1907         die <<"EOF" if scalar @engines and !$config{dynamic_engines};
1908 ENGINES can only be used if configured with 'dynamic-engine'.
1909 This is usually a fault in a build.info file.
1910 EOF
1911         foreach (@engines) {
1912             my $library = cleanfile($buildd, $_, $blddir);
1913             if ($unified_info{rename}->{$library}) {
1914                 $library = $unified_info{rename}->{$library};
1915             }
1916             $unified_info{engines}->{$library} = 1;
1917         }
1918
1919         foreach (@engines_install) {
1920             my $library = cleanfile($buildd, $_, $blddir);
1921             if ($unified_info{rename}->{$library}) {
1922                 $library = $unified_info{rename}->{$library};
1923             }
1924             $unified_info{install}->{engines}->{$library} = 1;
1925         }
1926
1927         foreach (@scripts) {
1928             my $script = cleanfile($buildd, $_, $blddir);
1929             if ($unified_info{rename}->{$script}) {
1930                 $script = $unified_info{rename}->{$script};
1931             }
1932             $unified_info{scripts}->{$script} = 1;
1933         }
1934
1935         foreach (@scripts_install) {
1936             my $script = cleanfile($buildd, $_, $blddir);
1937             if ($unified_info{rename}->{$script}) {
1938                 $script = $unified_info{rename}->{$script};
1939             }
1940             $unified_info{install}->{scripts}->{$script} = 1;
1941         }
1942
1943         foreach (@extra) {
1944             my $extra = cleanfile($buildd, $_, $blddir);
1945             $unified_info{extra}->{$extra} = 1;
1946         }
1947
1948         foreach (@overrides) {
1949             my $override = cleanfile($buildd, $_, $blddir);
1950             $unified_info{overrides}->{$override} = 1;
1951         }
1952
1953         push @{$unified_info{rawlines}}, @rawlines;
1954
1955         unless ($disabled{shared}) {
1956             # Check sharednames.
1957             foreach (keys %sharednames) {
1958                 my $dest = cleanfile($buildd, $_, $blddir);
1959                 if ($unified_info{rename}->{$dest}) {
1960                     $dest = $unified_info{rename}->{$dest};
1961                 }
1962                 die "shared_name for $dest with multiple values: "
1963                     ,join(" ", @{$sharednames{$_}}),"\n"
1964                     if scalar @{$sharednames{$_}} > 1;
1965                 my $to = cleanfile($buildd, $sharednames{$_}->[0], $blddir);
1966                 die "shared_name found for a library $dest that isn't defined\n"
1967                     unless $unified_info{libraries}->{$dest};
1968                 die "shared_name for $dest with multiple values: "
1969                     ,$unified_info{sharednames}->{$dest}, ", ", $to
1970                     unless !defined($unified_info{sharednames}->{$dest})
1971                     or $unified_info{sharednames}->{$dest} eq $to;
1972                 $unified_info{sharednames}->{$dest} = $to;
1973             }
1974
1975             # Additionally, we set up sharednames for libraries that don't
1976             # have any, as themselves.  Only for libraries that aren't
1977             # explicitly static.
1978             foreach (grep !/\.a$/, keys %{$unified_info{libraries}}) {
1979                 if (!defined $unified_info{sharednames}->{$_}) {
1980                     $unified_info{sharednames}->{$_} = $_
1981                 }
1982             }
1983
1984             # Check that we haven't defined any library as both shared and
1985             # explicitly static.  That is forbidden.
1986             my @doubles = ();
1987             foreach (grep /\.a$/, keys %{$unified_info{libraries}}) {
1988                 (my $l = $_) =~ s/\.a$//;
1989                 push @doubles, $l if defined $unified_info{sharednames}->{$l};
1990             }
1991             die "these libraries are both explicitly static and shared:\n  ",
1992                 join(" ", @doubles), "\n"
1993                 if @doubles;
1994         }
1995
1996         foreach (keys %sources) {
1997             my $dest = $_;
1998             my $ddest = cleanfile($buildd, $_, $blddir);
1999             if ($unified_info{rename}->{$ddest}) {
2000                 $ddest = $unified_info{rename}->{$ddest};
2001             }
2002             foreach (@{$sources{$dest}}) {
2003                 my $s = cleanfile($sourced, $_, $blddir);
2004
2005                 # If it isn't in the source tree, we assume it's generated
2006                 # in the build tree
2007                 if ($s eq $src_configdata || ! -f $s || $generate{$_}) {
2008                     $s = cleanfile($buildd, $_, $blddir);
2009                 }
2010                 # We recognise C++, C and asm files
2011                 if ($s =~ /\.(cc|cpp|c|s|S)$/) {
2012                     my $o = $_;
2013                     $o =~ s/\.[csS]$/.o/; # C and assembler
2014                     $o =~ s/\.(cc|cpp)$/_cc.o/; # C++
2015                     $o = cleanfile($buildd, $o, $blddir);
2016                     $unified_info{sources}->{$ddest}->{$o} = 1;
2017                     $unified_info{sources}->{$o}->{$s} = 1;
2018                 } elsif ($s =~ /\.rc$/) {
2019                     # We also recognise resource files
2020                     my $o = $_;
2021                     $o =~ s/\.rc$/.res/; # Resource configuration
2022                     my $o = cleanfile($buildd, $o, $blddir);
2023                     $unified_info{sources}->{$ddest}->{$o} = 1;
2024                     $unified_info{sources}->{$o}->{$s} = 1;
2025                 } else {
2026                     $unified_info{sources}->{$ddest}->{$s} = 1;
2027                 }
2028             }
2029         }
2030
2031         foreach (keys %shared_sources) {
2032             my $dest = $_;
2033             my $ddest = cleanfile($buildd, $_, $blddir);
2034             if ($unified_info{rename}->{$ddest}) {
2035                 $ddest = $unified_info{rename}->{$ddest};
2036             }
2037             foreach (@{$shared_sources{$dest}}) {
2038                 my $s = cleanfile($sourced, $_, $blddir);
2039
2040                 # If it isn't in the source tree, we assume it's generated
2041                 # in the build tree
2042                 if ($s eq $src_configdata || ! -f $s || $generate{$_}) {
2043                     $s = cleanfile($buildd, $_, $blddir);
2044                 }
2045
2046                 if ($s =~ /\.(cc|cpp|c|s|S)$/) {
2047                     # We recognise C++, C and asm files
2048                     my $o = $_;
2049                     $o =~ s/\.[csS]$/.o/; # C and assembler
2050                     $o =~ s/\.(cc|cpp)$/_cc.o/; # C++
2051                     $o = cleanfile($buildd, $o, $blddir);
2052                     $unified_info{shared_sources}->{$ddest}->{$o} = 1;
2053                     $unified_info{sources}->{$o}->{$s} = 1;
2054                 } elsif ($s =~ /\.rc$/) {
2055                     # We also recognise resource files
2056                     my $o = $_;
2057                     $o =~ s/\.rc$/.res/; # Resource configuration
2058                     my $o = cleanfile($buildd, $o, $blddir);
2059                     $unified_info{shared_sources}->{$ddest}->{$o} = 1;
2060                     $unified_info{sources}->{$o}->{$s} = 1;
2061                 } elsif ($s =~ /\.(def|map|opt)$/) {
2062                     # We also recognise .def / .map / .opt files
2063                     # We know they are generated files
2064                     my $def = cleanfile($buildd, $s, $blddir);
2065                     $unified_info{shared_sources}->{$ddest}->{$def} = 1;
2066                 } else {
2067                     die "unrecognised source file type for shared library: $s\n";
2068                 }
2069             }
2070         }
2071
2072         foreach (keys %generate) {
2073             my $dest = $_;
2074             my $ddest = cleanfile($buildd, $_, $blddir);
2075             if ($unified_info{rename}->{$ddest}) {
2076                 $ddest = $unified_info{rename}->{$ddest};
2077             }
2078             die "more than one generator for $dest: "
2079                     ,join(" ", @{$generate{$_}}),"\n"
2080                     if scalar @{$generate{$_}} > 1;
2081             my @generator = split /\s+/, $generate{$dest}->[0];
2082             $generator[0] = cleanfile($sourced, $generator[0], $blddir),
2083             $unified_info{generate}->{$ddest} = [ @generator ];
2084         }
2085
2086         foreach (keys %depends) {
2087             my $dest = $_;
2088             my $ddest = $dest eq "" ? "" : cleanfile($sourced, $_, $blddir);
2089
2090             # If the destination doesn't exist in source, it can only be
2091             # a generated file in the build tree.
2092             if ($ddest ne "" && ($ddest eq $src_configdata || ! -f $ddest)) {
2093                 $ddest = cleanfile($buildd, $_, $blddir);
2094                 if ($unified_info{rename}->{$ddest}) {
2095                     $ddest = $unified_info{rename}->{$ddest};
2096                 }
2097             }
2098             foreach (@{$depends{$dest}}) {
2099                 my $d = cleanfile($sourced, $_, $blddir);
2100
2101                 # If we know it's generated, or assume it is because we can't
2102                 # find it in the source tree, we set file we depend on to be
2103                 # in the build tree rather than the source tree, and assume
2104                 # and that there are lines to build it in a BEGINRAW..ENDRAW
2105                 # section or in the Makefile template.
2106                 if ($d eq $src_configdata
2107                     || ! -f $d
2108                     || (grep { $d eq $_ }
2109                         map { cleanfile($srcdir, $_, $blddir) }
2110                         grep { /\.h$/ } keys %{$unified_info{generate}})) {
2111                     $d = cleanfile($buildd, $_, $blddir);
2112                 }
2113                 # Take note if the file to depend on is being renamed
2114                 # Take extra care with files ending with .a, they should
2115                 # be treated without that extension, and the extension
2116                 # should be added back after treatment.
2117                 $d =~ /(\.a)?$/;
2118                 my $e = $1 // "";
2119                 $d = $`;
2120                 if ($unified_info{rename}->{$d}) {
2121                     $d = $unified_info{rename}->{$d};
2122                 }
2123                 $d .= $e;
2124                 $unified_info{depends}->{$ddest}->{$d} = 1;
2125             }
2126         }
2127
2128         foreach (keys %includes) {
2129             my $dest = $_;
2130             my $ddest = cleanfile($sourced, $_, $blddir);
2131
2132             # If the destination doesn't exist in source, it can only be
2133             # a generated file in the build tree.
2134             if ($ddest eq $src_configdata || ! -f $ddest) {
2135                 $ddest = cleanfile($buildd, $_, $blddir);
2136                 if ($unified_info{rename}->{$ddest}) {
2137                     $ddest = $unified_info{rename}->{$ddest};
2138                 }
2139             }
2140             foreach (@{$includes{$dest}}) {
2141                 my $is = cleandir($sourced, $_, $blddir);
2142                 my $ib = cleandir($buildd, $_, $blddir);
2143                 push @{$unified_info{includes}->{$ddest}->{source}}, $is
2144                     unless grep { $_ eq $is } @{$unified_info{includes}->{$ddest}->{source}};
2145                 push @{$unified_info{includes}->{$ddest}->{build}}, $ib
2146                     unless grep { $_ eq $ib } @{$unified_info{includes}->{$ddest}->{build}};
2147             }
2148         }
2149     }
2150
2151     my $ordinals_text = join(', ', sort keys %ordinals);
2152     warn <<"EOF" if $ordinals_text;
2153
2154 WARNING: ORDINALS were specified for $ordinals_text
2155 They are ignored and should be replaced with a combination of GENERATE,
2156 DEPEND and SHARED_SOURCE.
2157 EOF
2158
2159     # Massage the result
2160
2161     # If we depend on a header file or a perl module, add an inclusion of
2162     # its directory to allow smoothe inclusion
2163     foreach my $dest (keys %{$unified_info{depends}}) {
2164         next if $dest eq "";
2165         foreach my $d (keys %{$unified_info{depends}->{$dest}}) {
2166             next unless $d =~ /\.(h|pm)$/;
2167             my $i = dirname($d);
2168             my $spot =
2169                 $d eq "configdata.pm" || defined($unified_info{generate}->{$d})
2170                 ? 'build' : 'source';
2171             push @{$unified_info{includes}->{$dest}->{$spot}}, $i
2172                 unless grep { $_ eq $i } @{$unified_info{includes}->{$dest}->{$spot}};
2173         }
2174     }
2175
2176     # Trickle down includes placed on libraries, engines and programs to
2177     # their sources (i.e. object files)
2178     foreach my $dest (keys %{$unified_info{engines}},
2179                       keys %{$unified_info{libraries}},
2180                       keys %{$unified_info{programs}}) {
2181         foreach my $k (("source", "build")) {
2182             next unless defined($unified_info{includes}->{$dest}->{$k});
2183             my @incs = reverse @{$unified_info{includes}->{$dest}->{$k}};
2184             foreach my $obj (grep /\.o$/,
2185                              (keys %{$unified_info{sources}->{$dest}},
2186                               keys %{$unified_info{shared_sources}->{$dest}})) {
2187                 foreach my $inc (@incs) {
2188                     unshift @{$unified_info{includes}->{$obj}->{$k}}, $inc
2189                         unless grep { $_ eq $inc } @{$unified_info{includes}->{$obj}->{$k}};
2190                 }
2191             }
2192         }
2193         delete $unified_info{includes}->{$dest};
2194     }
2195
2196     ### Make unified_info a bit more efficient
2197     # One level structures
2198     foreach (("programs", "libraries", "engines", "scripts", "extra", "overrides")) {
2199         $unified_info{$_} = [ sort keys %{$unified_info{$_}} ];
2200     }
2201     # Two level structures
2202     foreach my $l1 (("install", "sources", "shared_sources", "ldadd", "depends")) {
2203         foreach my $l2 (sort keys %{$unified_info{$l1}}) {
2204             $unified_info{$l1}->{$l2} =
2205                 [ sort keys %{$unified_info{$l1}->{$l2}} ];
2206         }
2207     }
2208     # Includes
2209     foreach my $dest (sort keys %{$unified_info{includes}}) {
2210         if (defined($unified_info{includes}->{$dest}->{build})) {
2211             my @source_includes = ();
2212             @source_includes = ( @{$unified_info{includes}->{$dest}->{source}} )
2213                 if defined($unified_info{includes}->{$dest}->{source});
2214             $unified_info{includes}->{$dest} =
2215                 [ @{$unified_info{includes}->{$dest}->{build}} ];
2216             foreach my $inc (@source_includes) {
2217                 push @{$unified_info{includes}->{$dest}}, $inc
2218                     unless grep { $_ eq $inc } @{$unified_info{includes}->{$dest}};
2219             }
2220         } else {
2221             $unified_info{includes}->{$dest} =
2222                 [ @{$unified_info{includes}->{$dest}->{source}} ];
2223         }
2224     }
2225 }
2226
2227 # For the schemes that need it, we provide the old *_obj configs
2228 # from the *_asm_obj ones
2229 foreach (grep /_(asm|aux)_src$/, keys %target) {
2230     my $src = $_;
2231     (my $obj = $_) =~ s/_(asm|aux)_src$/_obj/;
2232     $target{$obj} = $target{$src};
2233     $target{$obj} =~ s/\.[csS]\b/.o/g; # C and assembler
2234     $target{$obj} =~ s/\.(cc|cpp)\b/_cc.o/g; # C++
2235 }
2236
2237 # Write down our configuration where it fits #########################
2238
2239 print "Creating configdata.pm\n";
2240 open(OUT,">configdata.pm") || die "unable to create configdata.pm: $!\n";
2241 print OUT <<"EOF";
2242 #! $config{HASHBANGPERL}
2243
2244 package configdata;
2245
2246 use strict;
2247 use warnings;
2248
2249 use Exporter;
2250 #use vars qw(\@ISA \@EXPORT);
2251 our \@ISA = qw(Exporter);
2252 our \@EXPORT = qw(\%config \%target \%disabled \%withargs \%unified_info \@disablables);
2253
2254 EOF
2255 print OUT "our %config = (\n";
2256 foreach (sort keys %config) {
2257     if (ref($config{$_}) eq "ARRAY") {
2258         print OUT "  ", $_, " => [ ", join(", ",
2259                                            map { quotify("perl", $_) }
2260                                            @{$config{$_}}), " ],\n";
2261     } elsif (ref($config{$_}) eq "HASH") {
2262         print OUT "  ", $_, " => {";
2263         if (scalar keys %{$config{$_}} > 0) {
2264             print OUT "\n";
2265             foreach my $key (sort keys %{$config{$_}}) {
2266                 print OUT "      ",
2267                     join(" => ",
2268                          quotify("perl", $key),
2269                          defined $config{$_}->{$key}
2270                              ? quotify("perl", $config{$_}->{$key})
2271                              : "undef");
2272                 print OUT ",\n";
2273             }
2274             print OUT "  ";
2275         }
2276         print OUT "},\n";
2277     } else {
2278         print OUT "  ", $_, " => ", quotify("perl", $config{$_}), ",\n"
2279     }
2280 }
2281 print OUT <<"EOF";
2282 );
2283
2284 EOF
2285 print OUT "our %target = (\n";
2286 foreach (sort keys %target) {
2287     if (ref($target{$_}) eq "ARRAY") {
2288         print OUT "  ", $_, " => [ ", join(", ",
2289                                            map { quotify("perl", $_) }
2290                                            @{$target{$_}}), " ],\n";
2291     } else {
2292         print OUT "  ", $_, " => ", quotify("perl", $target{$_}), ",\n"
2293     }
2294 }
2295 print OUT <<"EOF";
2296 );
2297
2298 EOF
2299 print OUT "our \%available_protocols = (\n";
2300 print OUT "  tls => [ ", join(", ", map { quotify("perl", $_) } @tls), " ],\n";
2301 print OUT "  dtls => [ ", join(", ", map { quotify("perl", $_) } @dtls), " ],\n";
2302 print OUT <<"EOF";
2303 );
2304
2305 EOF
2306 print OUT "our \@disablables = (\n";
2307 foreach (@disablables) {
2308     print OUT "  ", quotify("perl", $_), ",\n";
2309 }
2310 print OUT <<"EOF";
2311 );
2312
2313 EOF
2314 print OUT "our \%disabled = (\n";
2315 foreach (sort keys %disabled) {
2316     print OUT "  ", quotify("perl", $_), " => ", quotify("perl", $disabled{$_}), ",\n";
2317 }
2318 print OUT <<"EOF";
2319 );
2320
2321 EOF
2322 print OUT "our %withargs = (\n";
2323 foreach (sort keys %withargs) {
2324     if (ref($withargs{$_}) eq "ARRAY") {
2325         print OUT "  ", $_, " => [ ", join(", ",
2326                                            map { quotify("perl", $_) }
2327                                            @{$withargs{$_}}), " ],\n";
2328     } else {
2329         print OUT "  ", $_, " => ", quotify("perl", $withargs{$_}), ",\n"
2330     }
2331 }
2332 print OUT <<"EOF";
2333 );
2334
2335 EOF
2336 if ($builder eq "unified") {
2337     my $recurse;
2338     $recurse = sub {
2339         my $indent = shift;
2340         foreach (@_) {
2341             if (ref $_ eq "ARRAY") {
2342                 print OUT " "x$indent, "[\n";
2343                 foreach (@$_) {
2344                     $recurse->($indent + 4, $_);
2345                 }
2346                 print OUT " "x$indent, "],\n";
2347             } elsif (ref $_ eq "HASH") {
2348                 my %h = %$_;
2349                 print OUT " "x$indent, "{\n";
2350                 foreach (sort keys %h) {
2351                     if (ref $h{$_} eq "") {
2352                         print OUT " "x($indent + 4), quotify("perl", $_), " => ", quotify("perl", $h{$_}), ",\n";
2353                     } else {
2354                         print OUT " "x($indent + 4), quotify("perl", $_), " =>\n";
2355                         $recurse->($indent + 8, $h{$_});
2356                     }
2357                 }
2358                 print OUT " "x$indent, "},\n";
2359             } else {
2360                 print OUT " "x$indent, quotify("perl", $_), ",\n";
2361             }
2362         }
2363     };
2364     print OUT "our %unified_info = (\n";
2365     foreach (sort keys %unified_info) {
2366         if (ref $unified_info{$_} eq "") {
2367             print OUT " "x4, quotify("perl", $_), " => ", quotify("perl", $unified_info{$_}), ",\n";
2368         } else {
2369             print OUT " "x4, quotify("perl", $_), " =>\n";
2370             $recurse->(8, $unified_info{$_});
2371         }
2372     }
2373     print OUT <<"EOF";
2374 );
2375
2376 EOF
2377 }
2378 print OUT
2379     "# The following data is only used when this files is use as a script\n";
2380 print OUT "my \@makevars = (\n";
2381 foreach (sort keys %user) {
2382     print OUT "    '",$_,"',\n";
2383 }
2384 print OUT ");\n";
2385 print OUT "my \%disabled_info = (\n";
2386 foreach my $what (sort keys %disabled_info) {
2387     print OUT "    '$what' => {\n";
2388     foreach my $info (sort keys %{$disabled_info{$what}}) {
2389         if (ref $disabled_info{$what}->{$info} eq 'ARRAY') {
2390             print OUT "        $info => [ ",
2391                 join(', ', map { "'$_'" } @{$disabled_info{$what}->{$info}}),
2392                 " ],\n";
2393         } else {
2394             print OUT "        $info => '", $disabled_info{$what}->{$info},
2395                 "',\n";
2396         }
2397     }
2398     print OUT "    },\n";
2399 }
2400 print OUT ");\n";
2401 print OUT 'my @user_crossable = qw( ', join (' ', @user_crossable), " );\n";
2402 print OUT << 'EOF';
2403 # If run directly, we can give some answers, and even reconfigure
2404 unless (caller) {
2405     use Getopt::Long;
2406     use File::Spec::Functions;
2407     use File::Basename;
2408     use Pod::Usage;
2409
2410     my $here = dirname($0);
2411
2412     my $dump = undef;
2413     my $cmdline = undef;
2414     my $options = undef;
2415     my $target = undef;
2416     my $envvars = undef;
2417     my $makevars = undef;
2418     my $buildparams = undef;
2419     my $reconf = undef;
2420     my $verbose = undef;
2421     my $help = undef;
2422     my $man = undef;
2423     GetOptions('dump|d'                 => \$dump,
2424                'command-line|c'         => \$cmdline,
2425                'options|o'              => \$options,
2426                'target|t'               => \$target,
2427                'environment|e'          => \$envvars,
2428                'make-variables|m'       => \$makevars,
2429                'build-parameters|b'     => \$buildparams,
2430                'reconfigure|reconf|r'   => \$reconf,
2431                'verbose|v'              => \$verbose,
2432                'help'                   => \$help,
2433                'man'                    => \$man)
2434         or die "Errors in command line arguments\n";
2435
2436     unless ($dump || $cmdline || $options || $target || $envvars || $makevars
2437             || $buildparams || $reconf || $verbose || $help || $man) {
2438         print STDERR <<"_____";
2439 You must give at least one option.
2440 For more information, do '$0 --help'
2441 _____
2442         exit(2);
2443     }
2444
2445     if ($help) {
2446         pod2usage(-exitval => 0,
2447                   -verbose => 1);
2448     }
2449     if ($man) {
2450         pod2usage(-exitval => 0,
2451                   -verbose => 2);
2452     }
2453     if ($dump || $cmdline) {
2454         print "\nCommand line (with current working directory = $here):\n\n";
2455         print '    ',join(' ',
2456                           $config{perl},
2457                           catfile($config{sourcedir}, 'Configure'),
2458                           @{$config{perlargv}}), "\n";
2459         print "\nPerl information:\n\n";
2460         print '    ',$config{perl_cmd},"\n";
2461         print '    ',$config{perl_version},' for ',$config{perl_archname},"\n";
2462     }
2463     if ($dump || $options) {
2464         my $longest = 0;
2465         my $longest2 = 0;
2466         foreach my $what (@disablables) {
2467             $longest = length($what) if $longest < length($what);
2468             $longest2 = length($disabled{$what})
2469                 if $disabled{$what} && $longest2 < length($disabled{$what});
2470         }
2471         print "\nEnabled features:\n\n";
2472         foreach my $what (@disablables) {
2473             print "    $what\n" unless $disabled{$what};
2474         }
2475         print "\nDisabled features:\n\n";
2476         foreach my $what (@disablables) {
2477             if ($disabled{$what}) {
2478                 print "    $what", ' ' x ($longest - length($what) + 1),
2479                     "[$disabled{$what}]", ' ' x ($longest2 - length($disabled{$what}) + 1);
2480                 print $disabled_info{$what}->{macro}
2481                     if $disabled_info{$what}->{macro};
2482                 print ' (skip ',
2483                     join(', ', @{$disabled_info{$what}->{skipped}}),
2484                     ')'
2485                     if $disabled_info{$what}->{skipped};
2486                 print "\n";
2487             }
2488         }
2489     }
2490     if ($dump || $target) {
2491         print "\nConfig target attributes:\n\n";
2492         foreach (sort keys %target) {
2493             next if $_ =~ m|^_| || $_ eq 'template';
2494             my $quotify = sub {
2495                 map { (my $x = $_) =~ s|([\\\$\@"])|\\$1|g; "\"$x\""} @_;
2496             };
2497             print '    ', $_, ' => ';
2498             if (ref($target{$_}) eq "ARRAY") {
2499                 print '[ ', join(', ', $quotify->(@{$target{$_}})), " ],\n";
2500             } else {
2501                 print $quotify->($target{$_}), ",\n"
2502             }
2503         }
2504     }
2505     if ($dump || $envvars) {
2506         print "\nRecorded environment:\n\n";
2507         foreach (sort keys %{$config{perlenv}}) {
2508             print '    ',$_,' = ',($config{perlenv}->{$_} || ''),"\n";
2509         }
2510     }
2511     if ($dump || $makevars) {
2512         print "\nMakevars:\n\n";
2513         foreach my $var (@makevars) {
2514             my $prefix = '';
2515             $prefix = $config{CROSS_COMPILE}
2516                 if grep { $var eq $_ } @user_crossable;
2517             $prefix //= '';
2518             print '    ',$var,' ' x (16 - length $var),'= ',
2519                 (ref $config{$var} eq 'ARRAY'
2520                  ? join(' ', @{$config{$var}})
2521                  : $prefix.$config{$var}),
2522                 "\n"
2523                 if defined $config{$var};
2524         }
2525
2526         my @buildfile = ($config{builddir}, $config{build_file});
2527         unshift @buildfile, $here
2528             unless file_name_is_absolute($config{builddir});
2529         my $buildfile = canonpath(catdir(@buildfile));
2530         print <<"_____";
2531
2532 NOTE: These variables only represent the configuration view.  The build file
2533 template may have processed these variables further, please have a look at the
2534 build file for more exact data:
2535     $buildfile
2536 _____
2537     }
2538     if ($dump || $buildparams) {
2539         my @buildfile = ($config{builddir}, $config{build_file});
2540         unshift @buildfile, $here
2541             unless file_name_is_absolute($config{builddir});
2542         print "\nbuild file:\n\n";
2543         print "    ", canonpath(catfile(@buildfile)),"\n";
2544
2545         print "\nbuild file templates:\n\n";
2546         foreach (@{$config{build_file_templates}}) {
2547             my @tmpl = ($_);
2548             unshift @tmpl, $here
2549                 unless file_name_is_absolute($config{sourcedir});
2550             print '    ',canonpath(catfile(@tmpl)),"\n";
2551         }
2552     }
2553     if ($reconf) {
2554         if ($verbose) {
2555             print 'Reconfiguring with: ', join(' ',@{$config{perlargv}}), "\n";
2556             foreach (sort keys %{$config{perlenv}}) {
2557                 print '    ',$_,' = ',($config{perlenv}->{$_} || ""),"\n";
2558             }
2559         }
2560
2561         chdir $here;
2562         exec $^X,catfile($config{sourcedir}, 'Configure'),'reconf';
2563     }
2564 }
2565
2566 1;
2567
2568 __END__
2569
2570 =head1 NAME
2571
2572 configdata.pm - configuration data for OpenSSL builds
2573
2574 =head1 SYNOPSIS
2575
2576 Interactive:
2577
2578   perl configdata.pm [options]
2579
2580 As data bank module:
2581
2582   use configdata;
2583
2584 =head1 DESCRIPTION
2585
2586 This module can be used in two modes, interactively and as a module containing
2587 all the data recorded by OpenSSL's Configure script.
2588
2589 When used interactively, simply run it as any perl script, with at least one
2590 option, and you will get the information you ask for.  See L</OPTIONS> below.
2591
2592 When loaded as a module, you get a few databanks with useful information to
2593 perform build related tasks.  The databanks are:
2594
2595     %config             Configured things.
2596     %target             The OpenSSL config target with all inheritances
2597                         resolved.
2598     %disabled           The features that are disabled.
2599     @disablables        The list of features that can be disabled.
2600     %withargs           All data given through --with-THING options.
2601     %unified_info       All information that was computed from the build.info
2602                         files.
2603
2604 =head1 OPTIONS
2605
2606 =over 4
2607
2608 =item B<--help>
2609
2610 Print a brief help message and exit.
2611
2612 =item B<--man>
2613
2614 Print the manual page and exit.
2615
2616 =item B<--dump> | B<-d>
2617
2618 Print all relevant configuration data.  This is equivalent to B<--command-line>
2619 B<--options> B<--target> B<--environment> B<--make-variables>
2620 B<--build-parameters>.
2621
2622 =item B<--command-line> | B<-c>
2623
2624 Print the current configuration command line.
2625
2626 =item B<--options> | B<-o>
2627
2628 Print the features, both enabled and disabled, and display defined macro and
2629 skipped directories where applicable.
2630
2631 =item B<--target> | B<-t>
2632
2633 Print the config attributes for this config target.
2634
2635 =item B<--environment> | B<-e>
2636
2637 Print the environment variables and their values at the time of configuration.
2638
2639 =item B<--make-variables> | B<-m>
2640
2641 Print the main make variables generated in the current configuration
2642
2643 =item B<--build-parameters> | B<-b>
2644
2645 Print the build parameters, i.e. build file and build file templates.
2646
2647 =item B<--reconfigure> | B<--reconf> | B<-r>
2648
2649 Redo the configuration.
2650
2651 =item B<--verbose> | B<-v>
2652
2653 Verbose output.
2654
2655 =back
2656
2657 =cut
2658
2659 EOF
2660 close(OUT);
2661 if ($builder_platform eq 'unix') {
2662     my $mode = (0755 & ~umask);
2663     chmod $mode, 'configdata.pm'
2664         or warn sprintf("WARNING: Couldn't change mode for 'configdata.pm' to 0%03o: %s\n",$mode,$!);
2665 }
2666
2667 my %builders = (
2668     unified => sub {
2669         print 'Creating ',$target{build_file},"\n";
2670         run_dofile(catfile($blddir, $target{build_file}),
2671                    @{$config{build_file_templates}});
2672     },
2673     );
2674
2675 $builders{$builder}->($builder_platform, @builder_opts);
2676
2677 print <<"EOF" if ($disabled{threads} eq "unavailable");
2678
2679 The library could not be configured for supporting multi-threaded
2680 applications as the compiler options required on this system are not known.
2681 See file INSTALL for details if you need multi-threading.
2682 EOF
2683
2684 print <<"EOF" if ($no_shared_warn);
2685
2686 The options 'shared', 'pic' and 'dynamic-engine' aren't supported on this
2687 platform, so we will pretend you gave the option 'no-pic', which also disables
2688 'shared' and 'dynamic-engine'.  If you know how to implement shared libraries
2689 or position independent code, please let us know (but please first make sure
2690 you have tried with a current version of OpenSSL).
2691 EOF
2692
2693 print <<"EOF";
2694
2695 **********************************************************************
2696 ***                                                                ***
2697 ***   If you want to report a building issue, please include the   ***
2698 ***   output from this command:                                    ***
2699 ***                                                                ***
2700 ***     perl configdata.pm --dump                                  ***
2701 ***                                                                ***
2702 **********************************************************************
2703 EOF
2704
2705 exit(0);
2706
2707 ######################################################################
2708 #
2709 # Helpers and utility functions
2710 #
2711
2712 # Configuration file reading #########################################
2713
2714 # Note: All of the helper functions are for lazy evaluation.  They all
2715 # return a CODE ref, which will return the intended value when evaluated.
2716 # Thus, whenever there's mention of a returned value, it's about that
2717 # intended value.
2718
2719 # Helper function to implement conditional inheritance depending on the
2720 # value of $disabled{asm}.  Used in inherit_from values as follows:
2721 #
2722 #      inherit_from => [ "template", asm("asm_tmpl") ]
2723 #
2724 sub asm {
2725     my @x = @_;
2726     sub {
2727         $disabled{asm} ? () : @x;
2728     }
2729 }
2730
2731 # Helper function to implement conditional value variants, with a default
2732 # plus additional values based on the value of $config{build_type}.
2733 # Arguments are given in hash table form:
2734 #
2735 #       picker(default => "Basic string: ",
2736 #              debug   => "debug",
2737 #              release => "release")
2738 #
2739 # When configuring with --debug, the resulting string will be
2740 # "Basic string: debug", and when not, it will be "Basic string: release"
2741 #
2742 # This can be used to create variants of sets of flags according to the
2743 # build type:
2744 #
2745 #       cflags => picker(default => "-Wall",
2746 #                        debug   => "-g -O0",
2747 #                        release => "-O3")
2748 #
2749 sub picker {
2750     my %opts = @_;
2751     return sub { add($opts{default} || (),
2752                      $opts{$config{build_type}} || ())->(); }
2753 }
2754
2755 # Helper function to combine several values of different types into one.
2756 # This is useful if you want to combine a string with the result of a
2757 # lazy function, such as:
2758 #
2759 #       cflags => combine("-Wall", sub { $disabled{zlib} ? () : "-DZLIB" })
2760 #
2761 sub combine {
2762     my @stuff = @_;
2763     return sub { add(@stuff)->(); }
2764 }
2765
2766 # Helper function to implement conditional values depending on the value
2767 # of $disabled{threads}.  Can be used as follows:
2768 #
2769 #       cflags => combine("-Wall", threads("-pthread"))
2770 #
2771 sub threads {
2772     my @flags = @_;
2773     return sub { add($disabled{threads} ? () : @flags)->(); }
2774 }
2775
2776
2777
2778 our $add_called = 0;
2779 # Helper function to implement adding values to already existing configuration
2780 # values.  It handles elements that are ARRAYs, CODEs and scalars
2781 sub _add {
2782     my $separator = shift;
2783
2784     # If there's any ARRAY in the collection of values OR the separator
2785     # is undef, we will return an ARRAY of combined values, otherwise a
2786     # string of joined values with $separator as the separator.
2787     my $found_array = !defined($separator);
2788
2789     my @values =
2790         map {
2791             my $res = $_;
2792             while (ref($res) eq "CODE") {
2793                 $res = $res->();
2794             }
2795             if (defined($res)) {
2796                 if (ref($res) eq "ARRAY") {
2797                     $found_array = 1;
2798                     @$res;
2799                 } else {
2800                     $res;
2801                 }
2802             } else {
2803                 ();
2804             }
2805     } (@_);
2806
2807     $add_called = 1;
2808
2809     if ($found_array) {
2810         [ @values ];
2811     } else {
2812         join($separator, grep { defined($_) && $_ ne "" } @values);
2813     }
2814 }
2815 sub add_before {
2816     my $separator = " ";
2817     if (ref($_[$#_]) eq "HASH") {
2818         my $opts = pop;
2819         $separator = $opts->{separator};
2820     }
2821     my @x = @_;
2822     sub { _add($separator, @x, @_) };
2823 }
2824 sub add {
2825     my $separator = " ";
2826     if (ref($_[$#_]) eq "HASH") {
2827         my $opts = pop;
2828         $separator = $opts->{separator};
2829     }
2830     my @x = @_;
2831     sub { _add($separator, @_, @x) };
2832 }
2833
2834 sub read_eval_file {
2835     my $fname = shift;
2836     my $content;
2837     my @result;
2838
2839     open F, "< $fname" or die "Can't open '$fname': $!\n";
2840     {
2841         undef local $/;
2842         $content = <F>;
2843     }
2844     close F;
2845     {
2846         local $@;
2847
2848         @result = ( eval $content );
2849         warn $@ if $@;
2850     }
2851     return wantarray ? @result : $result[0];
2852 }
2853
2854 # configuration reader, evaluates the input file as a perl script and expects
2855 # it to fill %targets with target configurations.  Those are then added to
2856 # %table.
2857 sub read_config {
2858     my $fname = shift;
2859     my %targets;
2860
2861     {
2862         # Protect certain tables from tampering
2863         local %table = ();
2864
2865         %targets = read_eval_file($fname);
2866     }
2867     my %preexisting = ();
2868     foreach (sort keys %targets) {
2869         $preexisting{$_} = 1 if $table{$_};
2870     }
2871     die <<"EOF",
2872 The following config targets from $fname
2873 shadow pre-existing config targets with the same name:
2874 EOF
2875         map { "  $_\n" } sort keys %preexisting
2876         if %preexisting;
2877
2878
2879     # For each target, check that it's configured with a hash table.
2880     foreach (keys %targets) {
2881         if (ref($targets{$_}) ne "HASH") {
2882             if (ref($targets{$_}) eq "") {
2883                 warn "Deprecated target configuration for $_, ignoring...\n";
2884             } else {
2885                 warn "Misconfigured target configuration for $_ (should be a hash table), ignoring...\n";
2886             }
2887             delete $targets{$_};
2888         } else {
2889             $targets{$_}->{_conf_fname_int} = add([ $fname ]);
2890         }
2891     }
2892
2893     %table = (%table, %targets);
2894
2895 }
2896
2897 # configuration resolver.  Will only resolve all the lazy evaluation
2898 # codeblocks for the chosen target and all those it inherits from,
2899 # recursively
2900 sub resolve_config {
2901     my $target = shift;
2902     my @breadcrumbs = @_;
2903
2904 #    my $extra_checks = defined($ENV{CONFIGURE_EXTRA_CHECKS});
2905
2906     if (grep { $_ eq $target } @breadcrumbs) {
2907         die "inherit_from loop!  target backtrace:\n  "
2908             ,$target,"\n  ",join("\n  ", @breadcrumbs),"\n";
2909     }
2910
2911     if (!defined($table{$target})) {
2912         warn "Warning! target $target doesn't exist!\n";
2913         return ();
2914     }
2915     # Recurse through all inheritances.  They will be resolved on the
2916     # fly, so when this operation is done, they will all just be a
2917     # bunch of attributes with string values.
2918     # What we get here, though, are keys with references to lists of
2919     # the combined values of them all.  We will deal with lists after
2920     # this stage is done.
2921     my %combined_inheritance = ();
2922     if ($table{$target}->{inherit_from}) {
2923         my @inherit_from =
2924             map { ref($_) eq "CODE" ? $_->() : $_ } @{$table{$target}->{inherit_from}};
2925         foreach (@inherit_from) {
2926             my %inherited_config = resolve_config($_, $target, @breadcrumbs);
2927
2928             # 'template' is a marker that's considered private to
2929             # the config that had it.
2930             delete $inherited_config{template};
2931
2932             foreach (keys %inherited_config) {
2933                 if (!$combined_inheritance{$_}) {
2934                     $combined_inheritance{$_} = [];
2935                 }
2936                 push @{$combined_inheritance{$_}}, $inherited_config{$_};
2937             }
2938         }
2939     }
2940
2941     # We won't need inherit_from in this target any more, since we've
2942     # resolved all the inheritances that lead to this
2943     delete $table{$target}->{inherit_from};
2944
2945     # Now is the time to deal with those lists.  Here's the place to
2946     # decide what shall be done with those lists, all based on the
2947     # values of the target we're currently dealing with.
2948     # - If a value is a coderef, it will be executed with the list of
2949     #   inherited values as arguments.
2950     # - If the corresponding key doesn't have a value at all or is the
2951     #   empty string, the inherited value list will be run through the
2952     #   default combiner (below), and the result becomes this target's
2953     #   value.
2954     # - Otherwise, this target's value is assumed to be a string that
2955     #   will simply override the inherited list of values.
2956     my $default_combiner = add();
2957
2958     my %all_keys =
2959         map { $_ => 1 } (keys %combined_inheritance,
2960                          keys %{$table{$target}});
2961
2962     sub process_values {
2963         my $object    = shift;
2964         my $inherited = shift;  # Always a [ list ]
2965         my $target    = shift;
2966         my $entry     = shift;
2967
2968         $add_called = 0;
2969
2970         while(ref($object) eq "CODE") {
2971             $object = $object->(@$inherited);
2972         }
2973         if (!defined($object)) {
2974             return ();
2975         }
2976         elsif (ref($object) eq "ARRAY") {
2977             local $add_called;  # To make sure recursive calls don't affect it
2978             return [ map { process_values($_, $inherited, $target, $entry) }
2979                      @$object ];
2980         } elsif (ref($object) eq "") {
2981             return $object;
2982         } else {
2983             die "cannot handle reference type ",ref($object)
2984                 ," found in target ",$target," -> ",$entry,"\n";
2985         }
2986     }
2987
2988     foreach (sort keys %all_keys) {
2989         my $previous = $combined_inheritance{$_};
2990
2991         # Current target doesn't have a value for the current key?
2992         # Assign it the default combiner, the rest of this loop body
2993         # will handle it just like any other coderef.
2994         if (!exists $table{$target}->{$_}) {
2995             $table{$target}->{$_} = $default_combiner;
2996         }
2997
2998         $table{$target}->{$_} = process_values($table{$target}->{$_},
2999                                                $combined_inheritance{$_},
3000                                                $target, $_);
3001         unless(defined($table{$target}->{$_})) {
3002             delete $table{$target}->{$_};
3003         }
3004 #        if ($extra_checks &&
3005 #            $previous && !($add_called ||  $previous ~~ $table{$target}->{$_})) {
3006 #            warn "$_ got replaced in $target\n";
3007 #        }
3008     }
3009
3010     # Finally done, return the result.
3011     return %{$table{$target}};
3012 }
3013
3014 sub usage
3015         {
3016         print STDERR $usage;
3017         print STDERR "\npick os/compiler from:\n";
3018         my $j=0;
3019         my $i;
3020         my $k=0;
3021         foreach $i (sort keys %table)
3022                 {
3023                 next if $table{$i}->{template};
3024                 next if $i =~ /^debug/;
3025                 $k += length($i) + 1;
3026                 if ($k > 78)
3027                         {
3028                         print STDERR "\n";
3029                         $k=length($i);
3030                         }
3031                 print STDERR $i . " ";
3032                 }
3033         foreach $i (sort keys %table)
3034                 {
3035                 next if $table{$i}->{template};
3036                 next if $i !~ /^debug/;
3037                 $k += length($i) + 1;
3038                 if ($k > 78)
3039                         {
3040                         print STDERR "\n";
3041                         $k=length($i);
3042                         }
3043                 print STDERR $i . " ";
3044                 }
3045         print STDERR "\n\nNOTE: If in doubt, on Unix-ish systems use './config'.\n";
3046         exit(1);
3047         }
3048
3049 sub run_dofile
3050 {
3051     my $out = shift;
3052     my @templates = @_;
3053
3054     unlink $out || warn "Can't remove $out, $!"
3055         if -f $out;
3056     foreach (@templates) {
3057         die "Can't open $_, $!" unless -f $_;
3058     }
3059     my $perlcmd = (quotify("maybeshell", $config{perl}))[0];
3060     my $cmd = "$perlcmd \"-I.\" \"-Mconfigdata\" \"$dofile\" -o\"Configure\" \"".join("\" \"",@templates)."\" > \"$out.new\"";
3061     #print STDERR "DEBUG[run_dofile]: \$cmd = $cmd\n";
3062     system($cmd);
3063     exit 1 if $? != 0;
3064     rename("$out.new", $out) || die "Can't rename $out.new, $!";
3065 }
3066
3067 sub compiler_predefined {
3068     state %predefined;
3069     my $default_compiler = shift;
3070
3071     return () if $^O eq 'VMS';
3072
3073     die 'compiler_predefined called without a default compiler'
3074         unless $default_compiler;
3075
3076     if (! $predefined{$default_compiler}) {
3077         my $cc = "$config{CROSS_COMPILE}$default_compiler";
3078
3079         $predefined{$default_compiler} = {};
3080
3081         # collect compiler pre-defines from gcc or gcc-alike...
3082         open(PIPE, "$cc -dM -E -x c /dev/null 2>&1 |");
3083         while (my $l = <PIPE>) {
3084             $l =~ m/^#define\s+(\w+(?:\(\w+\))?)(?:\s+(.+))?/ or last;
3085             $predefined{$default_compiler}->{$1} = $2 // '';
3086         }
3087         close(PIPE);
3088     }
3089
3090     return %{$predefined{$default_compiler}};
3091 }
3092
3093 sub which
3094 {
3095     my ($name)=@_;
3096
3097     if (eval { require IPC::Cmd; 1; }) {
3098         IPC::Cmd->import();
3099         return scalar IPC::Cmd::can_run($name);
3100     } else {
3101         # if there is $directories component in splitpath,
3102         # then it's not something to test with $PATH...
3103         return $name if (File::Spec->splitpath($name))[1];
3104
3105         foreach (File::Spec->path()) {
3106             my $fullpath = catfile($_, "$name$target{exe_extension}");
3107             if (-f $fullpath and -x $fullpath) {
3108                 return $fullpath;
3109             }
3110         }
3111     }
3112 }
3113
3114 sub env
3115 {
3116     my $name = shift;
3117     my %opts = @_;
3118
3119     unless ($opts{cacheonly}) {
3120         # Note that if $ENV{$name} doesn't exist or is undefined,
3121         # $config{perlenv}->{$name} will be created with the value
3122         # undef.  This is intentional.
3123
3124         $config{perlenv}->{$name} = $ENV{$name}
3125             if ! exists $config{perlenv}->{$name};
3126     }
3127     return $config{perlenv}->{$name};
3128 }
3129
3130 # Configuration printer ##############################################
3131
3132 sub print_table_entry
3133 {
3134     my $target = shift;
3135     my %target = resolve_config($target);
3136     my $type = shift;
3137
3138     # Don't print the templates
3139     return if $target{template};
3140
3141     my @sequence = (
3142         "sys_id",
3143         "cpp",
3144         "cppflags",
3145         "defines",
3146         "includes",
3147         "cc",
3148         "cflags",
3149         "unistd",
3150         "ld",
3151         "lflags",
3152         "loutflag",
3153         "ex_libs",
3154         "bn_ops",
3155         "apps_aux_src",
3156         "cpuid_asm_src",
3157         "uplink_aux_src",
3158         "bn_asm_src",
3159         "ec_asm_src",
3160         "des_asm_src",
3161         "aes_asm_src",
3162         "bf_asm_src",
3163         "md5_asm_src",
3164         "cast_asm_src",
3165         "sha1_asm_src",
3166         "rc4_asm_src",
3167         "rmd160_asm_src",
3168         "rc5_asm_src",
3169         "wp_asm_src",
3170         "cmll_asm_src",
3171         "modes_asm_src",
3172         "padlock_asm_src",
3173         "chacha_asm_src",
3174         "poly1035_asm_src",
3175         "thread_scheme",
3176         "perlasm_scheme",
3177         "dso_scheme",
3178         "shared_target",
3179         "shared_cflag",
3180         "shared_defines",
3181         "shared_ldflag",
3182         "shared_rcflag",
3183         "shared_extension",
3184         "dso_extension",
3185         "obj_extension",
3186         "exe_extension",
3187         "ranlib",
3188         "ar",
3189         "arflags",
3190         "aroutflag",
3191         "rc",
3192         "rcflags",
3193         "rcoutflag",
3194         "mt",
3195         "mtflags",
3196         "mtinflag",
3197         "mtoutflag",
3198         "multilib",
3199         "build_scheme",
3200         );
3201
3202     if ($type eq "TABLE") {
3203         print "\n";
3204         print "*** $target\n";
3205         foreach (@sequence) {
3206             if (ref($target{$_}) eq "ARRAY") {
3207                 printf "\$%-12s = %s\n", $_, join(" ", @{$target{$_}});
3208             } else {
3209                 printf "\$%-12s = %s\n", $_, $target{$_};
3210             }
3211         }
3212     } elsif ($type eq "HASH") {
3213         my $largest =
3214             length((sort { length($a) <=> length($b) } @sequence)[-1]);
3215         print "    '$target' => {\n";
3216         foreach (@sequence) {
3217             if ($target{$_}) {
3218                 if (ref($target{$_}) eq "ARRAY") {
3219                     print "      '",$_,"'"," " x ($largest - length($_))," => [ ",join(", ", map { "'$_'" } @{$target{$_}})," ],\n";
3220                 } else {
3221                     print "      '",$_,"'"," " x ($largest - length($_))," => '",$target{$_},"',\n";
3222                 }
3223             }
3224         }
3225         print "    },\n";
3226     }
3227 }
3228
3229 # Utility routines ###################################################
3230
3231 # On VMS, if the given file is a logical name, File::Spec::Functions
3232 # will consider it an absolute path.  There are cases when we want a
3233 # purely syntactic check without checking the environment.
3234 sub isabsolute {
3235     my $file = shift;
3236
3237     # On non-platforms, we just use file_name_is_absolute().
3238     return file_name_is_absolute($file) unless $^O eq "VMS";
3239
3240     # If the file spec includes a device or a directory spec,
3241     # file_name_is_absolute() is perfectly safe.
3242     return file_name_is_absolute($file) if $file =~ m|[:\[]|;
3243
3244     # Here, we know the given file spec isn't absolute
3245     return 0;
3246 }
3247
3248 # Makes a directory absolute and cleans out /../ in paths like foo/../bar
3249 # On some platforms, this uses rel2abs(), while on others, realpath() is used.
3250 # realpath() requires that at least all path components except the last is an
3251 # existing directory.  On VMS, the last component of the directory spec must
3252 # exist.
3253 sub absolutedir {
3254     my $dir = shift;
3255
3256     # realpath() is quite buggy on VMS.  It uses LIB$FID_TO_NAME, which
3257     # will return the volume name for the device, no matter what.  Also,
3258     # it will return an incorrect directory spec if the argument is a
3259     # directory that doesn't exist.
3260     if ($^O eq "VMS") {
3261         return rel2abs($dir);
3262     }
3263
3264     # We use realpath() on Unix, since no other will properly clean out
3265     # a directory spec.
3266     use Cwd qw/realpath/;
3267
3268     return realpath($dir);
3269 }
3270
3271 sub quotify {
3272     my %processors = (
3273         perl    => sub { my $x = shift;
3274                          $x =~ s/([\\\$\@"])/\\$1/g;
3275                          return '"'.$x.'"'; },
3276         maybeshell => sub { my $x = shift;
3277                             (my $y = $x) =~ s/([\\\"])/\\$1/g;
3278                             if ($x ne $y || $x =~ m|\s|) {
3279                                 return '"'.$y.'"';
3280                             } else {
3281                                 return $x;
3282                             }
3283                         },
3284         );
3285     my $for = shift;
3286     my $processor =
3287         defined($processors{$for}) ? $processors{$for} : sub { shift; };
3288
3289     return map { $processor->($_); } @_;
3290 }
3291
3292 # collect_from_file($filename, $line_concat_cond_re, $line_concat)
3293 # $filename is a file name to read from
3294 # $line_concat_cond_re is a regexp detecting a line continuation ending
3295 # $line_concat is a CODEref that takes care of concatenating two lines
3296 sub collect_from_file {
3297     my $filename = shift;
3298     my $line_concat_cond_re = shift;
3299     my $line_concat = shift;
3300
3301     open my $fh, $filename || die "unable to read $filename: $!\n";
3302     return sub {
3303         my $saved_line = "";
3304         $_ = "";
3305         while (<$fh>) {
3306             s|\R$||;
3307             if (defined $line_concat) {
3308                 $_ = $line_concat->($saved_line, $_);
3309                 $saved_line = "";
3310             }
3311             if (defined $line_concat_cond_re && /$line_concat_cond_re/) {
3312                 $saved_line = $_;
3313                 next;
3314             }
3315             return $_;
3316         }
3317         die "$filename ending with continuation line\n" if $_;
3318         close $fh;
3319         return undef;
3320     }
3321 }
3322
3323 # collect_from_array($array, $line_concat_cond_re, $line_concat)
3324 # $array is an ARRAYref of lines
3325 # $line_concat_cond_re is a regexp detecting a line continuation ending
3326 # $line_concat is a CODEref that takes care of concatenating two lines
3327 sub collect_from_array {
3328     my $array = shift;
3329     my $line_concat_cond_re = shift;
3330     my $line_concat = shift;
3331     my @array = (@$array);
3332
3333     return sub {
3334         my $saved_line = "";
3335         $_ = "";
3336         while (defined($_ = shift @array)) {
3337             s|\R$||;
3338             if (defined $line_concat) {
3339                 $_ = $line_concat->($saved_line, $_);
3340                 $saved_line = "";
3341             }
3342             if (defined $line_concat_cond_re && /$line_concat_cond_re/) {
3343                 $saved_line = $_;
3344                 next;
3345             }
3346             return $_;
3347         }
3348         die "input text ending with continuation line\n" if $_;
3349         return undef;
3350     }
3351 }
3352
3353 # collect_information($lineiterator, $line_continue, $regexp => $CODEref, ...)
3354 # $lineiterator is a CODEref that delivers one line at a time.
3355 # All following arguments are regex/CODEref pairs, where the regexp detects a
3356 # line and the CODEref does something with the result of the regexp.
3357 sub collect_information {
3358     my $lineiterator = shift;
3359     my %collectors = @_;
3360
3361     while(defined($_ = $lineiterator->())) {
3362         s|\R$||;
3363         my $found = 0;
3364         if ($collectors{"BEFORE"}) {
3365             $collectors{"BEFORE"}->($_);
3366         }
3367         foreach my $re (keys %collectors) {
3368             if ($re !~ /^OTHERWISE|BEFORE|AFTER$/ && /$re/) {
3369                 $collectors{$re}->($lineiterator);
3370                 $found = 1;
3371             };
3372         }
3373         if ($collectors{"OTHERWISE"}) {
3374             $collectors{"OTHERWISE"}->($lineiterator, $_)
3375                 unless $found || !defined $collectors{"OTHERWISE"};
3376         }
3377         if ($collectors{"AFTER"}) {
3378             $collectors{"AFTER"}->($_);
3379         }
3380     }
3381 }
3382
3383 # tokenize($line)
3384 # $line is a line of text to split up into tokens
3385 # returns a list of tokens
3386 #
3387 # Tokens are divided by spaces.  If the tokens include spaces, they
3388 # have to be quoted with single or double quotes.  Double quotes
3389 # inside a double quoted token must be escaped.  Escaping is done
3390 # with backslash.
3391 # Basically, the same quoting rules apply for " and ' as in any
3392 # Unix shell.
3393 sub tokenize {
3394     my $line = my $debug_line = shift;
3395     my @result = ();
3396
3397     while ($line =~ s|^\s+||, $line ne "") {
3398         my $token = "";
3399         while ($line ne "" && $line !~ m|^\s|) {
3400             if ($line =~ m/^"((?:[^"\\]+|\\.)*)"/) {
3401                 $token .= $1;
3402                 $line = $';
3403             } elsif ($line =~ m/^'([^']*)'/) {
3404                 $token .= $1;
3405                 $line = $';
3406             } elsif ($line =~ m/^(\S+)/) {
3407                 $token .= $1;
3408                 $line = $';
3409             }
3410         }
3411         push @result, $token;
3412     }
3413
3414     if ($ENV{CONFIGURE_DEBUG_TOKENIZE}) {
3415         print STDERR "DEBUG[tokenize]: Parsed '$debug_line' into:\n";
3416         print STDERR "DEBUG[tokenize]: ('", join("', '", @result), "')\n";
3417     }
3418     return @result;
3419 }