Update documentation regarding required output buffer memory size
[openssl.git] / util / process_docs.pl
index 30b149e..a4287c2 100755 (executable)
@@ -1,7 +1,7 @@
 #! /usr/bin/env perl
 # Copyright 2016-2018 The OpenSSL Project Authors. All Rights Reserved.
 #
-# Licensed under the OpenSSL license (the "License").  You may not use
+# Licensed under the Apache License 2.0 (the "License").  You may not use
 # this file except in compliance with the License.  You can obtain a copy
 # in the file LICENSE in the source distribution or at
 # https://www.openssl.org/source/license.html
@@ -29,7 +29,7 @@ use OpenSSL::Util::Pod;
 
 my %options = ();
 GetOptions(\%options,
-           'sourcedir=s',       # Source directory
+           'sourcedir=s@',      # Source directories
            'section=i@',        # Subdirectories to look through,
                                 # with associated section numbers
            'destdir=s',         # Destination directory
@@ -46,7 +46,8 @@ unless ($options{section}) {
     $options{section} = [ 1, 3, 5, 7 ];
 }
 unless ($options{sourcedir}) {
-    $options{sourcedir} = catdir($config{sourcedir}, "doc");
+    $options{sourcedir} = [ catdir($config{sourcedir}, "doc"),
+                            catdir($config{builddir}, "doc") ];
 }
 pod2usage(1) unless ( defined $options{section}
                       && defined $options{sourcedir}
@@ -59,8 +60,9 @@ pod2usage(1) if ( $options{type} eq 'html'
 
 if ($options{debug}) {
     print STDERR "DEBUG: options:\n";
-    print STDERR "DEBUG:   --sourcedir = $options{sourcedir}\n"
-        if defined $options{sourcedir};
+    foreach (sort @{$options{sourcedir}}) {
+        print STDERR "DEBUG:   --sourcedir   = $_\n";
+    }
     print STDERR "DEBUG:   --destdir   = $options{destdir}\n"
         if defined $options{destdir};
     print STDERR "DEBUG:   --type      = $options{type}\n"
@@ -82,114 +84,123 @@ my $symlink_exists = eval { symlink("",""); 1 };
 
 foreach my $section (sort @{$options{section}}) {
     my $subdir = "man$section";
-    my $podsourcedir = catfile($options{sourcedir}, $subdir);
-    my $podglob = catfile($podsourcedir, "*.pod");
-
-    foreach my $podfile (glob $podglob) {
-        my $podname = basename($podfile, ".pod");
-        my $podpath = catfile($podfile);
-        my %podinfo = extract_pod_info($podpath,
-                                       { debug => $options{debug},
-                                         section => $section });
-        my @podfiles = grep { $_ ne $podname } @{$podinfo{names}};
-
-        my $updir = updir();
-        my $name = uc $podname;
-        my $suffix = { man  => ".$podinfo{section}".($options{suffix} // ""),
-                       html => ".html" } -> {$options{type}};
-        my $generate = { man  => "pod2man --name=$name --section=$podinfo{section} --center=OpenSSL --release=$config{version} \"$podpath\"",
-                         html => "pod2html \"--podroot=$options{sourcedir}\" --htmldir=$updir --podpath=man1:man3:man5:man7 \"--infile=$podpath\" \"--title=$podname\" --quiet"
-                         } -> {$options{type}};
-        my $output_dir = catdir($options{destdir}, "man$podinfo{section}");
-        my $output_file = $podname . $suffix;
-        my $output_path = catfile($output_dir, $output_file);
-
-        if (! $options{remove}) {
-            my @output;
-            print STDERR "DEBUG: Processing, using \"$generate\"\n"
-                if $options{debug};
-            unless ($options{"dry-run"}) {
-                @output = `$generate`;
-                map { s|href="http://man\.he\.net/(man\d/[^"]+)(?:\.html)?"|href="../$1.html"|g; } @output
-                    if $options{type} eq "html";
-                if ($options{type} eq "man") {
-                    # Because some *roff parsers are more strict than others,
-                    # multiple lines in the NAME section must be merged into
-                    # one.
-                    my $in_name = 0;
-                    my $name_line = "";
-                    my @newoutput = ();
-                    foreach (@output) {
-                        if ($in_name) {
-                            if (/^\.SH "/) {
-                                $in_name = 0;
-                                push @newoutput, $name_line."\n";
-                            } else {
-                                chomp (my $x = $_);
-                                $name_line .= " " if $name_line;
-                                $name_line .= $x;
-                                next;
+    foreach my $sourcedir (@{$options{sourcedir}}) {
+        my $podsourcedir = catfile($sourcedir, $subdir);
+        my $podglob = catfile($podsourcedir, "*.pod");
+
+        foreach my $podfile (glob $podglob) {
+            my $podname = basename($podfile, ".pod");
+            my $podpath = catfile($podfile);
+            my %podinfo = extract_pod_info($podpath,
+                                           { debug => $options{debug},
+                                             section => $section });
+            my @podfiles = grep { $_ ne $podname } @{$podinfo{names}};
+
+            my $updir = updir();
+            my $name = uc $podname;
+            my $suffix =
+                { man  => ".$podinfo{section}".($options{suffix} // ""),
+                  html => ".html" } -> {$options{type}};
+            my $generate =
+                { man  => <<"_____",
+pod2man --name=$name --section=$podinfo{section}  --center=OpenSSL --release=$config{version}  "$podpath"
+_____
+                  html => <<"_____",
+pod2html "--podroot=$sourcedir" --htmldir=$updir --podpath=man1:man3:man5:man7 "--infile=$podpath" "--title=$podname" --quiet
+_____
+                } -> {$options{type}};
+            my $output_dir = catdir($options{destdir}, "man$podinfo{section}");
+            my $output_file = $podname . $suffix;
+            my $output_path = catfile($output_dir, $output_file);
+
+            if (! $options{remove}) {
+                my @output;
+                print STDERR "DEBUG: Processing, using \"$generate\"\n"
+                    if $options{debug};
+                unless ($options{"dry-run"}) {
+                    @output = `$generate`;
+                    map { s|href="http://man\.he\.net/(man\d/[^"]+)(?:\.html)?"|href="../$1.html"|g; } @output
+                        if $options{type} eq "html";
+                    if ($options{type} eq "man") {
+                        # Because some *roff parsers are more strict than
+                        # others, multiple lines in the NAME section must
+                        # be merged into one.
+                        my $in_name = 0;
+                        my $name_line = "";
+                        my @newoutput = ();
+                        foreach (@output) {
+                            if ($in_name) {
+                                if (/^\.SH "/) {
+                                    $in_name = 0;
+                                    push @newoutput, $name_line."\n";
+                                } else {
+                                    chomp (my $x = $_);
+                                    $name_line .= " " if $name_line;
+                                    $name_line .= $x;
+                                    next;
+                                }
                             }
+                            if (/^\.SH +"NAME" *$/) {
+                                $in_name = 1;
+                            }
+                            push @newoutput, $_;
                         }
-                        if (/^\.SH +"NAME" *$/) {
-                            $in_name = 1;
-                        }
-                        push @newoutput, $_;
+                        @output = @newoutput;
                     }
-                    @output = @newoutput;
                 }
-            }
-            print STDERR "DEBUG: Done processing\n" if $options{debug};
+                print STDERR "DEBUG: Done processing\n" if $options{debug};
 
-            if (! -d $output_dir) {
-                print STDERR "DEBUG: Creating directory $output_dir\n" if $options{debug};
+                if (! -d $output_dir) {
+                    print STDERR "DEBUG: Creating directory $output_dir\n"
+                        if $options{debug};
+                    unless ($options{"dry-run"}) {
+                        mkpath $output_dir
+                            or die "Trying to create directory $output_dir: $!\n";
+                    }
+                }
+                print STDERR "DEBUG: Writing $output_path\n" if $options{debug};
                 unless ($options{"dry-run"}) {
-                    mkpath $output_dir
-                        or die "Trying to create directory $output_dir: $!\n";
+                    open my $output_fh, '>', $output_path
+                        or die "Trying to write to $output_path: $!\n";
+                    foreach (@output) {
+                        print $output_fh $_;
+                    }
+                    close $output_fh;
                 }
-            }
-            print STDERR "DEBUG: Writing $output_path\n" if $options{debug};
-            unless ($options{"dry-run"}) {
-                open my $output_fh, '>', $output_path
-                    or die "Trying to write to $output_path: $!\n";
-                foreach (@output) {
-                    print $output_fh $_;
+                print STDERR "DEBUG: Done writing $output_path\n" if $options{debug};
+            } else {
+                print STDERR "DEBUG: Removing $output_path\n" if $options{debug};
+                unless ($options{"dry-run"}) {
+                    while (unlink $output_path) {}
                 }
-                close $output_fh;
             }
-            print STDERR "DEBUG: Done writing $output_path\n" if $options{debug};
-        } else {
-            print STDERR "DEBUG: Removing $output_path\n" if $options{debug};
-            unless ($options{"dry-run"}) {
-                while (unlink $output_path) {}
-            }
-        }
-        print "$output_path\n";
-
-        foreach (@podfiles) {
-            my $link_file = $_ . $suffix;
-            my $link_path = catfile($output_dir, $link_file);
-            if (! $options{remove}) {
-                if ($symlink_exists) {
-                    print STDERR "DEBUG: Linking $link_path -> $output_file\n"
-                        if $options{debug};
-                    unless ($options{"dry-run"}) {
-                        symlink $output_file, $link_path;
+            print "$output_path\n";
+
+            foreach (@podfiles) {
+                my $link_file = $_ . $suffix;
+                my $link_path = catfile($output_dir, $link_file);
+                if (! $options{remove}) {
+                    if ($symlink_exists) {
+                        print STDERR "DEBUG: Linking $link_path -> $output_file\n"
+                            if $options{debug};
+                        unless ($options{"dry-run"}) {
+                            symlink $output_file, $link_path;
+                        }
+                    } else {
+                        print STDERR "DEBUG: Copying $output_path to link_path\n"
+                            if $options{debug};
+                        unless ($options{"dry-run"}) {
+                            copy $output_path, $link_path;
+                        }
                     }
                 } else {
-                    print STDERR "DEBUG: Copying $output_path to link_path\n"
-                        if $options{debug};
+                    print STDERR "DEBUG: Removing $link_path\n" if $options{debug};
                     unless ($options{"dry-run"}) {
-                        copy $output_path, $link_path;
+                        while (unlink $link_path) {}
                     }
                 }
-            } else {
-                print STDERR "DEBUG: Removing $link_path\n" if $options{debug};
-                unless ($options{"dry-run"}) {
-                    while (unlink $link_path) {}
-                }
+                print "$link_path -> $output_path\n";
             }
-            print "$link_path -> $output_path\n";
         }
     }
 }
@@ -263,7 +274,7 @@ Print extra debugging output.
 
 Copyright 2013-2018 The OpenSSL Project Authors. All Rights Reserved.
 
-Licensed under the OpenSSL license (the "License").  You may not use
+Licensed under the Apache License 2.0 (the "License").  You may not use
 this file except in compliance with the License.  You can obtain a copy
 in the file LICENSE in the source distribution or at
 https://www.openssl.org/source/license.html