Silence Clang warning about unit'd variable
[openssl.git] / apps / rsautl.c
1 /*
2  * Written by Dr Stephen N Henson (steve@openssl.org) for the OpenSSL project
3  * 2000.
4  */
5 /* ====================================================================
6  * Copyright (c) 2000 The OpenSSL Project.  All rights reserved.
7  *
8  * Redistribution and use in source and binary forms, with or without
9  * modification, are permitted provided that the following conditions
10  * are met:
11  *
12  * 1. Redistributions of source code must retain the above copyright
13  *    notice, this list of conditions and the following disclaimer.
14  *
15  * 2. Redistributions in binary form must reproduce the above copyright
16  *    notice, this list of conditions and the following disclaimer in
17  *    the documentation and/or other materials provided with the
18  *    distribution.
19  *
20  * 3. All advertising materials mentioning features or use of this
21  *    software must display the following acknowledgment:
22  *    "This product includes software developed by the OpenSSL Project
23  *    for use in the OpenSSL Toolkit. (http://www.OpenSSL.org/)"
24  *
25  * 4. The names "OpenSSL Toolkit" and "OpenSSL Project" must not be used to
26  *    endorse or promote products derived from this software without
27  *    prior written permission. For written permission, please contact
28  *    licensing@OpenSSL.org.
29  *
30  * 5. Products derived from this software may not be called "OpenSSL"
31  *    nor may "OpenSSL" appear in their names without prior written
32  *    permission of the OpenSSL Project.
33  *
34  * 6. Redistributions of any form whatsoever must retain the following
35  *    acknowledgment:
36  *    "This product includes software developed by the OpenSSL Project
37  *    for use in the OpenSSL Toolkit (http://www.OpenSSL.org/)"
38  *
39  * THIS SOFTWARE IS PROVIDED BY THE OpenSSL PROJECT ``AS IS'' AND ANY
40  * EXPRESSED OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
41  * IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR
42  * PURPOSE ARE DISCLAIMED.  IN NO EVENT SHALL THE OpenSSL PROJECT OR
43  * ITS CONTRIBUTORS BE LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL,
44  * SPECIAL, EXEMPLARY, OR CONSEQUENTIAL DAMAGES (INCLUDING, BUT
45  * NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES;
46  * LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION)
47  * HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT,
48  * STRICT LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE)
49  * ARISING IN ANY WAY OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED
50  * OF THE POSSIBILITY OF SUCH DAMAGE.
51  * ====================================================================
52  *
53  * This product includes cryptographic software written by Eric Young
54  * (eay@cryptsoft.com).  This product includes software written by Tim
55  * Hudson (tjh@cryptsoft.com).
56  *
57  */
58
59 #include <openssl/opensslconf.h>
60 #ifndef OPENSSL_NO_RSA
61
62 # include "apps.h"
63 # include <string.h>
64 # include <openssl/err.h>
65 # include <openssl/pem.h>
66 # include <openssl/rsa.h>
67
68 # define RSA_SIGN        1
69 # define RSA_VERIFY      2
70 # define RSA_ENCRYPT     3
71 # define RSA_DECRYPT     4
72
73 # define KEY_PRIVKEY     1
74 # define KEY_PUBKEY      2
75 # define KEY_CERT        3
76
77 typedef enum OPTION_choice {
78     OPT_ERR = -1, OPT_EOF = 0, OPT_HELP,
79     OPT_ENGINE, OPT_IN, OPT_OUT, OPT_ASN1PARSE, OPT_HEXDUMP,
80     OPT_RAW, OPT_OAEP, OPT_SSL, OPT_PKCS, OPT_X931,
81     OPT_SIGN, OPT_VERIFY, OPT_REV, OPT_ENCRYPT, OPT_DECRYPT,
82     OPT_PUBIN, OPT_CERTIN, OPT_INKEY, OPT_PASSIN, OPT_KEYFORM
83 } OPTION_CHOICE;
84
85 OPTIONS rsautl_options[] = {
86     {"help", OPT_HELP, '-', "Display this summary"},
87     {"in", OPT_IN, '<', "Input file"},
88     {"out", OPT_OUT, '>', "Output file"},
89     {"inkey", OPT_INKEY, '<', "Input key"},
90     {"keyform", OPT_KEYFORM, 'F', "Private key format - default PEM"},
91     {"pubin", OPT_PUBIN, '-', "Input is an RSA public"},
92     {"certin", OPT_CERTIN, '-', "Input is a cert carrying an RSA public key"},
93     {"ssl", OPT_SSL, '-', "Use SSL v2 padding"},
94     {"raw", OPT_RAW, '-', "Use no padding"},
95     {"pkcs", OPT_PKCS, '-', "Use PKCS#1 v1.5 padding (default)"},
96     {"oaep", OPT_OAEP, '-', "Use PKCS#1 OAEP"},
97     {"sign", OPT_SIGN, '-', "Sign with private key"},
98     {"verify", OPT_VERIFY, '-', "Verify with public key"},
99     {"asn1parse", OPT_ASN1PARSE, '-'},
100     {"hexdump", OPT_HEXDUMP, '-', "Hex dump output"},
101     {"x931", OPT_X931, '-', "Use ANSI X9.31 padding"},
102     {"rev", OPT_REV, '-'},
103     {"encrypt", OPT_ENCRYPT, '-', "Encrypt with public key"},
104     {"decrypt", OPT_DECRYPT, '-', "Decrypt with private key"},
105     {"passin", OPT_PASSIN, 's', "Pass phrase source"},
106 # ifndef OPENSSL_NO_ENGINE
107     {"engine", OPT_ENGINE, 's', "Use engine, possibly a hardware device"},
108 # endif
109     {NULL}
110 };
111
112 int rsautl_main(int argc, char **argv)
113 {
114     BIO *in = NULL, *out = NULL;
115     ENGINE *e = NULL;
116     EVP_PKEY *pkey = NULL;
117     RSA *rsa = NULL;
118     X509 *x;
119     char *infile = NULL, *outfile = NULL, *keyfile = NULL;
120     char *passinarg = NULL, *passin = NULL, *prog;
121     char rsa_mode = RSA_VERIFY, key_type = KEY_PRIVKEY;
122     unsigned char *rsa_in = NULL, *rsa_out = NULL, pad = RSA_PKCS1_PADDING;
123     int rsa_inlen, keyformat = FORMAT_PEM, keysize, ret = 1;
124     int rsa_outlen = 0, hexdump = 0, asn1parse = 0, need_priv = 0, rev = 0;
125     OPTION_CHOICE o;
126
127     prog = opt_init(argc, argv, rsautl_options);
128     while ((o = opt_next()) != OPT_EOF) {
129         switch (o) {
130         case OPT_EOF:
131         case OPT_ERR:
132  opthelp:
133             BIO_printf(bio_err, "%s: Use -help for summary.\n", prog);
134             goto end;
135         case OPT_HELP:
136             opt_help(rsautl_options);
137             ret = 0;
138             goto end;
139         case OPT_KEYFORM:
140             if (!opt_format(opt_arg(), OPT_FMT_PEMDER, &keyformat))
141                 goto opthelp;
142             break;
143         case OPT_IN:
144             infile = opt_arg();
145             break;
146         case OPT_OUT:
147             outfile = opt_arg();
148             break;
149         case OPT_ENGINE:
150             e = setup_engine(opt_arg(), 0);
151             break;
152         case OPT_ASN1PARSE:
153             asn1parse = 1;
154             break;
155         case OPT_HEXDUMP:
156             hexdump = 1;
157             break;
158         case OPT_RAW:
159             pad = RSA_NO_PADDING;
160             break;
161         case OPT_OAEP:
162             pad = RSA_PKCS1_OAEP_PADDING;
163             break;
164         case OPT_SSL:
165             pad = RSA_SSLV23_PADDING;
166             break;
167         case OPT_PKCS:
168             pad = RSA_PKCS1_PADDING;
169             break;
170         case OPT_X931:
171             pad = RSA_X931_PADDING;
172             break;
173         case OPT_SIGN:
174             rsa_mode = RSA_SIGN;
175             need_priv = 1;
176             break;
177         case OPT_VERIFY:
178             rsa_mode = RSA_VERIFY;
179             break;
180         case OPT_REV:
181             rev = 1;
182             break;
183         case OPT_ENCRYPT:
184             rsa_mode = RSA_ENCRYPT;
185             break;
186         case OPT_DECRYPT:
187             rsa_mode = RSA_DECRYPT;
188             need_priv = 1;
189             break;
190         case OPT_PUBIN:
191             key_type = KEY_PUBKEY;
192             break;
193         case OPT_CERTIN:
194             key_type = KEY_CERT;
195             break;
196         case OPT_INKEY:
197             keyfile = opt_arg();
198             break;
199         case OPT_PASSIN:
200             passinarg = opt_arg();
201             break;
202         }
203     }
204     argc = opt_num_rest();
205     argv = opt_rest();
206
207     if (need_priv && (key_type != KEY_PRIVKEY)) {
208         BIO_printf(bio_err, "A private key is needed for this operation\n");
209         goto end;
210     }
211
212     if (!app_passwd(passinarg, NULL, &passin, NULL)) {
213         BIO_printf(bio_err, "Error getting password\n");
214         goto end;
215     }
216
217     if (!app_load_modules(NULL))
218         goto end;
219
220 /* FIXME: seed PRNG only if needed */
221     app_RAND_load_file(NULL, 0);
222
223     switch (key_type) {
224     case KEY_PRIVKEY:
225         pkey = load_key(keyfile, keyformat, 0, passin, e, "Private Key");
226         break;
227
228     case KEY_PUBKEY:
229         pkey = load_pubkey(keyfile, keyformat, 0, NULL, e, "Public Key");
230         break;
231
232     case KEY_CERT:
233         x = load_cert(keyfile, keyformat, NULL, e, "Certificate");
234         if (x) {
235             pkey = X509_get_pubkey(x);
236             X509_free(x);
237         }
238         break;
239     }
240
241     if (!pkey) {
242         return 1;
243     }
244
245     rsa = EVP_PKEY_get1_RSA(pkey);
246     EVP_PKEY_free(pkey);
247
248     if (!rsa) {
249         BIO_printf(bio_err, "Error getting RSA key\n");
250         ERR_print_errors(bio_err);
251         goto end;
252     }
253
254     in = bio_open_default(infile, "rb");
255     if (in == NULL)
256         goto end;
257     out = bio_open_default(outfile, "wb");
258     if (out == NULL)
259         goto end;
260
261     keysize = RSA_size(rsa);
262
263     rsa_in = app_malloc(keysize * 2, "hold rsa key");
264     rsa_out = app_malloc(keysize, "output rsa key");
265
266     /* Read the input data */
267     rsa_inlen = BIO_read(in, rsa_in, keysize * 2);
268     if (rsa_inlen <= 0) {
269         BIO_printf(bio_err, "Error reading input Data\n");
270         goto end;
271     }
272     if (rev) {
273         int i;
274         unsigned char ctmp;
275         for (i = 0; i < rsa_inlen / 2; i++) {
276             ctmp = rsa_in[i];
277             rsa_in[i] = rsa_in[rsa_inlen - 1 - i];
278             rsa_in[rsa_inlen - 1 - i] = ctmp;
279         }
280     }
281     switch (rsa_mode) {
282
283     case RSA_VERIFY:
284         rsa_outlen = RSA_public_decrypt(rsa_inlen, rsa_in, rsa_out, rsa, pad);
285         break;
286
287     case RSA_SIGN:
288         rsa_outlen =
289             RSA_private_encrypt(rsa_inlen, rsa_in, rsa_out, rsa, pad);
290         break;
291
292     case RSA_ENCRYPT:
293         rsa_outlen = RSA_public_encrypt(rsa_inlen, rsa_in, rsa_out, rsa, pad);
294         break;
295
296     case RSA_DECRYPT:
297         rsa_outlen =
298             RSA_private_decrypt(rsa_inlen, rsa_in, rsa_out, rsa, pad);
299         break;
300
301     }
302
303     if (rsa_outlen <= 0) {
304         BIO_printf(bio_err, "RSA operation error\n");
305         ERR_print_errors(bio_err);
306         goto end;
307     }
308     ret = 0;
309     if (asn1parse) {
310         if (!ASN1_parse_dump(out, rsa_out, rsa_outlen, 1, -1)) {
311             ERR_print_errors(bio_err);
312         }
313     } else if (hexdump)
314         BIO_dump(out, (char *)rsa_out, rsa_outlen);
315     else
316         BIO_write(out, rsa_out, rsa_outlen);
317  end:
318     RSA_free(rsa);
319     BIO_free(in);
320     BIO_free_all(out);
321     OPENSSL_free(rsa_in);
322     OPENSSL_free(rsa_out);
323     OPENSSL_free(passin);
324     return ret;
325 }
326
327 #else                           /* !OPENSSL_NO_RSA */
328
329 # if PEDANTIC
330 static void *dummy = &dummy;
331 # endif
332
333 #endif