Make flag variables int instead of char. This avoids getting into trouble on systems...
[openssl.git] / apps / dgst.c
1 /* apps/dgst.c */
2 /* Copyright (C) 1995-1998 Eric Young (eay@cryptsoft.com)
3  * All rights reserved.
4  *
5  * This package is an SSL implementation written
6  * by Eric Young (eay@cryptsoft.com).
7  * The implementation was written so as to conform with Netscapes SSL.
8  * 
9  * This library is free for commercial and non-commercial use as long as
10  * the following conditions are aheared to.  The following conditions
11  * apply to all code found in this distribution, be it the RC4, RSA,
12  * lhash, DES, etc., code; not just the SSL code.  The SSL documentation
13  * included with this distribution is covered by the same copyright terms
14  * except that the holder is Tim Hudson (tjh@cryptsoft.com).
15  * 
16  * Copyright remains Eric Young's, and as such any Copyright notices in
17  * the code are not to be removed.
18  * If this package is used in a product, Eric Young should be given attribution
19  * as the author of the parts of the library used.
20  * This can be in the form of a textual message at program startup or
21  * in documentation (online or textual) provided with the package.
22  * 
23  * Redistribution and use in source and binary forms, with or without
24  * modification, are permitted provided that the following conditions
25  * are met:
26  * 1. Redistributions of source code must retain the copyright
27  *    notice, this list of conditions and the following disclaimer.
28  * 2. Redistributions in binary form must reproduce the above copyright
29  *    notice, this list of conditions and the following disclaimer in the
30  *    documentation and/or other materials provided with the distribution.
31  * 3. All advertising materials mentioning features or use of this software
32  *    must display the following acknowledgement:
33  *    "This product includes cryptographic software written by
34  *     Eric Young (eay@cryptsoft.com)"
35  *    The word 'cryptographic' can be left out if the rouines from the library
36  *    being used are not cryptographic related :-).
37  * 4. If you include any Windows specific code (or a derivative thereof) from 
38  *    the apps directory (application code) you must include an acknowledgement:
39  *    "This product includes software written by Tim Hudson (tjh@cryptsoft.com)"
40  * 
41  * THIS SOFTWARE IS PROVIDED BY ERIC YOUNG ``AS IS'' AND
42  * ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
43  * IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE
44  * ARE DISCLAIMED.  IN NO EVENT SHALL THE AUTHOR OR CONTRIBUTORS BE LIABLE
45  * FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL
46  * DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS
47  * OR SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION)
48  * HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT
49  * LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY
50  * OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF
51  * SUCH DAMAGE.
52  * 
53  * The licence and distribution terms for any publically available version or
54  * derivative of this code cannot be changed.  i.e. this code cannot simply be
55  * copied and put under another distribution licence
56  * [including the GNU Public Licence.]
57  */
58
59 #include <stdio.h>
60 #include <string.h>
61 #include <stdlib.h>
62 #include "apps.h"
63 #include <openssl/bio.h>
64 #include <openssl/err.h>
65 #include <openssl/evp.h>
66 #include <openssl/objects.h>
67 #include <openssl/x509.h>
68 #include <openssl/pem.h>
69 #include <openssl/engine.h>
70
71 #undef BUFSIZE
72 #define BUFSIZE 1024*8
73
74 #undef PROG
75 #define PROG    dgst_main
76
77 void do_fp(BIO *out, unsigned char *buf, BIO *bp, int sep, int binout,
78                 EVP_PKEY *key, unsigned char *sigin, int siglen);
79
80 int MAIN(int, char **);
81
82 int MAIN(int argc, char **argv)
83         {
84         ENGINE *e = NULL;
85         unsigned char *buf=NULL;
86         int i,err=0;
87         const EVP_MD *md=NULL,*m;
88         BIO *in=NULL,*inp;
89         BIO *bmd=NULL;
90         BIO *out = NULL;
91         const char *name;
92 #define PROG_NAME_SIZE  16
93         char pname[PROG_NAME_SIZE];
94         int separator=0;
95         int debug=0;
96         int keyform=FORMAT_PEM;
97         const char *outfile = NULL, *keyfile = NULL;
98         const char *sigfile = NULL, *randfile = NULL;
99         int out_bin = -1, want_pub = 0, do_verify = 0;
100         EVP_PKEY *sigkey = NULL;
101         unsigned char *sigbuf = NULL;
102         int siglen = 0;
103         char *engine=NULL;
104
105         apps_startup();
106
107         if ((buf=(unsigned char *)OPENSSL_malloc(BUFSIZE)) == NULL)
108                 {
109                 BIO_printf(bio_err,"out of memory\n");
110                 goto end;
111                 }
112         if (bio_err == NULL)
113                 if ((bio_err=BIO_new(BIO_s_file())) != NULL)
114                         BIO_set_fp(bio_err,stderr,BIO_NOCLOSE|BIO_FP_TEXT);
115
116         /* first check the program name */
117         program_name(argv[0],pname,PROG_NAME_SIZE);
118
119         md=EVP_get_digestbyname(pname);
120
121         argc--;
122         argv++;
123         while (argc > 0)
124                 {
125                 if ((*argv)[0] != '-') break;
126                 if (strcmp(*argv,"-c") == 0)
127                         separator=1;
128                 else if (strcmp(*argv,"-rand") == 0)
129                         {
130                         if (--argc < 1) break;
131                         randfile=*(++argv);
132                         }
133                 else if (strcmp(*argv,"-out") == 0)
134                         {
135                         if (--argc < 1) break;
136                         outfile=*(++argv);
137                         }
138                 else if (strcmp(*argv,"-sign") == 0)
139                         {
140                         if (--argc < 1) break;
141                         keyfile=*(++argv);
142                         }
143                 else if (strcmp(*argv,"-verify") == 0)
144                         {
145                         if (--argc < 1) break;
146                         keyfile=*(++argv);
147                         want_pub = 1;
148                         do_verify = 1;
149                         }
150                 else if (strcmp(*argv,"-prverify") == 0)
151                         {
152                         if (--argc < 1) break;
153                         keyfile=*(++argv);
154                         do_verify = 1;
155                         }
156                 else if (strcmp(*argv,"-signature") == 0)
157                         {
158                         if (--argc < 1) break;
159                         sigfile=*(++argv);
160                         }
161                 else if (strcmp(*argv,"-keyform") == 0)
162                         {
163                         if (--argc < 1) break;
164                         keyform=str2fmt(*(++argv));
165                         }
166                 else if (strcmp(*argv,"-engine") == 0)
167                         {
168                         if (--argc < 1) break;
169                         engine= *(++argv);
170                         }
171                 else if (strcmp(*argv,"-hex") == 0)
172                         out_bin = 0;
173                 else if (strcmp(*argv,"-binary") == 0)
174                         out_bin = 1;
175                 else if (strcmp(*argv,"-d") == 0)
176                         debug=1;
177                 else if ((m=EVP_get_digestbyname(&((*argv)[1]))) != NULL)
178                         md=m;
179                 else
180                         break;
181                 argc--;
182                 argv++;
183                 }
184
185         if (md == NULL)
186                 md=EVP_md5();
187
188         if(do_verify && !sigfile) {
189                 BIO_printf(bio_err, "No signature to verify: use the -signature option\n");
190                 err = 1; 
191                 goto end;
192         }
193
194         if ((argc > 0) && (argv[0][0] == '-')) /* bad option */
195                 {
196                 BIO_printf(bio_err,"unknown option '%s'\n",*argv);
197                 BIO_printf(bio_err,"options are\n");
198                 BIO_printf(bio_err,"-c              to output the digest with separating colons\n");
199                 BIO_printf(bio_err,"-d              to output debug info\n");
200                 BIO_printf(bio_err,"-hex            output as hex dump\n");
201                 BIO_printf(bio_err,"-binary         output in binary form\n");
202                 BIO_printf(bio_err,"-sign   file    sign digest using private key in file\n");
203                 BIO_printf(bio_err,"-verify file    verify a signature using public key in file\n");
204                 BIO_printf(bio_err,"-prverify file  verify a signature using private key in file\n");
205                 BIO_printf(bio_err,"-keyform arg    key file format (PEM or ENGINE)\n");
206                 BIO_printf(bio_err,"-signature file signature to verify\n");
207                 BIO_printf(bio_err,"-binary         output in binary form\n");
208                 BIO_printf(bio_err,"-engine e       use engine e, possibly a hardware device.\n");
209
210                 BIO_printf(bio_err,"-%3s to use the %s message digest algorithm (default)\n",
211                         LN_md5,LN_md5);
212                 BIO_printf(bio_err,"-%3s to use the %s message digest algorithm\n",
213                         LN_md4,LN_md4);
214                 BIO_printf(bio_err,"-%3s to use the %s message digest algorithm\n",
215                         LN_md2,LN_md2);
216                 BIO_printf(bio_err,"-%3s to use the %s message digest algorithm\n",
217                         LN_sha1,LN_sha1);
218                 BIO_printf(bio_err,"-%3s to use the %s message digest algorithm\n",
219                         LN_sha,LN_sha);
220                 BIO_printf(bio_err,"-%3s to use the %s message digest algorithm\n",
221                         LN_mdc2,LN_mdc2);
222                 BIO_printf(bio_err,"-%3s to use the %s message digest algorithm\n",
223                         LN_ripemd160,LN_ripemd160);
224                 err=1;
225                 goto end;
226                 }
227
228         if (engine != NULL)
229                 {
230                 if((e = ENGINE_by_id(engine)) == NULL)
231                         {
232                         BIO_printf(bio_err,"invalid engine \"%s\"\n",
233                                 engine);
234                         goto end;
235                         }
236                 if(!ENGINE_set_default(e, ENGINE_METHOD_ALL))
237                         {
238                         BIO_printf(bio_err,"can't use that engine\n");
239                         goto end;
240                         }
241                 BIO_printf(bio_err,"engine \"%s\" set.\n", engine);
242                 /* Free our "structural" reference. */
243                 ENGINE_free(e);
244                 }
245
246         in=BIO_new(BIO_s_file());
247         bmd=BIO_new(BIO_f_md());
248         if (debug)
249                 {
250                 BIO_set_callback(in,BIO_debug_callback);
251                 /* needed for windows 3.1 */
252                 BIO_set_callback_arg(in,bio_err);
253                 }
254
255         if ((in == NULL) || (bmd == NULL))
256                 {
257                 ERR_print_errors(bio_err);
258                 goto end;
259                 }
260
261         if(out_bin == -1) {
262                 if(keyfile) out_bin = 1;
263                 else out_bin = 0;
264         }
265
266         if(randfile)
267                 app_RAND_load_file(randfile, bio_err, 0);
268
269         if(outfile) {
270                 if(out_bin)
271                         out = BIO_new_file(outfile, "wb");
272                 else    out = BIO_new_file(outfile, "w");
273         } else {
274                 out = BIO_new_fp(stdout, BIO_NOCLOSE);
275 #ifdef VMS
276                 {
277                 BIO *tmpbio = BIO_new(BIO_f_linebuffer());
278                 out = BIO_push(tmpbio, out);
279                 }
280 #endif
281         }
282
283         if(!out) {
284                 BIO_printf(bio_err, "Error opening output file %s\n", 
285                                         outfile ? outfile : "(stdout)");
286                 ERR_print_errors(bio_err);
287                 goto end;
288         }
289
290         if(keyfile)
291                 {
292                 if (keyform == FORMAT_PEM)
293                         {
294                         BIO *keybio;
295                         keybio = BIO_new_file(keyfile, "r");
296                         if(!keybio)
297                                 {
298                                 BIO_printf(bio_err,
299                                         "Error opening key file %s\n",
300                                         keyfile);
301                                 ERR_print_errors(bio_err);
302                                 goto end;
303                                 }
304                         if(want_pub) 
305                                 sigkey = PEM_read_bio_PUBKEY(keybio,
306                                         NULL, NULL, NULL);
307                         else
308                                 sigkey = PEM_read_bio_PrivateKey(keybio,
309                                         NULL, NULL, NULL);
310                         BIO_free(keybio);
311                         }
312                 else if (keyform == FORMAT_ENGINE)
313                         {
314                         if (!e)
315                                 {
316                                 BIO_printf(bio_err,"no engine specified\n");
317                                 goto end;
318                                 }
319                         if (want_pub)
320                                 sigkey = ENGINE_load_public_key(e, keyfile, NULL);
321                         else
322                                 sigkey = ENGINE_load_private_key(e, keyfile, NULL);
323                         }
324                 else
325                         {
326                         BIO_printf(bio_err,
327                                 "bad input format specified for key file\n");
328                         goto end;
329                         }
330                 
331                 if(!sigkey) {
332                         BIO_printf(bio_err, "Error reading key file %s\n",
333                                                                 keyfile);
334                         ERR_print_errors(bio_err);
335                         goto end;
336                 }
337         }
338
339         if(sigfile && sigkey) {
340                 BIO *sigbio;
341                 sigbio = BIO_new_file(sigfile, "rb");
342                 siglen = EVP_PKEY_size(sigkey);
343                 sigbuf = OPENSSL_malloc(siglen);
344                 if(!sigbio) {
345                         BIO_printf(bio_err, "Error opening signature file %s\n",
346                                                                 sigfile);
347                         ERR_print_errors(bio_err);
348                         goto end;
349                 }
350                 siglen = BIO_read(sigbio, sigbuf, siglen);
351                 BIO_free(sigbio);
352                 if(siglen <= 0) {
353                         BIO_printf(bio_err, "Error reading signature file %s\n",
354                                                                 sigfile);
355                         ERR_print_errors(bio_err);
356                         goto end;
357                 }
358         }
359                 
360
361
362         /* we use md as a filter, reading from 'in' */
363         BIO_set_md(bmd,md);
364         inp=BIO_push(bmd,in);
365
366         if (argc == 0)
367                 {
368                 BIO_set_fp(in,stdin,BIO_NOCLOSE);
369                 do_fp(out, buf,inp,separator, out_bin, sigkey, sigbuf, siglen);
370                 }
371         else
372                 {
373                 name=OBJ_nid2sn(md->type);
374                 for (i=0; i<argc; i++)
375                         {
376                         if (BIO_read_filename(in,argv[i]) <= 0)
377                                 {
378                                 perror(argv[i]);
379                                 err++;
380                                 continue;
381                                 }
382                         if(!out_bin) BIO_printf(out, "%s(%s)= ",name,argv[i]);
383                         do_fp(out, buf,inp,separator, out_bin, sigkey, 
384                                                                 sigbuf, siglen);
385                         (void)BIO_reset(bmd);
386                         }
387                 }
388 end:
389         if (buf != NULL)
390                 {
391                 memset(buf,0,BUFSIZE);
392                 OPENSSL_free(buf);
393                 }
394         if (in != NULL) BIO_free(in);
395         BIO_free_all(out);
396         EVP_PKEY_free(sigkey);
397         if(sigbuf) OPENSSL_free(sigbuf);
398         if (bmd != NULL) BIO_free(bmd);
399         EXIT(err);
400         }
401
402 void do_fp(BIO *out, unsigned char *buf, BIO *bp, int sep, int binout,
403                         EVP_PKEY *key, unsigned char *sigin, int siglen)
404         {
405         int len;
406         int i;
407
408         for (;;)
409                 {
410                 i=BIO_read(bp,(char *)buf,BUFSIZE);
411                 if (i <= 0) break;
412                 }
413         if(sigin)
414                 {
415                 EVP_MD_CTX *ctx;
416                 BIO_get_md_ctx(bp, &ctx);
417                 i = EVP_VerifyFinal(ctx, sigin, (unsigned int)siglen, key); 
418                 if(i > 0) BIO_printf(out, "Verified OK\n");
419                 else if(i == 0) BIO_printf(out, "Verification Failure\n");
420                 else
421                         {
422                         BIO_printf(bio_err, "Error Verifying Data\n");
423                         ERR_print_errors(bio_err);
424                         }
425                 return;
426                 }
427         if(key)
428                 {
429                 EVP_MD_CTX *ctx;
430                 BIO_get_md_ctx(bp, &ctx);
431                 if(!EVP_SignFinal(ctx, buf, (unsigned int *)&len, key)) 
432                         {
433                         BIO_printf(bio_err, "Error Signing Data\n");
434                         ERR_print_errors(bio_err);
435                         return;
436                         }
437                 }
438         else
439                 len=BIO_gets(bp,(char *)buf,BUFSIZE);
440
441         if(binout) BIO_write(out, buf, len);
442         else 
443                 {
444                 for (i=0; i<len; i++)
445                         {
446                         if (sep && (i != 0))
447                                 BIO_printf(out, ":");
448                         BIO_printf(out, "%02x",buf[i]);
449                         }
450                 BIO_printf(out, "\n");
451                 }
452         }
453