Fix VMS/openssl_{startup,shutddown}.com.in
[openssl.git] / crypto / asn1 / d2i_pr.c
1 /* Copyright (C) 1995-1998 Eric Young (eay@cryptsoft.com)
2  * All rights reserved.
3  *
4  * This package is an SSL implementation written
5  * by Eric Young (eay@cryptsoft.com).
6  * The implementation was written so as to conform with Netscapes SSL.
7  *
8  * This library is free for commercial and non-commercial use as long as
9  * the following conditions are aheared to.  The following conditions
10  * apply to all code found in this distribution, be it the RC4, RSA,
11  * lhash, DES, etc., code; not just the SSL code.  The SSL documentation
12  * included with this distribution is covered by the same copyright terms
13  * except that the holder is Tim Hudson (tjh@cryptsoft.com).
14  *
15  * Copyright remains Eric Young's, and as such any Copyright notices in
16  * the code are not to be removed.
17  * If this package is used in a product, Eric Young should be given attribution
18  * as the author of the parts of the library used.
19  * This can be in the form of a textual message at program startup or
20  * in documentation (online or textual) provided with the package.
21  *
22  * Redistribution and use in source and binary forms, with or without
23  * modification, are permitted provided that the following conditions
24  * are met:
25  * 1. Redistributions of source code must retain the copyright
26  *    notice, this list of conditions and the following disclaimer.
27  * 2. Redistributions in binary form must reproduce the above copyright
28  *    notice, this list of conditions and the following disclaimer in the
29  *    documentation and/or other materials provided with the distribution.
30  * 3. All advertising materials mentioning features or use of this software
31  *    must display the following acknowledgement:
32  *    "This product includes cryptographic software written by
33  *     Eric Young (eay@cryptsoft.com)"
34  *    The word 'cryptographic' can be left out if the rouines from the library
35  *    being used are not cryptographic related :-).
36  * 4. If you include any Windows specific code (or a derivative thereof) from
37  *    the apps directory (application code) you must include an acknowledgement:
38  *    "This product includes software written by Tim Hudson (tjh@cryptsoft.com)"
39  *
40  * THIS SOFTWARE IS PROVIDED BY ERIC YOUNG ``AS IS'' AND
41  * ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
42  * IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE
43  * ARE DISCLAIMED.  IN NO EVENT SHALL THE AUTHOR OR CONTRIBUTORS BE LIABLE
44  * FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL
45  * DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS
46  * OR SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION)
47  * HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT
48  * LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY
49  * OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF
50  * SUCH DAMAGE.
51  *
52  * The licence and distribution terms for any publically available version or
53  * derivative of this code cannot be changed.  i.e. this code cannot simply be
54  * copied and put under another distribution licence
55  * [including the GNU Public Licence.]
56  */
57
58 #include <stdio.h>
59 #include "internal/cryptlib.h"
60 #include <openssl/bn.h>
61 #include <openssl/evp.h>
62 #include <openssl/objects.h>
63 #include <openssl/engine.h>
64 #include <openssl/x509.h>
65 #include <openssl/asn1.h>
66 #include "internal/asn1_int.h"
67 #include "internal/evp_int.h"
68
69 EVP_PKEY *d2i_PrivateKey(int type, EVP_PKEY **a, const unsigned char **pp,
70                          long length)
71 {
72     EVP_PKEY *ret;
73     const unsigned char *p = *pp;
74
75     if ((a == NULL) || (*a == NULL)) {
76         if ((ret = EVP_PKEY_new()) == NULL) {
77             ASN1err(ASN1_F_D2I_PRIVATEKEY, ERR_R_EVP_LIB);
78             return (NULL);
79         }
80     } else {
81         ret = *a;
82 #ifndef OPENSSL_NO_ENGINE
83         ENGINE_finish(ret->engine);
84         ret->engine = NULL;
85 #endif
86     }
87
88     if (!EVP_PKEY_set_type(ret, type)) {
89         ASN1err(ASN1_F_D2I_PRIVATEKEY, ASN1_R_UNKNOWN_PUBLIC_KEY_TYPE);
90         goto err;
91     }
92
93     if (!ret->ameth->old_priv_decode ||
94         !ret->ameth->old_priv_decode(ret, &p, length)) {
95         if (ret->ameth->priv_decode) {
96             EVP_PKEY *tmp;
97             PKCS8_PRIV_KEY_INFO *p8 = NULL;
98             p8 = d2i_PKCS8_PRIV_KEY_INFO(NULL, &p, length);
99             if (!p8)
100                 goto err;
101             tmp = EVP_PKCS82PKEY(p8);
102             PKCS8_PRIV_KEY_INFO_free(p8);
103             if (tmp == NULL)
104                 goto err;
105             EVP_PKEY_free(ret);
106             ret = tmp;
107         } else {
108             ASN1err(ASN1_F_D2I_PRIVATEKEY, ERR_R_ASN1_LIB);
109             goto err;
110         }
111     }
112     *pp = p;
113     if (a != NULL)
114         (*a) = ret;
115     return (ret);
116  err:
117     if (a == NULL || *a != ret)
118         EVP_PKEY_free(ret);
119     return (NULL);
120 }
121
122 /*
123  * This works like d2i_PrivateKey() except it automatically works out the
124  * type
125  */
126
127 EVP_PKEY *d2i_AutoPrivateKey(EVP_PKEY **a, const unsigned char **pp,
128                              long length)
129 {
130     STACK_OF(ASN1_TYPE) *inkey;
131     const unsigned char *p;
132     int keytype;
133     p = *pp;
134     /*
135      * Dirty trick: read in the ASN1 data into a STACK_OF(ASN1_TYPE): by
136      * analyzing it we can determine the passed structure: this assumes the
137      * input is surrounded by an ASN1 SEQUENCE.
138      */
139     inkey = d2i_ASN1_SEQUENCE_ANY(NULL, &p, length);
140     p = *pp;
141     /*
142      * Since we only need to discern "traditional format" RSA and DSA keys we
143      * can just count the elements.
144      */
145     if (sk_ASN1_TYPE_num(inkey) == 6)
146         keytype = EVP_PKEY_DSA;
147     else if (sk_ASN1_TYPE_num(inkey) == 4)
148         keytype = EVP_PKEY_EC;
149     else if (sk_ASN1_TYPE_num(inkey) == 3) { /* This seems to be PKCS8, not
150                                               * traditional format */
151         PKCS8_PRIV_KEY_INFO *p8 = d2i_PKCS8_PRIV_KEY_INFO(NULL, &p, length);
152         EVP_PKEY *ret;
153
154         sk_ASN1_TYPE_pop_free(inkey, ASN1_TYPE_free);
155         if (!p8) {
156             ASN1err(ASN1_F_D2I_AUTOPRIVATEKEY,
157                     ASN1_R_UNSUPPORTED_PUBLIC_KEY_TYPE);
158             return NULL;
159         }
160         ret = EVP_PKCS82PKEY(p8);
161         PKCS8_PRIV_KEY_INFO_free(p8);
162         if (ret == NULL)
163             return NULL;
164         *pp = p;
165         if (a) {
166             *a = ret;
167         }
168         return ret;
169     } else
170         keytype = EVP_PKEY_RSA;
171     sk_ASN1_TYPE_pop_free(inkey, ASN1_TYPE_free);
172     return d2i_PrivateKey(keytype, a, pp, length);
173 }