Make sure *outl is always initialized in EVP_EncryptUpdate().
[openssl.git] / crypto / evp / evp_enc.c
1 /* crypto/evp/evp_enc.c */
2 /* Copyright (C) 1995-1998 Eric Young (eay@cryptsoft.com)
3  * All rights reserved.
4  *
5  * This package is an SSL implementation written
6  * by Eric Young (eay@cryptsoft.com).
7  * The implementation was written so as to conform with Netscapes SSL.
8  * 
9  * This library is free for commercial and non-commercial use as long as
10  * the following conditions are aheared to.  The following conditions
11  * apply to all code found in this distribution, be it the RC4, RSA,
12  * lhash, DES, etc., code; not just the SSL code.  The SSL documentation
13  * included with this distribution is covered by the same copyright terms
14  * except that the holder is Tim Hudson (tjh@cryptsoft.com).
15  * 
16  * Copyright remains Eric Young's, and as such any Copyright notices in
17  * the code are not to be removed.
18  * If this package is used in a product, Eric Young should be given attribution
19  * as the author of the parts of the library used.
20  * This can be in the form of a textual message at program startup or
21  * in documentation (online or textual) provided with the package.
22  * 
23  * Redistribution and use in source and binary forms, with or without
24  * modification, are permitted provided that the following conditions
25  * are met:
26  * 1. Redistributions of source code must retain the copyright
27  *    notice, this list of conditions and the following disclaimer.
28  * 2. Redistributions in binary form must reproduce the above copyright
29  *    notice, this list of conditions and the following disclaimer in the
30  *    documentation and/or other materials provided with the distribution.
31  * 3. All advertising materials mentioning features or use of this software
32  *    must display the following acknowledgement:
33  *    "This product includes cryptographic software written by
34  *     Eric Young (eay@cryptsoft.com)"
35  *    The word 'cryptographic' can be left out if the rouines from the library
36  *    being used are not cryptographic related :-).
37  * 4. If you include any Windows specific code (or a derivative thereof) from 
38  *    the apps directory (application code) you must include an acknowledgement:
39  *    "This product includes software written by Tim Hudson (tjh@cryptsoft.com)"
40  * 
41  * THIS SOFTWARE IS PROVIDED BY ERIC YOUNG ``AS IS'' AND
42  * ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
43  * IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE
44  * ARE DISCLAIMED.  IN NO EVENT SHALL THE AUTHOR OR CONTRIBUTORS BE LIABLE
45  * FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL
46  * DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS
47  * OR SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION)
48  * HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT
49  * LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY
50  * OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF
51  * SUCH DAMAGE.
52  * 
53  * The licence and distribution terms for any publically available version or
54  * derivative of this code cannot be changed.  i.e. this code cannot simply be
55  * copied and put under another distribution licence
56  * [including the GNU Public Licence.]
57  */
58
59 #include <stdio.h>
60 #include "cryptlib.h"
61 #include <openssl/evp.h>
62 #include <openssl/err.h>
63 #include "evp_locl.h"
64
65 #include <assert.h>
66
67 const char *EVP_version="EVP" OPENSSL_VERSION_PTEXT;
68
69 void EVP_CIPHER_CTX_init(EVP_CIPHER_CTX *ctx)
70         {
71         memset(ctx,0,sizeof(EVP_CIPHER_CTX));
72         /* ctx->cipher=NULL; */
73         }
74
75 int EVP_CipherInit(EVP_CIPHER_CTX *ctx, const EVP_CIPHER *cipher,
76              unsigned char *key, unsigned char *iv, int enc)
77         {
78         if(enc && (enc != -1)) enc = 1;
79         if (cipher) {
80                 ctx->cipher=cipher;
81                 ctx->key_len = cipher->key_len;
82                 ctx->flags = 0;
83                 if(ctx->cipher->flags & EVP_CIPH_CTRL_INIT) {
84                         if(!EVP_CIPHER_CTX_ctrl(ctx, EVP_CTRL_INIT, 0, NULL)) {
85                                 EVPerr(EVP_F_EVP_CIPHERINIT, EVP_R_INITIALIZATION_ERROR);
86                                 return 0;
87                         }
88                 }
89         } else if(!ctx->cipher) {
90                 EVPerr(EVP_F_EVP_CIPHERINIT, EVP_R_NO_CIPHER_SET);
91                 return 0;
92         }
93
94         /* we assume block size is a power of 2 in *cryptUpdate */
95         assert(ctx->cipher->block_size == 1
96                || ctx->cipher->block_size == 8
97                || ctx->cipher->block_size == 16);
98
99         if(!(EVP_CIPHER_CTX_flags(ctx) & EVP_CIPH_CUSTOM_IV)) {
100                 switch(EVP_CIPHER_CTX_mode(ctx)) {
101
102                         case EVP_CIPH_STREAM_CIPHER:
103                         case EVP_CIPH_ECB_MODE:
104                         break;
105
106                         case EVP_CIPH_CFB_MODE:
107                         case EVP_CIPH_OFB_MODE:
108
109                         ctx->num = 0;
110
111                         case EVP_CIPH_CBC_MODE:
112
113                         if(iv) memcpy(ctx->oiv, iv, EVP_CIPHER_CTX_iv_length(ctx));
114                         memcpy(ctx->iv, ctx->oiv, EVP_CIPHER_CTX_iv_length(ctx));
115                         break;
116
117                         default:
118                         return 0;
119                         break;
120                 }
121         }
122
123         if(key || (ctx->cipher->flags & EVP_CIPH_ALWAYS_CALL_INIT)) {
124                 if(!ctx->cipher->init(ctx,key,iv,enc)) return 0;
125         }
126         if(enc != -1) ctx->encrypt=enc;
127         ctx->buf_len=0;
128         ctx->final_used=0;
129         ctx->block_mask=ctx->cipher->block_size-1;
130         return 1;
131         }
132
133 int EVP_CipherUpdate(EVP_CIPHER_CTX *ctx, unsigned char *out, int *outl,
134              unsigned char *in, int inl)
135         {
136         if (ctx->encrypt)
137                 return EVP_EncryptUpdate(ctx,out,outl,in,inl);
138         else    return EVP_DecryptUpdate(ctx,out,outl,in,inl);
139         }
140
141 int EVP_CipherFinal(EVP_CIPHER_CTX *ctx, unsigned char *out, int *outl)
142         {
143         if (ctx->encrypt)
144                 return EVP_EncryptFinal(ctx,out,outl);
145         else    return(EVP_DecryptFinal(ctx,out,outl));
146         }
147
148 int EVP_EncryptInit(EVP_CIPHER_CTX *ctx, const EVP_CIPHER *cipher,
149              unsigned char *key, unsigned char *iv)
150         {
151         return EVP_CipherInit(ctx, cipher, key, iv, 1);
152         }
153
154 int EVP_DecryptInit(EVP_CIPHER_CTX *ctx, const EVP_CIPHER *cipher,
155              unsigned char *key, unsigned char *iv)
156         {
157         return EVP_CipherInit(ctx, cipher, key, iv, 0);
158         }
159
160 int EVP_EncryptUpdate(EVP_CIPHER_CTX *ctx, unsigned char *out, int *outl,
161              unsigned char *in, int inl)
162         {
163         int i,j,bl;
164
165         if(ctx->buf_len == 0 && (inl&(ctx->block_mask)) == 0)
166                 {
167                 if(ctx->cipher->do_cipher(ctx,out,in,inl))
168                         {
169                         *outl=inl;
170                         return 1;
171                         }
172                 else
173                         {
174                         *outl=0;
175                         return 0;
176                         }
177                 }
178         i=ctx->buf_len;
179         bl=ctx->cipher->block_size;
180         if (i != 0)
181                 {
182                 if (i+inl < bl)
183                         {
184                         memcpy(&(ctx->buf[i]),in,inl);
185                         ctx->buf_len+=inl;
186                         *outl=0;
187                         return 1;
188                         }
189                 else
190                         {
191                         j=bl-i;
192                         memcpy(&(ctx->buf[i]),in,j);
193                         if(!ctx->cipher->do_cipher(ctx,out,ctx->buf,bl)) return 0;
194                         inl-=j;
195                         in+=j;
196                         out+=bl;
197                         *outl=bl;
198                         }
199                 }
200         else
201                 *outl = 0;
202         i=inl&(bl-1);
203         inl-=i;
204         if (inl > 0)
205                 {
206                 if(!ctx->cipher->do_cipher(ctx,out,in,inl)) return 0;
207                 *outl+=inl;
208                 }
209
210         if (i != 0)
211                 memcpy(ctx->buf,&(in[inl]),i);
212         ctx->buf_len=i;
213         return 1;
214         }
215
216 int EVP_EncryptFinal(EVP_CIPHER_CTX *ctx, unsigned char *out, int *outl)
217         {
218         int i,n,b,bl;
219
220         b=ctx->cipher->block_size;
221         if (b == 1)
222                 {
223                 *outl=0;
224                 return 1;
225                 }
226         bl=ctx->buf_len;
227         if (ctx->flags & EVP_CIPH_NO_PADDING)
228                 {
229                 if(bl)
230                         {
231                         EVPerr(EVP_F_EVP_ENCRYPTFINAL,EVP_R_DATA_NOT_MULTIPLE_OF_BLOCK_LENGTH);
232                         return 0;
233                         }
234                 *outl = 0;
235                 return 1;
236                 }
237         n=b-bl;
238         for (i=bl; i<b; i++)
239                 ctx->buf[i]=n;
240         if(!ctx->cipher->do_cipher(ctx,out,ctx->buf,b)) return 0;
241         *outl=b;
242         return 1;
243         }
244
245 int EVP_DecryptUpdate(EVP_CIPHER_CTX *ctx, unsigned char *out, int *outl,
246              unsigned char *in, int inl)
247         {
248         int b;
249
250         if (inl == 0)
251                 {
252                 *outl=0;
253                 return 1;
254                 }
255
256         if (ctx->flags & EVP_CIPH_NO_PADDING)
257                 return EVP_EncryptUpdate(ctx, out, outl, in, inl);
258
259         b=ctx->cipher->block_size;
260         if(ctx->final_used)
261                 {
262                 memcpy(out,ctx->final,b);
263                 out+=b;
264                 }
265                 
266         if(!EVP_EncryptUpdate(ctx,out,outl,in,inl))
267                 return 0;
268
269         /* if we have 'decrypted' a multiple of block size, make sure
270          * we have a copy of this last block */
271         if (b > 1 && !ctx->buf_len)
272                 {
273                 if(!ctx->final_used)
274                         {
275                         *outl-=b;
276                         ctx->final_used=1;
277                         }
278                 memcpy(ctx->final,&out[*outl],b);
279                 }
280         else if(ctx->final_used)
281                 {
282                 ctx->final_used=0;
283                 *outl+=b;
284                 }
285         return 1;
286         }
287
288 int EVP_DecryptFinal(EVP_CIPHER_CTX *ctx, unsigned char *out, int *outl)
289         {
290         int i,b;
291         int n;
292
293         *outl=0;
294         b=ctx->cipher->block_size;
295         if (ctx->flags & EVP_CIPH_NO_PADDING)
296                 {
297                 if(ctx->buf_len)
298                         {
299                         EVPerr(EVP_F_EVP_DECRYPTFINAL,EVP_R_DATA_NOT_MULTIPLE_OF_BLOCK_LENGTH);
300                         return 0;
301                         }
302                 *outl = 0;
303                 return 1;
304                 }
305         if (b > 1)
306                 {
307                 if (ctx->buf_len || !ctx->final_used)
308                         {
309                         EVPerr(EVP_F_EVP_DECRYPTFINAL,EVP_R_WRONG_FINAL_BLOCK_LENGTH);
310                         return(0);
311                         }
312                 n=ctx->final[b-1];
313                 if (n > b)
314                         {
315                         EVPerr(EVP_F_EVP_DECRYPTFINAL,EVP_R_BAD_DECRYPT);
316                         return(0);
317                         }
318                 for (i=0; i<n; i++)
319                         {
320                         if (ctx->final[--b] != n)
321                                 {
322                                 EVPerr(EVP_F_EVP_DECRYPTFINAL,EVP_R_BAD_DECRYPT);
323                                 return(0);
324                                 }
325                         }
326                 n=ctx->cipher->block_size-n;
327                 for (i=0; i<n; i++)
328                         out[i]=ctx->final[i];
329                 *outl=n;
330                 }
331         else
332                 *outl=0;
333         return(1);
334         }
335
336 int EVP_CIPHER_CTX_cleanup(EVP_CIPHER_CTX *c)
337         {
338         if ((c->cipher != NULL) && (c->cipher->cleanup != NULL))
339                 {
340                 if(!c->cipher->cleanup(c)) return 0;
341                 }
342         memset(c,0,sizeof(EVP_CIPHER_CTX));
343         return 1;
344         }
345
346 int EVP_CIPHER_CTX_set_key_length(EVP_CIPHER_CTX *c, int keylen)
347         {
348         if(c->cipher->flags & EVP_CIPH_CUSTOM_KEY_LENGTH) 
349                 return EVP_CIPHER_CTX_ctrl(c, EVP_CTRL_SET_KEY_LENGTH, keylen, NULL);
350         if(c->key_len == keylen) return 1;
351         if((keylen > 0) && (c->cipher->flags & EVP_CIPH_VARIABLE_LENGTH))
352                 {
353                 c->key_len = keylen;
354                 return 1;
355                 }
356         EVPerr(EVP_F_EVP_CIPHER_CTX_SET_KEY_LENGTH,EVP_R_INVALID_KEY_LENGTH);
357         return 0;
358         }
359
360 int EVP_CIPHER_CTX_set_padding(EVP_CIPHER_CTX *ctx, int pad)
361         {
362         if (pad) ctx->flags &= ~EVP_CIPH_NO_PADDING;
363         else ctx->flags |= EVP_CIPH_NO_PADDING;
364         return 1;
365         }
366
367 int EVP_CIPHER_CTX_ctrl(EVP_CIPHER_CTX *ctx, int type, int arg, void *ptr)
368 {
369         int ret;
370         if(!ctx->cipher) {
371                 EVPerr(EVP_F_EVP_CIPHER_CTX_CTRL, EVP_R_NO_CIPHER_SET);
372                 return 0;
373         }
374
375         if(!ctx->cipher->ctrl) {
376                 EVPerr(EVP_F_EVP_CIPHER_CTX_CTRL, EVP_R_CTRL_NOT_IMPLEMENTED);
377                 return 0;
378         }
379
380         ret = ctx->cipher->ctrl(ctx, type, arg, ptr);
381         if(ret == -1) {
382                 EVPerr(EVP_F_EVP_CIPHER_CTX_CTRL, EVP_R_CTRL_OPERATION_NOT_IMPLEMENTED);
383                 return 0;
384         }
385         return ret;
386 }