clang on Linux x86_64 complains about unreachable code.
[openssl.git] / engines / e_padlock.c
1 /*-
2  * Support for VIA PadLock Advanced Cryptography Engine (ACE)
3  * Written by Michal Ludvig <michal@logix.cz>
4  *            http://www.logix.cz/michal
5  *
6  * Big thanks to Andy Polyakov for a help with optimization,
7  * assembler fixes, port to MS Windows and a lot of other
8  * valuable work on this engine!
9  */
10
11 /* ====================================================================
12  * Copyright (c) 1999-2001 The OpenSSL Project.  All rights reserved.
13  *
14  * Redistribution and use in source and binary forms, with or without
15  * modification, are permitted provided that the following conditions
16  * are met:
17  *
18  * 1. Redistributions of source code must retain the above copyright
19  *    notice, this list of conditions and the following disclaimer.
20  *
21  * 2. Redistributions in binary form must reproduce the above copyright
22  *    notice, this list of conditions and the following disclaimer in
23  *    the documentation and/or other materials provided with the
24  *    distribution.
25  *
26  * 3. All advertising materials mentioning features or use of this
27  *    software must display the following acknowledgment:
28  *    "This product includes software developed by the OpenSSL Project
29  *    for use in the OpenSSL Toolkit. (http://www.OpenSSL.org/)"
30  *
31  * 4. The names "OpenSSL Toolkit" and "OpenSSL Project" must not be used to
32  *    endorse or promote products derived from this software without
33  *    prior written permission. For written permission, please contact
34  *    licensing@OpenSSL.org.
35  *
36  * 5. Products derived from this software may not be called "OpenSSL"
37  *    nor may "OpenSSL" appear in their names without prior written
38  *    permission of the OpenSSL Project.
39  *
40  * 6. Redistributions of any form whatsoever must retain the following
41  *    acknowledgment:
42  *    "This product includes software developed by the OpenSSL Project
43  *    for use in the OpenSSL Toolkit (http://www.OpenSSL.org/)"
44  *
45  * THIS SOFTWARE IS PROVIDED BY THE OpenSSL PROJECT ``AS IS'' AND ANY
46  * EXPRESSED OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
47  * IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR
48  * PURPOSE ARE DISCLAIMED.  IN NO EVENT SHALL THE OpenSSL PROJECT OR
49  * ITS CONTRIBUTORS BE LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL,
50  * SPECIAL, EXEMPLARY, OR CONSEQUENTIAL DAMAGES (INCLUDING, BUT
51  * NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES;
52  * LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION)
53  * HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT,
54  * STRICT LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE)
55  * ARISING IN ANY WAY OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED
56  * OF THE POSSIBILITY OF SUCH DAMAGE.
57  * ====================================================================
58  *
59  * This product includes cryptographic software written by Eric Young
60  * (eay@cryptsoft.com).  This product includes software written by Tim
61  * Hudson (tjh@cryptsoft.com).
62  *
63  */
64
65 #include <stdio.h>
66 #include <string.h>
67
68 #include <openssl/opensslconf.h>
69 #include <openssl/crypto.h>
70 #include <openssl/dso.h>
71 #include <openssl/engine.h>
72 #include <openssl/evp.h>
73 #ifndef OPENSSL_NO_AES
74 # include <openssl/aes.h>
75 #endif
76 #include <openssl/rand.h>
77 #include <openssl/err.h>
78 #include <openssl/modes.h>
79
80 #ifndef OPENSSL_NO_HW
81 # ifndef OPENSSL_NO_HW_PADLOCK
82
83 /* Attempt to have a single source for both 0.9.7 and 0.9.8 :-) */
84 #  if (OPENSSL_VERSION_NUMBER >= 0x00908000L)
85 #   ifndef OPENSSL_NO_DYNAMIC_ENGINE
86 #    define DYNAMIC_ENGINE
87 #   endif
88 #  elif (OPENSSL_VERSION_NUMBER >= 0x00907000L)
89 #   ifdef ENGINE_DYNAMIC_SUPPORT
90 #    define DYNAMIC_ENGINE
91 #   endif
92 #  else
93 #   error "Only OpenSSL >= 0.9.7 is supported"
94 #  endif
95
96 /*
97  * VIA PadLock AES is available *ONLY* on some x86 CPUs. Not only that it
98  * doesn't exist elsewhere, but it even can't be compiled on other platforms!
99  */
100
101 #  undef COMPILE_HW_PADLOCK
102 #  if !defined(I386_ONLY) && !defined(OPENSSL_NO_ASM)
103 #   if    defined(__i386__) || defined(__i386) ||    \
104         defined(__x86_64__) || defined(__x86_64) || \
105         defined(_M_IX86) || defined(_M_AMD64) || defined(_M_X64) || \
106         defined(__INTEL__)
107 #    define COMPILE_HW_PADLOCK
108 #    ifdef OPENSSL_NO_DYNAMIC_ENGINE
109 static ENGINE *ENGINE_padlock(void);
110 #    endif
111 #   endif
112 #  endif
113
114 #  ifdef OPENSSL_NO_DYNAMIC_ENGINE
115
116 void ENGINE_load_padlock(void)
117 {
118 /* On non-x86 CPUs it just returns. */
119 #   ifdef COMPILE_HW_PADLOCK
120     ENGINE *toadd = ENGINE_padlock();
121     if (!toadd)
122         return;
123     ENGINE_add(toadd);
124     ENGINE_free(toadd);
125     ERR_clear_error();
126 #   endif
127 }
128
129 #  endif
130
131 #  ifdef COMPILE_HW_PADLOCK
132
133 /* Function for ENGINE detection and control */
134 static int padlock_available(void);
135 static int padlock_init(ENGINE *e);
136
137 /* RNG Stuff */
138 static RAND_METHOD padlock_rand;
139
140 /* Cipher Stuff */
141 #   ifndef OPENSSL_NO_AES
142 static int padlock_ciphers(ENGINE *e, const EVP_CIPHER **cipher,
143                            const int **nids, int nid);
144 #   endif
145
146 /* Engine names */
147 static const char *padlock_id = "padlock";
148 static char padlock_name[100];
149
150 /* Available features */
151 static int padlock_use_ace = 0; /* Advanced Cryptography Engine */
152 static int padlock_use_rng = 0; /* Random Number Generator */
153
154 /* ===== Engine "management" functions ===== */
155
156 /* Prepare the ENGINE structure for registration */
157 static int padlock_bind_helper(ENGINE *e)
158 {
159     /* Check available features */
160     padlock_available();
161
162 #   if 1                        /* disable RNG for now, see commentary in
163                                  * vicinity of RNG code */
164     padlock_use_rng = 0;
165 #   endif
166
167     /* Generate a nice engine name with available features */
168     BIO_snprintf(padlock_name, sizeof(padlock_name),
169                  "VIA PadLock (%s, %s)",
170                  padlock_use_rng ? "RNG" : "no-RNG",
171                  padlock_use_ace ? "ACE" : "no-ACE");
172
173     /* Register everything or return with an error */
174     if (!ENGINE_set_id(e, padlock_id) ||
175         !ENGINE_set_name(e, padlock_name) ||
176         !ENGINE_set_init_function(e, padlock_init) ||
177 #   ifndef OPENSSL_NO_AES
178         (padlock_use_ace && !ENGINE_set_ciphers(e, padlock_ciphers)) ||
179 #   endif
180         (padlock_use_rng && !ENGINE_set_RAND(e, &padlock_rand))) {
181         return 0;
182     }
183
184     /* Everything looks good */
185     return 1;
186 }
187
188 #   ifdef OPENSSL_NO_DYNAMIC_ENGINE
189 /* Constructor */
190 static ENGINE *ENGINE_padlock(void)
191 {
192     ENGINE *eng = ENGINE_new();
193
194     if (!eng) {
195         return NULL;
196     }
197
198     if (!padlock_bind_helper(eng)) {
199         ENGINE_free(eng);
200         return NULL;
201     }
202
203     return eng;
204 }
205 #   endif
206
207 /* Check availability of the engine */
208 static int padlock_init(ENGINE *e)
209 {
210     return (padlock_use_rng || padlock_use_ace);
211 }
212
213 /*
214  * This stuff is needed if this ENGINE is being compiled into a
215  * self-contained shared-library.
216  */
217 #   ifdef DYNAMIC_ENGINE
218 static int padlock_bind_fn(ENGINE *e, const char *id)
219 {
220     if (id && (strcmp(id, padlock_id) != 0)) {
221         return 0;
222     }
223
224     if (!padlock_bind_helper(e)) {
225         return 0;
226     }
227
228     return 1;
229 }
230
231 IMPLEMENT_DYNAMIC_CHECK_FN()
232     IMPLEMENT_DYNAMIC_BIND_FN(padlock_bind_fn)
233 #   endif                       /* DYNAMIC_ENGINE */
234 /* ===== Here comes the "real" engine ===== */
235 #   ifndef OPENSSL_NO_AES
236 /* Some AES-related constants */
237 #    define AES_BLOCK_SIZE          16
238 #    define AES_KEY_SIZE_128        16
239 #    define AES_KEY_SIZE_192        24
240 #    define AES_KEY_SIZE_256        32
241     /*
242      * Here we store the status information relevant to the current context.
243      */
244     /*
245      * BIG FAT WARNING: Inline assembler in PADLOCK_XCRYPT_ASM() depends on
246      * the order of items in this structure.  Don't blindly modify, reorder,
247      * etc!
248      */
249 struct padlock_cipher_data {
250     unsigned char iv[AES_BLOCK_SIZE]; /* Initialization vector */
251     union {
252         unsigned int pad[4];
253         struct {
254             int rounds:4;
255             int dgst:1;         /* n/a in C3 */
256             int align:1;        /* n/a in C3 */
257             int ciphr:1;        /* n/a in C3 */
258             unsigned int keygen:1;
259             int interm:1;
260             unsigned int encdec:1;
261             int ksize:2;
262         } b;
263     } cword;                    /* Control word */
264     AES_KEY ks;                 /* Encryption key */
265 };
266 #   endif
267
268 /* Interface to assembler module */
269 unsigned int padlock_capability();
270 void padlock_key_bswap(AES_KEY *key);
271 void padlock_verify_context(struct padlock_cipher_data *ctx);
272 void padlock_reload_key();
273 void padlock_aes_block(void *out, const void *inp,
274                        struct padlock_cipher_data *ctx);
275 int padlock_ecb_encrypt(void *out, const void *inp,
276                         struct padlock_cipher_data *ctx, size_t len);
277 int padlock_cbc_encrypt(void *out, const void *inp,
278                         struct padlock_cipher_data *ctx, size_t len);
279 int padlock_cfb_encrypt(void *out, const void *inp,
280                         struct padlock_cipher_data *ctx, size_t len);
281 int padlock_ofb_encrypt(void *out, const void *inp,
282                         struct padlock_cipher_data *ctx, size_t len);
283 int padlock_ctr32_encrypt(void *out, const void *inp,
284                           struct padlock_cipher_data *ctx, size_t len);
285 int padlock_xstore(void *out, int edx);
286 void padlock_sha1_oneshot(void *ctx, const void *inp, size_t len);
287 void padlock_sha1(void *ctx, const void *inp, size_t len);
288 void padlock_sha256_oneshot(void *ctx, const void *inp, size_t len);
289 void padlock_sha256(void *ctx, const void *inp, size_t len);
290
291 /*
292  * Load supported features of the CPU to see if the PadLock is available.
293  */
294 static int padlock_available(void)
295 {
296     unsigned int edx = padlock_capability();
297
298     /* Fill up some flags */
299     padlock_use_ace = ((edx & (0x3 << 6)) == (0x3 << 6));
300     padlock_use_rng = ((edx & (0x3 << 2)) == (0x3 << 2));
301
302     return padlock_use_ace + padlock_use_rng;
303 }
304
305 /* ===== AES encryption/decryption ===== */
306 #   ifndef OPENSSL_NO_AES
307
308 #    if defined(NID_aes_128_cfb128) && ! defined (NID_aes_128_cfb)
309 #     define NID_aes_128_cfb NID_aes_128_cfb128
310 #    endif
311
312 #    if defined(NID_aes_128_ofb128) && ! defined (NID_aes_128_ofb)
313 #     define NID_aes_128_ofb NID_aes_128_ofb128
314 #    endif
315
316 #    if defined(NID_aes_192_cfb128) && ! defined (NID_aes_192_cfb)
317 #     define NID_aes_192_cfb NID_aes_192_cfb128
318 #    endif
319
320 #    if defined(NID_aes_192_ofb128) && ! defined (NID_aes_192_ofb)
321 #     define NID_aes_192_ofb NID_aes_192_ofb128
322 #    endif
323
324 #    if defined(NID_aes_256_cfb128) && ! defined (NID_aes_256_cfb)
325 #     define NID_aes_256_cfb NID_aes_256_cfb128
326 #    endif
327
328 #    if defined(NID_aes_256_ofb128) && ! defined (NID_aes_256_ofb)
329 #     define NID_aes_256_ofb NID_aes_256_ofb128
330 #    endif
331
332 /* List of supported ciphers. */
333 static const int padlock_cipher_nids[] = {
334     NID_aes_128_ecb,
335     NID_aes_128_cbc,
336     NID_aes_128_cfb,
337     NID_aes_128_ofb,
338     NID_aes_128_ctr,
339
340     NID_aes_192_ecb,
341     NID_aes_192_cbc,
342     NID_aes_192_cfb,
343     NID_aes_192_ofb,
344     NID_aes_192_ctr,
345
346     NID_aes_256_ecb,
347     NID_aes_256_cbc,
348     NID_aes_256_cfb,
349     NID_aes_256_ofb,
350     NID_aes_256_ctr
351 };
352
353 static int padlock_cipher_nids_num = (sizeof(padlock_cipher_nids) /
354                                       sizeof(padlock_cipher_nids[0]));
355
356 /* Function prototypes ... */
357 static int padlock_aes_init_key(EVP_CIPHER_CTX *ctx, const unsigned char *key,
358                                 const unsigned char *iv, int enc);
359
360 #    define NEAREST_ALIGNED(ptr) ( (unsigned char *)(ptr) +         \
361         ( (0x10 - ((size_t)(ptr) & 0x0F)) & 0x0F )      )
362 #    define ALIGNED_CIPHER_DATA(ctx) ((struct padlock_cipher_data *)\
363         NEAREST_ALIGNED(ctx->cipher_data))
364
365 static int
366 padlock_ecb_cipher(EVP_CIPHER_CTX *ctx, unsigned char *out_arg,
367                    const unsigned char *in_arg, size_t nbytes)
368 {
369     return padlock_ecb_encrypt(out_arg, in_arg,
370                                ALIGNED_CIPHER_DATA(ctx), nbytes);
371 }
372
373 static int
374 padlock_cbc_cipher(EVP_CIPHER_CTX *ctx, unsigned char *out_arg,
375                    const unsigned char *in_arg, size_t nbytes)
376 {
377     struct padlock_cipher_data *cdata = ALIGNED_CIPHER_DATA(ctx);
378     int ret;
379
380     memcpy(cdata->iv, ctx->iv, AES_BLOCK_SIZE);
381     if ((ret = padlock_cbc_encrypt(out_arg, in_arg, cdata, nbytes)))
382         memcpy(ctx->iv, cdata->iv, AES_BLOCK_SIZE);
383     return ret;
384 }
385
386 static int
387 padlock_cfb_cipher(EVP_CIPHER_CTX *ctx, unsigned char *out_arg,
388                    const unsigned char *in_arg, size_t nbytes)
389 {
390     struct padlock_cipher_data *cdata = ALIGNED_CIPHER_DATA(ctx);
391     size_t chunk;
392
393     if ((chunk = ctx->num)) {   /* borrow chunk variable */
394         unsigned char *ivp = ctx->iv;
395
396         if (chunk >= AES_BLOCK_SIZE)
397             return 0;           /* bogus value */
398
399         if (ctx->encrypt)
400             while (chunk < AES_BLOCK_SIZE && nbytes != 0) {
401                 ivp[chunk] = *(out_arg++) = *(in_arg++) ^ ivp[chunk];
402                 chunk++, nbytes--;
403         } else
404             while (chunk < AES_BLOCK_SIZE && nbytes != 0) {
405                 unsigned char c = *(in_arg++);
406                 *(out_arg++) = c ^ ivp[chunk];
407                 ivp[chunk++] = c, nbytes--;
408             }
409
410         ctx->num = chunk % AES_BLOCK_SIZE;
411     }
412
413     if (nbytes == 0)
414         return 1;
415
416     memcpy(cdata->iv, ctx->iv, AES_BLOCK_SIZE);
417
418     if ((chunk = nbytes & ~(AES_BLOCK_SIZE - 1))) {
419         if (!padlock_cfb_encrypt(out_arg, in_arg, cdata, chunk))
420             return 0;
421         nbytes -= chunk;
422     }
423
424     if (nbytes) {
425         unsigned char *ivp = cdata->iv;
426
427         out_arg += chunk;
428         in_arg += chunk;
429         ctx->num = nbytes;
430         if (cdata->cword.b.encdec) {
431             cdata->cword.b.encdec = 0;
432             padlock_reload_key();
433             padlock_aes_block(ivp, ivp, cdata);
434             cdata->cword.b.encdec = 1;
435             padlock_reload_key();
436             while (nbytes) {
437                 unsigned char c = *(in_arg++);
438                 *(out_arg++) = c ^ *ivp;
439                 *(ivp++) = c, nbytes--;
440             }
441         } else {
442             padlock_reload_key();
443             padlock_aes_block(ivp, ivp, cdata);
444             padlock_reload_key();
445             while (nbytes) {
446                 *ivp = *(out_arg++) = *(in_arg++) ^ *ivp;
447                 ivp++, nbytes--;
448             }
449         }
450     }
451
452     memcpy(ctx->iv, cdata->iv, AES_BLOCK_SIZE);
453
454     return 1;
455 }
456
457 static int
458 padlock_ofb_cipher(EVP_CIPHER_CTX *ctx, unsigned char *out_arg,
459                    const unsigned char *in_arg, size_t nbytes)
460 {
461     struct padlock_cipher_data *cdata = ALIGNED_CIPHER_DATA(ctx);
462     size_t chunk;
463
464     /*
465      * ctx->num is maintained in byte-oriented modes, such as CFB and OFB...
466      */
467     if ((chunk = ctx->num)) {   /* borrow chunk variable */
468         unsigned char *ivp = ctx->iv;
469
470         if (chunk >= AES_BLOCK_SIZE)
471             return 0;           /* bogus value */
472
473         while (chunk < AES_BLOCK_SIZE && nbytes != 0) {
474             *(out_arg++) = *(in_arg++) ^ ivp[chunk];
475             chunk++, nbytes--;
476         }
477
478         ctx->num = chunk % AES_BLOCK_SIZE;
479     }
480
481     if (nbytes == 0)
482         return 1;
483
484     memcpy(cdata->iv, ctx->iv, AES_BLOCK_SIZE);
485
486     if ((chunk = nbytes & ~(AES_BLOCK_SIZE - 1))) {
487         if (!padlock_ofb_encrypt(out_arg, in_arg, cdata, chunk))
488             return 0;
489         nbytes -= chunk;
490     }
491
492     if (nbytes) {
493         unsigned char *ivp = cdata->iv;
494
495         out_arg += chunk;
496         in_arg += chunk;
497         ctx->num = nbytes;
498         padlock_reload_key();   /* empirically found */
499         padlock_aes_block(ivp, ivp, cdata);
500         padlock_reload_key();   /* empirically found */
501         while (nbytes) {
502             *(out_arg++) = *(in_arg++) ^ *ivp;
503             ivp++, nbytes--;
504         }
505     }
506
507     memcpy(ctx->iv, cdata->iv, AES_BLOCK_SIZE);
508
509     return 1;
510 }
511
512 static void padlock_ctr32_encrypt_glue(const unsigned char *in,
513                                        unsigned char *out, size_t blocks,
514                                        struct padlock_cipher_data *ctx,
515                                        const unsigned char *ivec)
516 {
517     memcpy(ctx->iv, ivec, AES_BLOCK_SIZE);
518     padlock_ctr32_encrypt(out, in, ctx, AES_BLOCK_SIZE * blocks);
519 }
520
521 static int
522 padlock_ctr_cipher(EVP_CIPHER_CTX *ctx, unsigned char *out_arg,
523                    const unsigned char *in_arg, size_t nbytes)
524 {
525     struct padlock_cipher_data *cdata = ALIGNED_CIPHER_DATA(ctx);
526     unsigned int num = ctx->num;
527
528     CRYPTO_ctr128_encrypt_ctr32(in_arg, out_arg, nbytes,
529                                 cdata, ctx->iv, ctx->buf, &num,
530                                 (ctr128_f) padlock_ctr32_encrypt_glue);
531
532     ctx->num = (size_t)num;
533     return 1;
534 }
535
536 #    define EVP_CIPHER_block_size_ECB       AES_BLOCK_SIZE
537 #    define EVP_CIPHER_block_size_CBC       AES_BLOCK_SIZE
538 #    define EVP_CIPHER_block_size_OFB       1
539 #    define EVP_CIPHER_block_size_CFB       1
540 #    define EVP_CIPHER_block_size_CTR       1
541
542 /*
543  * Declaring so many ciphers by hand would be a pain. Instead introduce a bit
544  * of preprocessor magic :-)
545  */
546 #    define DECLARE_AES_EVP(ksize,lmode,umode)      \
547 static const EVP_CIPHER padlock_aes_##ksize##_##lmode = {       \
548         NID_aes_##ksize##_##lmode,              \
549         EVP_CIPHER_block_size_##umode,  \
550         AES_KEY_SIZE_##ksize,           \
551         AES_BLOCK_SIZE,                 \
552         0 | EVP_CIPH_##umode##_MODE,    \
553         padlock_aes_init_key,           \
554         padlock_##lmode##_cipher,       \
555         NULL,                           \
556         sizeof(struct padlock_cipher_data) + 16,        \
557         EVP_CIPHER_set_asn1_iv,         \
558         EVP_CIPHER_get_asn1_iv,         \
559         NULL,                           \
560         NULL                            \
561 }
562
563 DECLARE_AES_EVP(128, ecb, ECB);
564 DECLARE_AES_EVP(128, cbc, CBC);
565 DECLARE_AES_EVP(128, cfb, CFB);
566 DECLARE_AES_EVP(128, ofb, OFB);
567 DECLARE_AES_EVP(128, ctr, CTR);
568
569 DECLARE_AES_EVP(192, ecb, ECB);
570 DECLARE_AES_EVP(192, cbc, CBC);
571 DECLARE_AES_EVP(192, cfb, CFB);
572 DECLARE_AES_EVP(192, ofb, OFB);
573 DECLARE_AES_EVP(192, ctr, CTR);
574
575 DECLARE_AES_EVP(256, ecb, ECB);
576 DECLARE_AES_EVP(256, cbc, CBC);
577 DECLARE_AES_EVP(256, cfb, CFB);
578 DECLARE_AES_EVP(256, ofb, OFB);
579 DECLARE_AES_EVP(256, ctr, CTR);
580
581 static int
582 padlock_ciphers(ENGINE *e, const EVP_CIPHER **cipher, const int **nids,
583                 int nid)
584 {
585     /* No specific cipher => return a list of supported nids ... */
586     if (!cipher) {
587         *nids = padlock_cipher_nids;
588         return padlock_cipher_nids_num;
589     }
590
591     /* ... or the requested "cipher" otherwise */
592     switch (nid) {
593     case NID_aes_128_ecb:
594         *cipher = &padlock_aes_128_ecb;
595         break;
596     case NID_aes_128_cbc:
597         *cipher = &padlock_aes_128_cbc;
598         break;
599     case NID_aes_128_cfb:
600         *cipher = &padlock_aes_128_cfb;
601         break;
602     case NID_aes_128_ofb:
603         *cipher = &padlock_aes_128_ofb;
604         break;
605     case NID_aes_128_ctr:
606         *cipher = &padlock_aes_128_ctr;
607         break;
608
609     case NID_aes_192_ecb:
610         *cipher = &padlock_aes_192_ecb;
611         break;
612     case NID_aes_192_cbc:
613         *cipher = &padlock_aes_192_cbc;
614         break;
615     case NID_aes_192_cfb:
616         *cipher = &padlock_aes_192_cfb;
617         break;
618     case NID_aes_192_ofb:
619         *cipher = &padlock_aes_192_ofb;
620         break;
621     case NID_aes_192_ctr:
622         *cipher = &padlock_aes_192_ctr;
623         break;
624
625     case NID_aes_256_ecb:
626         *cipher = &padlock_aes_256_ecb;
627         break;
628     case NID_aes_256_cbc:
629         *cipher = &padlock_aes_256_cbc;
630         break;
631     case NID_aes_256_cfb:
632         *cipher = &padlock_aes_256_cfb;
633         break;
634     case NID_aes_256_ofb:
635         *cipher = &padlock_aes_256_ofb;
636         break;
637     case NID_aes_256_ctr:
638         *cipher = &padlock_aes_256_ctr;
639         break;
640
641     default:
642         /* Sorry, we don't support this NID */
643         *cipher = NULL;
644         return 0;
645     }
646
647     return 1;
648 }
649
650 /* Prepare the encryption key for PadLock usage */
651 static int
652 padlock_aes_init_key(EVP_CIPHER_CTX *ctx, const unsigned char *key,
653                      const unsigned char *iv, int enc)
654 {
655     struct padlock_cipher_data *cdata;
656     int key_len = EVP_CIPHER_CTX_key_length(ctx) * 8;
657     unsigned long mode = EVP_CIPHER_CTX_mode(ctx);
658
659     if (key == NULL)
660         return 0;               /* ERROR */
661
662     cdata = ALIGNED_CIPHER_DATA(ctx);
663     memset(cdata, 0, sizeof(struct padlock_cipher_data));
664
665     /* Prepare Control word. */
666     if (mode == EVP_CIPH_OFB_MODE || mode == EVP_CIPH_CTR_MODE)
667         cdata->cword.b.encdec = 0;
668     else
669         cdata->cword.b.encdec = (ctx->encrypt == 0);
670     cdata->cword.b.rounds = 10 + (key_len - 128) / 32;
671     cdata->cword.b.ksize = (key_len - 128) / 64;
672
673     switch (key_len) {
674     case 128:
675         /*
676          * PadLock can generate an extended key for AES128 in hardware
677          */
678         memcpy(cdata->ks.rd_key, key, AES_KEY_SIZE_128);
679         cdata->cword.b.keygen = 0;
680         break;
681
682     case 192:
683     case 256:
684         /*
685          * Generate an extended AES key in software. Needed for AES192/AES256
686          */
687         /*
688          * Well, the above applies to Stepping 8 CPUs and is listed as
689          * hardware errata. They most likely will fix it at some point and
690          * then a check for stepping would be due here.
691          */
692         if ((mode == EVP_CIPH_ECB_MODE || mode == EVP_CIPH_CBC_MODE)
693             && !enc)
694             AES_set_decrypt_key(key, key_len, &cdata->ks);
695         else
696             AES_set_encrypt_key(key, key_len, &cdata->ks);
697 #    ifndef AES_ASM
698         /*
699          * OpenSSL C functions use byte-swapped extended key.
700          */
701         padlock_key_bswap(&cdata->ks);
702 #    endif
703         cdata->cword.b.keygen = 1;
704         break;
705
706     default:
707         /* ERROR */
708         return 0;
709     }
710
711     /*
712      * This is done to cover for cases when user reuses the
713      * context for new key. The catch is that if we don't do
714      * this, padlock_eas_cipher might proceed with old key...
715      */
716     padlock_reload_key();
717
718     return 1;
719 }
720
721 #   endif                       /* OPENSSL_NO_AES */
722
723 /* ===== Random Number Generator ===== */
724 /*
725  * This code is not engaged. The reason is that it does not comply
726  * with recommendations for VIA RNG usage for secure applications
727  * (posted at http://www.via.com.tw/en/viac3/c3.jsp) nor does it
728  * provide meaningful error control...
729  */
730 /*
731  * Wrapper that provides an interface between the API and the raw PadLock
732  * RNG
733  */
734 static int padlock_rand_bytes(unsigned char *output, int count)
735 {
736     unsigned int eax, buf;
737
738     while (count >= 8) {
739         eax = padlock_xstore(output, 0);
740         if (!(eax & (1 << 6)))
741             return 0;           /* RNG disabled */
742         /* this ---vv--- covers DC bias, Raw Bits and String Filter */
743         if (eax & (0x1F << 10))
744             return 0;
745         if ((eax & 0x1F) == 0)
746             continue;           /* no data, retry... */
747         if ((eax & 0x1F) != 8)
748             return 0;           /* fatal failure...  */
749         output += 8;
750         count -= 8;
751     }
752     while (count > 0) {
753         eax = padlock_xstore(&buf, 3);
754         if (!(eax & (1 << 6)))
755             return 0;           /* RNG disabled */
756         /* this ---vv--- covers DC bias, Raw Bits and String Filter */
757         if (eax & (0x1F << 10))
758             return 0;
759         if ((eax & 0x1F) == 0)
760             continue;           /* no data, retry... */
761         if ((eax & 0x1F) != 1)
762             return 0;           /* fatal failure...  */
763         *output++ = (unsigned char)buf;
764         count--;
765     }
766     *(volatile unsigned int *)&buf = 0;
767
768     return 1;
769 }
770
771 /* Dummy but necessary function */
772 static int padlock_rand_status(void)
773 {
774     return 1;
775 }
776
777 /* Prepare structure for registration */
778 static RAND_METHOD padlock_rand = {
779     NULL,                       /* seed */
780     padlock_rand_bytes,         /* bytes */
781     NULL,                       /* cleanup */
782     NULL,                       /* add */
783     padlock_rand_bytes,         /* pseudorand */
784     padlock_rand_status,        /* rand status */
785 };
786
787 #  else                         /* !COMPILE_HW_PADLOCK */
788 #   ifndef OPENSSL_NO_DYNAMIC_ENGINE
789 OPENSSL_EXPORT
790     int bind_engine(ENGINE *e, const char *id, const dynamic_fns *fns);
791 OPENSSL_EXPORT
792     int bind_engine(ENGINE *e, const char *id, const dynamic_fns *fns)
793 {
794     return 0;
795 }
796
797 IMPLEMENT_DYNAMIC_CHECK_FN()
798 #   endif
799 #  endif                        /* COMPILE_HW_PADLOCK */
800 # endif                         /* !OPENSSL_NO_HW_PADLOCK */
801 #endif                          /* !OPENSSL_NO_HW */