memset, memcpy, sizeof consistency fixes
[openssl.git] / engines / e_padlock.c
1 /*-
2  * Support for VIA PadLock Advanced Cryptography Engine (ACE)
3  * Written by Michal Ludvig <michal@logix.cz>
4  *            http://www.logix.cz/michal
5  *
6  * Big thanks to Andy Polyakov for a help with optimization,
7  * assembler fixes, port to MS Windows and a lot of other
8  * valuable work on this engine!
9  */
10
11 /* ====================================================================
12  * Copyright (c) 1999-2001 The OpenSSL Project.  All rights reserved.
13  *
14  * Redistribution and use in source and binary forms, with or without
15  * modification, are permitted provided that the following conditions
16  * are met:
17  *
18  * 1. Redistributions of source code must retain the above copyright
19  *    notice, this list of conditions and the following disclaimer.
20  *
21  * 2. Redistributions in binary form must reproduce the above copyright
22  *    notice, this list of conditions and the following disclaimer in
23  *    the documentation and/or other materials provided with the
24  *    distribution.
25  *
26  * 3. All advertising materials mentioning features or use of this
27  *    software must display the following acknowledgment:
28  *    "This product includes software developed by the OpenSSL Project
29  *    for use in the OpenSSL Toolkit. (http://www.OpenSSL.org/)"
30  *
31  * 4. The names "OpenSSL Toolkit" and "OpenSSL Project" must not be used to
32  *    endorse or promote products derived from this software without
33  *    prior written permission. For written permission, please contact
34  *    licensing@OpenSSL.org.
35  *
36  * 5. Products derived from this software may not be called "OpenSSL"
37  *    nor may "OpenSSL" appear in their names without prior written
38  *    permission of the OpenSSL Project.
39  *
40  * 6. Redistributions of any form whatsoever must retain the following
41  *    acknowledgment:
42  *    "This product includes software developed by the OpenSSL Project
43  *    for use in the OpenSSL Toolkit (http://www.OpenSSL.org/)"
44  *
45  * THIS SOFTWARE IS PROVIDED BY THE OpenSSL PROJECT ``AS IS'' AND ANY
46  * EXPRESSED OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
47  * IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR
48  * PURPOSE ARE DISCLAIMED.  IN NO EVENT SHALL THE OpenSSL PROJECT OR
49  * ITS CONTRIBUTORS BE LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL,
50  * SPECIAL, EXEMPLARY, OR CONSEQUENTIAL DAMAGES (INCLUDING, BUT
51  * NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES;
52  * LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION)
53  * HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT,
54  * STRICT LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE)
55  * ARISING IN ANY WAY OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED
56  * OF THE POSSIBILITY OF SUCH DAMAGE.
57  * ====================================================================
58  *
59  * This product includes cryptographic software written by Eric Young
60  * (eay@cryptsoft.com).  This product includes software written by Tim
61  * Hudson (tjh@cryptsoft.com).
62  *
63  */
64
65 #include <stdio.h>
66 #include <string.h>
67
68 #include <openssl/opensslconf.h>
69 #include <openssl/crypto.h>
70 #include <openssl/dso.h>
71 #include <openssl/engine.h>
72 #include <openssl/evp.h>
73 #ifndef OPENSSL_NO_AES
74 # include <openssl/aes.h>
75 #endif
76 #include <openssl/rand.h>
77 #include <openssl/err.h>
78 #include <openssl/modes.h>
79
80 #ifndef OPENSSL_NO_HW
81 # ifndef OPENSSL_NO_HW_PADLOCK
82
83 /* Attempt to have a single source for both 0.9.7 and 0.9.8 :-) */
84 #  if (OPENSSL_VERSION_NUMBER >= 0x00908000L)
85 #   ifndef OPENSSL_NO_DYNAMIC_ENGINE
86 #    define DYNAMIC_ENGINE
87 #   endif
88 #  elif (OPENSSL_VERSION_NUMBER >= 0x00907000L)
89 #   ifdef ENGINE_DYNAMIC_SUPPORT
90 #    define DYNAMIC_ENGINE
91 #   endif
92 #  else
93 #   error "Only OpenSSL >= 0.9.7 is supported"
94 #  endif
95
96 /*
97  * VIA PadLock AES is available *ONLY* on some x86 CPUs. Not only that it
98  * doesn't exist elsewhere, but it even can't be compiled on other platforms!
99  */
100
101 #  undef COMPILE_HW_PADLOCK
102 #  if !defined(I386_ONLY) && !defined(OPENSSL_NO_ASM)
103 #   if    defined(__i386__) || defined(__i386) ||    \
104         defined(__x86_64__) || defined(__x86_64) || \
105         defined(_M_IX86) || defined(_M_AMD64) || defined(_M_X64) || \
106         defined(__INTEL__)
107 #    define COMPILE_HW_PADLOCK
108 #    ifdef OPENSSL_NO_DYNAMIC_ENGINE
109 static ENGINE *ENGINE_padlock(void);
110 #    endif
111 #   endif
112 #  endif
113
114 #  ifdef OPENSSL_NO_DYNAMIC_ENGINE
115
116 void ENGINE_load_padlock(void)
117 {
118 /* On non-x86 CPUs it just returns. */
119 #   ifdef COMPILE_HW_PADLOCK
120     ENGINE *toadd = ENGINE_padlock();
121     if (!toadd)
122         return;
123     ENGINE_add(toadd);
124     ENGINE_free(toadd);
125     ERR_clear_error();
126 #   endif
127 }
128
129 #  endif
130
131 #  ifdef COMPILE_HW_PADLOCK
132
133 /* Function for ENGINE detection and control */
134 static int padlock_available(void);
135 static int padlock_init(ENGINE *e);
136
137 /* RNG Stuff */
138 static RAND_METHOD padlock_rand;
139
140 /* Cipher Stuff */
141 #   ifndef OPENSSL_NO_AES
142 static int padlock_ciphers(ENGINE *e, const EVP_CIPHER **cipher,
143                            const int **nids, int nid);
144 #   endif
145
146 /* Engine names */
147 static const char *padlock_id = "padlock";
148 static char padlock_name[100];
149
150 /* Available features */
151 static int padlock_use_ace = 0; /* Advanced Cryptography Engine */
152 static int padlock_use_rng = 0; /* Random Number Generator */
153
154 /* ===== Engine "management" functions ===== */
155
156 /* Prepare the ENGINE structure for registration */
157 static int padlock_bind_helper(ENGINE *e)
158 {
159     /* Check available features */
160     padlock_available();
161
162     /*
163      * RNG is currently disabled for reasons discussed in commentary just
164      * before padlock_rand_bytes function.
165      */
166     padlock_use_rng = 0;
167
168     /* Generate a nice engine name with available features */
169     BIO_snprintf(padlock_name, sizeof(padlock_name),
170                  "VIA PadLock (%s, %s)",
171                  padlock_use_rng ? "RNG" : "no-RNG",
172                  padlock_use_ace ? "ACE" : "no-ACE");
173
174     /* Register everything or return with an error */
175     if (!ENGINE_set_id(e, padlock_id) ||
176         !ENGINE_set_name(e, padlock_name) ||
177         !ENGINE_set_init_function(e, padlock_init) ||
178 #   ifndef OPENSSL_NO_AES
179         (padlock_use_ace && !ENGINE_set_ciphers(e, padlock_ciphers)) ||
180 #   endif
181         (padlock_use_rng && !ENGINE_set_RAND(e, &padlock_rand))) {
182         return 0;
183     }
184
185     /* Everything looks good */
186     return 1;
187 }
188
189 #   ifdef OPENSSL_NO_DYNAMIC_ENGINE
190 /* Constructor */
191 static ENGINE *ENGINE_padlock(void)
192 {
193     ENGINE *eng = ENGINE_new();
194
195     if (!eng) {
196         return NULL;
197     }
198
199     if (!padlock_bind_helper(eng)) {
200         ENGINE_free(eng);
201         return NULL;
202     }
203
204     return eng;
205 }
206 #   endif
207
208 /* Check availability of the engine */
209 static int padlock_init(ENGINE *e)
210 {
211     return (padlock_use_rng || padlock_use_ace);
212 }
213
214 /*
215  * This stuff is needed if this ENGINE is being compiled into a
216  * self-contained shared-library.
217  */
218 #   ifdef DYNAMIC_ENGINE
219 static int padlock_bind_fn(ENGINE *e, const char *id)
220 {
221     if (id && (strcmp(id, padlock_id) != 0)) {
222         return 0;
223     }
224
225     if (!padlock_bind_helper(e)) {
226         return 0;
227     }
228
229     return 1;
230 }
231
232 IMPLEMENT_DYNAMIC_CHECK_FN()
233     IMPLEMENT_DYNAMIC_BIND_FN(padlock_bind_fn)
234 #   endif                       /* DYNAMIC_ENGINE */
235 /* ===== Here comes the "real" engine ===== */
236 #   ifndef OPENSSL_NO_AES
237 /* Some AES-related constants */
238 #    define AES_BLOCK_SIZE          16
239 #    define AES_KEY_SIZE_128        16
240 #    define AES_KEY_SIZE_192        24
241 #    define AES_KEY_SIZE_256        32
242     /*
243      * Here we store the status information relevant to the current context.
244      */
245     /*
246      * BIG FAT WARNING: Inline assembler in PADLOCK_XCRYPT_ASM() depends on
247      * the order of items in this structure.  Don't blindly modify, reorder,
248      * etc!
249      */
250 struct padlock_cipher_data {
251     unsigned char iv[AES_BLOCK_SIZE]; /* Initialization vector */
252     union {
253         unsigned int pad[4];
254         struct {
255             int rounds:4;
256             int dgst:1;         /* n/a in C3 */
257             int align:1;        /* n/a in C3 */
258             int ciphr:1;        /* n/a in C3 */
259             unsigned int keygen:1;
260             int interm:1;
261             unsigned int encdec:1;
262             int ksize:2;
263         } b;
264     } cword;                    /* Control word */
265     AES_KEY ks;                 /* Encryption key */
266 };
267 #   endif
268
269 /* Interface to assembler module */
270 unsigned int padlock_capability();
271 void padlock_key_bswap(AES_KEY *key);
272 void padlock_verify_context(struct padlock_cipher_data *ctx);
273 void padlock_reload_key();
274 void padlock_aes_block(void *out, const void *inp,
275                        struct padlock_cipher_data *ctx);
276 int padlock_ecb_encrypt(void *out, const void *inp,
277                         struct padlock_cipher_data *ctx, size_t len);
278 int padlock_cbc_encrypt(void *out, const void *inp,
279                         struct padlock_cipher_data *ctx, size_t len);
280 int padlock_cfb_encrypt(void *out, const void *inp,
281                         struct padlock_cipher_data *ctx, size_t len);
282 int padlock_ofb_encrypt(void *out, const void *inp,
283                         struct padlock_cipher_data *ctx, size_t len);
284 int padlock_ctr32_encrypt(void *out, const void *inp,
285                           struct padlock_cipher_data *ctx, size_t len);
286 int padlock_xstore(void *out, int edx);
287 void padlock_sha1_oneshot(void *ctx, const void *inp, size_t len);
288 void padlock_sha1(void *ctx, const void *inp, size_t len);
289 void padlock_sha256_oneshot(void *ctx, const void *inp, size_t len);
290 void padlock_sha256(void *ctx, const void *inp, size_t len);
291
292 /*
293  * Load supported features of the CPU to see if the PadLock is available.
294  */
295 static int padlock_available(void)
296 {
297     unsigned int edx = padlock_capability();
298
299     /* Fill up some flags */
300     padlock_use_ace = ((edx & (0x3 << 6)) == (0x3 << 6));
301     padlock_use_rng = ((edx & (0x3 << 2)) == (0x3 << 2));
302
303     return padlock_use_ace + padlock_use_rng;
304 }
305
306 /* ===== AES encryption/decryption ===== */
307 #   ifndef OPENSSL_NO_AES
308
309 #    if defined(NID_aes_128_cfb128) && ! defined (NID_aes_128_cfb)
310 #     define NID_aes_128_cfb NID_aes_128_cfb128
311 #    endif
312
313 #    if defined(NID_aes_128_ofb128) && ! defined (NID_aes_128_ofb)
314 #     define NID_aes_128_ofb NID_aes_128_ofb128
315 #    endif
316
317 #    if defined(NID_aes_192_cfb128) && ! defined (NID_aes_192_cfb)
318 #     define NID_aes_192_cfb NID_aes_192_cfb128
319 #    endif
320
321 #    if defined(NID_aes_192_ofb128) && ! defined (NID_aes_192_ofb)
322 #     define NID_aes_192_ofb NID_aes_192_ofb128
323 #    endif
324
325 #    if defined(NID_aes_256_cfb128) && ! defined (NID_aes_256_cfb)
326 #     define NID_aes_256_cfb NID_aes_256_cfb128
327 #    endif
328
329 #    if defined(NID_aes_256_ofb128) && ! defined (NID_aes_256_ofb)
330 #     define NID_aes_256_ofb NID_aes_256_ofb128
331 #    endif
332
333 /* List of supported ciphers. */
334 static const int padlock_cipher_nids[] = {
335     NID_aes_128_ecb,
336     NID_aes_128_cbc,
337     NID_aes_128_cfb,
338     NID_aes_128_ofb,
339     NID_aes_128_ctr,
340
341     NID_aes_192_ecb,
342     NID_aes_192_cbc,
343     NID_aes_192_cfb,
344     NID_aes_192_ofb,
345     NID_aes_192_ctr,
346
347     NID_aes_256_ecb,
348     NID_aes_256_cbc,
349     NID_aes_256_cfb,
350     NID_aes_256_ofb,
351     NID_aes_256_ctr
352 };
353
354 static int padlock_cipher_nids_num = (sizeof(padlock_cipher_nids) /
355                                       sizeof(padlock_cipher_nids[0]));
356
357 /* Function prototypes ... */
358 static int padlock_aes_init_key(EVP_CIPHER_CTX *ctx, const unsigned char *key,
359                                 const unsigned char *iv, int enc);
360
361 #    define NEAREST_ALIGNED(ptr) ( (unsigned char *)(ptr) +         \
362         ( (0x10 - ((size_t)(ptr) & 0x0F)) & 0x0F )      )
363 #    define ALIGNED_CIPHER_DATA(ctx) ((struct padlock_cipher_data *)\
364         NEAREST_ALIGNED(ctx->cipher_data))
365
366 static int
367 padlock_ecb_cipher(EVP_CIPHER_CTX *ctx, unsigned char *out_arg,
368                    const unsigned char *in_arg, size_t nbytes)
369 {
370     return padlock_ecb_encrypt(out_arg, in_arg,
371                                ALIGNED_CIPHER_DATA(ctx), nbytes);
372 }
373
374 static int
375 padlock_cbc_cipher(EVP_CIPHER_CTX *ctx, unsigned char *out_arg,
376                    const unsigned char *in_arg, size_t nbytes)
377 {
378     struct padlock_cipher_data *cdata = ALIGNED_CIPHER_DATA(ctx);
379     int ret;
380
381     memcpy(cdata->iv, ctx->iv, AES_BLOCK_SIZE);
382     if ((ret = padlock_cbc_encrypt(out_arg, in_arg, cdata, nbytes)))
383         memcpy(ctx->iv, cdata->iv, AES_BLOCK_SIZE);
384     return ret;
385 }
386
387 static int
388 padlock_cfb_cipher(EVP_CIPHER_CTX *ctx, unsigned char *out_arg,
389                    const unsigned char *in_arg, size_t nbytes)
390 {
391     struct padlock_cipher_data *cdata = ALIGNED_CIPHER_DATA(ctx);
392     size_t chunk;
393
394     if ((chunk = ctx->num)) {   /* borrow chunk variable */
395         unsigned char *ivp = ctx->iv;
396
397         if (chunk >= AES_BLOCK_SIZE)
398             return 0;           /* bogus value */
399
400         if (ctx->encrypt)
401             while (chunk < AES_BLOCK_SIZE && nbytes != 0) {
402                 ivp[chunk] = *(out_arg++) = *(in_arg++) ^ ivp[chunk];
403                 chunk++, nbytes--;
404         } else
405             while (chunk < AES_BLOCK_SIZE && nbytes != 0) {
406                 unsigned char c = *(in_arg++);
407                 *(out_arg++) = c ^ ivp[chunk];
408                 ivp[chunk++] = c, nbytes--;
409             }
410
411         ctx->num = chunk % AES_BLOCK_SIZE;
412     }
413
414     if (nbytes == 0)
415         return 1;
416
417     memcpy(cdata->iv, ctx->iv, AES_BLOCK_SIZE);
418
419     if ((chunk = nbytes & ~(AES_BLOCK_SIZE - 1))) {
420         if (!padlock_cfb_encrypt(out_arg, in_arg, cdata, chunk))
421             return 0;
422         nbytes -= chunk;
423     }
424
425     if (nbytes) {
426         unsigned char *ivp = cdata->iv;
427
428         out_arg += chunk;
429         in_arg += chunk;
430         ctx->num = nbytes;
431         if (cdata->cword.b.encdec) {
432             cdata->cword.b.encdec = 0;
433             padlock_reload_key();
434             padlock_aes_block(ivp, ivp, cdata);
435             cdata->cword.b.encdec = 1;
436             padlock_reload_key();
437             while (nbytes) {
438                 unsigned char c = *(in_arg++);
439                 *(out_arg++) = c ^ *ivp;
440                 *(ivp++) = c, nbytes--;
441             }
442         } else {
443             padlock_reload_key();
444             padlock_aes_block(ivp, ivp, cdata);
445             padlock_reload_key();
446             while (nbytes) {
447                 *ivp = *(out_arg++) = *(in_arg++) ^ *ivp;
448                 ivp++, nbytes--;
449             }
450         }
451     }
452
453     memcpy(ctx->iv, cdata->iv, AES_BLOCK_SIZE);
454
455     return 1;
456 }
457
458 static int
459 padlock_ofb_cipher(EVP_CIPHER_CTX *ctx, unsigned char *out_arg,
460                    const unsigned char *in_arg, size_t nbytes)
461 {
462     struct padlock_cipher_data *cdata = ALIGNED_CIPHER_DATA(ctx);
463     size_t chunk;
464
465     /*
466      * ctx->num is maintained in byte-oriented modes, such as CFB and OFB...
467      */
468     if ((chunk = ctx->num)) {   /* borrow chunk variable */
469         unsigned char *ivp = ctx->iv;
470
471         if (chunk >= AES_BLOCK_SIZE)
472             return 0;           /* bogus value */
473
474         while (chunk < AES_BLOCK_SIZE && nbytes != 0) {
475             *(out_arg++) = *(in_arg++) ^ ivp[chunk];
476             chunk++, nbytes--;
477         }
478
479         ctx->num = chunk % AES_BLOCK_SIZE;
480     }
481
482     if (nbytes == 0)
483         return 1;
484
485     memcpy(cdata->iv, ctx->iv, AES_BLOCK_SIZE);
486
487     if ((chunk = nbytes & ~(AES_BLOCK_SIZE - 1))) {
488         if (!padlock_ofb_encrypt(out_arg, in_arg, cdata, chunk))
489             return 0;
490         nbytes -= chunk;
491     }
492
493     if (nbytes) {
494         unsigned char *ivp = cdata->iv;
495
496         out_arg += chunk;
497         in_arg += chunk;
498         ctx->num = nbytes;
499         padlock_reload_key();   /* empirically found */
500         padlock_aes_block(ivp, ivp, cdata);
501         padlock_reload_key();   /* empirically found */
502         while (nbytes) {
503             *(out_arg++) = *(in_arg++) ^ *ivp;
504             ivp++, nbytes--;
505         }
506     }
507
508     memcpy(ctx->iv, cdata->iv, AES_BLOCK_SIZE);
509
510     return 1;
511 }
512
513 static void padlock_ctr32_encrypt_glue(const unsigned char *in,
514                                        unsigned char *out, size_t blocks,
515                                        struct padlock_cipher_data *ctx,
516                                        const unsigned char *ivec)
517 {
518     memcpy(ctx->iv, ivec, AES_BLOCK_SIZE);
519     padlock_ctr32_encrypt(out, in, ctx, AES_BLOCK_SIZE * blocks);
520 }
521
522 static int
523 padlock_ctr_cipher(EVP_CIPHER_CTX *ctx, unsigned char *out_arg,
524                    const unsigned char *in_arg, size_t nbytes)
525 {
526     struct padlock_cipher_data *cdata = ALIGNED_CIPHER_DATA(ctx);
527     unsigned int num = ctx->num;
528
529     CRYPTO_ctr128_encrypt_ctr32(in_arg, out_arg, nbytes,
530                                 cdata, ctx->iv, ctx->buf, &num,
531                                 (ctr128_f) padlock_ctr32_encrypt_glue);
532
533     ctx->num = (size_t)num;
534     return 1;
535 }
536
537 #    define EVP_CIPHER_block_size_ECB       AES_BLOCK_SIZE
538 #    define EVP_CIPHER_block_size_CBC       AES_BLOCK_SIZE
539 #    define EVP_CIPHER_block_size_OFB       1
540 #    define EVP_CIPHER_block_size_CFB       1
541 #    define EVP_CIPHER_block_size_CTR       1
542
543 /*
544  * Declaring so many ciphers by hand would be a pain. Instead introduce a bit
545  * of preprocessor magic :-)
546  */
547 #    define DECLARE_AES_EVP(ksize,lmode,umode)      \
548 static const EVP_CIPHER padlock_aes_##ksize##_##lmode = {       \
549         NID_aes_##ksize##_##lmode,              \
550         EVP_CIPHER_block_size_##umode,  \
551         AES_KEY_SIZE_##ksize,           \
552         AES_BLOCK_SIZE,                 \
553         0 | EVP_CIPH_##umode##_MODE,    \
554         padlock_aes_init_key,           \
555         padlock_##lmode##_cipher,       \
556         NULL,                           \
557         sizeof(struct padlock_cipher_data) + 16,        \
558         EVP_CIPHER_set_asn1_iv,         \
559         EVP_CIPHER_get_asn1_iv,         \
560         NULL,                           \
561         NULL                            \
562 }
563
564 DECLARE_AES_EVP(128, ecb, ECB);
565 DECLARE_AES_EVP(128, cbc, CBC);
566 DECLARE_AES_EVP(128, cfb, CFB);
567 DECLARE_AES_EVP(128, ofb, OFB);
568 DECLARE_AES_EVP(128, ctr, CTR);
569
570 DECLARE_AES_EVP(192, ecb, ECB);
571 DECLARE_AES_EVP(192, cbc, CBC);
572 DECLARE_AES_EVP(192, cfb, CFB);
573 DECLARE_AES_EVP(192, ofb, OFB);
574 DECLARE_AES_EVP(192, ctr, CTR);
575
576 DECLARE_AES_EVP(256, ecb, ECB);
577 DECLARE_AES_EVP(256, cbc, CBC);
578 DECLARE_AES_EVP(256, cfb, CFB);
579 DECLARE_AES_EVP(256, ofb, OFB);
580 DECLARE_AES_EVP(256, ctr, CTR);
581
582 static int
583 padlock_ciphers(ENGINE *e, const EVP_CIPHER **cipher, const int **nids,
584                 int nid)
585 {
586     /* No specific cipher => return a list of supported nids ... */
587     if (!cipher) {
588         *nids = padlock_cipher_nids;
589         return padlock_cipher_nids_num;
590     }
591
592     /* ... or the requested "cipher" otherwise */
593     switch (nid) {
594     case NID_aes_128_ecb:
595         *cipher = &padlock_aes_128_ecb;
596         break;
597     case NID_aes_128_cbc:
598         *cipher = &padlock_aes_128_cbc;
599         break;
600     case NID_aes_128_cfb:
601         *cipher = &padlock_aes_128_cfb;
602         break;
603     case NID_aes_128_ofb:
604         *cipher = &padlock_aes_128_ofb;
605         break;
606     case NID_aes_128_ctr:
607         *cipher = &padlock_aes_128_ctr;
608         break;
609
610     case NID_aes_192_ecb:
611         *cipher = &padlock_aes_192_ecb;
612         break;
613     case NID_aes_192_cbc:
614         *cipher = &padlock_aes_192_cbc;
615         break;
616     case NID_aes_192_cfb:
617         *cipher = &padlock_aes_192_cfb;
618         break;
619     case NID_aes_192_ofb:
620         *cipher = &padlock_aes_192_ofb;
621         break;
622     case NID_aes_192_ctr:
623         *cipher = &padlock_aes_192_ctr;
624         break;
625
626     case NID_aes_256_ecb:
627         *cipher = &padlock_aes_256_ecb;
628         break;
629     case NID_aes_256_cbc:
630         *cipher = &padlock_aes_256_cbc;
631         break;
632     case NID_aes_256_cfb:
633         *cipher = &padlock_aes_256_cfb;
634         break;
635     case NID_aes_256_ofb:
636         *cipher = &padlock_aes_256_ofb;
637         break;
638     case NID_aes_256_ctr:
639         *cipher = &padlock_aes_256_ctr;
640         break;
641
642     default:
643         /* Sorry, we don't support this NID */
644         *cipher = NULL;
645         return 0;
646     }
647
648     return 1;
649 }
650
651 /* Prepare the encryption key for PadLock usage */
652 static int
653 padlock_aes_init_key(EVP_CIPHER_CTX *ctx, const unsigned char *key,
654                      const unsigned char *iv, int enc)
655 {
656     struct padlock_cipher_data *cdata;
657     int key_len = EVP_CIPHER_CTX_key_length(ctx) * 8;
658     unsigned long mode = EVP_CIPHER_CTX_mode(ctx);
659
660     if (key == NULL)
661         return 0;               /* ERROR */
662
663     cdata = ALIGNED_CIPHER_DATA(ctx);
664     memset(cdata, 0, sizeof(*cdata));
665
666     /* Prepare Control word. */
667     if (mode == EVP_CIPH_OFB_MODE || mode == EVP_CIPH_CTR_MODE)
668         cdata->cword.b.encdec = 0;
669     else
670         cdata->cword.b.encdec = (ctx->encrypt == 0);
671     cdata->cword.b.rounds = 10 + (key_len - 128) / 32;
672     cdata->cword.b.ksize = (key_len - 128) / 64;
673
674     switch (key_len) {
675     case 128:
676         /*
677          * PadLock can generate an extended key for AES128 in hardware
678          */
679         memcpy(cdata->ks.rd_key, key, AES_KEY_SIZE_128);
680         cdata->cword.b.keygen = 0;
681         break;
682
683     case 192:
684     case 256:
685         /*
686          * Generate an extended AES key in software. Needed for AES192/AES256
687          */
688         /*
689          * Well, the above applies to Stepping 8 CPUs and is listed as
690          * hardware errata. They most likely will fix it at some point and
691          * then a check for stepping would be due here.
692          */
693         if ((mode == EVP_CIPH_ECB_MODE || mode == EVP_CIPH_CBC_MODE)
694             && !enc)
695             AES_set_decrypt_key(key, key_len, &cdata->ks);
696         else
697             AES_set_encrypt_key(key, key_len, &cdata->ks);
698 #    ifndef AES_ASM
699         /*
700          * OpenSSL C functions use byte-swapped extended key.
701          */
702         padlock_key_bswap(&cdata->ks);
703 #    endif
704         cdata->cword.b.keygen = 1;
705         break;
706
707     default:
708         /* ERROR */
709         return 0;
710     }
711
712     /*
713      * This is done to cover for cases when user reuses the
714      * context for new key. The catch is that if we don't do
715      * this, padlock_eas_cipher might proceed with old key...
716      */
717     padlock_reload_key();
718
719     return 1;
720 }
721
722 #   endif                       /* OPENSSL_NO_AES */
723
724 /* ===== Random Number Generator ===== */
725 /*
726  * This code is not engaged. The reason is that it does not comply
727  * with recommendations for VIA RNG usage for secure applications
728  * (posted at http://www.via.com.tw/en/viac3/c3.jsp) nor does it
729  * provide meaningful error control...
730  */
731 /*
732  * Wrapper that provides an interface between the API and the raw PadLock
733  * RNG
734  */
735 static int padlock_rand_bytes(unsigned char *output, int count)
736 {
737     unsigned int eax, buf;
738
739     while (count >= 8) {
740         eax = padlock_xstore(output, 0);
741         if (!(eax & (1 << 6)))
742             return 0;           /* RNG disabled */
743         /* this ---vv--- covers DC bias, Raw Bits and String Filter */
744         if (eax & (0x1F << 10))
745             return 0;
746         if ((eax & 0x1F) == 0)
747             continue;           /* no data, retry... */
748         if ((eax & 0x1F) != 8)
749             return 0;           /* fatal failure...  */
750         output += 8;
751         count -= 8;
752     }
753     while (count > 0) {
754         eax = padlock_xstore(&buf, 3);
755         if (!(eax & (1 << 6)))
756             return 0;           /* RNG disabled */
757         /* this ---vv--- covers DC bias, Raw Bits and String Filter */
758         if (eax & (0x1F << 10))
759             return 0;
760         if ((eax & 0x1F) == 0)
761             continue;           /* no data, retry... */
762         if ((eax & 0x1F) != 1)
763             return 0;           /* fatal failure...  */
764         *output++ = (unsigned char)buf;
765         count--;
766     }
767     *(volatile unsigned int *)&buf = 0;
768
769     return 1;
770 }
771
772 /* Dummy but necessary function */
773 static int padlock_rand_status(void)
774 {
775     return 1;
776 }
777
778 /* Prepare structure for registration */
779 static RAND_METHOD padlock_rand = {
780     NULL,                       /* seed */
781     padlock_rand_bytes,         /* bytes */
782     NULL,                       /* cleanup */
783     NULL,                       /* add */
784     padlock_rand_bytes,         /* pseudorand */
785     padlock_rand_status,        /* rand status */
786 };
787
788 #  else                         /* !COMPILE_HW_PADLOCK */
789 #   ifndef OPENSSL_NO_DYNAMIC_ENGINE
790 OPENSSL_EXPORT
791     int bind_engine(ENGINE *e, const char *id, const dynamic_fns *fns);
792 OPENSSL_EXPORT
793     int bind_engine(ENGINE *e, const char *id, const dynamic_fns *fns)
794 {
795     return 0;
796 }
797
798 IMPLEMENT_DYNAMIC_CHECK_FN()
799 #   endif
800 #  endif                        /* COMPILE_HW_PADLOCK */
801 # endif                         /* !OPENSSL_NO_HW_PADLOCK */
802 #endif                          /* !OPENSSL_NO_HW */