crypto/modes/modes_lcl.h

   1 /*
   2  * Copyright 2010-2018 The OpenSSL Project Authors. All Rights Reserved.
   3  *
   4  * Licensed under the Apache License 2.0 (the "License").  You may not use
   5  * this file except in compliance with the License.  You can obtain a copy
   6  * in the file LICENSE in the source distribution or at
   7  * https://www.openssl.org/source/license.html
   8  */
   9
  10 #include <openssl/modes.h>
  11
  12 #if (defined(_WIN32) || defined(_WIN64)) && !defined(__MINGW32__)
  13 typedef __int64 i64;
  14 typedef unsigned __int64 u64;
  15 # define U64(C) C##UI64
  16 #elif defined(__arch64__)
  17 typedef long i64;
  18 typedef unsigned long u64;
  19 # define U64(C) C##UL
  20 #else
  21 typedef long long i64;
  22 typedef unsigned long long u64;
  23 # define U64(C) C##ULL
  24 #endif
  25
  26 typedef unsigned int u32;
  27 typedef unsigned char u8;
  28
  29 #define STRICT_ALIGNMENT 1
  30 #ifndef PEDANTIC
  31 # if defined(__i386)    || defined(__i386__)    || \
  32      defined(__x86_64)  || defined(__x86_64__)  || \
  33      defined(_M_IX86)   || defined(_M_AMD64)    || defined(_M_X64) || \
  34      defined(__aarch64__)                       || \
  35      defined(__s390__)  || defined(__s390x__)
  36 #  undef STRICT_ALIGNMENT
  37 # endif
  38 #endif
  39
  40 #if !defined(PEDANTIC) && !defined(OPENSSL_NO_ASM) && !defined(OPENSSL_NO_INLINE_ASM)
  41 # if defined(__GNUC__) && __GNUC__>=2
  42 #  if defined(__x86_64) || defined(__x86_64__)
  43 #   define BSWAP8(x) ({ u64 ret_=(x);                   \
  44                         asm ("bswapq %0"                \
  45                         : "+r"(ret_));   ret_;          })
  46 #   define BSWAP4(x) ({ u32 ret_=(x);                   \
  47                         asm ("bswapl %0"                \
  48                         : "+r"(ret_));   ret_;          })
  49 #  elif (defined(__i386) || defined(__i386__)) && !defined(I386_ONLY)
  50 #   define BSWAP8(x) ({ u32 lo_=(u64)(x)>>32,hi_=(x);   \
  51                         asm ("bswapl %0; bswapl %1"     \
  52                         : "+r"(hi_),"+r"(lo_));         \
  53                         (u64)hi_<<32|lo_;               })
  54 #   define BSWAP4(x) ({ u32 ret_=(x);                   \
  55                         asm ("bswapl %0"                \
  56                         : "+r"(ret_));   ret_;          })
  57 #  elif defined(__aarch64__)
  58 #   define BSWAP8(x) ({ u64 ret_;                       \
  59                         asm ("rev %0,%1"                \
  60                         : "=r"(ret_) : "r"(x)); ret_;   })
  61 #   define BSWAP4(x) ({ u32 ret_;                       \
  62                         asm ("rev %w0,%w1"              \
  63                         : "=r"(ret_) : "r"(x)); ret_;   })
  64 #  elif (defined(__arm__) || defined(__arm)) && !defined(STRICT_ALIGNMENT)
  65 #   define BSWAP8(x) ({ u32 lo_=(u64)(x)>>32,hi_=(x);   \
  66                         asm ("rev %0,%0; rev %1,%1"     \
  67                         : "+r"(hi_),"+r"(lo_));         \
  68                         (u64)hi_<<32|lo_;               })
  69 #   define BSWAP4(x) ({ u32 ret_;                       \
  70                         asm ("rev %0,%1"                \
  71                         : "=r"(ret_) : "r"((u32)(x)));  \
  72                         ret_;                           })
  73 #  endif
  74 # elif defined(_MSC_VER)
  75 #  if _MSC_VER>=1300
  76 #   include <stdlib.h>
  77 #   pragma intrinsic(_byteswap_uint64,_byteswap_ulong)
  78 #   define BSWAP8(x)    _byteswap_uint64((u64)(x))
  79 #   define BSWAP4(x)    _byteswap_ulong((u32)(x))
  80 #  elif defined(_M_IX86)
  81 __inline u32 _bswap4(u32 val)
  82 {
  83 _asm mov eax, val _asm bswap eax}
  84 #   define BSWAP4(x)    _bswap4(x)
  85 #  endif
  86 # endif
  87 #endif
  88 #if defined(BSWAP4) && !defined(STRICT_ALIGNMENT)
  89 # define GETU32(p)       BSWAP4(*(const u32 *)(p))
  90 # define PUTU32(p,v)     *(u32 *)(p) = BSWAP4(v)
  91 #else
  92 # define GETU32(p)       ((u32)(p)[0]<<24|(u32)(p)[1]<<16|(u32)(p)[2]<<8|(u32)(p)[3])
  93 # define PUTU32(p,v)     ((p)[0]=(u8)((v)>>24),(p)[1]=(u8)((v)>>16),(p)[2]=(u8)((v)>>8),(p)[3]=(u8)(v))
  94 #endif
  95 /*- GCM definitions */ typedef struct {
  96     u64 hi, lo;
  97 } u128;
  98
  99 #ifdef  TABLE_BITS
 100 # undef  TABLE_BITS
 101 #endif
 102 /*
 103  * Even though permitted values for TABLE_BITS are 8, 4 and 1, it should
 104  * never be set to 8 [or 1]. For further information see gcm128.c.
 105  */
 106 #define TABLE_BITS 4
 107
 108 struct gcm128_context {
 109     /* Following 6 names follow names in GCM specification */
 110     union {
 111         u64 u[2];
 112         u32 d[4];
 113         u8 c[16];
 114         size_t t[16 / sizeof(size_t)];
 115     } Yi, EKi, EK0, len, Xi, H;
 116     /*
 117      * Relative position of Xi, H and pre-computed Htable is used in some
 118      * assembler modules, i.e. don't change the order!
 119      */
 120 #if TABLE_BITS==8
 121     u128 Htable[256];
 122 #else
 123     u128 Htable[16];
 124     void (*gmult) (u64 Xi[2], const u128 Htable[16]);
 125     void (*ghash) (u64 Xi[2], const u128 Htable[16], const u8 *inp,
 126                    size_t len);
 127 #endif
 128     unsigned int mres, ares;
 129     block128_f block;
 130     void *key;
 131 #if !defined(OPENSSL_SMALL_FOOTPRINT)
 132     unsigned char Xn[48];
 133 #endif
 134 };
 135
 136 /*
 137  * The maximum permitted number of cipher blocks per data unit in XTS mode.
 138  * Reference IEEE Std 1619-2018.
 139  */
 140 #define XTS_MAX_BLOCKS_PER_DATA_UNIT            (1<<20)
 141
 142 struct xts128_context {
 143     void *key1, *key2;
 144     block128_f block1, block2;
 145 };
 146
 147 struct ccm128_context {
 148     union {
 149         u64 u[2];
 150         u8 c[16];
 151     } nonce, cmac;
 152     u64 blocks;
 153     block128_f block;
 154     void *key;
 155 };
 156
 157 #ifndef OPENSSL_NO_OCB
 158
 159 typedef union {
 160     u64 a[2];
 161     unsigned char c[16];
 162 } OCB_BLOCK;
 163 # define ocb_block16_xor(in1,in2,out) \
 164     ( (out)->a[0]=(in1)->a[0]^(in2)->a[0], \
 165       (out)->a[1]=(in1)->a[1]^(in2)->a[1] )
 166 # if STRICT_ALIGNMENT
 167 #  define ocb_block16_xor_misaligned(in1,in2,out) \
 168     ocb_block_xor((in1)->c,(in2)->c,16,(out)->c)
 169 # else
 170 #  define ocb_block16_xor_misaligned ocb_block16_xor
 171 # endif
 172
 173 struct ocb128_context {
 174     /* Need both encrypt and decrypt key schedules for decryption */
 175     block128_f encrypt;
 176     block128_f decrypt;
 177     void *keyenc;
 178     void *keydec;
 179     ocb128_f stream;    /* direction dependent */
 180     /* Key dependent variables. Can be reused if key remains the same */
 181     size_t l_index;
 182     size_t max_l_index;
 183     OCB_BLOCK l_star;
 184     OCB_BLOCK l_dollar;
 185     OCB_BLOCK *l;
 186     /* Must be reset for each session */
 187     struct {
 188         u64 blocks_hashed;
 189         u64 blocks_processed;
 190         OCB_BLOCK offset_aad;
 191         OCB_BLOCK sum;
 192         OCB_BLOCK offset;
 193         OCB_BLOCK checksum;
 194     } sess;
 195 };
 196 #endif                          /* OPENSSL_NO_OCB */
 197
 198 #ifndef OPENSSL_NO_SIV
 199
 200 #include <openssl/cmac.h>
 201
 202 #define SIV_LEN 16
 203
 204 typedef union siv_block_u {
 205     uint64_t word[SIV_LEN/sizeof(uint64_t)];
 206     unsigned char byte[SIV_LEN];
 207 } SIV_BLOCK;
 208
 209 struct siv128_context {
 210     /* d stores intermediate results of S2V; it corresponds to D from the
 211        pseudocode in section 2.4 of RFC 5297. */
 212     SIV_BLOCK d;
 213     SIV_BLOCK tag;
 214     EVP_CIPHER_CTX *cipher_ctx;
 215     EVP_MAC_CTX *mac_ctx_init;
 216     EVP_MAC_CTX *mac_ctx;
 217     int final_ret;
 218     int crypto_ok;
 219 };
 220
 221 #endif /* OPENSSL_NO_SIV */