521281109bbce1517ef6b61b579156463d2f7412
[openssl.git] / fuzz / bndiv.c
1 /*
2  * Copyright 2016 The OpenSSL Project Authors. All Rights Reserved.
3  *
4  * Licensed under the OpenSSL licenses, (the "License");
5  * you may not use this file except in compliance with the License.
6  * You may obtain a copy of the License at
7  * https://www.openssl.org/source/license.html
8  * or in the file LICENSE in the source distribution.
9  */
10
11 /*
12  * Confirm that if (d, r) = a / b, then b * d + r == a, and that sign(d) ==
13  * sign(a), and 0 <= r <= b
14  */
15
16 #include <stdio.h>
17 #include <openssl/bn.h>
18 #include "fuzzer.h"
19
20 int FuzzerTestOneInput(const uint8_t *buf, size_t len) {
21     int success = 0;
22     static BN_CTX *ctx;
23     static BIGNUM *b1;
24     static BIGNUM *b2;
25     static BIGNUM *b3;
26     static BIGNUM *b4;
27     static BIGNUM *b5;
28
29     if (ctx == NULL) {
30         b1 = BN_new();
31         b2 = BN_new();
32         b3 = BN_new();
33         b4 = BN_new();
34         b5 = BN_new();
35         ctx = BN_CTX_new();
36     }
37     // We are going to split the buffer in two, sizes l1 and l2, giving b1 and
38     // b2.
39     size_t l1 = 0, l2 = 0;
40     // s1 and s2 will be the signs for b1 and b2.
41     int s1 = 0, s2 = 0;
42     if (len > 0) {
43         --len;
44         // Use first byte to divide the remaining buffer into 3Fths. I admit
45         // this disallows some number sizes. If it matters, better ideas are
46         // welcome (Ben).
47         l1 = ((buf[0] & 0x3f) * len) / 0x3f;
48         s1 = buf[0] & 0x40;
49         s2 = buf[0] & 0x80;
50         ++buf;
51         l2 = len - l1;
52     }
53     OPENSSL_assert(BN_bin2bn(buf, l1, b1) == b1);
54     BN_set_negative(b1, s1);
55     OPENSSL_assert(BN_bin2bn(buf + l1, l2, b2) == b2);
56     BN_set_negative(b2, s2);
57
58     // divide by 0 is an error
59     if (BN_is_zero(b2)) {
60         success = 1;
61         goto done;
62     }
63
64     OPENSSL_assert(BN_div(b3, b4, b1, b2, ctx));
65     if (BN_is_zero(b1))
66         success = BN_is_zero(b3) && BN_is_zero(b4);
67     else if (BN_is_negative(b1))
68         success = (BN_is_negative(b3) != BN_is_negative(b2) || BN_is_zero(b3))
69             && (BN_is_negative(b4) || BN_is_zero(b4));
70     else
71         success = (BN_is_negative(b3) == BN_is_negative(b2)  || BN_is_zero(b3))
72             && (!BN_is_negative(b4) || BN_is_zero(b4));
73     OPENSSL_assert(BN_mul(b5, b3, b2, ctx));
74     OPENSSL_assert(BN_add(b5, b5, b4));
75
76     success = success && BN_cmp(b5, b1) == 0;
77     if (!success) {
78         BN_print_fp(stdout, b1);
79         putchar('\n');
80         BN_print_fp(stdout, b2);
81         putchar('\n');
82         BN_print_fp(stdout, b3);
83         putchar('\n');
84         BN_print_fp(stdout, b4);
85         putchar('\n');
86         BN_print_fp(stdout, b5);
87         putchar('\n');
88         printf("%d %d %d %d %d %d %d\n", BN_is_negative(b1),
89                BN_is_negative(b2),
90                BN_is_negative(b3), BN_is_negative(b4), BN_is_zero(b4),
91                BN_is_negative(b3) != BN_is_negative(b2)
92                && (BN_is_negative(b4) || BN_is_zero(b4)),
93                BN_cmp(b5, b1));
94         puts("----\n");
95     }
96
97  done:
98     OPENSSL_assert(success);
99
100     return 0;
101 }