tests: Shut the shell up unless verbose
[openssl.git] / test / ssl_test_ctx_test.c
1 /*
2  * Copyright 2016 The OpenSSL Project Authors. All Rights Reserved.
3  *
4  * Licensed under the OpenSSL license (the "License").  You may not use
5  * this file except in compliance with the License.  You can obtain a copy
6  * in the file LICENSE in the source distribution or at
7  * https://www.openssl.org/source/license.html
8  */
9
10 /*
11  * Ideally, CONF should offer standard parsing methods and cover them
12  * in tests. But since we have no CONF tests, we use a custom test for now.
13  */
14
15 #include <stdio.h>
16
17 #include "e_os.h"
18 #include "ssl_test_ctx.h"
19 #include "testutil.h"
20 #include <openssl/e_os2.h>
21 #include <openssl/err.h>
22 #include <openssl/conf.h>
23 #include <openssl/ssl.h>
24
25 static CONF *conf = NULL;
26
27 typedef struct ssl_test_ctx_test_fixture {
28     const char *test_case_name;
29     const char *test_section;
30     /* Expected parsed configuration. */
31     SSL_TEST_CTX *expected_ctx;
32 } SSL_TEST_CTX_TEST_FIXTURE;
33
34 /* Returns 1 if the contexts are equal, 0 otherwise. */
35 static int SSL_TEST_CTX_equal(SSL_TEST_CTX *ctx, SSL_TEST_CTX *ctx2)
36 {
37     if (ctx->expected_result != ctx2->expected_result) {
38         fprintf(stderr, "ExpectedResult mismatch: %s vs %s.\n",
39                 ssl_test_result_name(ctx->expected_result),
40                 ssl_test_result_name(ctx2->expected_result));
41         return 0;
42     }
43     if (ctx->client_alert != ctx2->client_alert) {
44         fprintf(stderr, "ClientAlert mismatch: %s vs %s.\n",
45                 ssl_alert_name(ctx->client_alert),
46                 ssl_alert_name(ctx2->client_alert));
47         return 0;
48     }
49     if (ctx->server_alert != ctx2->server_alert) {
50         fprintf(stderr, "ServerAlert mismatch: %s vs %s.\n",
51                 ssl_alert_name(ctx->server_alert),
52                 ssl_alert_name(ctx2->server_alert));
53         return 0;
54     }
55     if (ctx->protocol != ctx2->protocol) {
56         fprintf(stderr, "ClientAlert mismatch: %s vs %s.\n",
57                 ssl_protocol_name(ctx->protocol),
58                 ssl_protocol_name(ctx2->protocol));
59         return 0;
60     }
61     if (ctx->client_verify_callback != ctx2->client_verify_callback) {
62         fprintf(stderr, "ClientVerifyCallback mismatch: %s vs %s.\n",
63                 ssl_verify_callback_name(ctx->client_verify_callback),
64                 ssl_verify_callback_name(ctx2->client_verify_callback));
65         return 0;
66     }
67
68     return 1;
69 }
70
71 static SSL_TEST_CTX_TEST_FIXTURE set_up(const char *const test_case_name)
72 {
73     SSL_TEST_CTX_TEST_FIXTURE fixture;
74     fixture.test_case_name = test_case_name;
75     fixture.expected_ctx = SSL_TEST_CTX_new();
76     OPENSSL_assert(fixture.expected_ctx != NULL);
77     return fixture;
78 }
79
80 static int execute_test(SSL_TEST_CTX_TEST_FIXTURE fixture)
81 {
82     int success = 0;
83
84     SSL_TEST_CTX *ctx = SSL_TEST_CTX_create(conf, fixture.test_section);
85
86     if (ctx == NULL) {
87         fprintf(stderr, "Failed to parse good configuration %s.\n",
88                 fixture.test_section);
89         goto err;
90     }
91
92     if (!SSL_TEST_CTX_equal(ctx, fixture.expected_ctx))
93         goto err;
94
95     success = 1;
96  err:
97     SSL_TEST_CTX_free(ctx);
98     return success;
99 }
100
101 static int execute_failure_test(SSL_TEST_CTX_TEST_FIXTURE fixture)
102 {
103     SSL_TEST_CTX *ctx = SSL_TEST_CTX_create(conf, fixture.test_section);
104
105     if (ctx != NULL) {
106         fprintf(stderr, "Parsing bad configuration %s succeeded.\n",
107                 fixture.test_section);
108         SSL_TEST_CTX_free(ctx);
109         return 0;
110     }
111
112     return 1;
113 }
114
115 static void tear_down(SSL_TEST_CTX_TEST_FIXTURE fixture)
116 {
117     SSL_TEST_CTX_free(fixture.expected_ctx);
118     ERR_print_errors_fp(stderr);
119 }
120
121 #define SETUP_SSL_TEST_CTX_TEST_FIXTURE()                       \
122     SETUP_TEST_FIXTURE(SSL_TEST_CTX_TEST_FIXTURE, set_up)
123 #define EXECUTE_SSL_TEST_CTX_TEST()             \
124     EXECUTE_TEST(execute_test, tear_down)
125 #define EXECUTE_SSL_TEST_CTX_FAILURE_TEST()             \
126     EXECUTE_TEST(execute_failure_test, tear_down)
127
128 static int test_empty_configuration()
129 {
130     SETUP_SSL_TEST_CTX_TEST_FIXTURE();
131     fixture.test_section = "ssltest_default";
132     fixture.expected_ctx->expected_result = SSL_TEST_SUCCESS;
133     EXECUTE_SSL_TEST_CTX_TEST();
134 }
135
136 static int test_good_configuration()
137 {
138     SETUP_SSL_TEST_CTX_TEST_FIXTURE();
139     fixture.test_section = "ssltest_good";
140     fixture.expected_ctx->expected_result = SSL_TEST_SERVER_FAIL;
141     fixture.expected_ctx->client_alert = SSL_AD_UNKNOWN_CA;
142     fixture.expected_ctx->server_alert = 0;  /* No alert. */
143     fixture.expected_ctx->protocol = TLS1_1_VERSION;
144     fixture.expected_ctx->client_verify_callback = SSL_TEST_VERIFY_REJECT_ALL,
145     EXECUTE_SSL_TEST_CTX_TEST();
146 }
147
148 static const char *bad_configurations[] = {
149     "ssltest_unknown_option",
150     "ssltest_unknown_expected_result",
151     "ssltest_unknown_alert",
152     "ssltest_unknown_protocol",
153     "ssltest_unknown_verify_callback",
154 };
155
156 static int test_bad_configuration(int idx)
157 {
158         SETUP_SSL_TEST_CTX_TEST_FIXTURE();
159         fixture.test_section = bad_configurations[idx];
160         EXECUTE_SSL_TEST_CTX_FAILURE_TEST();
161 }
162
163 int main(int argc, char **argv)
164 {
165     int result = 0;
166
167     if (argc != 2)
168         return 1;
169
170     conf = NCONF_new(NULL);
171     OPENSSL_assert(conf != NULL);
172
173     /* argv[1] should point to test/ssl_test_ctx_test.conf */
174     OPENSSL_assert(NCONF_load(conf, argv[1], NULL) > 0);
175
176
177     ADD_TEST(test_empty_configuration);
178     ADD_TEST(test_good_configuration);
179     ADD_ALL_TESTS(test_bad_configuration, OSSL_NELEM(bad_configurations));
180
181     result = run_tests(argv[0]);
182
183     NCONF_free(conf);
184
185     return result;
186 }