f1febd8f5a4e7b6768f94f1f2b650d77c54607c8
[openssl.git] / test / ossl_shim / ossl_shim.cc
1 /*
2  * Copyright 1995-2016 The OpenSSL Project Authors. All Rights Reserved.
3  *
4  * Licensed under the OpenSSL license (the "License").  You may not use
5  * this file except in compliance with the License.  You can obtain a copy
6  * in the file LICENSE in the source distribution or at
7  * https://www.openssl.org/source/license.html
8  */
9
10 #if !defined(__STDC_FORMAT_MACROS)
11 #define __STDC_FORMAT_MACROS
12 #endif
13
14 #include <openssl/e_os2.h>
15
16 #if !defined(OPENSSL_SYS_WINDOWS)
17 #include <arpa/inet.h>
18 #include <netinet/in.h>
19 #include <netinet/tcp.h>
20 #include <signal.h>
21 #include <sys/socket.h>
22 #include <sys/time.h>
23 #include <unistd.h>
24 #else
25 #include <io.h>
26 OPENSSL_MSVC_PRAGMA(warning(push, 3))
27 #include <winsock2.h>
28 #include <ws2tcpip.h>
29 OPENSSL_MSVC_PRAGMA(warning(pop))
30
31 OPENSSL_MSVC_PRAGMA(comment(lib, "Ws2_32.lib"))
32 #endif
33
34 #include <assert.h>
35 #include <inttypes.h>
36 #include <string.h>
37
38 #include <openssl/bio.h>
39 #include <openssl/buffer.h>
40 #include <openssl/bn.h>
41 #include <openssl/crypto.h>
42 #include <openssl/dh.h>
43 #include <openssl/err.h>
44 #include <openssl/evp.h>
45 #include <openssl/hmac.h>
46 #include <openssl/objects.h>
47 #include <openssl/rand.h>
48 #include <openssl/ssl.h>
49 #include <openssl/x509.h>
50
51 #include <memory>
52 #include <string>
53 #include <vector>
54
55 #include "async_bio.h"
56 #include "packeted_bio.h"
57 #include "test_config.h"
58
59 namespace bssl {
60
61 #if !defined(OPENSSL_SYS_WINDOWS)
62 static int closesocket(int sock) {
63   return close(sock);
64 }
65
66 static void PrintSocketError(const char *func) {
67   perror(func);
68 }
69 #else
70 static void PrintSocketError(const char *func) {
71   fprintf(stderr, "%s: %d\n", func, WSAGetLastError());
72 }
73 #endif
74
75 static int Usage(const char *program) {
76   fprintf(stderr, "Usage: %s [flags...]\n", program);
77   return 1;
78 }
79
80 struct TestState {
81   // async_bio is async BIO which pauses reads and writes.
82   BIO *async_bio = nullptr;
83   // packeted_bio is the packeted BIO which simulates read timeouts.
84   BIO *packeted_bio = nullptr;
85   bool cert_ready = false;
86   bool handshake_done = false;
87   // private_key is the underlying private key used when testing custom keys.
88   bssl::UniquePtr<EVP_PKEY> private_key;
89   bool got_new_session = false;
90   bssl::UniquePtr<SSL_SESSION> new_session;
91   bool ticket_decrypt_done = false;
92   bool alpn_select_done = false;
93 };
94
95 static void TestStateExFree(void *parent, void *ptr, CRYPTO_EX_DATA *ad,
96                             int index, long argl, void *argp) {
97   delete ((TestState *)ptr);
98 }
99
100 static int g_config_index = 0;
101 static int g_state_index = 0;
102
103 static bool SetTestConfig(SSL *ssl, const TestConfig *config) {
104   return SSL_set_ex_data(ssl, g_config_index, (void *)config) == 1;
105 }
106
107 static const TestConfig *GetTestConfig(const SSL *ssl) {
108   return (const TestConfig *)SSL_get_ex_data(ssl, g_config_index);
109 }
110
111 static bool SetTestState(SSL *ssl, std::unique_ptr<TestState> state) {
112   // |SSL_set_ex_data| takes ownership of |state| only on success.
113   if (SSL_set_ex_data(ssl, g_state_index, state.get()) == 1) {
114     state.release();
115     return true;
116   }
117   return false;
118 }
119
120 static TestState *GetTestState(const SSL *ssl) {
121   return (TestState *)SSL_get_ex_data(ssl, g_state_index);
122 }
123
124 static bssl::UniquePtr<X509> LoadCertificate(const std::string &file) {
125   bssl::UniquePtr<BIO> bio(BIO_new(BIO_s_file()));
126   if (!bio || !BIO_read_filename(bio.get(), file.c_str())) {
127     return nullptr;
128   }
129   return bssl::UniquePtr<X509>(PEM_read_bio_X509(bio.get(), NULL, NULL, NULL));
130 }
131
132 static bssl::UniquePtr<EVP_PKEY> LoadPrivateKey(const std::string &file) {
133   bssl::UniquePtr<BIO> bio(BIO_new(BIO_s_file()));
134   if (!bio || !BIO_read_filename(bio.get(), file.c_str())) {
135     return nullptr;
136   }
137   return bssl::UniquePtr<EVP_PKEY>(
138       PEM_read_bio_PrivateKey(bio.get(), NULL, NULL, NULL));
139 }
140
141 template<typename T>
142 struct Free {
143   void operator()(T *buf) {
144     free(buf);
145   }
146 };
147
148 static bool GetCertificate(SSL *ssl, bssl::UniquePtr<X509> *out_x509,
149                            bssl::UniquePtr<EVP_PKEY> *out_pkey) {
150   const TestConfig *config = GetTestConfig(ssl);
151
152   if (!config->key_file.empty()) {
153     *out_pkey = LoadPrivateKey(config->key_file.c_str());
154     if (!*out_pkey) {
155       return false;
156     }
157   }
158   if (!config->cert_file.empty()) {
159     *out_x509 = LoadCertificate(config->cert_file.c_str());
160     if (!*out_x509) {
161       return false;
162     }
163   }
164   return true;
165 }
166
167 static bool InstallCertificate(SSL *ssl) {
168   bssl::UniquePtr<X509> x509;
169   bssl::UniquePtr<EVP_PKEY> pkey;
170   if (!GetCertificate(ssl, &x509, &pkey)) {
171     return false;
172   }
173
174   if (pkey && !SSL_use_PrivateKey(ssl, pkey.get())) {
175     return false;
176   }
177
178   if (x509 && !SSL_use_certificate(ssl, x509.get())) {
179     return false;
180   }
181
182   return true;
183 }
184
185 static int ClientCertCallback(SSL *ssl, X509 **out_x509, EVP_PKEY **out_pkey) {
186   if (GetTestConfig(ssl)->async && !GetTestState(ssl)->cert_ready) {
187     return -1;
188   }
189
190   bssl::UniquePtr<X509> x509;
191   bssl::UniquePtr<EVP_PKEY> pkey;
192   if (!GetCertificate(ssl, &x509, &pkey)) {
193     return -1;
194   }
195
196   // Return zero for no certificate.
197   if (!x509) {
198     return 0;
199   }
200
201   // Asynchronous private keys are not supported with client_cert_cb.
202   *out_x509 = x509.release();
203   *out_pkey = pkey.release();
204   return 1;
205 }
206
207 static int VerifySucceed(X509_STORE_CTX *store_ctx, void *arg) {
208   return 1;
209 }
210
211 static int VerifyFail(X509_STORE_CTX *store_ctx, void *arg) {
212   X509_STORE_CTX_set_error(store_ctx, X509_V_ERR_APPLICATION_VERIFICATION);
213   return 0;
214 }
215
216 static int NextProtosAdvertisedCallback(SSL *ssl, const uint8_t **out,
217                                         unsigned int *out_len, void *arg) {
218   const TestConfig *config = GetTestConfig(ssl);
219   if (config->advertise_npn.empty()) {
220     return SSL_TLSEXT_ERR_NOACK;
221   }
222
223   *out = (const uint8_t*)config->advertise_npn.data();
224   *out_len = config->advertise_npn.size();
225   return SSL_TLSEXT_ERR_OK;
226 }
227
228 static int NextProtoSelectCallback(SSL* ssl, uint8_t** out, uint8_t* outlen,
229                                    const uint8_t* in, unsigned inlen, void* arg) {
230   const TestConfig *config = GetTestConfig(ssl);
231   if (config->select_next_proto.empty()) {
232     return SSL_TLSEXT_ERR_NOACK;
233   }
234
235   *out = (uint8_t*)config->select_next_proto.data();
236   *outlen = config->select_next_proto.size();
237   return SSL_TLSEXT_ERR_OK;
238 }
239
240 static int AlpnSelectCallback(SSL* ssl, const uint8_t** out, uint8_t* outlen,
241                               const uint8_t* in, unsigned inlen, void* arg) {
242   if (GetTestState(ssl)->alpn_select_done) {
243     fprintf(stderr, "AlpnSelectCallback called after completion.\n");
244     exit(1);
245   }
246
247   GetTestState(ssl)->alpn_select_done = true;
248
249   const TestConfig *config = GetTestConfig(ssl);
250   if (config->decline_alpn) {
251     return SSL_TLSEXT_ERR_NOACK;
252   }
253
254   if (!config->expected_advertised_alpn.empty() &&
255       (config->expected_advertised_alpn.size() != inlen ||
256        memcmp(config->expected_advertised_alpn.data(),
257               in, inlen) != 0)) {
258     fprintf(stderr, "bad ALPN select callback inputs\n");
259     exit(1);
260   }
261
262   *out = (const uint8_t*)config->select_alpn.data();
263   *outlen = config->select_alpn.size();
264   return SSL_TLSEXT_ERR_OK;
265 }
266
267 static unsigned PskClientCallback(SSL *ssl, const char *hint,
268                                   char *out_identity,
269                                   unsigned max_identity_len,
270                                   uint8_t *out_psk, unsigned max_psk_len) {
271   const TestConfig *config = GetTestConfig(ssl);
272
273   if (config->psk_identity.empty()) {
274     if (hint != nullptr) {
275       fprintf(stderr, "Server PSK hint was non-null.\n");
276       return 0;
277     }
278   } else if (hint == nullptr ||
279              strcmp(hint, config->psk_identity.c_str()) != 0) {
280     fprintf(stderr, "Server PSK hint did not match.\n");
281     return 0;
282   }
283
284   // Account for the trailing '\0' for the identity.
285   if (config->psk_identity.size() >= max_identity_len ||
286       config->psk.size() > max_psk_len) {
287     fprintf(stderr, "PSK buffers too small\n");
288     return 0;
289   }
290
291   BUF_strlcpy(out_identity, config->psk_identity.c_str(),
292               max_identity_len);
293   memcpy(out_psk, config->psk.data(), config->psk.size());
294   return config->psk.size();
295 }
296
297 static unsigned PskServerCallback(SSL *ssl, const char *identity,
298                                   uint8_t *out_psk, unsigned max_psk_len) {
299   const TestConfig *config = GetTestConfig(ssl);
300
301   if (strcmp(identity, config->psk_identity.c_str()) != 0) {
302     fprintf(stderr, "Client PSK identity did not match.\n");
303     return 0;
304   }
305
306   if (config->psk.size() > max_psk_len) {
307     fprintf(stderr, "PSK buffers too small\n");
308     return 0;
309   }
310
311   memcpy(out_psk, config->psk.data(), config->psk.size());
312   return config->psk.size();
313 }
314
315 static int CertCallback(SSL *ssl, void *arg) {
316   const TestConfig *config = GetTestConfig(ssl);
317
318   // Check the CertificateRequest metadata is as expected.
319   //
320   // TODO(davidben): Test |SSL_get_client_CA_list|.
321   if (!SSL_is_server(ssl) &&
322       !config->expected_certificate_types.empty()) {
323     const uint8_t *certificate_types;
324     size_t certificate_types_len =
325         SSL_get0_certificate_types(ssl, &certificate_types);
326     if (certificate_types_len != config->expected_certificate_types.size() ||
327         memcmp(certificate_types,
328                config->expected_certificate_types.data(),
329                certificate_types_len) != 0) {
330       fprintf(stderr, "certificate types mismatch\n");
331       return 0;
332     }
333   }
334
335   // The certificate will be installed via other means.
336   if (!config->async ||
337       config->use_old_client_cert_callback) {
338     return 1;
339   }
340
341   if (!GetTestState(ssl)->cert_ready) {
342     return -1;
343   }
344   if (!InstallCertificate(ssl)) {
345     return 0;
346   }
347   return 1;
348 }
349
350 static void InfoCallback(const SSL *ssl, int type, int val) {
351   if (type == SSL_CB_HANDSHAKE_DONE) {
352     if (GetTestConfig(ssl)->handshake_never_done) {
353       fprintf(stderr, "Handshake unexpectedly completed.\n");
354       // Abort before any expected error code is printed, to ensure the overall
355       // test fails.
356       abort();
357     }
358     GetTestState(ssl)->handshake_done = true;
359
360     // Callbacks may be called again on a new handshake.
361     GetTestState(ssl)->ticket_decrypt_done = false;
362     GetTestState(ssl)->alpn_select_done = false;
363   }
364 }
365
366 static int NewSessionCallback(SSL *ssl, SSL_SESSION *session) {
367   GetTestState(ssl)->got_new_session = true;
368   GetTestState(ssl)->new_session.reset(session);
369   return 1;
370 }
371
372 static int TicketKeyCallback(SSL *ssl, uint8_t *key_name, uint8_t *iv,
373                              EVP_CIPHER_CTX *ctx, HMAC_CTX *hmac_ctx,
374                              int encrypt) {
375   if (!encrypt) {
376     if (GetTestState(ssl)->ticket_decrypt_done) {
377       fprintf(stderr, "TicketKeyCallback called after completion.\n");
378       return -1;
379     }
380
381     GetTestState(ssl)->ticket_decrypt_done = true;
382   }
383
384   // This is just test code, so use the all-zeros key.
385   static const uint8_t kZeros[16] = {0};
386
387   if (encrypt) {
388     memcpy(key_name, kZeros, sizeof(kZeros));
389     RAND_bytes(iv, 16);
390   } else if (memcmp(key_name, kZeros, 16) != 0) {
391     return 0;
392   }
393
394   if (!HMAC_Init_ex(hmac_ctx, kZeros, sizeof(kZeros), EVP_sha256(), NULL) ||
395       !EVP_CipherInit_ex(ctx, EVP_aes_128_cbc(), NULL, kZeros, iv, encrypt)) {
396     return -1;
397   }
398
399   if (!encrypt) {
400     return GetTestConfig(ssl)->renew_ticket ? 2 : 1;
401   }
402   return 1;
403 }
404
405 // kCustomExtensionValue is the extension value that the custom extension
406 // callbacks will add.
407 static const uint16_t kCustomExtensionValue = 1234;
408 static void *const kCustomExtensionAddArg =
409     reinterpret_cast<void *>(kCustomExtensionValue);
410 static void *const kCustomExtensionParseArg =
411     reinterpret_cast<void *>(kCustomExtensionValue + 1);
412 static const char kCustomExtensionContents[] = "custom extension";
413
414 static int CustomExtensionAddCallback(SSL *ssl, unsigned extension_value,
415                                       const uint8_t **out, size_t *out_len,
416                                       int *out_alert_value, void *add_arg) {
417   if (extension_value != kCustomExtensionValue ||
418       add_arg != kCustomExtensionAddArg) {
419     abort();
420   }
421
422   if (GetTestConfig(ssl)->custom_extension_skip) {
423     return 0;
424   }
425   if (GetTestConfig(ssl)->custom_extension_fail_add) {
426     return -1;
427   }
428
429   *out = reinterpret_cast<const uint8_t*>(kCustomExtensionContents);
430   *out_len = sizeof(kCustomExtensionContents) - 1;
431
432   return 1;
433 }
434
435 static void CustomExtensionFreeCallback(SSL *ssl, unsigned extension_value,
436                                         const uint8_t *out, void *add_arg) {
437   if (extension_value != kCustomExtensionValue ||
438       add_arg != kCustomExtensionAddArg ||
439       out != reinterpret_cast<const uint8_t *>(kCustomExtensionContents)) {
440     abort();
441   }
442 }
443
444 static int CustomExtensionParseCallback(SSL *ssl, unsigned extension_value,
445                                         const uint8_t *contents,
446                                         size_t contents_len,
447                                         int *out_alert_value, void *parse_arg) {
448   if (extension_value != kCustomExtensionValue ||
449       parse_arg != kCustomExtensionParseArg) {
450     abort();
451   }
452
453   if (contents_len != sizeof(kCustomExtensionContents) - 1 ||
454       memcmp(contents, kCustomExtensionContents, contents_len) != 0) {
455     *out_alert_value = SSL_AD_DECODE_ERROR;
456     return 0;
457   }
458
459   return 1;
460 }
461
462 // Connect returns a new socket connected to localhost on |port| or -1 on
463 // error.
464 static int Connect(uint16_t port) {
465   int sock = socket(AF_INET, SOCK_STREAM, 0);
466   if (sock == -1) {
467     PrintSocketError("socket");
468     return -1;
469   }
470   int nodelay = 1;
471   if (setsockopt(sock, IPPROTO_TCP, TCP_NODELAY,
472           reinterpret_cast<const char*>(&nodelay), sizeof(nodelay)) != 0) {
473     PrintSocketError("setsockopt");
474     closesocket(sock);
475     return -1;
476   }
477   sockaddr_in sin;
478   memset(&sin, 0, sizeof(sin));
479   sin.sin_family = AF_INET;
480   sin.sin_port = htons(port);
481   if (!inet_pton(AF_INET, "127.0.0.1", &sin.sin_addr)) {
482     PrintSocketError("inet_pton");
483     closesocket(sock);
484     return -1;
485   }
486   if (connect(sock, reinterpret_cast<const sockaddr*>(&sin),
487               sizeof(sin)) != 0) {
488     PrintSocketError("connect");
489     closesocket(sock);
490     return -1;
491   }
492   return sock;
493 }
494
495 class SocketCloser {
496  public:
497   explicit SocketCloser(int sock) : sock_(sock) {}
498   ~SocketCloser() {
499     // Half-close and drain the socket before releasing it. This seems to be
500     // necessary for graceful shutdown on Windows. It will also avoid write
501     // failures in the test runner.
502 #if defined(OPENSSL_SYS_WINDOWS)
503     shutdown(sock_, SD_SEND);
504 #else
505     shutdown(sock_, SHUT_WR);
506 #endif
507     while (true) {
508       char buf[1024];
509       if (recv(sock_, buf, sizeof(buf), 0) <= 0) {
510         break;
511       }
512     }
513     closesocket(sock_);
514   }
515
516  private:
517   const int sock_;
518 };
519
520 static bssl::UniquePtr<SSL_CTX> SetupCtx(const TestConfig *config) {
521   const char sess_id_ctx[] = "ossl_shim";
522   bssl::UniquePtr<SSL_CTX> ssl_ctx(SSL_CTX_new(
523       config->is_dtls ? DTLS_method() : TLS_method()));
524   if (!ssl_ctx) {
525     return nullptr;
526   }
527
528   SSL_CTX_set_security_level(ssl_ctx.get(), 0);
529 #if 0
530   /* Disabled for now until we have some TLS1.3 support */
531   // Enable TLS 1.3 for tests.
532   if (!config->is_dtls &&
533       !SSL_CTX_set_max_proto_version(ssl_ctx.get(), TLS1_3_VERSION)) {
534     return nullptr;
535   }
536 #endif
537
538   std::string cipher_list = "ALL";
539   if (!config->cipher.empty()) {
540     cipher_list = config->cipher;
541     SSL_CTX_set_options(ssl_ctx.get(), SSL_OP_CIPHER_SERVER_PREFERENCE);
542   }
543   if (!SSL_CTX_set_cipher_list(ssl_ctx.get(), cipher_list.c_str())) {
544     return nullptr;
545   }
546
547   DH *tmpdh;
548
549   if (config->use_sparse_dh_prime) {
550     BIGNUM *p, *g;
551     p = BN_new();
552     g = BN_new();
553     tmpdh = DH_new();
554     if (p == NULL || g == NULL || tmpdh == NULL) {
555         BN_free(p);
556         BN_free(g);
557         DH_free(tmpdh);
558         return nullptr;
559     }
560     // This prime number is 2^1024 + 643 â€“ a value just above a power of two.
561     // Because of its form, values modulo it are essentially certain to be one
562     // byte shorter. This is used to test padding of these values.
563     if (BN_hex2bn(
564             &p,
565             "1000000000000000000000000000000000000000000000000000000000000000"
566             "0000000000000000000000000000000000000000000000000000000000000000"
567             "0000000000000000000000000000000000000000000000000000000000000000"
568             "0000000000000000000000000000000000000000000000000000000000000028"
569             "3") == 0 ||
570         !BN_set_word(g, 2)) {
571       BN_free(p);
572       BN_free(g);
573       DH_free(tmpdh);
574       return nullptr;
575     }
576     DH_set0_pqg(tmpdh, p, NULL, g);
577   } else {
578       tmpdh = DH_get_2048_256();
579   }
580
581   bssl::UniquePtr<DH> dh(tmpdh);
582
583   if (!dh || !SSL_CTX_set_tmp_dh(ssl_ctx.get(), dh.get())) {
584     return nullptr;
585   }
586
587   SSL_CTX_set_session_cache_mode(ssl_ctx.get(), SSL_SESS_CACHE_BOTH);
588
589   if (config->use_old_client_cert_callback) {
590     SSL_CTX_set_client_cert_cb(ssl_ctx.get(), ClientCertCallback);
591   }
592
593   SSL_CTX_set_npn_advertised_cb(
594       ssl_ctx.get(), NextProtosAdvertisedCallback, NULL);
595   if (!config->select_next_proto.empty()) {
596     SSL_CTX_set_next_proto_select_cb(ssl_ctx.get(), NextProtoSelectCallback,
597                                      NULL);
598   }
599
600   if (!config->select_alpn.empty() || config->decline_alpn) {
601     SSL_CTX_set_alpn_select_cb(ssl_ctx.get(), AlpnSelectCallback, NULL);
602   }
603
604   SSL_CTX_set_info_callback(ssl_ctx.get(), InfoCallback);
605   SSL_CTX_sess_set_new_cb(ssl_ctx.get(), NewSessionCallback);
606
607   if (config->use_ticket_callback) {
608     SSL_CTX_set_tlsext_ticket_key_cb(ssl_ctx.get(), TicketKeyCallback);
609   }
610
611   if (config->enable_client_custom_extension &&
612       !SSL_CTX_add_client_custom_ext(
613           ssl_ctx.get(), kCustomExtensionValue, CustomExtensionAddCallback,
614           CustomExtensionFreeCallback, kCustomExtensionAddArg,
615           CustomExtensionParseCallback, kCustomExtensionParseArg)) {
616     return nullptr;
617   }
618
619   if (config->enable_server_custom_extension &&
620       !SSL_CTX_add_server_custom_ext(
621           ssl_ctx.get(), kCustomExtensionValue, CustomExtensionAddCallback,
622           CustomExtensionFreeCallback, kCustomExtensionAddArg,
623           CustomExtensionParseCallback, kCustomExtensionParseArg)) {
624     return nullptr;
625   }
626
627   if (config->verify_fail) {
628     SSL_CTX_set_cert_verify_callback(ssl_ctx.get(), VerifyFail, NULL);
629   } else {
630     SSL_CTX_set_cert_verify_callback(ssl_ctx.get(), VerifySucceed, NULL);
631   }
632
633   if (config->use_null_client_ca_list) {
634     SSL_CTX_set_client_CA_list(ssl_ctx.get(), nullptr);
635   }
636
637   SSL_CTX_set_session_id_context(ssl_ctx.get(),
638                                  (const unsigned char *)sess_id_ctx,
639                                  sizeof(sess_id_ctx) - 1);
640
641   return ssl_ctx;
642 }
643
644 // RetryAsync is called after a failed operation on |ssl| with return code
645 // |ret|. If the operation should be retried, it simulates one asynchronous
646 // event and returns true. Otherwise it returns false.
647 static bool RetryAsync(SSL *ssl, int ret) {
648   // No error; don't retry.
649   if (ret >= 0) {
650     return false;
651   }
652
653   TestState *test_state = GetTestState(ssl);
654   assert(GetTestConfig(ssl)->async);
655
656   if (test_state->packeted_bio != nullptr &&
657       PacketedBioAdvanceClock(test_state->packeted_bio)) {
658     // The DTLS retransmit logic silently ignores write failures. So the test
659     // may progress, allow writes through synchronously.
660     AsyncBioEnforceWriteQuota(test_state->async_bio, false);
661     int timeout_ret = DTLSv1_handle_timeout(ssl);
662     AsyncBioEnforceWriteQuota(test_state->async_bio, true);
663
664     if (timeout_ret < 0) {
665       fprintf(stderr, "Error retransmitting.\n");
666       return false;
667     }
668     return true;
669   }
670
671   // See if we needed to read or write more. If so, allow one byte through on
672   // the appropriate end to maximally stress the state machine.
673   switch (SSL_get_error(ssl, ret)) {
674     case SSL_ERROR_WANT_READ:
675       AsyncBioAllowRead(test_state->async_bio, 1);
676       return true;
677     case SSL_ERROR_WANT_WRITE:
678       AsyncBioAllowWrite(test_state->async_bio, 1);
679       return true;
680     case SSL_ERROR_WANT_X509_LOOKUP:
681       test_state->cert_ready = true;
682       return true;
683     default:
684       return false;
685   }
686 }
687
688 // DoRead reads from |ssl|, resolving any asynchronous operations. It returns
689 // the result value of the final |SSL_read| call.
690 static int DoRead(SSL *ssl, uint8_t *out, size_t max_out) {
691   const TestConfig *config = GetTestConfig(ssl);
692   TestState *test_state = GetTestState(ssl);
693   int ret;
694   do {
695     if (config->async) {
696       // The DTLS retransmit logic silently ignores write failures. So the test
697       // may progress, allow writes through synchronously. |SSL_read| may
698       // trigger a retransmit, so disconnect the write quota.
699       AsyncBioEnforceWriteQuota(test_state->async_bio, false);
700     }
701     ret = config->peek_then_read ? SSL_peek(ssl, out, max_out)
702                                  : SSL_read(ssl, out, max_out);
703     if (config->async) {
704       AsyncBioEnforceWriteQuota(test_state->async_bio, true);
705     }
706   } while (config->async && RetryAsync(ssl, ret));
707
708   if (config->peek_then_read && ret > 0) {
709     std::unique_ptr<uint8_t[]> buf(new uint8_t[static_cast<size_t>(ret)]);
710
711     // SSL_peek should synchronously return the same data.
712     int ret2 = SSL_peek(ssl, buf.get(), ret);
713     if (ret2 != ret ||
714         memcmp(buf.get(), out, ret) != 0) {
715       fprintf(stderr, "First and second SSL_peek did not match.\n");
716       return -1;
717     }
718
719     // SSL_read should synchronously return the same data and consume it.
720     ret2 = SSL_read(ssl, buf.get(), ret);
721     if (ret2 != ret ||
722         memcmp(buf.get(), out, ret) != 0) {
723       fprintf(stderr, "SSL_peek and SSL_read did not match.\n");
724       return -1;
725     }
726   }
727
728   return ret;
729 }
730
731 // WriteAll writes |in_len| bytes from |in| to |ssl|, resolving any asynchronous
732 // operations. It returns the result of the final |SSL_write| call.
733 static int WriteAll(SSL *ssl, const uint8_t *in, size_t in_len) {
734   const TestConfig *config = GetTestConfig(ssl);
735   int ret;
736   do {
737     ret = SSL_write(ssl, in, in_len);
738     if (ret > 0) {
739       in += ret;
740       in_len -= ret;
741     }
742   } while ((config->async && RetryAsync(ssl, ret)) || (ret > 0 && in_len > 0));
743   return ret;
744 }
745
746 // DoShutdown calls |SSL_shutdown|, resolving any asynchronous operations. It
747 // returns the result of the final |SSL_shutdown| call.
748 static int DoShutdown(SSL *ssl) {
749   const TestConfig *config = GetTestConfig(ssl);
750   int ret;
751   do {
752     ret = SSL_shutdown(ssl);
753   } while (config->async && RetryAsync(ssl, ret));
754   return ret;
755 }
756
757 static uint16_t GetProtocolVersion(const SSL *ssl) {
758   uint16_t version = SSL_version(ssl);
759   if (!SSL_is_dtls(ssl)) {
760     return version;
761   }
762   return 0x0201 + ~version;
763 }
764
765 // CheckHandshakeProperties checks, immediately after |ssl| completes its
766 // initial handshake (or False Starts), whether all the properties are
767 // consistent with the test configuration and invariants.
768 static bool CheckHandshakeProperties(SSL *ssl, bool is_resume) {
769   const TestConfig *config = GetTestConfig(ssl);
770
771   if (SSL_get_current_cipher(ssl) == nullptr) {
772     fprintf(stderr, "null cipher after handshake\n");
773     return false;
774   }
775
776   if (is_resume &&
777       (!!SSL_session_reused(ssl) == config->expect_session_miss)) {
778     fprintf(stderr, "session was%s reused\n",
779             SSL_session_reused(ssl) ? "" : " not");
780     return false;
781   }
782
783   if (!GetTestState(ssl)->handshake_done) {
784     fprintf(stderr, "handshake was not completed\n");
785     return false;
786   }
787
788   if (!config->is_server) {
789     bool expect_new_session =
790         !config->expect_no_session &&
791         (!SSL_session_reused(ssl) || config->expect_ticket_renewal) &&
792         // Session tickets are sent post-handshake in TLS 1.3.
793         GetProtocolVersion(ssl) < TLS1_3_VERSION;
794     if (expect_new_session != GetTestState(ssl)->got_new_session) {
795       fprintf(stderr,
796               "new session was%s cached, but we expected the opposite\n",
797               GetTestState(ssl)->got_new_session ? "" : " not");
798       return false;
799     }
800   }
801
802   if (!config->expected_server_name.empty()) {
803     const char *server_name =
804         SSL_get_servername(ssl, TLSEXT_NAMETYPE_host_name);
805     if (server_name != config->expected_server_name) {
806       fprintf(stderr, "servername mismatch (got %s; want %s)\n",
807               server_name, config->expected_server_name.c_str());
808       return false;
809     }
810   }
811
812   if (!config->expected_next_proto.empty()) {
813     const uint8_t *next_proto;
814     unsigned next_proto_len;
815     SSL_get0_next_proto_negotiated(ssl, &next_proto, &next_proto_len);
816     if (next_proto_len != config->expected_next_proto.size() ||
817         memcmp(next_proto, config->expected_next_proto.data(),
818                next_proto_len) != 0) {
819       fprintf(stderr, "negotiated next proto mismatch\n");
820       return false;
821     }
822   }
823
824   if (!config->expected_alpn.empty()) {
825     const uint8_t *alpn_proto;
826     unsigned alpn_proto_len;
827     SSL_get0_alpn_selected(ssl, &alpn_proto, &alpn_proto_len);
828     if (alpn_proto_len != config->expected_alpn.size() ||
829         memcmp(alpn_proto, config->expected_alpn.data(),
830                alpn_proto_len) != 0) {
831       fprintf(stderr, "negotiated alpn proto mismatch\n");
832       return false;
833     }
834   }
835
836   if (config->expect_extended_master_secret) {
837     if (!SSL_get_extms_support(ssl)) {
838       fprintf(stderr, "No EMS for connection when expected");
839       return false;
840     }
841   }
842
843   if (config->expect_verify_result) {
844     int expected_verify_result = config->verify_fail ?
845       X509_V_ERR_APPLICATION_VERIFICATION :
846       X509_V_OK;
847
848     if (SSL_get_verify_result(ssl) != expected_verify_result) {
849       fprintf(stderr, "Wrong certificate verification result\n");
850       return false;
851     }
852   }
853
854   if (!config->psk.empty()) {
855     if (SSL_get_peer_cert_chain(ssl) != nullptr) {
856       fprintf(stderr, "Received peer certificate on a PSK cipher.\n");
857       return false;
858     }
859   } else if (!config->is_server || config->require_any_client_certificate) {
860     if (SSL_get_peer_certificate(ssl) == nullptr) {
861       fprintf(stderr, "Received no peer certificate but expected one.\n");
862       return false;
863     }
864   }
865
866   return true;
867 }
868
869 // DoExchange runs a test SSL exchange against the peer. On success, it returns
870 // true and sets |*out_session| to the negotiated SSL session. If the test is a
871 // resumption attempt, |is_resume| is true and |session| is the session from the
872 // previous exchange.
873 static bool DoExchange(bssl::UniquePtr<SSL_SESSION> *out_session,
874                        SSL_CTX *ssl_ctx, const TestConfig *config,
875                        bool is_resume, SSL_SESSION *session) {
876   bssl::UniquePtr<SSL> ssl(SSL_new(ssl_ctx));
877   if (!ssl) {
878     return false;
879   }
880
881   if (!SetTestConfig(ssl.get(), config) ||
882       !SetTestState(ssl.get(), std::unique_ptr<TestState>(new TestState))) {
883     return false;
884   }
885
886   if (config->fallback_scsv &&
887       !SSL_set_mode(ssl.get(), SSL_MODE_SEND_FALLBACK_SCSV)) {
888     return false;
889   }
890   // Install the certificate synchronously if nothing else will handle it.
891   if (!config->use_old_client_cert_callback &&
892       !config->async &&
893       !InstallCertificate(ssl.get())) {
894     return false;
895   }
896   SSL_set_cert_cb(ssl.get(), CertCallback, nullptr);
897   if (config->require_any_client_certificate) {
898     SSL_set_verify(ssl.get(), SSL_VERIFY_PEER|SSL_VERIFY_FAIL_IF_NO_PEER_CERT,
899                    NULL);
900   }
901   if (config->verify_peer) {
902     SSL_set_verify(ssl.get(), SSL_VERIFY_PEER, NULL);
903   }
904   if (config->partial_write) {
905     SSL_set_mode(ssl.get(), SSL_MODE_ENABLE_PARTIAL_WRITE);
906   }
907   if (config->no_tls13) {
908     SSL_set_options(ssl.get(), SSL_OP_NO_TLSv1_3);
909   }
910   if (config->no_tls12) {
911     SSL_set_options(ssl.get(), SSL_OP_NO_TLSv1_2);
912   }
913   if (config->no_tls11) {
914     SSL_set_options(ssl.get(), SSL_OP_NO_TLSv1_1);
915   }
916   if (config->no_tls1) {
917     SSL_set_options(ssl.get(), SSL_OP_NO_TLSv1);
918   }
919   if (config->no_ssl3) {
920     SSL_set_options(ssl.get(), SSL_OP_NO_SSLv3);
921   }
922   if (!config->host_name.empty() &&
923       !SSL_set_tlsext_host_name(ssl.get(), config->host_name.c_str())) {
924     return false;
925   }
926   if (!config->advertise_alpn.empty() &&
927       SSL_set_alpn_protos(ssl.get(),
928                           (const uint8_t *)config->advertise_alpn.data(),
929                           config->advertise_alpn.size()) != 0) {
930     return false;
931   }
932   if (!config->psk.empty()) {
933     SSL_set_psk_client_callback(ssl.get(), PskClientCallback);
934     SSL_set_psk_server_callback(ssl.get(), PskServerCallback);
935   }
936   if (!config->psk_identity.empty() &&
937       !SSL_use_psk_identity_hint(ssl.get(), config->psk_identity.c_str())) {
938     return false;
939   }
940   if (!config->srtp_profiles.empty() &&
941       SSL_set_tlsext_use_srtp(ssl.get(), config->srtp_profiles.c_str())) {
942     return false;
943   }
944   if (config->min_version != 0 &&
945       !SSL_set_min_proto_version(ssl.get(), (uint16_t)config->min_version)) {
946     return false;
947   }
948   if (config->max_version != 0 &&
949       !SSL_set_max_proto_version(ssl.get(), (uint16_t)config->max_version)) {
950     return false;
951   }
952   if (config->mtu != 0) {
953     SSL_set_options(ssl.get(), SSL_OP_NO_QUERY_MTU);
954     SSL_set_mtu(ssl.get(), config->mtu);
955   }
956   if (config->renegotiate_freely) {
957     // This is always on for OpenSSL.
958   }
959   if (!config->check_close_notify) {
960     SSL_set_quiet_shutdown(ssl.get(), 1);
961   }
962   if (config->p384_only) {
963     int nid = NID_secp384r1;
964     if (!SSL_set1_curves(ssl.get(), &nid, 1)) {
965       return false;
966     }
967   }
968   if (config->enable_all_curves) {
969     static const int kAllCurves[] = {
970       NID_X9_62_prime256v1, NID_secp384r1, NID_secp521r1, NID_X25519,
971     };
972     if (!SSL_set1_curves(ssl.get(), kAllCurves,
973                          OPENSSL_ARRAY_SIZE(kAllCurves))) {
974       return false;
975     }
976   }
977   if (config->max_cert_list > 0) {
978     SSL_set_max_cert_list(ssl.get(), config->max_cert_list);
979   }
980
981   int sock = Connect(config->port);
982   if (sock == -1) {
983     return false;
984   }
985   SocketCloser closer(sock);
986
987   bssl::UniquePtr<BIO> bio(BIO_new_socket(sock, BIO_NOCLOSE));
988   if (!bio) {
989     return false;
990   }
991   if (config->is_dtls) {
992     bssl::UniquePtr<BIO> packeted = PacketedBioCreate(!config->async);
993     if (!packeted) {
994       return false;
995     }
996     GetTestState(ssl.get())->packeted_bio = packeted.get();
997     BIO_push(packeted.get(), bio.release());
998     bio = std::move(packeted);
999   }
1000   if (config->async) {
1001     bssl::UniquePtr<BIO> async_scoped =
1002         config->is_dtls ? AsyncBioCreateDatagram() : AsyncBioCreate();
1003     if (!async_scoped) {
1004       return false;
1005     }
1006     BIO_push(async_scoped.get(), bio.release());
1007     GetTestState(ssl.get())->async_bio = async_scoped.get();
1008     bio = std::move(async_scoped);
1009   }
1010   SSL_set_bio(ssl.get(), bio.get(), bio.get());
1011   bio.release();  // SSL_set_bio takes ownership.
1012
1013   if (session != NULL) {
1014     if (!config->is_server) {
1015       if (SSL_set_session(ssl.get(), session) != 1) {
1016         return false;
1017       }
1018     }
1019   }
1020
1021 #if 0
1022   // KNOWN BUG: OpenSSL's SSL_get_current_cipher behaves incorrectly when
1023   // offering resumption.
1024   if (SSL_get_current_cipher(ssl.get()) != nullptr) {
1025     fprintf(stderr, "non-null cipher before handshake\n");
1026     return false;
1027   }
1028 #endif
1029
1030   int ret;
1031   if (config->implicit_handshake) {
1032     if (config->is_server) {
1033       SSL_set_accept_state(ssl.get());
1034     } else {
1035       SSL_set_connect_state(ssl.get());
1036     }
1037   } else {
1038     do {
1039       if (config->is_server) {
1040         ret = SSL_accept(ssl.get());
1041       } else {
1042         ret = SSL_connect(ssl.get());
1043       }
1044     } while (config->async && RetryAsync(ssl.get(), ret));
1045     if (ret != 1 ||
1046         !CheckHandshakeProperties(ssl.get(), is_resume)) {
1047       return false;
1048     }
1049
1050     // Reset the state to assert later that the callback isn't called in
1051     // renegotiations.
1052     GetTestState(ssl.get())->got_new_session = false;
1053   }
1054
1055   if (config->export_keying_material > 0) {
1056     std::vector<uint8_t> result(
1057         static_cast<size_t>(config->export_keying_material));
1058     if (SSL_export_keying_material(
1059             ssl.get(), result.data(), result.size(),
1060             config->export_label.data(), config->export_label.size(),
1061             reinterpret_cast<const uint8_t*>(config->export_context.data()),
1062             config->export_context.size(), config->use_export_context) != 1) {
1063       fprintf(stderr, "failed to export keying material\n");
1064       return false;
1065     }
1066     if (WriteAll(ssl.get(), result.data(), result.size()) < 0) {
1067       return false;
1068     }
1069   }
1070
1071   if (config->write_different_record_sizes) {
1072     if (config->is_dtls) {
1073       fprintf(stderr, "write_different_record_sizes not supported for DTLS\n");
1074       return false;
1075     }
1076     // This mode writes a number of different record sizes in an attempt to
1077     // trip up the CBC record splitting code.
1078     static const size_t kBufLen = 32769;
1079     std::unique_ptr<uint8_t[]> buf(new uint8_t[kBufLen]);
1080     memset(buf.get(), 0x42, kBufLen);
1081     static const size_t kRecordSizes[] = {
1082         0, 1, 255, 256, 257, 16383, 16384, 16385, 32767, 32768, 32769};
1083     for (size_t i = 0; i < OPENSSL_ARRAY_SIZE(kRecordSizes); i++) {
1084       const size_t len = kRecordSizes[i];
1085       if (len > kBufLen) {
1086         fprintf(stderr, "Bad kRecordSizes value.\n");
1087         return false;
1088       }
1089       if (WriteAll(ssl.get(), buf.get(), len) < 0) {
1090         return false;
1091       }
1092     }
1093   } else {
1094     if (config->shim_writes_first) {
1095       if (WriteAll(ssl.get(), reinterpret_cast<const uint8_t *>("hello"),
1096                    5) < 0) {
1097         return false;
1098       }
1099     }
1100     if (!config->shim_shuts_down) {
1101       for (;;) {
1102         static const size_t kBufLen = 16384;
1103         std::unique_ptr<uint8_t[]> buf(new uint8_t[kBufLen]);
1104
1105         // Read only 512 bytes at a time in TLS to ensure records may be
1106         // returned in multiple reads.
1107         int n = DoRead(ssl.get(), buf.get(), config->is_dtls ? kBufLen : 512);
1108         int err = SSL_get_error(ssl.get(), n);
1109         if (err == SSL_ERROR_ZERO_RETURN ||
1110             (n == 0 && err == SSL_ERROR_SYSCALL)) {
1111           if (n != 0) {
1112             fprintf(stderr, "Invalid SSL_get_error output\n");
1113             return false;
1114           }
1115           // Stop on either clean or unclean shutdown.
1116           break;
1117         } else if (err != SSL_ERROR_NONE) {
1118           if (n > 0) {
1119             fprintf(stderr, "Invalid SSL_get_error output\n");
1120             return false;
1121           }
1122           return false;
1123         }
1124         // Successfully read data.
1125         if (n <= 0) {
1126           fprintf(stderr, "Invalid SSL_get_error output\n");
1127           return false;
1128         }
1129
1130         // After a successful read, with or without False Start, the handshake
1131         // must be complete.
1132         if (!GetTestState(ssl.get())->handshake_done) {
1133           fprintf(stderr, "handshake was not completed after SSL_read\n");
1134           return false;
1135         }
1136
1137         for (int i = 0; i < n; i++) {
1138           buf[i] ^= 0xff;
1139         }
1140         if (WriteAll(ssl.get(), buf.get(), n) < 0) {
1141           return false;
1142         }
1143       }
1144     }
1145   }
1146
1147   if (!config->is_server &&
1148       !config->implicit_handshake &&
1149       // Session tickets are sent post-handshake in TLS 1.3.
1150       GetProtocolVersion(ssl.get()) < TLS1_3_VERSION &&
1151       GetTestState(ssl.get())->got_new_session) {
1152     fprintf(stderr, "new session was established after the handshake\n");
1153     return false;
1154   }
1155
1156   if (GetProtocolVersion(ssl.get()) >= TLS1_3_VERSION && !config->is_server) {
1157     bool expect_new_session =
1158         !config->expect_no_session && !config->shim_shuts_down;
1159     if (expect_new_session != GetTestState(ssl.get())->got_new_session) {
1160       fprintf(stderr,
1161               "new session was%s cached, but we expected the opposite\n",
1162               GetTestState(ssl.get())->got_new_session ? "" : " not");
1163       return false;
1164     }
1165   }
1166
1167   if (out_session) {
1168     *out_session = std::move(GetTestState(ssl.get())->new_session);
1169   }
1170
1171   ret = DoShutdown(ssl.get());
1172
1173   if (config->shim_shuts_down && config->check_close_notify) {
1174     // We initiate shutdown, so |SSL_shutdown| will return in two stages. First
1175     // it returns zero when our close_notify is sent, then one when the peer's
1176     // is received.
1177     if (ret != 0) {
1178       fprintf(stderr, "Unexpected SSL_shutdown result: %d != 0\n", ret);
1179       return false;
1180     }
1181     ret = DoShutdown(ssl.get());
1182   }
1183
1184   if (ret != 1) {
1185     fprintf(stderr, "Unexpected SSL_shutdown result: %d != 1\n", ret);
1186     return false;
1187   }
1188
1189   if (SSL_total_renegotiations(ssl.get()) !=
1190       config->expect_total_renegotiations) {
1191     fprintf(stderr, "Expected %d renegotiations, got %ld\n",
1192             config->expect_total_renegotiations,
1193             SSL_total_renegotiations(ssl.get()));
1194     return false;
1195   }
1196
1197   return true;
1198 }
1199
1200 class StderrDelimiter {
1201  public:
1202   ~StderrDelimiter() { fprintf(stderr, "--- DONE ---\n"); }
1203 };
1204
1205 static int Main(int argc, char **argv) {
1206   // To distinguish ASan's output from ours, add a trailing message to stderr.
1207   // Anything following this line will be considered an error.
1208   StderrDelimiter delimiter;
1209
1210 #if defined(OPENSSL_SYS_WINDOWS)
1211   /* Initialize Winsock. */
1212   WORD wsa_version = MAKEWORD(2, 2);
1213   WSADATA wsa_data;
1214   int wsa_err = WSAStartup(wsa_version, &wsa_data);
1215   if (wsa_err != 0) {
1216     fprintf(stderr, "WSAStartup failed: %d\n", wsa_err);
1217     return 1;
1218   }
1219   if (wsa_data.wVersion != wsa_version) {
1220     fprintf(stderr, "Didn't get expected version: %x\n", wsa_data.wVersion);
1221     return 1;
1222   }
1223 #else
1224   signal(SIGPIPE, SIG_IGN);
1225 #endif
1226
1227   OPENSSL_init_crypto(0, NULL);
1228   OPENSSL_init_ssl(0, NULL);
1229   g_config_index = SSL_get_ex_new_index(0, NULL, NULL, NULL, NULL);
1230   g_state_index = SSL_get_ex_new_index(0, NULL, NULL, NULL, TestStateExFree);
1231   if (g_config_index < 0 || g_state_index < 0) {
1232     return 1;
1233   }
1234
1235   TestConfig config;
1236   if (!ParseConfig(argc - 1, argv + 1, &config)) {
1237     return Usage(argv[0]);
1238   }
1239
1240   bssl::UniquePtr<SSL_CTX> ssl_ctx = SetupCtx(&config);
1241   if (!ssl_ctx) {
1242     ERR_print_errors_fp(stderr);
1243     return 1;
1244   }
1245
1246   bssl::UniquePtr<SSL_SESSION> session;
1247   for (int i = 0; i < config.resume_count + 1; i++) {
1248     bool is_resume = i > 0;
1249     if (is_resume && !config.is_server && !session) {
1250       fprintf(stderr, "No session to offer.\n");
1251       return 1;
1252     }
1253
1254     bssl::UniquePtr<SSL_SESSION> offer_session = std::move(session);
1255     if (!DoExchange(&session, ssl_ctx.get(), &config, is_resume,
1256                     offer_session.get())) {
1257       fprintf(stderr, "Connection %d failed.\n", i + 1);
1258       ERR_print_errors_fp(stderr);
1259       return 1;
1260     }
1261   }
1262
1263   return 0;
1264 }
1265
1266 }  // namespace bssl
1267
1268 int main(int argc, char **argv) {
1269   return bssl::Main(argc, argv);
1270 }