test/evp_test.c

   1 /*
   2  * Copyright 2015-2016 The OpenSSL Project Authors. All Rights Reserved.
   3  *
   4  * Licensed under the OpenSSL license (the "License").  You may not use
   5  * this file except in compliance with the License.  You can obtain a copy
   6  * in the file LICENSE in the source distribution or at
   7  * https://www.openssl.org/source/license.html
   8  */
   9
  10 #include <stdio.h>
  11 #include <string.h>
  12 #include <stdlib.h>
  13 #include <ctype.h>
  14 #include <openssl/evp.h>
  15 #include <openssl/pem.h>
  16 #include <openssl/err.h>
  17 #include <openssl/x509v3.h>
  18 #include <openssl/pkcs12.h>
  19 #include <openssl/kdf.h>
  20 #include "internal/numbers.h"
  21
  22 /* Remove spaces from beginning and end of a string */
  23
  24 static void remove_space(char **pval)
  25 {
  26     unsigned char *p = (unsigned char *)*pval;
  27
  28     while (isspace(*p))
  29         p++;
  30
  31     *pval = (char *)p;
  32
  33     p = p + strlen(*pval) - 1;
  34
  35     /* Remove trailing space */
  36     while (isspace(*p))
  37         *p-- = 0;
  38 }
  39
  40 /*
  41  * Given a line of the form:
  42  *      name = value # comment
  43  * extract name and value. NB: modifies passed buffer.
  44  */
  45
  46 static int parse_line(char **pkw, char **pval, char *linebuf)
  47 {
  48     char *p;
  49
  50     p = linebuf + strlen(linebuf) - 1;
  51
  52     if (*p != '\n') {
  53         fprintf(stderr, "FATAL: missing EOL\n");
  54         exit(1);
  55     }
  56
  57     /* Look for # */
  58
  59     p = strchr(linebuf, '#');
  60
  61     if (p)
  62         *p = '\0';
  63
  64     /* Look for = sign */
  65     p = strchr(linebuf, '=');
  66
  67     /* If no '=' exit */
  68     if (!p)
  69         return 0;
  70
  71     *p++ = '\0';
  72
  73     *pkw = linebuf;
  74     *pval = p;
  75
  76     /* Remove spaces from keyword and value */
  77     remove_space(pkw);
  78     remove_space(pval);
  79
  80     return 1;
  81 }
  82
  83 /*
  84  * Unescape some escape sequences in string literals.
  85  * Return the result in a newly allocated buffer.
  86  * Currently only supports '\n'.
  87  * If the input length is 0, returns a valid 1-byte buffer, but sets
  88  * the length to 0.
  89  */
  90 static unsigned char* unescape(const char *input, size_t input_len,
  91                                size_t *out_len)
  92 {
  93     unsigned char *ret, *p;
  94     size_t i;
  95     if (input_len == 0) {
  96         *out_len = 0;
  97         return OPENSSL_zalloc(1);
  98     }
  99
 100     /* Escaping is non-expanding; over-allocate original size for simplicity. */
 101     ret = p = OPENSSL_malloc(input_len);
 102     if (ret == NULL)
 103         return NULL;
 104
 105     for (i = 0; i < input_len; i++) {
 106         if (input[i] == '\\') {
 107             if (i == input_len - 1 || input[i+1] != 'n')
 108                 goto err;
 109             *p++ = '\n';
 110             i++;
 111         } else {
 112             *p++ = input[i];
 113         }
 114     }
 115
 116     *out_len = p - ret;
 117     return ret;
 118
 119  err:
 120     OPENSSL_free(ret);
 121     return NULL;
 122 }
 123
 124 /* For a hex string "value" convert to a binary allocated buffer */
 125 static int test_bin(const char *value, unsigned char **buf, size_t *buflen)
 126 {
 127     long len;
 128
 129     *buflen = 0;
 130
 131     /* Check for empty value */
 132     if (!*value) {
 133         /*
 134          * Don't return NULL for zero length buffer.
 135          * This is needed for some tests with empty keys: HMAC_Init_ex() expects
 136          * a non-NULL key buffer even if the key length is 0, in order to detect
 137          * key reset.
 138          */
 139         *buf = OPENSSL_malloc(1);
 140         if (!*buf)
 141             return 0;
 142         **buf = 0;
 143         *buflen = 0;
 144         return 1;
 145     }
 146
 147     /* Check for NULL literal */
 148     if (strcmp(value, "NULL") == 0) {
 149         *buf = NULL;
 150         *buflen = 0;
 151         return 1;
 152     }
 153
 154     /* Check for string literal */
 155     if (value[0] == '"') {
 156         size_t vlen;
 157         value++;
 158         vlen = strlen(value);
 159         if (value[vlen - 1] != '"')
 160             return 0;
 161         vlen--;
 162         *buf = unescape(value, vlen, buflen);
 163         if (*buf == NULL)
 164             return 0;
 165         return 1;
 166     }
 167
 168     /* Otherwise assume as hex literal and convert it to binary buffer */
 169     *buf = OPENSSL_hexstr2buf(value, &len);
 170     if (!*buf) {
 171         fprintf(stderr, "Value=%s\n", value);
 172         ERR_print_errors_fp(stderr);
 173         return -1;
 174     }
 175     /* Size of input buffer means we'll never overflow */
 176     *buflen = len;
 177     return 1;
 178 }
 179 #ifndef OPENSSL_NO_SCRYPT
 180 /* Currently only used by scrypt tests */
 181 /* Parse unsigned decimal 64 bit integer value */
 182 static int test_uint64(const char *value, uint64_t *pr)
 183 {
 184     const char *p = value;
 185     if (!*p) {
 186         fprintf(stderr, "Invalid empty integer value\n");
 187         return -1;
 188     }
 189     *pr = 0;
 190     while (*p) {
 191         if (*pr > UINT64_MAX/10) {
 192             fprintf(stderr, "Integer string overflow value=%s\n", value);
 193             return -1;
 194         }
 195         *pr *= 10;
 196         if (*p < '0' || *p > '9') {
 197             fprintf(stderr, "Invalid integer string value=%s\n", value);
 198             return -1;
 199         }
 200         *pr += *p - '0';
 201         p++;
 202     }
 203     return 1;
 204 }
 205 #endif
 206
 207 /* Structure holding test information */
 208 struct evp_test {
 209     /* file being read */
 210     BIO *in;
 211     /* temp memory BIO for reading in keys */
 212     BIO *key;
 213     /* List of public and private keys */
 214     struct key_list *private;
 215     struct key_list *public;
 216     /* method for this test */
 217     const struct evp_test_method *meth;
 218     /* current line being processed */
 219     unsigned int line;
 220     /* start line of current test */
 221     unsigned int start_line;
 222     /* Error string for test */
 223     const char *err, *aux_err;
 224     /* Expected error value of test */
 225     char *expected_err;
 226     /* Expected error function string */
 227     char *func;
 228     /* Expected error reason string */
 229     char *reason;
 230     /* Number of tests */
 231     int ntests;
 232     /* Error count */
 233     int errors;
 234     /* Number of tests skipped */
 235     int nskip;
 236     /* If output mismatch expected and got value */
 237     unsigned char *out_received;
 238     size_t out_received_len;
 239     unsigned char *out_expected;
 240     size_t out_expected_len;
 241     /* test specific data */
 242     void *data;
 243     /* Current test should be skipped */
 244     int skip;
 245 };
 246
 247 struct key_list {
 248     char *name;
 249     EVP_PKEY *key;
 250     struct key_list *next;
 251 };
 252
 253 /* Test method structure */
 254 struct evp_test_method {
 255     /* Name of test as it appears in file */
 256     const char *name;
 257     /* Initialise test for "alg" */
 258     int (*init) (struct evp_test * t, const char *alg);
 259     /* Clean up method */
 260     void (*cleanup) (struct evp_test * t);
 261     /* Test specific name value pair processing */
 262     int (*parse) (struct evp_test * t, const char *name, const char *value);
 263     /* Run the test itself */
 264     int (*run_test) (struct evp_test * t);
 265 };
 266
 267 static const struct evp_test_method digest_test_method, cipher_test_method;
 268 static const struct evp_test_method mac_test_method;
 269 static const struct evp_test_method psign_test_method, pverify_test_method;
 270 static const struct evp_test_method pdecrypt_test_method;
 271 static const struct evp_test_method pverify_recover_test_method;
 272 static const struct evp_test_method pderive_test_method;
 273 static const struct evp_test_method pbe_test_method;
 274 static const struct evp_test_method encode_test_method;
 275 static const struct evp_test_method kdf_test_method;
 276
 277 static const struct evp_test_method *evp_test_list[] = {
 278     &digest_test_method,
 279     &cipher_test_method,
 280     &mac_test_method,
 281     &psign_test_method,
 282     &pverify_test_method,
 283     &pdecrypt_test_method,
 284     &pverify_recover_test_method,
 285     &pderive_test_method,
 286     &pbe_test_method,
 287     &encode_test_method,
 288     &kdf_test_method,
 289     NULL
 290 };
 291
 292 static const struct evp_test_method *evp_find_test(const char *name)
 293 {
 294     const struct evp_test_method **tt;
 295
 296     for (tt = evp_test_list; *tt; tt++) {
 297         if (strcmp(name, (*tt)->name) == 0)
 298             return *tt;
 299     }
 300     return NULL;
 301 }
 302
 303 static void hex_print(const char *name, const unsigned char *buf, size_t len)
 304 {
 305     size_t i;
 306     fprintf(stderr, "%s ", name);
 307     for (i = 0; i < len; i++)
 308         fprintf(stderr, "%02X", buf[i]);
 309     fputs("\n", stderr);
 310 }
 311
 312 static void free_expected(struct evp_test *t)
 313 {
 314     OPENSSL_free(t->expected_err);
 315     t->expected_err = NULL;
 316     OPENSSL_free(t->func);
 317     t->func = NULL;
 318     OPENSSL_free(t->reason);
 319     t->reason = NULL;
 320     OPENSSL_free(t->out_expected);
 321     OPENSSL_free(t->out_received);
 322     t->out_expected = NULL;
 323     t->out_received = NULL;
 324     t->out_expected_len = 0;
 325     t->out_received_len = 0;
 326     /* Literals. */
 327     t->err = NULL;
 328 }
 329
 330 static void print_expected(struct evp_test *t)
 331 {
 332     if (t->out_expected == NULL && t->out_received == NULL)
 333         return;
 334     hex_print("Expected:", t->out_expected, t->out_expected_len);
 335     hex_print("Got:     ", t->out_received, t->out_received_len);
 336     free_expected(t);
 337 }
 338
 339 static int check_test_error(struct evp_test *t)
 340 {
 341     unsigned long err;
 342     const char *func;
 343     const char *reason;
 344     if (!t->err && !t->expected_err)
 345         return 1;
 346     if (t->err && !t->expected_err) {
 347         if (t->aux_err != NULL) {
 348             fprintf(stderr, "Test line %d(%s): unexpected error %s\n",
 349                     t->start_line, t->aux_err, t->err);
 350         } else {
 351             fprintf(stderr, "Test line %d: unexpected error %s\n",
 352                     t->start_line, t->err);
 353         }
 354         print_expected(t);
 355         return 0;
 356     }
 357     if (!t->err && t->expected_err) {
 358         fprintf(stderr, "Test line %d: succeeded expecting %s\n",
 359                 t->start_line, t->expected_err);
 360         return 0;
 361     }
 362
 363     if (strcmp(t->err, t->expected_err) != 0) {
 364         fprintf(stderr, "Test line %d: expecting %s got %s\n",
 365                 t->start_line, t->expected_err, t->err);
 366         return 0;
 367     }
 368
 369     if (t->func == NULL && t->reason == NULL)
 370         return 1;
 371
 372     if (t->func == NULL || t->reason == NULL) {
 373         fprintf(stderr, "Test line %d: missing function or reason code\n",
 374                 t->start_line);
 375         return 0;
 376     }
 377
 378     err = ERR_peek_error();
 379     if (err == 0) {
 380         fprintf(stderr, "Test line %d, expected error \"%s:%s\" not set\n",
 381                 t->start_line, t->func, t->reason);
 382         return 0;
 383     }
 384
 385     func = ERR_func_error_string(err);
 386     reason = ERR_reason_error_string(err);
 387
 388     if (func == NULL && reason == NULL) {
 389         fprintf(stderr, "Test line %d: expected error \"%s:%s\", no strings available.  Skipping...\n",
 390                 t->start_line, t->func, t->reason);
 391         return 1;
 392     }
 393
 394     if (strcmp(func, t->func) == 0 && strcmp(reason, t->reason) == 0)
 395         return 1;
 396
 397     fprintf(stderr, "Test line %d: expected error \"%s:%s\", got \"%s:%s\"\n",
 398             t->start_line, t->func, t->reason, func, reason);
 399
 400     return 0;
 401 }
 402
 403 /* Setup a new test, run any existing test */
 404
 405 static int setup_test(struct evp_test *t, const struct evp_test_method *tmeth)
 406 {
 407     /* If we already have a test set up run it */
 408     if (t->meth) {
 409         t->ntests++;
 410         if (t->skip) {
 411             t->nskip++;
 412         } else {
 413             /* run the test */
 414             if (t->err == NULL && t->meth->run_test(t) != 1) {
 415                 fprintf(stderr, "%s test error line %d\n",
 416                         t->meth->name, t->start_line);
 417                 return 0;
 418             }
 419             if (!check_test_error(t)) {
 420                 if (t->err)
 421                     ERR_print_errors_fp(stderr);
 422                 t->errors++;
 423             }
 424         }
 425         /* clean it up */
 426         ERR_clear_error();
 427         if (t->data != NULL) {
 428             t->meth->cleanup(t);
 429             OPENSSL_free(t->data);
 430             t->data = NULL;
 431         }
 432         OPENSSL_free(t->expected_err);
 433         t->expected_err = NULL;
 434         free_expected(t);
 435     }
 436     t->meth = tmeth;
 437     return 1;
 438 }
 439
 440 static int find_key(EVP_PKEY **ppk, const char *name, struct key_list *lst)
 441 {
 442     for (; lst; lst = lst->next) {
 443         if (strcmp(lst->name, name) == 0) {
 444             if (ppk)
 445                 *ppk = lst->key;
 446             return 1;
 447         }
 448     }
 449     return 0;
 450 }
 451
 452 static void free_key_list(struct key_list *lst)
 453 {
 454     while (lst != NULL) {
 455         struct key_list *ltmp;
 456         EVP_PKEY_free(lst->key);
 457         OPENSSL_free(lst->name);
 458         ltmp = lst->next;
 459         OPENSSL_free(lst);
 460         lst = ltmp;
 461     }
 462 }
 463
 464 static int check_unsupported()
 465 {
 466     long err = ERR_peek_error();
 467     if (ERR_GET_LIB(err) == ERR_LIB_EVP
 468         && ERR_GET_REASON(err) == EVP_R_UNSUPPORTED_ALGORITHM) {
 469         ERR_clear_error();
 470         return 1;
 471     }
 472 #ifndef OPENSSL_NO_EC
 473     /*
 474      * If EC support is enabled we should catch also EC_R_UNKNOWN_GROUP as an
 475      * hint to an unsupported algorithm/curve (e.g. if binary EC support is
 476      * disabled).
 477      */
 478     if (ERR_GET_LIB(err) == ERR_LIB_EC
 479         && ERR_GET_REASON(err) == EC_R_UNKNOWN_GROUP) {
 480         ERR_clear_error();
 481         return 1;
 482     }
 483 #endif /* OPENSSL_NO_EC */
 484     return 0;
 485 }
 486
 487
 488 static int read_key(struct evp_test *t)
 489 {
 490     char tmpbuf[80];
 491     if (t->key == NULL)
 492         t->key = BIO_new(BIO_s_mem());
 493     else if (BIO_reset(t->key) <= 0)
 494         return 0;
 495     if (t->key == NULL) {
 496         fprintf(stderr, "Error allocating key memory BIO\n");
 497         return 0;
 498     }
 499     /* Read to PEM end line and place content in memory BIO */
 500     while (BIO_gets(t->in, tmpbuf, sizeof(tmpbuf))) {
 501         t->line++;
 502         if (BIO_puts(t->key, tmpbuf) <= 0) {
 503             fprintf(stderr, "Error writing to key memory BIO\n");
 504             return 0;
 505         }
 506         if (strncmp(tmpbuf, "-----END", 8) == 0)
 507             return 1;
 508     }
 509     fprintf(stderr, "Can't find key end\n");
 510     return 0;
 511 }
 512
 513 static int process_test(struct evp_test *t, char *buf, int verbose)
 514 {
 515     char *keyword = NULL, *value = NULL;
 516     int rv = 0, add_key = 0;
 517     struct key_list **lst = NULL, *key = NULL;
 518     EVP_PKEY *pk = NULL;
 519     const struct evp_test_method *tmeth = NULL;
 520     if (verbose)
 521         fputs(buf, stdout);
 522     if (!parse_line(&keyword, &value, buf))
 523         return 1;
 524     if (strcmp(keyword, "PrivateKey") == 0) {
 525         if (!read_key(t))
 526             return 0;
 527         pk = PEM_read_bio_PrivateKey(t->key, NULL, 0, NULL);
 528         if (pk == NULL && !check_unsupported()) {
 529             fprintf(stderr, "Error reading private key %s\n", value);
 530             ERR_print_errors_fp(stderr);
 531             return 0;
 532         }
 533         lst = &t->private;
 534         add_key = 1;
 535     }
 536     if (strcmp(keyword, "PublicKey") == 0) {
 537         if (!read_key(t))
 538             return 0;
 539         pk = PEM_read_bio_PUBKEY(t->key, NULL, 0, NULL);
 540         if (pk == NULL && !check_unsupported()) {
 541             fprintf(stderr, "Error reading public key %s\n", value);
 542             ERR_print_errors_fp(stderr);
 543             return 0;
 544         }
 545         lst = &t->public;
 546         add_key = 1;
 547     }
 548     /* If we have a key add to list */
 549     if (add_key) {
 550         if (find_key(NULL, value, *lst)) {
 551             fprintf(stderr, "Duplicate key %s\n", value);
 552             return 0;
 553         }
 554         key = OPENSSL_malloc(sizeof(*key));
 555         if (!key)
 556             return 0;
 557         key->name = OPENSSL_strdup(value);
 558         key->key = pk;
 559         key->next = *lst;
 560         *lst = key;
 561         return 1;
 562     }
 563
 564     /* See if keyword corresponds to a test start */
 565     tmeth = evp_find_test(keyword);
 566     if (tmeth) {
 567         if (!setup_test(t, tmeth))
 568             return 0;
 569         t->start_line = t->line;
 570         t->skip = 0;
 571         if (!tmeth->init(t, value)) {
 572             fprintf(stderr, "Unknown %s: %s\n", keyword, value);
 573             return 0;
 574         }
 575         return 1;
 576     } else if (t->skip) {
 577         return 1;
 578     } else if (strcmp(keyword, "Result") == 0) {
 579         if (t->expected_err) {
 580             fprintf(stderr, "Line %d: multiple result lines\n", t->line);
 581             return 0;
 582         }
 583         t->expected_err = OPENSSL_strdup(value);
 584         if (t->expected_err == NULL)
 585             return 0;
 586     } else if (strcmp(keyword, "Function") == 0) {
 587         if (t->func != NULL) {
 588             fprintf(stderr, "Line %d: multiple function lines\n", t->line);
 589             return 0;
 590         }
 591         t->func = OPENSSL_strdup(value);
 592         if (t->func == NULL)
 593             return 0;
 594     } else if (strcmp(keyword, "Reason") == 0) {
 595         if (t->reason != NULL) {
 596             fprintf(stderr, "Line %d: multiple reason lines\n", t->line);
 597             return 0;
 598         }
 599         t->reason = OPENSSL_strdup(value);
 600         if (t->reason == NULL)
 601             return 0;
 602     } else {
 603         /* Must be test specific line: try to parse it */
 604         if (t->meth)
 605             rv = t->meth->parse(t, keyword, value);
 606
 607         if (rv == 0)
 608             fprintf(stderr, "line %d: unexpected keyword %s\n",
 609                     t->line, keyword);
 610
 611         if (rv < 0)
 612             fprintf(stderr, "line %d: error processing keyword %s\n",
 613                     t->line, keyword);
 614         if (rv <= 0)
 615             return 0;
 616     }
 617     return 1;
 618 }
 619
 620 static int check_var_length_output(struct evp_test *t,
 621                                    const unsigned char *expected,
 622                                    size_t expected_len,
 623                                    const unsigned char *received,
 624                                    size_t received_len)
 625 {
 626     if (expected_len == received_len &&
 627         memcmp(expected, received, expected_len) == 0) {
 628         return 0;
 629     }
 630
 631     /* The result printing code expects a non-NULL buffer. */
 632     t->out_expected = OPENSSL_memdup(expected, expected_len ? expected_len : 1);
 633     t->out_expected_len = expected_len;
 634     t->out_received = OPENSSL_memdup(received, received_len ? received_len : 1);
 635     t->out_received_len = received_len;
 636     if (t->out_expected == NULL || t->out_received == NULL) {
 637         fprintf(stderr, "Memory allocation error!\n");
 638         exit(1);
 639     }
 640     return 1;
 641 }
 642
 643 static int check_output(struct evp_test *t,
 644                         const unsigned char *expected,
 645                         const unsigned char *received,
 646                         size_t len)
 647 {
 648     return check_var_length_output(t, expected, len, received, len);
 649 }
 650
 651 int main(int argc, char **argv)
 652 {
 653     BIO *in = NULL;
 654     char buf[10240];
 655     struct evp_test t;
 656
 657     if (argc != 2) {
 658         fprintf(stderr, "usage: evp_test testfile.txt\n");
 659         return 1;
 660     }
 661
 662     CRYPTO_mem_ctrl(CRYPTO_MEM_CHECK_ON);
 663
 664     memset(&t, 0, sizeof(t));
 665     t.start_line = -1;
 666     in = BIO_new_file(argv[1], "rb");
 667     if (in == NULL) {
 668         fprintf(stderr, "Can't open %s for reading\n", argv[1]);
 669         return 1;
 670     }
 671     t.in = in;
 672     t.err = NULL;
 673     while (BIO_gets(in, buf, sizeof(buf))) {
 674         t.line++;
 675         if (!process_test(&t, buf, 0))
 676             exit(1);
 677     }
 678     /* Run any final test we have */
 679     if (!setup_test(&t, NULL))
 680         exit(1);
 681     fprintf(stderr, "%d tests completed with %d errors, %d skipped\n",
 682             t.ntests, t.errors, t.nskip);
 683     free_key_list(t.public);
 684     free_key_list(t.private);
 685     BIO_free(t.key);
 686     BIO_free(in);
 687
 688 #ifndef OPENSSL_NO_CRYPTO_MDEBUG
 689     if (CRYPTO_mem_leaks_fp(stderr) <= 0)
 690         return 1;
 691 #endif
 692     if (t.errors)
 693         return 1;
 694     return 0;
 695 }
 696
 697 static void test_free(void *d)
 698 {
 699     OPENSSL_free(d);
 700 }
 701
 702 /* Message digest tests */
 703
 704 struct digest_data {
 705     /* Digest this test is for */
 706     const EVP_MD *digest;
 707     /* Input to digest */
 708     unsigned char *input;
 709     size_t input_len;
 710     /* Repeat count for input */
 711     size_t nrpt;
 712     /* Expected output */
 713     unsigned char *output;
 714     size_t output_len;
 715 };
 716
 717 static int digest_test_init(struct evp_test *t, const char *alg)
 718 {
 719     const EVP_MD *digest;
 720     struct digest_data *mdat;
 721     digest = EVP_get_digestbyname(alg);
 722     if (!digest) {
 723         /* If alg has an OID assume disabled algorithm */
 724         if (OBJ_sn2nid(alg) != NID_undef || OBJ_ln2nid(alg) != NID_undef) {
 725             t->skip = 1;
 726             return 1;
 727         }
 728         return 0;
 729     }
 730     mdat = OPENSSL_malloc(sizeof(*mdat));
 731     mdat->digest = digest;
 732     mdat->input = NULL;
 733     mdat->output = NULL;
 734     mdat->nrpt = 1;
 735     t->data = mdat;
 736     return 1;
 737 }
 738
 739 static void digest_test_cleanup(struct evp_test *t)
 740 {
 741     struct digest_data *mdat = t->data;
 742     test_free(mdat->input);
 743     test_free(mdat->output);
 744 }
 745
 746 static int digest_test_parse(struct evp_test *t,
 747                              const char *keyword, const char *value)
 748 {
 749     struct digest_data *mdata = t->data;
 750     if (strcmp(keyword, "Input") == 0)
 751         return test_bin(value, &mdata->input, &mdata->input_len);
 752     if (strcmp(keyword, "Output") == 0)
 753         return test_bin(value, &mdata->output, &mdata->output_len);
 754     if (strcmp(keyword, "Count") == 0) {
 755         long nrpt = atoi(value);
 756         if (nrpt <= 0)
 757             return 0;
 758         mdata->nrpt = (size_t)nrpt;
 759         return 1;
 760     }
 761     return 0;
 762 }
 763
 764 static int digest_test_run(struct evp_test *t)
 765 {
 766     struct digest_data *mdata = t->data;
 767     size_t i;
 768     const char *err = "INTERNAL_ERROR";
 769     EVP_MD_CTX *mctx;
 770     unsigned char md[EVP_MAX_MD_SIZE];
 771     unsigned int md_len;
 772     mctx = EVP_MD_CTX_new();
 773     if (!mctx)
 774         goto err;
 775     err = "DIGESTINIT_ERROR";
 776     if (!EVP_DigestInit_ex(mctx, mdata->digest, NULL))
 777         goto err;
 778     err = "DIGESTUPDATE_ERROR";
 779     for (i = 0; i < mdata->nrpt; i++) {
 780         if (!EVP_DigestUpdate(mctx, mdata->input, mdata->input_len))
 781             goto err;
 782     }
 783     err = "DIGESTFINAL_ERROR";
 784     if (!EVP_DigestFinal(mctx, md, &md_len))
 785         goto err;
 786     err = "DIGEST_LENGTH_MISMATCH";
 787     if (md_len != mdata->output_len)
 788         goto err;
 789     err = "DIGEST_MISMATCH";
 790     if (check_output(t, mdata->output, md, md_len))
 791         goto err;
 792     err = NULL;
 793  err:
 794     EVP_MD_CTX_free(mctx);
 795     t->err = err;
 796     return 1;
 797 }
 798
 799 static const struct evp_test_method digest_test_method = {
 800     "Digest",
 801     digest_test_init,
 802     digest_test_cleanup,
 803     digest_test_parse,
 804     digest_test_run
 805 };
 806
 807 /* Cipher tests */
 808 struct cipher_data {
 809     const EVP_CIPHER *cipher;
 810     int enc;
 811     /* EVP_CIPH_GCM_MODE, EVP_CIPH_CCM_MODE or EVP_CIPH_OCB_MODE if AEAD */
 812     int aead;
 813     unsigned char *key;
 814     size_t key_len;
 815     unsigned char *iv;
 816     size_t iv_len;
 817     unsigned char *plaintext;
 818     size_t plaintext_len;
 819     unsigned char *ciphertext;
 820     size_t ciphertext_len;
 821     /* GCM, CCM only */
 822     unsigned char *aad;
 823     size_t aad_len;
 824     unsigned char *tag;
 825     size_t tag_len;
 826 };
 827
 828 static int cipher_test_init(struct evp_test *t, const char *alg)
 829 {
 830     const EVP_CIPHER *cipher;
 831     struct cipher_data *cdat = t->data;
 832     cipher = EVP_get_cipherbyname(alg);
 833     if (!cipher) {
 834         /* If alg has an OID assume disabled algorithm */
 835         if (OBJ_sn2nid(alg) != NID_undef || OBJ_ln2nid(alg) != NID_undef) {
 836             t->skip = 1;
 837             return 1;
 838         }
 839         return 0;
 840     }
 841     cdat = OPENSSL_malloc(sizeof(*cdat));
 842     cdat->cipher = cipher;
 843     cdat->enc = -1;
 844     cdat->key = NULL;
 845     cdat->iv = NULL;
 846     cdat->ciphertext = NULL;
 847     cdat->plaintext = NULL;
 848     cdat->aad = NULL;
 849     cdat->tag = NULL;
 850     t->data = cdat;
 851     if (EVP_CIPHER_mode(cipher) == EVP_CIPH_GCM_MODE
 852         || EVP_CIPHER_mode(cipher) == EVP_CIPH_OCB_MODE
 853         || EVP_CIPHER_mode(cipher) == EVP_CIPH_CCM_MODE)
 854         cdat->aead = EVP_CIPHER_mode(cipher);
 855     else if (EVP_CIPHER_flags(cipher) & EVP_CIPH_FLAG_AEAD_CIPHER)
 856         cdat->aead = -1;
 857     else
 858         cdat->aead = 0;
 859
 860     return 1;
 861 }
 862
 863 static void cipher_test_cleanup(struct evp_test *t)
 864 {
 865     struct cipher_data *cdat = t->data;
 866     test_free(cdat->key);
 867     test_free(cdat->iv);
 868     test_free(cdat->ciphertext);
 869     test_free(cdat->plaintext);
 870     test_free(cdat->aad);
 871     test_free(cdat->tag);
 872 }
 873
 874 static int cipher_test_parse(struct evp_test *t, const char *keyword,
 875                              const char *value)
 876 {
 877     struct cipher_data *cdat = t->data;
 878     if (strcmp(keyword, "Key") == 0)
 879         return test_bin(value, &cdat->key, &cdat->key_len);
 880     if (strcmp(keyword, "IV") == 0)
 881         return test_bin(value, &cdat->iv, &cdat->iv_len);
 882     if (strcmp(keyword, "Plaintext") == 0)
 883         return test_bin(value, &cdat->plaintext, &cdat->plaintext_len);
 884     if (strcmp(keyword, "Ciphertext") == 0)
 885         return test_bin(value, &cdat->ciphertext, &cdat->ciphertext_len);
 886     if (cdat->aead) {
 887         if (strcmp(keyword, "AAD") == 0)
 888             return test_bin(value, &cdat->aad, &cdat->aad_len);
 889         if (strcmp(keyword, "Tag") == 0)
 890             return test_bin(value, &cdat->tag, &cdat->tag_len);
 891     }
 892
 893     if (strcmp(keyword, "Operation") == 0) {
 894         if (strcmp(value, "ENCRYPT") == 0)
 895             cdat->enc = 1;
 896         else if (strcmp(value, "DECRYPT") == 0)
 897             cdat->enc = 0;
 898         else
 899             return 0;
 900         return 1;
 901     }
 902     return 0;
 903 }
 904
 905 static int cipher_test_enc(struct evp_test *t, int enc,
 906                            size_t out_misalign, size_t inp_misalign, int frag)
 907 {
 908     struct cipher_data *cdat = t->data;
 909     unsigned char *in, *out, *tmp = NULL;
 910     size_t in_len, out_len, donelen = 0;
 911     int tmplen, chunklen, tmpflen;
 912     EVP_CIPHER_CTX *ctx = NULL;
 913     const char *err;
 914     err = "INTERNAL_ERROR";
 915     ctx = EVP_CIPHER_CTX_new();
 916     if (!ctx)
 917         goto err;
 918     EVP_CIPHER_CTX_set_flags(ctx, EVP_CIPHER_CTX_FLAG_WRAP_ALLOW);
 919     if (enc) {
 920         in = cdat->plaintext;
 921         in_len = cdat->plaintext_len;
 922         out = cdat->ciphertext;
 923         out_len = cdat->ciphertext_len;
 924     } else {
 925         in = cdat->ciphertext;
 926         in_len = cdat->ciphertext_len;
 927         out = cdat->plaintext;
 928         out_len = cdat->plaintext_len;
 929     }
 930     if (inp_misalign == (size_t)-1) {
 931         /*
 932          * Exercise in-place encryption
 933          */
 934         tmp = OPENSSL_malloc(out_misalign + in_len + 2 * EVP_MAX_BLOCK_LENGTH);
 935         if (!tmp)
 936             goto err;
 937         in = memcpy(tmp + out_misalign, in, in_len);
 938     } else {
 939         inp_misalign += 16 - ((out_misalign + in_len) & 15);
 940         /*
 941          * 'tmp' will store both output and copy of input. We make the copy
 942          * of input to specifically aligned part of 'tmp'. So we just
 943          * figured out how much padding would ensure the required alignment,
 944          * now we allocate extended buffer and finally copy the input just
 945          * past inp_misalign in expression below. Output will be written
 946          * past out_misalign...
 947          */
 948         tmp = OPENSSL_malloc(out_misalign + in_len + 2 * EVP_MAX_BLOCK_LENGTH +
 949                              inp_misalign + in_len);
 950         if (!tmp)
 951             goto err;
 952         in = memcpy(tmp + out_misalign + in_len + 2 * EVP_MAX_BLOCK_LENGTH +
 953                     inp_misalign, in, in_len);
 954     }
 955     err = "CIPHERINIT_ERROR";
 956     if (!EVP_CipherInit_ex(ctx, cdat->cipher, NULL, NULL, NULL, enc))
 957         goto err;
 958     err = "INVALID_IV_LENGTH";
 959     if (cdat->iv) {
 960         if (cdat->aead) {
 961             if (!EVP_CIPHER_CTX_ctrl(ctx, EVP_CTRL_AEAD_SET_IVLEN,
 962                                      cdat->iv_len, 0))
 963                 goto err;
 964         } else if (cdat->iv_len != (size_t)EVP_CIPHER_CTX_iv_length(ctx))
 965             goto err;
 966     }
 967     if (cdat->aead) {
 968         unsigned char *tag;
 969         /*
 970          * If encrypting or OCB just set tag length initially, otherwise
 971          * set tag length and value.
 972          */
 973         if (enc || cdat->aead == EVP_CIPH_OCB_MODE) {
 974             err = "TAG_LENGTH_SET_ERROR";
 975             tag = NULL;
 976         } else {
 977             err = "TAG_SET_ERROR";
 978             tag = cdat->tag;
 979         }
 980         if (tag || cdat->aead != EVP_CIPH_GCM_MODE) {
 981             if (!EVP_CIPHER_CTX_ctrl(ctx, EVP_CTRL_AEAD_SET_TAG,
 982                                      cdat->tag_len, tag))
 983                 goto err;
 984         }
 985     }
 986
 987     err = "INVALID_KEY_LENGTH";
 988     if (!EVP_CIPHER_CTX_set_key_length(ctx, cdat->key_len))
 989         goto err;
 990     err = "KEY_SET_ERROR";
 991     if (!EVP_CipherInit_ex(ctx, NULL, NULL, cdat->key, cdat->iv, -1))
 992         goto err;
 993
 994     if (!enc && cdat->aead == EVP_CIPH_OCB_MODE) {
 995         if (!EVP_CIPHER_CTX_ctrl(ctx, EVP_CTRL_AEAD_SET_TAG,
 996                                  cdat->tag_len, cdat->tag)) {
 997             err = "TAG_SET_ERROR";
 998             goto err;
 999         }
1000     }
1001
1002     if (cdat->aead == EVP_CIPH_CCM_MODE) {
1003         if (!EVP_CipherUpdate(ctx, NULL, &tmplen, NULL, out_len)) {
1004             err = "CCM_PLAINTEXT_LENGTH_SET_ERROR";
1005             goto err;
1006         }
1007     }
1008     if (cdat->aad) {
1009         err = "AAD_SET_ERROR";
1010         if (!frag) {
1011             if (!EVP_CipherUpdate(ctx, NULL, &chunklen, cdat->aad,
1012                                   cdat->aad_len))
1013                 goto err;
1014         } else {
1015             /*
1016              * Supply the AAD in chunks less than the block size where possible
1017              */
1018             if (cdat->aad_len > 0) {
1019                 if (!EVP_CipherUpdate(ctx, NULL, &chunklen, cdat->aad, 1))
1020                     goto err;
1021                 donelen++;
1022             }
1023             if (cdat->aad_len > 2) {
1024                 if (!EVP_CipherUpdate(ctx, NULL, &chunklen, cdat->aad + donelen,
1025                                       cdat->aad_len - 2))
1026                     goto err;
1027                 donelen += cdat->aad_len - 2;
1028             }
1029             if (cdat->aad_len > 1
1030                     && !EVP_CipherUpdate(ctx, NULL, &chunklen,
1031                                          cdat->aad + donelen, 1))
1032                 goto err;
1033         }
1034     }
1035     EVP_CIPHER_CTX_set_padding(ctx, 0);
1036     err = "CIPHERUPDATE_ERROR";
1037     tmplen = 0;
1038     if (!frag) {
1039         /* We supply the data all in one go */
1040         if (!EVP_CipherUpdate(ctx, tmp + out_misalign, &tmplen, in, in_len))
1041             goto err;
1042     } else {
1043         /* Supply the data in chunks less than the block size where possible */
1044         if (in_len > 0) {
1045             if (!EVP_CipherUpdate(ctx, tmp + out_misalign, &chunklen, in, 1))
1046                 goto err;
1047             tmplen += chunklen;
1048             in++;
1049             in_len--;
1050         }
1051         if (in_len > 1) {
1052             if (!EVP_CipherUpdate(ctx, tmp + out_misalign + tmplen, &chunklen,
1053                                   in, in_len - 1))
1054                 goto err;
1055             tmplen += chunklen;
1056             in += in_len - 1;
1057             in_len = 1;
1058         }
1059         if (in_len > 0 ) {
1060             if (!EVP_CipherUpdate(ctx, tmp + out_misalign + tmplen, &chunklen,
1061                                   in, 1))
1062                 goto err;
1063             tmplen += chunklen;
1064         }
1065     }
1066     if (cdat->aead == EVP_CIPH_CCM_MODE)
1067         tmpflen = 0;
1068     else {
1069         err = "CIPHERFINAL_ERROR";
1070         if (!EVP_CipherFinal_ex(ctx, tmp + out_misalign + tmplen, &tmpflen))
1071             goto err;
1072     }
1073     err = "LENGTH_MISMATCH";
1074     if (out_len != (size_t)(tmplen + tmpflen))
1075         goto err;
1076     err = "VALUE_MISMATCH";
1077     if (check_output(t, out, tmp + out_misalign, out_len))
1078         goto err;
1079     if (enc && cdat->aead) {
1080         unsigned char rtag[16];
1081         if (cdat->tag_len > sizeof(rtag)) {
1082             err = "TAG_LENGTH_INTERNAL_ERROR";
1083             goto err;
1084         }
1085         if (!EVP_CIPHER_CTX_ctrl(ctx, EVP_CTRL_AEAD_GET_TAG,
1086                                  cdat->tag_len, rtag)) {
1087             err = "TAG_RETRIEVE_ERROR";
1088             goto err;
1089         }
1090         if (check_output(t, cdat->tag, rtag, cdat->tag_len)) {
1091             err = "TAG_VALUE_MISMATCH";
1092             goto err;
1093         }
1094     }
1095     err = NULL;
1096  err:
1097     OPENSSL_free(tmp);
1098     EVP_CIPHER_CTX_free(ctx);
1099     t->err = err;
1100     return err ? 0 : 1;
1101 }
1102
1103 static int cipher_test_run(struct evp_test *t)
1104 {
1105     struct cipher_data *cdat = t->data;
1106     int rv, frag = 0;
1107     size_t out_misalign, inp_misalign;
1108
1109     if (!cdat->key) {
1110         t->err = "NO_KEY";
1111         return 0;
1112     }
1113     if (!cdat->iv && EVP_CIPHER_iv_length(cdat->cipher)) {
1114         /* IV is optional and usually omitted in wrap mode */
1115         if (EVP_CIPHER_mode(cdat->cipher) != EVP_CIPH_WRAP_MODE) {
1116             t->err = "NO_IV";
1117             return 0;
1118         }
1119     }
1120     if (cdat->aead && !cdat->tag) {
1121         t->err = "NO_TAG";
1122         return 0;
1123     }
1124     for (out_misalign = 0; out_misalign <= 1;) {
1125         static char aux_err[64];
1126         t->aux_err = aux_err;
1127         for (inp_misalign = (size_t)-1; inp_misalign != 2; inp_misalign++) {
1128             if (inp_misalign == (size_t)-1) {
1129                 /* kludge: inp_misalign == -1 means "exercise in-place" */
1130                 BIO_snprintf(aux_err, sizeof(aux_err),
1131                              "%s in-place, %sfragmented",
1132                              out_misalign ? "misaligned" : "aligned",
1133                              frag ? "" : "not ");
1134             } else {
1135                 BIO_snprintf(aux_err, sizeof(aux_err),
1136                              "%s output and %s input, %sfragmented",
1137                              out_misalign ? "misaligned" : "aligned",
1138                              inp_misalign ? "misaligned" : "aligned",
1139                              frag ? "" : "not ");
1140             }
1141             if (cdat->enc) {
1142                 rv = cipher_test_enc(t, 1, out_misalign, inp_misalign, frag);
1143                 /* Not fatal errors: return */
1144                 if (rv != 1) {
1145                     if (rv < 0)
1146                         return 0;
1147                     return 1;
1148                 }
1149             }
1150             if (cdat->enc != 1) {
1151                 rv = cipher_test_enc(t, 0, out_misalign, inp_misalign, frag);
1152                 /* Not fatal errors: return */
1153                 if (rv != 1) {
1154                     if (rv < 0)
1155                         return 0;
1156                     return 1;
1157                 }
1158             }
1159         }
1160
1161         if (out_misalign == 1 && frag == 0) {
1162             /*
1163              * XTS, CCM and Wrap modes have special requirements about input
1164              * lengths so we don't fragment for those
1165              */
1166             if (cdat->aead == EVP_CIPH_CCM_MODE
1167                     || EVP_CIPHER_mode(cdat->cipher) == EVP_CIPH_XTS_MODE
1168                      || EVP_CIPHER_mode(cdat->cipher) == EVP_CIPH_WRAP_MODE)
1169                 break;
1170             out_misalign = 0;
1171             frag++;
1172         } else {
1173             out_misalign++;
1174         }
1175     }
1176     t->aux_err = NULL;
1177
1178     return 1;
1179 }
1180
1181 static const struct evp_test_method cipher_test_method = {
1182     "Cipher",
1183     cipher_test_init,
1184     cipher_test_cleanup,
1185     cipher_test_parse,
1186     cipher_test_run
1187 };
1188
1189 struct mac_data {
1190     /* MAC type */
1191     int type;
1192     /* Algorithm string for this MAC */
1193     char *alg;
1194     /* MAC key */
1195     unsigned char *key;
1196     size_t key_len;
1197     /* Input to MAC */
1198     unsigned char *input;
1199     size_t input_len;
1200     /* Expected output */
1201     unsigned char *output;
1202     size_t output_len;
1203 };
1204
1205 static int mac_test_init(struct evp_test *t, const char *alg)
1206 {
1207     int type;
1208     struct mac_data *mdat;
1209     if (strcmp(alg, "HMAC") == 0) {
1210         type = EVP_PKEY_HMAC;
1211     } else if (strcmp(alg, "CMAC") == 0) {
1212 #ifndef OPENSSL_NO_CMAC
1213         type = EVP_PKEY_CMAC;
1214 #else
1215         t->skip = 1;
1216         return 1;
1217 #endif
1218     } else
1219         return 0;
1220
1221     mdat = OPENSSL_malloc(sizeof(*mdat));
1222     mdat->type = type;
1223     mdat->alg = NULL;
1224     mdat->key = NULL;
1225     mdat->input = NULL;
1226     mdat->output = NULL;
1227     t->data = mdat;
1228     return 1;
1229 }
1230
1231 static void mac_test_cleanup(struct evp_test *t)
1232 {
1233     struct mac_data *mdat = t->data;
1234     test_free(mdat->alg);
1235     test_free(mdat->key);
1236     test_free(mdat->input);
1237     test_free(mdat->output);
1238 }
1239
1240 static int mac_test_parse(struct evp_test *t,
1241                           const char *keyword, const char *value)
1242 {
1243     struct mac_data *mdata = t->data;
1244     if (strcmp(keyword, "Key") == 0)
1245         return test_bin(value, &mdata->key, &mdata->key_len);
1246     if (strcmp(keyword, "Algorithm") == 0) {
1247         mdata->alg = OPENSSL_strdup(value);
1248         if (!mdata->alg)
1249             return 0;
1250         return 1;
1251     }
1252     if (strcmp(keyword, "Input") == 0)
1253         return test_bin(value, &mdata->input, &mdata->input_len);
1254     if (strcmp(keyword, "Output") == 0)
1255         return test_bin(value, &mdata->output, &mdata->output_len);
1256     return 0;
1257 }
1258
1259 static int mac_test_run(struct evp_test *t)
1260 {
1261     struct mac_data *mdata = t->data;
1262     const char *err = "INTERNAL_ERROR";
1263     EVP_MD_CTX *mctx = NULL;
1264     EVP_PKEY_CTX *pctx = NULL, *genctx = NULL;
1265     EVP_PKEY *key = NULL;
1266     const EVP_MD *md = NULL;
1267     unsigned char *mac = NULL;
1268     size_t mac_len;
1269
1270 #ifdef OPENSSL_NO_DES
1271     if (mdata->alg != NULL && strstr(mdata->alg, "DES") != NULL) {
1272         /* Skip DES */
1273         err = NULL;
1274         goto err;
1275     }
1276 #endif
1277
1278     err = "MAC_PKEY_CTX_ERROR";
1279     genctx = EVP_PKEY_CTX_new_id(mdata->type, NULL);
1280     if (!genctx)
1281         goto err;
1282
1283     err = "MAC_KEYGEN_INIT_ERROR";
1284     if (EVP_PKEY_keygen_init(genctx) <= 0)
1285         goto err;
1286     if (mdata->type == EVP_PKEY_CMAC) {
1287         err = "MAC_ALGORITHM_SET_ERROR";
1288         if (EVP_PKEY_CTX_ctrl_str(genctx, "cipher", mdata->alg) <= 0)
1289             goto err;
1290     }
1291
1292     err = "MAC_KEY_SET_ERROR";
1293     if (EVP_PKEY_CTX_set_mac_key(genctx, mdata->key, mdata->key_len) <= 0)
1294         goto err;
1295
1296     err = "MAC_KEY_GENERATE_ERROR";
1297     if (EVP_PKEY_keygen(genctx, &key) <= 0)
1298         goto err;
1299     if (mdata->type == EVP_PKEY_HMAC) {
1300         err = "MAC_ALGORITHM_SET_ERROR";
1301         md = EVP_get_digestbyname(mdata->alg);
1302         if (!md)
1303             goto err;
1304     }
1305     mctx = EVP_MD_CTX_new();
1306     if (!mctx)
1307         goto err;
1308     err = "DIGESTSIGNINIT_ERROR";
1309     if (!EVP_DigestSignInit(mctx, &pctx, md, NULL, key))
1310         goto err;
1311
1312     err = "DIGESTSIGNUPDATE_ERROR";
1313     if (!EVP_DigestSignUpdate(mctx, mdata->input, mdata->input_len))
1314         goto err;
1315     err = "DIGESTSIGNFINAL_LENGTH_ERROR";
1316     if (!EVP_DigestSignFinal(mctx, NULL, &mac_len))
1317         goto err;
1318     mac = OPENSSL_malloc(mac_len);
1319     if (!mac) {
1320         fprintf(stderr, "Error allocating mac buffer!\n");
1321         exit(1);
1322     }
1323     if (!EVP_DigestSignFinal(mctx, mac, &mac_len))
1324         goto err;
1325     err = "MAC_LENGTH_MISMATCH";
1326     if (mac_len != mdata->output_len)
1327         goto err;
1328     err = "MAC_MISMATCH";
1329     if (check_output(t, mdata->output, mac, mac_len))
1330         goto err;
1331     err = NULL;
1332  err:
1333     EVP_MD_CTX_free(mctx);
1334     OPENSSL_free(mac);
1335     EVP_PKEY_CTX_free(genctx);
1336     EVP_PKEY_free(key);
1337     t->err = err;
1338     return 1;
1339 }
1340
1341 static const struct evp_test_method mac_test_method = {
1342     "MAC",
1343     mac_test_init,
1344     mac_test_cleanup,
1345     mac_test_parse,
1346     mac_test_run
1347 };
1348
1349 /*
1350  * Public key operations. These are all very similar and can share
1351  * a lot of common code.
1352  */
1353
1354 struct pkey_data {
1355     /* Context for this operation */
1356     EVP_PKEY_CTX *ctx;
1357     /* Key operation to perform */
1358     int (*keyop) (EVP_PKEY_CTX *ctx,
1359                   unsigned char *sig, size_t *siglen,
1360                   const unsigned char *tbs, size_t tbslen);
1361     /* Input to MAC */
1362     unsigned char *input;
1363     size_t input_len;
1364     /* Expected output */
1365     unsigned char *output;
1366     size_t output_len;
1367 };
1368
1369 /*
1370  * Perform public key operation setup: lookup key, allocated ctx and call
1371  * the appropriate initialisation function
1372  */
1373 static int pkey_test_init(struct evp_test *t, const char *name,
1374                           int use_public,
1375                           int (*keyopinit) (EVP_PKEY_CTX *ctx),
1376                           int (*keyop) (EVP_PKEY_CTX *ctx,
1377                                         unsigned char *sig, size_t *siglen,
1378                                         const unsigned char *tbs,
1379                                         size_t tbslen)
1380     )
1381 {
1382     struct pkey_data *kdata;
1383     EVP_PKEY *pkey = NULL;
1384     int rv = 0;
1385     if (use_public)
1386         rv = find_key(&pkey, name, t->public);
1387     if (!rv)
1388         rv = find_key(&pkey, name, t->private);
1389     if (!rv || pkey == NULL) {
1390         t->skip = 1;
1391         return 1;
1392     }
1393
1394     kdata = OPENSSL_malloc(sizeof(*kdata));
1395     if (!kdata) {
1396         EVP_PKEY_free(pkey);
1397         return 0;
1398     }
1399     kdata->ctx = NULL;
1400     kdata->input = NULL;
1401     kdata->output = NULL;
1402     kdata->keyop = keyop;
1403     t->data = kdata;
1404     kdata->ctx = EVP_PKEY_CTX_new(pkey, NULL);
1405     if (!kdata->ctx)
1406         return 0;
1407     if (keyopinit(kdata->ctx) <= 0)
1408         t->err = "KEYOP_INIT_ERROR";
1409     return 1;
1410 }
1411
1412 static void pkey_test_cleanup(struct evp_test *t)
1413 {
1414     struct pkey_data *kdata = t->data;
1415
1416     OPENSSL_free(kdata->input);
1417     OPENSSL_free(kdata->output);
1418     EVP_PKEY_CTX_free(kdata->ctx);
1419 }
1420
1421 static int pkey_test_ctrl(struct evp_test *t, EVP_PKEY_CTX *pctx,
1422                           const char *value)
1423 {
1424     int rv;
1425     char *p, *tmpval;
1426
1427     tmpval = OPENSSL_strdup(value);
1428     if (tmpval == NULL)
1429         return 0;
1430     p = strchr(tmpval, ':');
1431     if (p != NULL)
1432         *p++ = 0;
1433     rv = EVP_PKEY_CTX_ctrl_str(pctx, tmpval, p);
1434     if (rv == -2) {
1435         t->err = "PKEY_CTRL_INVALID";
1436         rv = 1;
1437     } else if (p != NULL && rv <= 0) {
1438         /* If p has an OID and lookup fails assume disabled algorithm */
1439         int nid = OBJ_sn2nid(p);
1440         if (nid == NID_undef)
1441              nid = OBJ_ln2nid(p);
1442         if ((nid != NID_undef) && EVP_get_digestbynid(nid) == NULL &&
1443             EVP_get_cipherbynid(nid) == NULL) {
1444             t->skip = 1;
1445             rv = 1;
1446         } else {
1447             t->err = "PKEY_CTRL_ERROR";
1448             rv = 1;
1449         }
1450     }
1451     OPENSSL_free(tmpval);
1452     return rv > 0;
1453 }
1454
1455 static int pkey_test_parse(struct evp_test *t,
1456                            const char *keyword, const char *value)
1457 {
1458     struct pkey_data *kdata = t->data;
1459     if (strcmp(keyword, "Input") == 0)
1460         return test_bin(value, &kdata->input, &kdata->input_len);
1461     if (strcmp(keyword, "Output") == 0)
1462         return test_bin(value, &kdata->output, &kdata->output_len);
1463     if (strcmp(keyword, "Ctrl") == 0)
1464         return pkey_test_ctrl(t, kdata->ctx, value);
1465     return 0;
1466 }
1467
1468 static int pkey_test_run(struct evp_test *t)
1469 {
1470     struct pkey_data *kdata = t->data;
1471     unsigned char *out = NULL;
1472     size_t out_len;
1473     const char *err = "KEYOP_LENGTH_ERROR";
1474     if (kdata->keyop(kdata->ctx, NULL, &out_len, kdata->input,
1475                      kdata->input_len) <= 0)
1476         goto err;
1477     out = OPENSSL_malloc(out_len);
1478     if (!out) {
1479         fprintf(stderr, "Error allocating output buffer!\n");
1480         exit(1);
1481     }
1482     err = "KEYOP_ERROR";
1483     if (kdata->keyop
1484         (kdata->ctx, out, &out_len, kdata->input, kdata->input_len) <= 0)
1485         goto err;
1486     err = "KEYOP_LENGTH_MISMATCH";
1487     if (out_len != kdata->output_len)
1488         goto err;
1489     err = "KEYOP_MISMATCH";
1490     if (check_output(t, kdata->output, out, out_len))
1491         goto err;
1492     err = NULL;
1493  err:
1494     OPENSSL_free(out);
1495     t->err = err;
1496     return 1;
1497 }
1498
1499 static int sign_test_init(struct evp_test *t, const char *name)
1500 {
1501     return pkey_test_init(t, name, 0, EVP_PKEY_sign_init, EVP_PKEY_sign);
1502 }
1503
1504 static const struct evp_test_method psign_test_method = {
1505     "Sign",
1506     sign_test_init,
1507     pkey_test_cleanup,
1508     pkey_test_parse,
1509     pkey_test_run
1510 };
1511
1512 static int verify_recover_test_init(struct evp_test *t, const char *name)
1513 {
1514     return pkey_test_init(t, name, 1, EVP_PKEY_verify_recover_init,
1515                           EVP_PKEY_verify_recover);
1516 }
1517
1518 static const struct evp_test_method pverify_recover_test_method = {
1519     "VerifyRecover",
1520     verify_recover_test_init,
1521     pkey_test_cleanup,
1522     pkey_test_parse,
1523     pkey_test_run
1524 };
1525
1526 static int decrypt_test_init(struct evp_test *t, const char *name)
1527 {
1528     return pkey_test_init(t, name, 0, EVP_PKEY_decrypt_init,
1529                           EVP_PKEY_decrypt);
1530 }
1531
1532 static const struct evp_test_method pdecrypt_test_method = {
1533     "Decrypt",
1534     decrypt_test_init,
1535     pkey_test_cleanup,
1536     pkey_test_parse,
1537     pkey_test_run
1538 };
1539
1540 static int verify_test_init(struct evp_test *t, const char *name)
1541 {
1542     return pkey_test_init(t, name, 1, EVP_PKEY_verify_init, 0);
1543 }
1544
1545 static int verify_test_run(struct evp_test *t)
1546 {
1547     struct pkey_data *kdata = t->data;
1548     if (EVP_PKEY_verify(kdata->ctx, kdata->output, kdata->output_len,
1549                         kdata->input, kdata->input_len) <= 0)
1550         t->err = "VERIFY_ERROR";
1551     return 1;
1552 }
1553
1554 static const struct evp_test_method pverify_test_method = {
1555     "Verify",
1556     verify_test_init,
1557     pkey_test_cleanup,
1558     pkey_test_parse,
1559     verify_test_run
1560 };
1561
1562
1563 static int pderive_test_init(struct evp_test *t, const char *name)
1564 {
1565     return pkey_test_init(t, name, 0, EVP_PKEY_derive_init, 0);
1566 }
1567
1568 static int pderive_test_parse(struct evp_test *t,
1569                               const char *keyword, const char *value)
1570 {
1571     struct pkey_data *kdata = t->data;
1572
1573     if (strcmp(keyword, "PeerKey") == 0) {
1574         EVP_PKEY *peer;
1575         if (find_key(&peer, value, t->public) == 0)
1576             return 0;
1577         if (EVP_PKEY_derive_set_peer(kdata->ctx, peer) <= 0)
1578             return 0;
1579         return 1;
1580     }
1581     if (strcmp(keyword, "SharedSecret") == 0)
1582         return test_bin(value, &kdata->output, &kdata->output_len);
1583     if (strcmp(keyword, "Ctrl") == 0)
1584         return pkey_test_ctrl(t, kdata->ctx, value);
1585     return 0;
1586 }
1587
1588 static int pderive_test_run(struct evp_test *t)
1589 {
1590     struct pkey_data *kdata = t->data;
1591     unsigned char *out = NULL;
1592     size_t out_len;
1593     const char *err = "INTERNAL_ERROR";
1594
1595     out_len = kdata->output_len;
1596     out = OPENSSL_malloc(out_len);
1597     if (!out) {
1598         fprintf(stderr, "Error allocating output buffer!\n");
1599         exit(1);
1600     }
1601     err = "DERIVE_ERROR";
1602     if (EVP_PKEY_derive(kdata->ctx, out, &out_len) <= 0)
1603         goto err;
1604     err = "SHARED_SECRET_LENGTH_MISMATCH";
1605     if (out_len != kdata->output_len)
1606         goto err;
1607     err = "SHARED_SECRET_MISMATCH";
1608     if (check_output(t, kdata->output, out, out_len))
1609         goto err;
1610     err = NULL;
1611  err:
1612     OPENSSL_free(out);
1613     t->err = err;
1614     return 1;
1615 }
1616
1617 static const struct evp_test_method pderive_test_method = {
1618     "Derive",
1619     pderive_test_init,
1620     pkey_test_cleanup,
1621     pderive_test_parse,
1622     pderive_test_run
1623 };
1624
1625 /* PBE tests */
1626
1627 #define PBE_TYPE_SCRYPT 1
1628 #define PBE_TYPE_PBKDF2 2
1629 #define PBE_TYPE_PKCS12 3
1630
1631 struct pbe_data {
1632
1633     int pbe_type;
1634
1635     /* scrypt parameters */
1636     uint64_t N, r, p, maxmem;
1637
1638     /* PKCS#12 parameters */
1639     int id, iter;
1640     const EVP_MD *md;
1641
1642     /* password */
1643     unsigned char *pass;
1644     size_t pass_len;
1645
1646     /* salt */
1647     unsigned char *salt;
1648     size_t salt_len;
1649
1650     /* Expected output */
1651     unsigned char *key;
1652     size_t key_len;
1653 };
1654
1655 #ifndef OPENSSL_NO_SCRYPT
1656 static int scrypt_test_parse(struct evp_test *t,
1657                              const char *keyword, const char *value)
1658 {
1659     struct pbe_data *pdata = t->data;
1660
1661     if (strcmp(keyword, "N") == 0)
1662         return test_uint64(value, &pdata->N);
1663     if (strcmp(keyword, "p") == 0)
1664         return test_uint64(value, &pdata->p);
1665     if (strcmp(keyword, "r") == 0)
1666         return test_uint64(value, &pdata->r);
1667     if (strcmp(keyword, "maxmem") == 0)
1668         return test_uint64(value, &pdata->maxmem);
1669     return 0;
1670 }
1671 #endif
1672
1673 static int pbkdf2_test_parse(struct evp_test *t,
1674                              const char *keyword, const char *value)
1675 {
1676     struct pbe_data *pdata = t->data;
1677
1678     if (strcmp(keyword, "iter") == 0) {
1679         pdata->iter = atoi(value);
1680         if (pdata->iter <= 0)
1681             return 0;
1682         return 1;
1683     }
1684     if (strcmp(keyword, "MD") == 0) {
1685         pdata->md = EVP_get_digestbyname(value);
1686         if (pdata->md == NULL)
1687             return 0;
1688         return 1;
1689     }
1690     return 0;
1691 }
1692
1693 static int pkcs12_test_parse(struct evp_test *t,
1694                              const char *keyword, const char *value)
1695 {
1696     struct pbe_data *pdata = t->data;
1697
1698     if (strcmp(keyword, "id") == 0) {
1699         pdata->id = atoi(value);
1700         if (pdata->id <= 0)
1701             return 0;
1702         return 1;
1703     }
1704     return pbkdf2_test_parse(t, keyword, value);
1705 }
1706
1707 static int pbe_test_init(struct evp_test *t, const char *alg)
1708 {
1709     struct pbe_data *pdat;
1710     int pbe_type = 0;
1711
1712     if (strcmp(alg, "scrypt") == 0) {
1713 #ifndef OPENSSL_NO_SCRYPT
1714         pbe_type = PBE_TYPE_SCRYPT;
1715 #else
1716         t->skip = 1;
1717         return 1;
1718 #endif
1719     } else if (strcmp(alg, "pbkdf2") == 0) {
1720         pbe_type = PBE_TYPE_PBKDF2;
1721     } else if (strcmp(alg, "pkcs12") == 0) {
1722         pbe_type = PBE_TYPE_PKCS12;
1723     } else {
1724         fprintf(stderr, "Unknown pbe algorithm %s\n", alg);
1725     }
1726     pdat = OPENSSL_malloc(sizeof(*pdat));
1727     pdat->pbe_type = pbe_type;
1728     pdat->pass = NULL;
1729     pdat->salt = NULL;
1730     pdat->N = 0;
1731     pdat->r = 0;
1732     pdat->p = 0;
1733     pdat->maxmem = 0;
1734     pdat->id = 0;
1735     pdat->iter = 0;
1736     pdat->md = NULL;
1737     t->data = pdat;
1738     return 1;
1739 }
1740
1741 static void pbe_test_cleanup(struct evp_test *t)
1742 {
1743     struct pbe_data *pdat = t->data;
1744     test_free(pdat->pass);
1745     test_free(pdat->salt);
1746     test_free(pdat->key);
1747 }
1748
1749 static int pbe_test_parse(struct evp_test *t,
1750                              const char *keyword, const char *value)
1751 {
1752     struct pbe_data *pdata = t->data;
1753
1754     if (strcmp(keyword, "Password") == 0)
1755         return test_bin(value, &pdata->pass, &pdata->pass_len);
1756     if (strcmp(keyword, "Salt") == 0)
1757         return test_bin(value, &pdata->salt, &pdata->salt_len);
1758     if (strcmp(keyword, "Key") == 0)
1759         return test_bin(value, &pdata->key, &pdata->key_len);
1760     if (pdata->pbe_type == PBE_TYPE_PBKDF2)
1761         return pbkdf2_test_parse(t, keyword, value);
1762     else if (pdata->pbe_type == PBE_TYPE_PKCS12)
1763         return pkcs12_test_parse(t, keyword, value);
1764 #ifndef OPENSSL_NO_SCRYPT
1765     else if (pdata->pbe_type == PBE_TYPE_SCRYPT)
1766         return scrypt_test_parse(t, keyword, value);
1767 #endif
1768     return 0;
1769 }
1770
1771 static int pbe_test_run(struct evp_test *t)
1772 {
1773     struct pbe_data *pdata = t->data;
1774     const char *err = "INTERNAL_ERROR";
1775     unsigned char *key;
1776
1777     key = OPENSSL_malloc(pdata->key_len);
1778     if (!key)
1779         goto err;
1780     if (pdata->pbe_type == PBE_TYPE_PBKDF2) {
1781         err = "PBKDF2_ERROR";
1782         if (PKCS5_PBKDF2_HMAC((char *)pdata->pass, pdata->pass_len,
1783                               pdata->salt, pdata->salt_len,
1784                               pdata->iter, pdata->md,
1785                               pdata->key_len, key) == 0)
1786             goto err;
1787 #ifndef OPENSSL_NO_SCRYPT
1788     } else if (pdata->pbe_type == PBE_TYPE_SCRYPT) {
1789         err = "SCRYPT_ERROR";
1790         if (EVP_PBE_scrypt((const char *)pdata->pass, pdata->pass_len,
1791                            pdata->salt, pdata->salt_len,
1792                            pdata->N, pdata->r, pdata->p, pdata->maxmem,
1793                            key, pdata->key_len) == 0)
1794             goto err;
1795 #endif
1796     } else if (pdata->pbe_type == PBE_TYPE_PKCS12) {
1797         err = "PKCS12_ERROR";
1798         if (PKCS12_key_gen_uni(pdata->pass, pdata->pass_len,
1799                                pdata->salt, pdata->salt_len,
1800                                pdata->id, pdata->iter, pdata->key_len,
1801                                key, pdata->md) == 0)
1802             goto err;
1803     }
1804     err = "KEY_MISMATCH";
1805     if (check_output(t, pdata->key, key, pdata->key_len))
1806         goto err;
1807     err = NULL;
1808     err:
1809     OPENSSL_free(key);
1810     t->err = err;
1811     return 1;
1812 }
1813
1814 static const struct evp_test_method pbe_test_method = {
1815     "PBE",
1816     pbe_test_init,
1817     pbe_test_cleanup,
1818     pbe_test_parse,
1819     pbe_test_run
1820 };
1821
1822 /* Base64 tests */
1823
1824 typedef enum {
1825     BASE64_CANONICAL_ENCODING = 0,
1826     BASE64_VALID_ENCODING = 1,
1827     BASE64_INVALID_ENCODING = 2
1828 } base64_encoding_type;
1829
1830 struct encode_data {
1831     /* Input to encoding */
1832     unsigned char *input;
1833     size_t input_len;
1834     /* Expected output */
1835     unsigned char *output;
1836     size_t output_len;
1837     base64_encoding_type encoding;
1838 };
1839
1840 static int encode_test_init(struct evp_test *t, const char *encoding)
1841 {
1842     struct encode_data *edata = OPENSSL_zalloc(sizeof(*edata));
1843
1844     if (strcmp(encoding, "canonical") == 0) {
1845         edata->encoding = BASE64_CANONICAL_ENCODING;
1846     } else if (strcmp(encoding, "valid") == 0) {
1847         edata->encoding = BASE64_VALID_ENCODING;
1848     } else if (strcmp(encoding, "invalid") == 0) {
1849         edata->encoding = BASE64_INVALID_ENCODING;
1850         t->expected_err = OPENSSL_strdup("DECODE_ERROR");
1851         if (t->expected_err == NULL)
1852             return 0;
1853     } else {
1854         fprintf(stderr, "Bad encoding: %s. Should be one of "
1855                 "{canonical, valid, invalid}\n", encoding);
1856         return 0;
1857     }
1858     t->data = edata;
1859     return 1;
1860 }
1861
1862 static void encode_test_cleanup(struct evp_test *t)
1863 {
1864     struct encode_data *edata = t->data;
1865     test_free(edata->input);
1866     test_free(edata->output);
1867     memset(edata, 0, sizeof(*edata));
1868 }
1869
1870 static int encode_test_parse(struct evp_test *t,
1871                              const char *keyword, const char *value)
1872 {
1873     struct encode_data *edata = t->data;
1874     if (strcmp(keyword, "Input") == 0)
1875         return test_bin(value, &edata->input, &edata->input_len);
1876     if (strcmp(keyword, "Output") == 0)
1877         return test_bin(value, &edata->output, &edata->output_len);
1878     return 0;
1879 }
1880
1881 static int encode_test_run(struct evp_test *t)
1882 {
1883     struct encode_data *edata = t->data;
1884     unsigned char *encode_out = NULL, *decode_out = NULL;
1885     int output_len, chunk_len;
1886     const char *err = "INTERNAL_ERROR";
1887     EVP_ENCODE_CTX *decode_ctx = EVP_ENCODE_CTX_new();
1888
1889     if (decode_ctx == NULL)
1890         goto err;
1891
1892     if (edata->encoding == BASE64_CANONICAL_ENCODING) {
1893         EVP_ENCODE_CTX *encode_ctx = EVP_ENCODE_CTX_new();
1894         if (encode_ctx == NULL)
1895             goto err;
1896         encode_out = OPENSSL_malloc(EVP_ENCODE_LENGTH(edata->input_len));
1897         if (encode_out == NULL)
1898             goto err;
1899
1900         EVP_EncodeInit(encode_ctx);
1901         EVP_EncodeUpdate(encode_ctx, encode_out, &chunk_len,
1902                          edata->input, edata->input_len);
1903         output_len = chunk_len;
1904
1905         EVP_EncodeFinal(encode_ctx, encode_out + chunk_len, &chunk_len);
1906         output_len += chunk_len;
1907
1908         EVP_ENCODE_CTX_free(encode_ctx);
1909
1910         if (check_var_length_output(t, edata->output, edata->output_len,
1911                                     encode_out, output_len)) {
1912             err = "BAD_ENCODING";
1913             goto err;
1914         }
1915     }
1916
1917     decode_out = OPENSSL_malloc(EVP_DECODE_LENGTH(edata->output_len));
1918     if (decode_out == NULL)
1919         goto err;
1920
1921     EVP_DecodeInit(decode_ctx);
1922     if (EVP_DecodeUpdate(decode_ctx, decode_out, &chunk_len, edata->output,
1923                          edata->output_len) < 0) {
1924         err = "DECODE_ERROR";
1925         goto err;
1926     }
1927     output_len = chunk_len;
1928
1929     if (EVP_DecodeFinal(decode_ctx, decode_out + chunk_len, &chunk_len) != 1) {
1930         err = "DECODE_ERROR";
1931         goto err;
1932     }
1933     output_len += chunk_len;
1934
1935     if (edata->encoding != BASE64_INVALID_ENCODING &&
1936         check_var_length_output(t, edata->input, edata->input_len,
1937                                 decode_out, output_len)) {
1938         err = "BAD_DECODING";
1939         goto err;
1940     }
1941
1942     err = NULL;
1943  err:
1944     t->err = err;
1945     OPENSSL_free(encode_out);
1946     OPENSSL_free(decode_out);
1947     EVP_ENCODE_CTX_free(decode_ctx);
1948     return 1;
1949 }
1950
1951 static const struct evp_test_method encode_test_method = {
1952     "Encoding",
1953     encode_test_init,
1954     encode_test_cleanup,
1955     encode_test_parse,
1956     encode_test_run,
1957 };
1958
1959 /* KDF operations */
1960
1961 struct kdf_data {
1962     /* Context for this operation */
1963     EVP_PKEY_CTX *ctx;
1964     /* Expected output */
1965     unsigned char *output;
1966     size_t output_len;
1967 };
1968
1969 /*
1970  * Perform public key operation setup: lookup key, allocated ctx and call
1971  * the appropriate initialisation function
1972  */
1973 static int kdf_test_init(struct evp_test *t, const char *name)
1974 {
1975     struct kdf_data *kdata;
1976
1977     kdata = OPENSSL_malloc(sizeof(*kdata));
1978     if (kdata == NULL)
1979         return 0;
1980     kdata->ctx = NULL;
1981     kdata->output = NULL;
1982     t->data = kdata;
1983     kdata->ctx = EVP_PKEY_CTX_new_id(OBJ_sn2nid(name), NULL);
1984     if (kdata->ctx == NULL)
1985         return 0;
1986     if (EVP_PKEY_derive_init(kdata->ctx) <= 0)
1987         return 0;
1988     return 1;
1989 }
1990
1991 static void kdf_test_cleanup(struct evp_test *t)
1992 {
1993     struct kdf_data *kdata = t->data;
1994     OPENSSL_free(kdata->output);
1995     EVP_PKEY_CTX_free(kdata->ctx);
1996 }
1997
1998 static int kdf_test_parse(struct evp_test *t,
1999                           const char *keyword, const char *value)
2000 {
2001     struct kdf_data *kdata = t->data;
2002     if (strcmp(keyword, "Output") == 0)
2003         return test_bin(value, &kdata->output, &kdata->output_len);
2004     if (strncmp(keyword, "Ctrl", 4) == 0)
2005         return pkey_test_ctrl(t, kdata->ctx, value);
2006     return 0;
2007 }
2008
2009 static int kdf_test_run(struct evp_test *t)
2010 {
2011     struct kdf_data *kdata = t->data;
2012     unsigned char *out = NULL;
2013     size_t out_len = kdata->output_len;
2014     const char *err = "INTERNAL_ERROR";
2015     out = OPENSSL_malloc(out_len);
2016     if (!out) {
2017         fprintf(stderr, "Error allocating output buffer!\n");
2018         exit(1);
2019     }
2020     err = "KDF_DERIVE_ERROR";
2021     if (EVP_PKEY_derive(kdata->ctx, out, &out_len) <= 0)
2022         goto err;
2023     err = "KDF_LENGTH_MISMATCH";
2024     if (out_len != kdata->output_len)
2025         goto err;
2026     err = "KDF_MISMATCH";
2027     if (check_output(t, kdata->output, out, out_len))
2028         goto err;
2029     err = NULL;
2030  err:
2031     OPENSSL_free(out);
2032     t->err = err;
2033     return 1;
2034 }
2035
2036 static const struct evp_test_method kdf_test_method = {
2037     "KDF",
2038     kdf_test_init,
2039     kdf_test_cleanup,
2040     kdf_test_parse,
2041     kdf_test_run
2042 };