crypto/evp/p_open.c

   1 /* Copyright (C) 1995-1998 Eric Young (eay@cryptsoft.com)
   2  * All rights reserved.
   3  *
   4  * This package is an SSL implementation written
   5  * by Eric Young (eay@cryptsoft.com).
   6  * The implementation was written so as to conform with Netscapes SSL.
   7  *
   8  * This library is free for commercial and non-commercial use as long as
   9  * the following conditions are aheared to.  The following conditions
  10  * apply to all code found in this distribution, be it the RC4, RSA,
  11  * lhash, DES, etc., code; not just the SSL code.  The SSL documentation
  12  * included with this distribution is covered by the same copyright terms
  13  * except that the holder is Tim Hudson (tjh@cryptsoft.com).
  14  *
  15  * Copyright remains Eric Young's, and as such any Copyright notices in
  16  * the code are not to be removed.
  17  * If this package is used in a product, Eric Young should be given attribution
  18  * as the author of the parts of the library used.
  19  * This can be in the form of a textual message at program startup or
  20  * in documentation (online or textual) provided with the package.
  21  *
  22  * Redistribution and use in source and binary forms, with or without
  23  * modification, are permitted provided that the following conditions
  24  * are met:
  25  * 1. Redistributions of source code must retain the copyright
  26  *    notice, this list of conditions and the following disclaimer.
  27  * 2. Redistributions in binary form must reproduce the above copyright
  28  *    notice, this list of conditions and the following disclaimer in the
  29  *    documentation and/or other materials provided with the distribution.
  30  * 3. All advertising materials mentioning features or use of this software
  31  *    must display the following acknowledgement:
  32  *    "This product includes cryptographic software written by
  33  *     Eric Young (eay@cryptsoft.com)"
  34  *    The word 'cryptographic' can be left out if the rouines from the library
  35  *    being used are not cryptographic related :-).
  36  * 4. If you include any Windows specific code (or a derivative thereof) from
  37  *    the apps directory (application code) you must include an acknowledgement:
  38  *    "This product includes software written by Tim Hudson (tjh@cryptsoft.com)"
  39  *
  40  * THIS SOFTWARE IS PROVIDED BY ERIC YOUNG ``AS IS'' AND
  41  * ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
  42  * IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE
  43  * ARE DISCLAIMED.  IN NO EVENT SHALL THE AUTHOR OR CONTRIBUTORS BE LIABLE
  44  * FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL
  45  * DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS
  46  * OR SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION)
  47  * HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT
  48  * LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY
  49  * OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF
  50  * SUCH DAMAGE.
  51  *
  52  * The licence and distribution terms for any publically available version or
  53  * derivative of this code cannot be changed.  i.e. this code cannot simply be
  54  * copied and put under another distribution licence
  55  * [including the GNU Public Licence.]
  56  */
  57
  58 #include <stdio.h>
  59 #include "internal/cryptlib.h"
  60
  61 #ifndef OPENSSL_NO_RSA
  62
  63 # include <openssl/evp.h>
  64 # include <openssl/objects.h>
  65 # include <openssl/x509.h>
  66 # include <openssl/rsa.h>
  67
  68 int EVP_OpenInit(EVP_CIPHER_CTX *ctx, const EVP_CIPHER *type,
  69                  const unsigned char *ek, int ekl, const unsigned char *iv,
  70                  EVP_PKEY *priv)
  71 {
  72     unsigned char *key = NULL;
  73     int i, size = 0, ret = 0;
  74
  75     if (type) {
  76         EVP_CIPHER_CTX_reset(ctx);
  77         if (!EVP_DecryptInit_ex(ctx, type, NULL, NULL, NULL))
  78             return 0;
  79     }
  80
  81     if (!priv)
  82         return 1;
  83
  84     if (EVP_PKEY_id(priv) != EVP_PKEY_RSA) {
  85         EVPerr(EVP_F_EVP_OPENINIT, EVP_R_PUBLIC_KEY_NOT_RSA);
  86         goto err;
  87     }
  88
  89     size = EVP_PKEY_size(priv);
  90     key = OPENSSL_malloc(size + 2);
  91     if (key == NULL) {
  92         /* ERROR */
  93         EVPerr(EVP_F_EVP_OPENINIT, ERR_R_MALLOC_FAILURE);
  94         goto err;
  95     }
  96
  97     i = EVP_PKEY_decrypt_old(key, ek, ekl, priv);
  98     if ((i <= 0) || !EVP_CIPHER_CTX_set_key_length(ctx, i)) {
  99         /* ERROR */
 100         goto err;
 101     }
 102     if (!EVP_DecryptInit_ex(ctx, NULL, NULL, key, iv))
 103         goto err;
 104
 105     ret = 1;
 106  err:
 107     OPENSSL_clear_free(key, size);
 108     return (ret);
 109 }
 110
 111 int EVP_OpenFinal(EVP_CIPHER_CTX *ctx, unsigned char *out, int *outl)
 112 {
 113     int i;
 114
 115     i = EVP_DecryptFinal_ex(ctx, out, outl);
 116     if (i)
 117         i = EVP_DecryptInit_ex(ctx, NULL, NULL, NULL, NULL);
 118     return (i);
 119 }
 120 #else                           /* !OPENSSL_NO_RSA */
 121
 122 # ifdef PEDANTIC
 123 static void *dummy = &dummy;
 124 # endif
 125
 126 #endif