b52f486acb5349a3389ae0512bc7000292e7b115
[oweals/openssl.git] / crypto / des / fcrypt.c
1 /*
2  * Copyright 1998-2016 The OpenSSL Project Authors. All Rights Reserved.
3  *
4  * Licensed under the OpenSSL license (the "License").  You may not use
5  * this file except in compliance with the License.  You can obtain a copy
6  * in the file LICENSE in the source distribution or at
7  * https://www.openssl.org/source/license.html
8  */
9
10 /* NOCW */
11 #include <stdio.h>
12 #ifdef _OSD_POSIX
13 # ifndef CHARSET_EBCDIC
14 #  define CHARSET_EBCDIC 1
15 # endif
16 #endif
17 #ifdef CHARSET_EBCDIC
18 # include <openssl/ebcdic.h>
19 #endif
20
21 #include <openssl/crypto.h>
22 #include "des_locl.h"
23
24 /*
25  * Added more values to handle illegal salt values the way normal crypt()
26  * implementations do.  The patch was sent by Bjorn Gronvall <bg@sics.se>
27  */
28 static unsigned const char con_salt[128] = {
29     0xD2, 0xD3, 0xD4, 0xD5, 0xD6, 0xD7, 0xD8, 0xD9,
30     0xDA, 0xDB, 0xDC, 0xDD, 0xDE, 0xDF, 0xE0, 0xE1,
31     0xE2, 0xE3, 0xE4, 0xE5, 0xE6, 0xE7, 0xE8, 0xE9,
32     0xEA, 0xEB, 0xEC, 0xED, 0xEE, 0xEF, 0xF0, 0xF1,
33     0xF2, 0xF3, 0xF4, 0xF5, 0xF6, 0xF7, 0xF8, 0xF9,
34     0xFA, 0xFB, 0xFC, 0xFD, 0xFE, 0xFF, 0x00, 0x01,
35     0x02, 0x03, 0x04, 0x05, 0x06, 0x07, 0x08, 0x09,
36     0x0A, 0x0B, 0x05, 0x06, 0x07, 0x08, 0x09, 0x0A,
37     0x0B, 0x0C, 0x0D, 0x0E, 0x0F, 0x10, 0x11, 0x12,
38     0x13, 0x14, 0x15, 0x16, 0x17, 0x18, 0x19, 0x1A,
39     0x1B, 0x1C, 0x1D, 0x1E, 0x1F, 0x20, 0x21, 0x22,
40     0x23, 0x24, 0x25, 0x20, 0x21, 0x22, 0x23, 0x24,
41     0x25, 0x26, 0x27, 0x28, 0x29, 0x2A, 0x2B, 0x2C,
42     0x2D, 0x2E, 0x2F, 0x30, 0x31, 0x32, 0x33, 0x34,
43     0x35, 0x36, 0x37, 0x38, 0x39, 0x3A, 0x3B, 0x3C,
44     0x3D, 0x3E, 0x3F, 0x40, 0x41, 0x42, 0x43, 0x44,
45 };
46
47 static unsigned const char cov_2char[64] = {
48     0x2E, 0x2F, 0x30, 0x31, 0x32, 0x33, 0x34, 0x35,
49     0x36, 0x37, 0x38, 0x39, 0x41, 0x42, 0x43, 0x44,
50     0x45, 0x46, 0x47, 0x48, 0x49, 0x4A, 0x4B, 0x4C,
51     0x4D, 0x4E, 0x4F, 0x50, 0x51, 0x52, 0x53, 0x54,
52     0x55, 0x56, 0x57, 0x58, 0x59, 0x5A, 0x61, 0x62,
53     0x63, 0x64, 0x65, 0x66, 0x67, 0x68, 0x69, 0x6A,
54     0x6B, 0x6C, 0x6D, 0x6E, 0x6F, 0x70, 0x71, 0x72,
55     0x73, 0x74, 0x75, 0x76, 0x77, 0x78, 0x79, 0x7A
56 };
57
58 char *DES_crypt(const char *buf, const char *salt)
59 {
60     static char buff[14];
61
62 #ifndef CHARSET_EBCDIC
63     return (DES_fcrypt(buf, salt, buff));
64 #else
65     char e_salt[2 + 1];
66     char e_buf[32 + 1];         /* replace 32 by 8 ? */
67     char *ret;
68
69     /* Copy at most 2 chars of salt */
70     if ((e_salt[0] = salt[0]) != '\0')
71         e_salt[1] = salt[1];
72
73     /* Copy at most 32 chars of password */
74     strncpy(e_buf, buf, sizeof(e_buf));
75
76     /* Make sure we have a delimiter */
77     e_salt[sizeof(e_salt) - 1] = e_buf[sizeof(e_buf) - 1] = '\0';
78
79     /* Convert the e_salt to ASCII, as that's what DES_fcrypt works on */
80     ebcdic2ascii(e_salt, e_salt, sizeof e_salt);
81
82     /* Convert the cleartext password to ASCII */
83     ebcdic2ascii(e_buf, e_buf, sizeof e_buf);
84
85     /* Encrypt it (from/to ASCII) */
86     ret = DES_fcrypt(e_buf, e_salt, buff);
87
88     /* Convert the result back to EBCDIC */
89     ascii2ebcdic(ret, ret, strlen(ret));
90
91     return ret;
92 #endif
93 }
94
95 char *DES_fcrypt(const char *buf, const char *salt, char *ret)
96 {
97     unsigned int i, j, x, y;
98     DES_LONG Eswap0, Eswap1;
99     DES_LONG out[2], ll;
100     DES_cblock key;
101     DES_key_schedule ks;
102     unsigned char bb[9];
103     unsigned char *b = bb;
104     unsigned char c, u;
105
106     /*
107      * eay 25/08/92 If you call crypt("pwd","*") as often happens when you
108      * have * as the pwd field in /etc/passwd, the function returns
109      * *\0XXXXXXXXX The \0 makes the string look like * so the pwd "*" would
110      * crypt to "*".  This was found when replacing the crypt in our shared
111      * libraries.  People found that the disabled accounts effectively had no
112      * passwd :-(.
113      */
114 #ifndef CHARSET_EBCDIC
115     x = ret[0] = ((salt[0] == '\0') ? 'A' : salt[0]);
116     Eswap0 = con_salt[x] << 2;
117     x = ret[1] = ((salt[1] == '\0') ? 'A' : salt[1]);
118     Eswap1 = con_salt[x] << 6;
119 #else
120     x = ret[0] = ((salt[0] == '\0') ? os_toascii['A'] : salt[0]);
121     Eswap0 = con_salt[x] << 2;
122     x = ret[1] = ((salt[1] == '\0') ? os_toascii['A'] : salt[1]);
123     Eswap1 = con_salt[x] << 6;
124 #endif
125
126     /*
127      * EAY r=strlen(buf); r=(r+7)/8;
128      */
129     for (i = 0; i < 8; i++) {
130         c = *(buf++);
131         if (!c)
132             break;
133         key[i] = (c << 1);
134     }
135     for (; i < 8; i++)
136         key[i] = 0;
137
138     DES_set_key_unchecked(&key, &ks);
139     fcrypt_body(&(out[0]), &ks, Eswap0, Eswap1);
140
141     ll = out[0];
142     l2c(ll, b);
143     ll = out[1];
144     l2c(ll, b);
145     y = 0;
146     u = 0x80;
147     bb[8] = 0;
148     for (i = 2; i < 13; i++) {
149         c = 0;
150         for (j = 0; j < 6; j++) {
151             c <<= 1;
152             if (bb[y] & u)
153                 c |= 1;
154             u >>= 1;
155             if (!u) {
156                 y++;
157                 u = 0x80;
158             }
159         }
160         ret[i] = cov_2char[c];
161     }
162     ret[13] = '\0';
163     return (ret);
164 }